KR100295849B1 - 졸음운전방지장치및방법 - Google Patents

졸음운전방지장치및방법 Download PDF

Info

Publication number
KR100295849B1
KR100295849B1 KR1019970069813A KR19970069813A KR100295849B1 KR 100295849 B1 KR100295849 B1 KR 100295849B1 KR 1019970069813 A KR1019970069813 A KR 1019970069813A KR 19970069813 A KR19970069813 A KR 19970069813A KR 100295849 B1 KR100295849 B1 KR 100295849B1
Authority
KR
South Korea
Prior art keywords
eye
driver
signal
outputting
closing
Prior art date
Application number
KR1019970069813A
Other languages
English (en)
Other versions
KR19990050679A (ko
Inventor
이동민
Original Assignee
이계안
현대자동차주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이계안, 현대자동차주식회사 filed Critical 이계안
Priority to KR1019970069813A priority Critical patent/KR100295849B1/ko
Publication of KR19990050679A publication Critical patent/KR19990050679A/ko
Application granted granted Critical
Publication of KR100295849B1 publication Critical patent/KR100295849B1/ko

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B60K28/066Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver actuating a signalling device
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q5/00Arrangement or adaptation of acoustic signal devices
    • B60Q5/005Arrangement or adaptation of acoustic signal devices automatically actuated
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0827Inactivity or incapacity of driver due to sleepiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Acoustics & Sound (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Traffic Control Systems (AREA)
  • Emergency Alarm Devices (AREA)

Abstract

본 발명은 차량의 임의의 위치에 카메라를 설치하여 운전석에 탑승한 운전자의 얼굴 영상을 검출하고, 상기 검출된 얼굴 영상을 분석하여 운전자 눈의 개폐율에 따라, 즉 눈의 깜빡거림의 정도에 따라 졸음 운전을 판단하여 졸음 운전시 외부로 경고하기 위한 졸음 운전 방지장치에 관한 것이다. 본 발명은 졸음 운전 방지장치에 있어서, 소정의 접점으로 이루어져 온/오프 신호를 출력하는 스위칭 수단과; 차량의 임의의 위치에 설치되어 운전석에 탑승한 운전자의 얼굴 영상을 검출하는 카메라와; 상기 카메라에서 공급되는 신호를 분석하여 눈의 개폐율에 따라 졸음 운전을 판단하여 그에 해당하는 소정의 전기적 신호를 출력하는 영상 신호 연산부와, 상기 영상 신호 연산부와 외부의 주변기기를 상호 쌍방향으로 데이터를 입/출력하는 인터페이스부를 가지며, 상기 카메라에서 공급되는 신호를 비교/분석하여 눈의 개폐율에 따라 졸음 운전을 판단하여 졸음 운전시 경보하기 위한 전반적인 제어신호를 출력하는 제어수단과; 상기 제어부에서 공급되는 신호에 따라 외부로 경보신호를 출력하는 경보수단을 포함하여 구성한다.

Description

졸음 운전 방지장치 및 방법
본 발명은 졸음 운전 방지장치에 관한 것으로, 특히 차량의 임의의 위치에 설치되어 있는 카메라에서 검출되는 영상 정보를 분석하여 운전자 눈의 개폐율에 따라 졸음 운전을 판단하는 졸음 운전 방지장치 및 방법에 관한 것이다.
일반적으로 차량은 운전자나 탑승자의 안전을 보호하기 위해 여러 가지 안전 장치를 구비하고 있다. 예를 들면 제동시 감속도에 따라 차량 중심이 전방으로 이동하여 앞바퀴의 하중은 증가하고 뒷바퀴의 하중은 감소하는 경향이 생겨 바퀴가 정지하여 미끄러짐을 일으키면 노면과의 마찰력이 감소함과 동시에 방향성을 잃게 되어 제동 성능이 저하되고 불안정한 제동이 되는 현상을 방지하기 위하여 모든 바퀴에 제동력을 균일하게 하기 위한 ABS장치와, 차량 충돌시에 운전자와 스티어링 휠 사이 또는 조수석의 승객과 인스트러먼트 패널 사이에 순간적으로 에어백(공기 주머니)을 부풀게 하여 부상을 최소한도로 줄이기 위한 에어백 장치 등의 안전장치가 구비되어 있다.
그러나, 종래에는 상기와 같은 운전자 및 탑승자의 생명을 보호하는 안전 장치가 구비되어 있음에도 불구하고 운전자의 과실, 즉 졸음 운전으로 인한 대형 사고를 방지하는 예방책이 마련되어 있지 않았다.
따라서, 운전자의 졸음 운전으로 유발되는 대형 사고로 인한 소중한 인명피해 및 재산적 손실로 개인뿐만 아니라 국가적으로도 막대한 경제적 손실을 입게 되는 문제점이 있었다.
본 발명의 목적은 차량의 임의의 위치에 카메라를 설치하여 운전석에 탑승한 운전자의 얼굴 영상을 검출하고, 상기 검출된 얼굴 영상을 분석하여 운전자 눈의 개폐율에 따라, 즉 눈의 깜빡거림의 정도에 따라 졸음 운전을 판단하여 졸음 운전시 외부로 경고하기 위한 졸음 운전 방지장치를 제공하는데 있다.
상기한 목적을 달성하기 위하여 본 발명은 졸음 운전 방지장치에 있어서, 소정의 접점으로 이루어져 온/오프 신호를 출력하는 스위칭 수단과; 차량의 임의의 위치에 설치되어 운전석에 탑승한 운전자의 얼굴 영상을 검출하는 카메라와; 상기 카메라에서 공급되는 신호를 분석하여 눈의 개폐율에 따라 졸음 운전을 판단하여 그에 해당하는 소정의 전기적 신호를 출력하는 영상 신호 연산부와, 상기 영상 신호 연상부와 외부의 주변기기를 상호 쌍방향으로 데이터를 입/출력하는 인터페이스부를 가지며, 상기 카메라에서 공급되는 신호를 비교/분석하여 눈의 개폐율에 따라 졸음 운전을 판단하여 졸음 운전시 경보하기 위한 전반적인 제어신호를 출력하는 제어수단과; 상기 제어부에서 공급되는 신호에 따라 외부로 경보신호를 출력하는 경보수단을 포함하여 구성하는 것을 특징으로 한다.
상기와 같은 목적을 달성하기 위한 본 발명의 또 다른 특징은 졸음 운전 방지방법에 있어서, 스위치의 '온' 신호가 검출되면 운전자의 얼굴 특징에 따라 콧구멍의 위치, 눈의 위치 등을 검출하기 위한 검색모드로 진입하는 단계와; 상기 검색모드에서 운전자의 얼굴 특징에 따른 콧구멍의 위치, 눈의 위치가 검출되면 운전자의 움직임에 따라 눈의 위치를 추적하기 위한 추적모드로 진입하는 단계와; 상기 추적모드에서 운전자의 움직임에 따라 눈의 위치를 추적하여 눈의 위치가 확정되면 운전자의 눈 움직임에 따라 졸음 운전을 판단하기 위한 졸음 운전 판단 모드로 진입하는 단계와; 상기 졸음 운전 판단 모드에서 졸음 운전으로 판단되면 운전자에게 졸음 운전중임을 경보하기 위한 제어신호를 출력하는 단계로 이루어지는 것을 특징으로 한다.
도 1은 본 발명의 실시예에 따른 졸음 운전 방지장치를 보이는 구성 블록도.
도 2는 도 1의 실시예에서 졸음 운전 방지를 실행하기 위한 일 실시예의 흐름도.
도 3은 도 2의 검색모드를 나타내는 일 실시예의 흐름도.
도 4는 도 2의 추적모드를 나타내는 일 실시예의 흐름도.
도 5는 도 2의 졸음 운전 판단 모드를 나타내는 일 실시예의 흐름도.
도 6은 눈의 개폐 정도를 검출하기 위해 모델링하는 계산식의 모식도.
이하 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 상세히 설명한다. 하기 설명 및 첨부 도면과 같은 많은 특정 상세들이 본 발명의 보다 전반적인 이해를 제공하기 위해 나타나 있으나, 이들 특정 상세들은 본 발명의 설명을 위해 예시한 것으로 본 발명이 그들에 한정됨을 의미하는 것은 아니다. 그리고 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.
도 1에 도시된 바와 같이 본 발명의 일 실시예에 따른 졸음 운전 방지장치는 스위치(10)와, 카메라(12)와, 제어부(30)와, 경보부(40)로 이루어지는데, 스위치(10)는 소정의 접점을 구비하여 졸음 운전 방지장치를 동작시키기 위한 소정의 전기적 신호를 출력한다.
카메라(12)는 차량의 임의의 위치에 설치되어 운전석에 탑승한 운전자의 얼굴 영상을 검출하여 그에 해당하는 소정의 영상 신호를 출력한다.
제어부(30)는 영상 신호 연산부(31)와, 인터페이스부(32)로 이루어져 상기 카메라(12)에서 공급되는 영상 신호를 분석하여 메모리 테이블에 설정되어 있는 데이터에 따라 눈의 개폐율을 검출하고, 상기 검출된 눈의 개폐율에 따라 졸음 운전 상태를 판단하여 졸음 운전시 운전자에게 경고신호를 출력하기 위한 제어신호를 출력한다.
이때, 상기 영상 신호 연산부(31)는 카메라(12)에서 공급되는 아날로그 영상 신호를 디지털 영상 신호로 변환하는 A/D컨버터(A/D Converter, 20)와, 상기 A/D컨버터(20)에서 공급되는 영상 신호를 소정의 데이터에 따라 연산하는 프리-프로세서(Pre-processor, 21)와, 상기 프리-프로세서(21)에서 공급되는 신보를 프레임 단위로 기억하는 프레임 메모리(Frame Memory, 22)와, 상기 프리-프로세서(21)에서 연산되는 영상 정보에 따라 졸음운전을 판단하기 위한 제어신호를 출력하는 영상 프로세싱 제어부(Image processing, 23)와, 상기 카메라(12)에서 공급되는 신호를 소정의 신호로 분리하는 동기 분리기(Synchronizing Separator, 24)와, 상기 동기 분리기(24)에서 공급되는 신호에 따라 동기 신호를 출력하는 시스템 타이밍 시그널 제너레이터(System Timing signal Generator, 25)와, 램프를 점멸시키는 소정의 전기적 신호를 출력하는 LED 드라이브(LED Driver, 26)와, 운전자의 얼굴 위치를 검출하여 눈의 개폐에 따라 졸음 운전을 경보하기 위한 동작을 제어하는 영상 프로세싱 CPU(Image processing CPU, 27)와, 경고 표시 정보를 디스플레이 하기 위한 정보를 기억하는 램 모니터 포트(RAM Monitor port, 28)와, 상기 영상 프로세싱 제어부(23)에서 공급되는 신호에 따라 경고음을 발생시키는 사운드 제너레이터(Sound Generator, 29)로 이루어져 상기 카메라(12)에서 공급되는 신호를 분석하여 눈의 개폐율에 따라 졸음 운전을 판단하여 그에 해당하는 소정의 전기적 신호를 출력한다.
또한, 상기 인터페이스부(32)는 상기 영상 신호 연산부(31)와 외부의 주변기기를 쌍방향으로 소정의 전기적 신호를 입출력하기 위한 전반적인 동작을 제어하는 경보 CPU(CPU for ALARM, 33)와, 졸음 운전 방지장치의 전반적인 동작 상태를 진단하는 외부의 진단장치와 연결되어 소정의 전기적 신호를 입/출력하느 MUT포트(MUT Port, 34)와, 상기 경부 CPU(33)에서 공급되는 신호에 따라 영상 신호 연산부(31)에서 공급되는 신호를 외부장치로 출력하는 출력포트(Output Port, 35)와, 외부에 구비되어 있는 각종 장치에서 공급되는 소정의 전기적 신호를 제어부(30)에 출력하기 위한 입력포트(Input Port, 36)와, 외부에 구비되어 있는 각종 보조 장치와 쌍방향으로 소정의 데이터를 공유하기 위한 통신포트(Communication port, 37)로 이루어져 상기 영상 신호 연산부(31)에서 공급되는 신호를 외부의 주변기기에 출력하고, 또한 외부의 주변기기에서 공급되는 신호를 영상 신호 연산부(31)에 입력한다.
경보부(40)는 상기 램 모니터 포트(28)에서 공급되는 신호를 디스플레이(42)에 출력하기 위한 일정시간 동안 기억하고 있는 램 모니터(41)와, 사이 램 모니터(41)에서 공급되는 신호에 따라 졸음 운전을 경고하는 디스플레이(42)와, 상기 사운드 제너레이터(29)에서 공급되는 신호에 따라 졸음 운전을 경고하기 위한 경고음을 출력하는 스피커(43)로 이루어져 상기 제어부(30)에서 공급되는 신호에 따라 외부로 경보신호를 출력한다.
전술한 바와 같은 기능을 구비하여 이루어지는 본 발명에서 졸음 운전을 판단하여 운전자에게 경보하기 위한 전반적인 제어 동작을 도 2를 참조하여 설명한다.
소정의 목적지로 수행중인 차량의 운전석에 탑승한 운전자의 졸음 운전을 경보하는 장치를 동작시키는 스위치(10)의 '온' 신호가 검출되는지를 판단한다(스템 110).
상기 스텝110에서 제어부(30)에 스위치(10)의 '온' 신호가 공급되면 주행중인 차량의 운전석에 탑승한 운전자의 얼굴 특징 즉, 콧구멍의 위치, 눈의 위치 등을 검출하기 위한 검색모드로 진입한다(스텝120).
이때, 사이 스텝120의 검색모드를 도 3과 함께 상세히 설명하면 다음과 같다. 차량의 임의의 위치에 설치되어 있는 카메라(12)에서 공급된느 영상 정보를 제어부(30)의 메모리 테이블에 설정되어 있는 2진 데이터 값에 따라 스캐닝한 후 콧구멍의 유무를 식별한다(스텝121 내지 스텝122).
상기 스텝121 내지 스텝122에서 콧구멍이 존재한다고 판단되면 상기 카메라(12)에서 공급되는 영상 정보에 따라 운전자의 얼굴 특징에 따른 콧구멍의 위치를 검출한다(스텝123).
상기 스텝123에서 콧구멍의 위치가 검출되면 메모리 테이블에 설정되어 있는 데이터에 따라 눈의 위치를 검출한다(스텝124).
상기 스텝124에서 눈의 위치가 검출되면 운전자의 얼굴 특징에 따른 눈의 위치를 확정하여 운전자의 움직임에 따른 눈의 위치를 추적하기 위한 추적모드로 진입하고, 눈의 위치가 확정되지 않으면 메모리 테이블에 설정되어 있는 2진 데이터 값을 제어하여 상기 카메라(12)에서 공급되는 영상 정보를 반복해서 스캐닝 한다(스텝125 내지 스텝127).
이후, 상기 스텝120에서 운전자의 얼굴 특징이 검출되면 운전자의 움직임에 따라 눈의 위치를 추적하기 위한 추적모드로 진입한다(스텝130).
이때, 상기 스텝130의 추적모드를 도 4와 함께 상세히 설명하면 다음과 같다.
상기 단계에서 운전자의 얼굴 특징에 따라 콧구멍의 위치, 눈의 위치 등이 확정되면 상기 카메라(12)에서 공급되는 영상 정보를 메모리 테이블에 설정되어 있는 데이터에 따라 비교/분석하여 운전자의 움직임에 따른 콧구멍의 위치를 검출한다(스텝 131).
상기 스텝131에서 콧구멍의 위치가 검출되면 메모리 테이블에 설정되어 있는 데이터에 따라 눈의 위치를 검출한다(스텝132).
상기 스텝132에서 눈의 위치가 검출되면 메모리 테이블에 설정되어 있는 이전의 영상 정보와 비교하여 눈의 위치를 확정한다(스텝133 내지 스텝134).
이때, 눈의 위치가 확정되면 눈의 개폐율에 따라 졸음 운전을 판단하기 위한 졸음 운전 판단 모드로 진입하고(스텝135), 눈의 위치가 확정되지 않으면 검색모드로 진입하여 운전자의 얼굴 특성에 따른 콧구멍의 위치, 눈의 위치를 반복해서 검색한다(스텝136).
이후, 상기 스텝130에서 운전자의 움직임에 따라 운의 위치를 추적하여 눈의 위치가 확정되면 운전자의 눈의 움직임에 따라 졸음 운전을 판단하기 위한 졸음 운전 판단 모드로 진입한다(스텝140).
이때, 상기 스텝140의 졸음 운전 판단 모드를 도 5와 함께 상세히 설명하면 다음과 같다.
상기 단계에서 눈의 위치가 확정되면 도 6과 같이 눈이 완전히 열린 상태에서 형성되는 타원형의 접선과 눈의 중심점을 관통하는 수평선과 이루는 각을 세타(
Figure kpo00001
)라 하면 상기 세타의 변화량을 검출하여 눈의 개폐를 판단한다(스텝141).(이하 "세타"를 "눈의 개폐 각도"라 칭한다)
예를 들면, 눈의 개폐 판단은 타원형의 접선 방정식을 아래의 식(1)과 같이 모델링 한후, 접선의 기울기, 즉 아래 식(1)의 a값을 검출하여 a값이 메모리 테이블에 설정되어 있는 일정 값보다 클 경우에는 눈이 열렸다고 판단하고, 일정 값보다 작을 경우에는 눈이 감겼다고 판단한다.
y = ax + b .............................(1)
상기 식(1)에선 눈의 개폐 정도를 10단계로 설정할 수 있다. 즉, a의값을 10단계로 구분하여 설정하므로써 보다 정확한 눈의 개폐 상태를 검출할 수 있다. 이와 같이 눈의 개폐 정도가 10단계로 구분된 상태에서 3단계 이하로 검출되면 졸음 운전으로 판단하여 소정의 경보음을 출력할 수 있다. 상기 a의 값을 소정의 단계로 구분하는 것은 설계 변경에 따라 용이하게 설정할 수 있다.
상기 스텝141에서 검출되는 눈의 개폐 각도의 변화율에 따라 메모리 테이블에 설정되어 있는 일정시간동안 유지되는 폐안 지속 시간을 산출하고, 또한 눈의 개폐회수 즉, 눈깜박거림 수를 산출한다(스텝142).
상기 스텝142에서 검출되는 폐안 지속 시간을 눈 깜박거림 수로 나누어 1회에 깜박거리는 평균 폐안 지속 시간을 산출한다(스텝143).
상기 스텝142에서 검출되는 평균 폐안 지속 시간은 주행중인 차량의 운전석에 탑승한 운전자의 특성에 따른 눈의 깜박거림에 해당하는 평균 폐안 지속 시간을 산출한 것으로 그에 해당하는 데이터 값을 폐안 지속 시간 임계값으로 메모리 테이블에 설정한다(스텝144).
이후, 주행중인 운전자의 운전 상태에 따른 폐안 지속 시간과 눈 깜박거림 수를 일정시간동안 검출한다(스텝145).
상기 스텝144에서 검출되는 폐안 지속 시간을 눈 깜박거림 수로 나누어 1회에 깜박거리는 실제 평균 폐안 지속 시간 값을 산출한다(스텝146).
이때, 운전자의 특성에 따라 산출되는 평균 폐안 지속 시간 데이터 값과 운전자의 운전 상태에 따라 검출되는 실제 평균 폐안 지속 시간 값을 비교하여 실제 평균 폐안 지속 시간 값이 평균 폐안 지속 시간 데이터 값 보다 크다고 판단되면 졸음 운전으로 판단하여 소정의 제어신호를 경보장치(40)에 출력하고, 실제 평균 폐안 지속 시간 값이 평균 폐안 지속 시간 데이터 값 보다 작다고 판단되면 정상적으로 운행중임으로 판단한다(스텝147 내지 스텝149).
상기 스텝140에서 졸음 운전으로 판단되면 소정의 제어신호를 경보장치(40)에 출력하여 주행중인 차량의 운전석에 탑승한 운전자에게 졸음 운전중임을 경보하기 위한 경고신호를 출력한다(스텝150).
상술한 바와 같이 본 발명은 차량의 임의의 위치에 설치되어 있는 카메라에서 공급되는 영상 정보에 따라 운전자 눈의 개폐 정도를 판단하여 졸음 운전시 운전자에게 경고신호를 출력함으로써 교통사고로 인한 인명피해 및 경제적 손실을 미연에 방지할 수 있는 효과가 있다.

Claims (12)

  1. 졸음 운전 방지장치에 있어서, 소정의 접점으로 이루어져 온/오프 신호를 출력하는 스위칭 수단과; 차량의 임의의 위치에 설치되어 운전석에 탑승한 운전자의 얼굴 영상을 검출하는 카메라와; 상기 카메라에서 공급되는 신호를 분석하여 눈의 개폐율에 따라 졸음 운전을 판단하여 그에 해당하는 소정의 전기적 신호를 출력하는 영상 신호 연산부와, 상기 영상 신호 연산부와 외부의 주변기기를 상호 쌍방향으로 데이터를 입/출력하는 인터페이스부를 가지며, 상기 카메라에서 공급되는 신호를 비교/분석하여 눈의 개폐율에 따라 졸음 운전을 판단하여 졸음 운전시 경보하기 위한 전반적인 제어신호를 출력하는 제어수단과; 상기 제어부에서 공급되는 신호에 따라 외부로 경보신호를 출력하는 경보수단을 포함하여 구성함을 특징으로 하는 졸음 운전 방지장치.
  2. 제1항에 있어서, 상기 영상 신호 연산부는 카메라에서 공급되는 아날로그 영상 신호를 디지털 영상 신호로 변환하는 A/D컨버터와, 상기 A/D컨버터에서 공급되는 영상 신호를 소정의 데이터에 따라 연산하는 프리-프로세서와, 상기 프리-프로세서에서 공급되는 신호를 프레임 단위로 기억하는 프레임 메모리와, 상기 프리-프로세서에서 연산되는 영상 정보에 따라 졸음 운전을 판단하기 위한 제어신호를 출력하는 영상 프로세싱 제어부와, 카메라에서 공급되는 신호를 소정의 신호로 분리하는 동기 분리기와, 상기 동기 분리기에서 공급되는 신호에 따라 동기신호를 출력하는 시스템 타이밍 시그널 제너레이터와, 램프를 점멸시키는 소정의 전기적 신호를 출력하는 LED 드라이브와, 운전자의 얼굴의 위치를 검출하여 눈의 개폐에 따라 졸음 운전을 경보하기 위한 동작을 전반적으로 제어하는 영상 프로세싱 CPU와, 경고 표시 정보를 디스플레이 하기 위한 정보를 기억하는 램 모니터포트와, 상기 영상 프로세싱 제어부에서 공급되는 신호에 따라 경고음을 발생시키는 사운드 제너레이터를 포함하여 구성함을 특징으로 하는 졸음 운전 방지장치.
  3. 제1항에 있어서, 상기 인터페이스부는 상기 영상 신호 연산부와 외부의 주변기기를 쌍방향으로 소정의 전기적 신호를 입출력하기 위한 전반적인 동작을 제어하는 경보 CPU와, 졸음 운전 방지장치의 전반적인 동작 상태를 진단하는 외부의 진단장치와 연결되어 소정의 전기적 신호를 입/출력하는 MUT포트와, 상기 경보 CPU에서 공급되는 신호에 따라 영상 신호 연산부에서 공급되는 신호를 외부장치로 출력하는 출력포트(Output Port, 35)와, 외부에 구비되어 있는 각종 장치에서 공급되는 소정의 전기적 신호를 제어부에 출력하기 위한 입력포트와, 외부에 구비되어 있는 각종 보조 장치와 쌍방향으로 소정의 데이터를 공유하기 위한 통신포틀를 포함하여 구성함을 특징으로 하는 졸음 운전 방지장치.
  4. 제1항에 있어서, 상기 경보수단은 상기 램 모니터 포트에서 공급되는 신호를 디스플레이에 출력하기 위한 일정시간 동안 기억하고 있는 램 모니터와, 상기 램 모니터에서 공급되는 신호에 따라 졸음 운전을 경고하는 디스플레이와, 상기 사운드 제너레이터에서 공급되는 신호에 따라 졸음 운전을 경고하기 위한 경고음을 출력하는 스피커를 포함하여 구성함을 특징으로 하는 졸음 운전 방지장치.
  5. 졸음 운전 방지방법에 있어서, 스위치의 '온' 신호가 검출되면 운전자의 얼굴 특징에 따라 콧구멍의 위치, 눈의 위치 등을 검출하기 위한 검색모드로 진입하는 단계와; 상기 검색모드에서 운전자의 얼굴 특징에 따른 콧구멍의 위치, 눈의 위치가 검출되면 운전자의 움직임에 따라 눈의 위치를 추적하기 위한 추적모드로 진입하는 단계와; 상기 추적모드에서 운전자의 움직임에 따라 눈의 위치를 추적하여 눈의 위치가 확정되면 운전자의 눈 움직임에 따라 졸음 운전을 판단하기 위한 졸음 운전 판단 모드로 진입하는 단계와; 상기 졸음 운전 판단 모드에서 졸음 운전으로 판단되면 운전자에게 졸음 운전중임을 경보하기 위한 제어신호를 출력하는 단계로 이루어짐을 특징으로 하는 졸음 운전 방지방법.
  6. 제5항에 있어서, 상기 검색모드는 차량의 임의의 위치에 설치되어 있는 카메라에서 공급되는 영상 정보를 메모리 테이블에 설정되어 있는 2진 데이터 값에 따라 스캐닝 한 후 콧구멍의 유무를 식별하는 단계와; 상기 콧구멍의 유무를 식별하는 단계에서 콧구멍이 존재한다고 판단되면 상기 카메라에서 공급되는 영상 정보에 따라 운전자의 얼굴 특징에 따른 콧구멍의 위치를 검출하는 단계와; 상기 콧구멍의 위치를 검출하는 단계에서 콧구멍의 위치가 검출되면 메모리 테이블에 설정되어 있는 데이터에 따라 눈의 위치를 검출하는 단계와; 상기 눈의 위치를 검출하는 단계에서 눈의 위치가 검출되면 운전자의 얼굴 특징에 따른 눈의 위치를 확정하여 운전자의 움직임에 따른 눈의 위치를 추적하기 위한 추적모드로 진입하는 단계로 이루어짐을 특징으로 하는 졸음 운전 방지방법.
  7. 제6항에 있어서, 상기 추적모드로 진입한 단계에서 눈의 위치가 확정되지 않으면 메모리 테이블에 설정되어 있는 2진 데이터 값을 제어하여 상기 카메라에서 공급되는 영상 정보를 반복해서 스캐닝 하는 단계로 이루어짐을 특징으로 하는 졸음 운전 방지방법.
  8. 제6항에 있어서, 상기 추적모드로 진입한 단계에서 운전자의 얼굴 특징에 따라 콧구멍의 위치, 눈의 위치 등이 확정되면 운전자의 움직임에 따른 콧구멍의 위츨 검출하는 단계와; 상기 콧구멍의 위치를 검출하는 단계에서 콧구멍의 위치가 검출되면 메모리 테이블에 설정되어 있는 테이터에 따라 눈의 위치를 검출하는 단계와; 상기 눈의 위치를 검출하는 단계에서 눈의 위치가 검출되면 메모리 테이블에 설정되어 있는 이전의 영상 정보와 비교하여 눈의 위치를 확정하는 단계와; 상기 눈의 위치를 확정하는 단계에서 눈의 위치가 확정되면 눈의 개폐율에 따라 졸음 운전을 판단하기 위한 졸음 운전 판단 모드로 진입하는 단계로 이루어짐을 특징으로 하는 졸음 운전 방지 방법.
  9. 제6항에 있어서, 상기 추적모드로 진입한 단계에서 눈의 위치가 확정되지 않으면 검색모드로 진입하여 반복해서 운전자의 얼굴 특성에 따른 콧구멍의 위치, 눈의 위치를 검색하는 단계로 이루어짐을 특징으로 하는 졸음 운전 방지방법.
  10. 제6항에 있어서, 상기 추적모드로 진입한 단계에서 눈의 위치가 확정되면 눈의 개폐 각도의 변화량을 검출하여 눈의 개폐를 판단하는 단계와; 상기 눈의 개폐를 판단하는 단계에서 검출되는 눈의 개폐 각도의 변화율에 따라 메모리 테이블에 설정되어 있는 일정시간동안 유지되는 폐안 지속 시간 및 눈의 개폐횟수를 산출하는 단계와; 상기 눈의 개폐회수를 산출하는 단계에서 검출되는 폐안 지속 시간을 눈 깜박거림수로 나누어 1회에 깜박거리는 평균 폐안 지속 시간을 산출하는 단계와; 상기 평균 폐안 지속 시간을 산출하는 단계에서 검출되는 평균 폐안 지속 시간을 운전자의 특성에 따른 눈의 깜박거림에 해당하는 평균 폐안 지속 시간 데이터 값으로 메모리 테이블에 설정하는 단계와; 이후, 주행중인 운전자의 운전 상태에 따른 폐안 지속 시간과 눈 깜박거림 수를 일정시간동안 검출하는 단계와; 상기 검출되는 폐안 지속 시간을 눈 깜박거림 수로 나누어 1회에 깜박거리는 실제 평균 폐안 지속 시간 값을 산출하는 단계와; 상기 산출되는 평균 폐안 지속 시간 데이터 값과 운전자의 운전 상태에 따라 검출되는 실제 평균 폐안 지속 시간 값을 비교하여 실제 평균 폐안 지속 시간 값이 평균 폐안 지속 시간 데이터 값 보다 크다고 판단되면 졸음 운전으로 판단하여 소정의 제어신호를 경보장치에 출력하는 단계로 이루어짐을 특징으로 하는 졸음 운전 방지방법.
  11. 제10항에 있어서, 상기 산출된 평균 폐안 지속 시간 데이터 값과 실제 평균 폐안 지속 시간 값보다 크다고 판단되면 정상적으로 운행중임을 판단하는 단계로 이루어짐을 특징으로 하는 졸음 운전 방지방법.
  12. 제10항에 있어서, 상기 눈의 개폐를 판단하는 단계에서 눈의 개폐의 판단은 타원형의 접선 방정식(y = ax + 5)과 같이 모델링한 후, 접선의 기울기에 따라 눈의 개폐를 판단하는 단계로 이루어짐을 특징으로 하는 졸음 운전 방지방법.
KR1019970069813A 1997-12-17 1997-12-17 졸음운전방지장치및방법 KR100295849B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1019970069813A KR100295849B1 (ko) 1997-12-17 1997-12-17 졸음운전방지장치및방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1019970069813A KR100295849B1 (ko) 1997-12-17 1997-12-17 졸음운전방지장치및방법

Publications (2)

Publication Number Publication Date
KR19990050679A KR19990050679A (ko) 1999-07-05
KR100295849B1 true KR100295849B1 (ko) 2001-11-22

Family

ID=37527901

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019970069813A KR100295849B1 (ko) 1997-12-17 1997-12-17 졸음운전방지장치및방법

Country Status (1)

Country Link
KR (1) KR100295849B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101681938B1 (ko) 2015-11-09 2016-12-02 모본주식회사 졸음 운전 방지 장치
KR102035220B1 (ko) 2018-06-05 2019-11-18 주식회사 엠제이테크 비접촉 생체 신호 검출을 이용한 졸음 운전 방지 장치

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100954835B1 (ko) * 2009-08-04 2010-04-30 주식회사 크라스아이디 얼굴변화 검출 시스템 및 얼굴변화 감지에 따른 지능형 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0632154A (ja) * 1992-07-18 1994-02-08 Nissan Motor Co Ltd 運転者の状態検出装置
JPH07296299A (ja) * 1994-04-20 1995-11-10 Nissan Motor Co Ltd 画像処理装置およびそれを用いた居眠り警報装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0632154A (ja) * 1992-07-18 1994-02-08 Nissan Motor Co Ltd 運転者の状態検出装置
JPH07296299A (ja) * 1994-04-20 1995-11-10 Nissan Motor Co Ltd 画像処理装置およびそれを用いた居眠り警報装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101681938B1 (ko) 2015-11-09 2016-12-02 모본주식회사 졸음 운전 방지 장치
KR102035220B1 (ko) 2018-06-05 2019-11-18 주식회사 엠제이테크 비접촉 생체 신호 검출을 이용한 졸음 운전 방지 장치

Also Published As

Publication number Publication date
KR19990050679A (ko) 1999-07-05

Similar Documents

Publication Publication Date Title
US20200216095A1 (en) Vehicle driving assistance apparatus
WO2014188648A1 (ja) ドライバ確認装置
KR20120058230A (ko) 이동체 안전운행 장치 및 방법
KR20090100187A (ko) 졸음운전 위험판정장치
JP2005108033A (ja) 運転者状況判定装置および運転者状況判定方法
JP2007207274A (ja) 発進報知装置
KR101500016B1 (ko) 차선 이탈 경보 방법
JP2018133007A (ja) 警報装置
KR20120119537A (ko) 차량 실내 카메라와 근접센서를 이용한 지능형 감시 시스템 및 방법
KR100295849B1 (ko) 졸음운전방지장치및방법
JP3898586B2 (ja) 開閉眼モニタ装置
KR20100028253A (ko) 운전 보조 장치 및 운전 보조 방법
KR101324650B1 (ko) 졸음 운전 방지 장치
US10945651B2 (en) Arousal level determination device
KR102471006B1 (ko) 카메라를 활용한 차량 도어부 승객 안전 장치 및 방법
CN106710145A (zh) 一种引导式驾驶员困倦预防方法
JPH0793700A (ja) 運転者状態監視装置
JP7192668B2 (ja) 覚醒度判定装置
KR100295850B1 (ko) 졸음운전경보시스템의졸음운전판단방법
JP2022012358A (ja) 眠気兆候通知システム
JP2021089652A (ja) ドライバモニタ、ドライバ状態推定方法およびプログラム
Bhargava et al. Drowsiness detection while driving using eye tracking
KR960013874A (ko) 운전자의 졸음 방지 시스템
KR100270555B1 (ko) 졸음운전경보시스템의야간시눈추적및졸음운전판단방법
KR20230074642A (ko) 운전자의 응급 상황 인지 시스템 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130430

Year of fee payment: 13

FPAY Annual fee payment

Payment date: 20140430

Year of fee payment: 14

FPAY Annual fee payment

Payment date: 20150430

Year of fee payment: 15

EXPY Expiration of term