KR20100062145A - 차량 운전자의 감성 조절 시스템 및 방법 - Google Patents

차량 운전자의 감성 조절 시스템 및 방법 Download PDF

Info

Publication number
KR20100062145A
KR20100062145A KR1020080120594A KR20080120594A KR20100062145A KR 20100062145 A KR20100062145 A KR 20100062145A KR 1020080120594 A KR1020080120594 A KR 1020080120594A KR 20080120594 A KR20080120594 A KR 20080120594A KR 20100062145 A KR20100062145 A KR 20100062145A
Authority
KR
South Korea
Prior art keywords
driver
emotion
voice
control
information
Prior art date
Application number
KR1020080120594A
Other languages
English (en)
Other versions
KR101173944B1 (ko
Inventor
안성호
김종욱
권기구
방준학
이은령
김재영
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020080120594A priority Critical patent/KR101173944B1/ko
Priority to US12/475,149 priority patent/US20100134302A1/en
Publication of KR20100062145A publication Critical patent/KR20100062145A/ko
Application granted granted Critical
Publication of KR101173944B1 publication Critical patent/KR101173944B1/ko

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Psychiatry (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Educational Technology (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Physics & Mathematics (AREA)
  • Developmental Disabilities (AREA)
  • Biophysics (AREA)
  • Child & Adolescent Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • User Interface Of Digital Computer (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 발명은 차량 운전자의 감성 조절 시스템 및 방법에 관한 것으로서, 차량에 탑승한 운전자의 음성, 표정, 몸짓, 심장 박동수를 포함하는 감성 정보를 검출하는 검출부; 검출된 상기 감성 정보와 기저장된 상기 운전자의 기준 감성 정보를 비교하여 상기 운전자의 감성 조절 수행 여부를 판단하고, 그에 따라 상기 운전자의 감성 조절을 위한 제어신호를 출력하는 제어부; 및 상기 제어부의 제어신호에 따라 상기 운전자의 감성 조절을 수행하는 감성 조절 수행부을 포함하는 차량 운전자의 감성 조절 시스템 및 방법을 제공한다.
Figure P1020080120594
감성 정보, 스트레스, 심장 박동수

Description

차량 운전자의 감성 조절 시스템 및 방법{SYSTEM AND METHOD FOR CONTROLLING SENSIBILITY OF DRIVER}
본 발명은 차량 운전자의 감성 조절 시스템 및 방법에 관한 것으로서, 보다 구체적으로는 차량에 탑승한 운전자의 감성 변화를 검출하여 운전자의 감성 상태에 따라 감성 조절을 하도록 하는 차량 운전자의 감성 조절 시스템 및 방법에 관한 것이다.
본 발명은 지식경제부 및 정보통신연구진흥원 IT성장동력핵심기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제명: 미래지능형 자동차전장용 임베디드 SW플랫폼기술 개발].
일반적으로 차량의 기능적인 면에 있어서 운전자의 편의성 등을 강조하는 기술이나 서비스가 많이 개발되어 왔으나, 차량 운전자의 감성적인 측면을 고려한 기술이나 서비스 개발은 아직 미흡한 수준에 머물고 있다.
운전자가 운전 중에 감정 상태를 평온하게 유지하지 못하면 주의력 및 순간적인 판단력을 상실할 수 있어서 사고 발생의 가능성이 매우 높아지고, 결국 사고로 인하여 운전자의 생명까지 잃게 되는 매우 심각한 상황을 초래할 수도 있다.
예컨대, 운전자가 장시간 동안 변속조작 없이 고속도로를 주행할 경우, 특히 야간 운전 중일 경우, 많은 운전자들이 수면의 유혹을 이기지 못하고 졸음 운전을 하게 되어 대형사고로 이어질 수 있고, 다른 차량 운전자로 인해 화가 난 상태에서 운전을 할 경우, 스트레스로 인한 주의력 상실로 간단한 접촉 사고를 일으키거나 크게는 차선 또는 신호 위반을 하여 자칫 대형 사고를 불러일으킬 수도 있다.
따라서, 차량 운전자의 안전을 위해서는 차량에 설치된 각종 안전 장치의 성능도 중요하지만 그 보다 더 중요한 것은 운전자의 감성 상태가 평온한 상태를 유지할 수 있도록하여 사고 발생을 근본적으로 예방하는 것이다.
본 발명은 상기와 같은 문제점을 감안하여 창출한 것으로, 차량 운전자의 감성 상태를 검출하여 스트레스 상태에 있는 운전자의 감성을 조절할 수 있는 차량 운전자의 감정 조절 시스템 및 방법을 제공하는 데 그 목적이 있다.
전술한 목적을 달성하기 위하여, 본 발명의 일면에 따라, 차량에 탑승한 운전자의 음성, 표정, 몸짓, 심장 박동수를 포함하는 감성 정보를 검출하는 검출부; 검출된 상기 감성 정보와 기저장된 상기 운전자의 기준 감성 정보를 비교하여 상기 운전자의 감성 조절 수행 여부를 판단하고, 그에 따라 상기 운전자의 감성 조절을 위한 제어신호를 출력하는 제어부; 및 상기 제어부의 제어신호에 따라 상기 운전자의 감성 조절을 수행하는 감성 조절 수행부를 포함하는 차량 운전자의 감성 조절 시스템을 제공한다.
본 발명의 다른 면에 따라, 차량에 탑승한 운전자의 감성을 조절하는 차량 운전자의 감성 조절 시스템의 제어 방법에 있어서, 상기 운전자의 음성, 표정, 몸짓, 생체 데이터 중 적어도 하나의 감성 정보를 수신하는 단계; 수신된 상기 감성 정보와 기저장된 상기 운전자의 기준 감성 정보를 비교하여 상기 운전자의 감성 조절 수행여부를 판단하는 단계; 및 상기 판단결과에 따라 감성 조절 수행을 제어하는 단계를 포함하는 것인 차량 운전자의 감성 조절 방법을 제공한다.
본 발명에 따르면, 차량 운전자의 감성 상태를 검출하여 스트레스 상태에 있는 운전자의 감성을 조절할 수 있도록 함으로써, 운전자가 받은 스트레스로 인해 발생할 수도 있는 사고를 미연에 방지할 수 있는 효과가 있다.
이하, 본 발명에 따른 바람직한 실시 예를 첨부된 도면을 참조하여 상세히 설명하되, 본 발명에 따른 동작 및 작용을 이해하는 데 필요한 부분을 중심으로 설명한다.
이하, 첨부된 도면을 참조하여 본 발명에 대하여 상세하게 설명한다.
도 1, 도 2, 도 3을 참조하여 본 발명에 따른 차량 운전자의 감성 조절 시스템을 설명한다.
도 1은 본 발명에 따른 차량 운전자의 감성 조절 시스템의 구성을 간략하게 설명하기 위한 블럭도이고, 도 2는 검출부의 내부 구성을 간략하게 설명하기 위한 블럭도 이고, 도 3는 제어부의 내부 구성을 간략하게 설명하기 위한 블럭도이다.
도 1에 도시한 바와 같이, 본 발명의 차량 운전자의 감성 조절 시스템은 검출부(100), 제어부(200), 데이터베이스(300) 및 감성 조절 수행부(400)를 포함한다.
도 2를 참조하여 검출부의 내부 구성을 설명하면, 검출부(100)는 영상 검출부(110), 음성 검출부(120) 및 생체 데이터 검출부(130)를 포함하고, 차량에 탑승한 운전자의 음성, 표정, 몸짓, 심장 박동수, 체온을 포함하는 감성 정보를 검출한다.
차량에 장착된 카메라(500)가 운전자의 움직임 또는 얼굴을 촬영하고, 영상 검출부(110)는 촬영된 입력 영상으로부터 운전자의 표정 및 몸짓을 검출한다.
음성 검출부(120)는 차량에 장착된 마이크(600)를 통해 입력된 운전자의 음성을 검출한다.
생체 데이터 검출부(130)는 심장 박동수 측정기기(700)로부터 측정된 운전자의 심장 박동수나 체온, 맥박등 생체 데이터를 검출한다.
검출부(100)는 감성 정보를 후술하는 제어부(200)에 전달하고, 데이터베이스(300)에도 전달하여 저장되게 한다.
여기서는 검출부(100)가 감성 정보를 데이터베이스(300)에 직접 전달하는 것으로 설명하였으나 꼭 이에 국한되지 않고, 제어부(200)에 전달된 감성 정보를 제어부(200)가 데이터베이스(300)에 전달하여 저장되게 구성할 수도 있음은 물론이다.
도 3을 참조하여 제어부의 내부 구성을 설명하면, 제어부(200)는 영상 판단부(210), 음성 판단부(220), 심장 박동수 판단부(230) 및 감성 조절 수행 판단부(240)를 포함하고, 검출된 감성 정보와 기저장된 운전자의 기준 감성 정보를 비교하여 운전자의 감성 조절 수행 여부를 판단하여 그에 따라 운전자의 감성 조절을 위한 제어신호를 출력한다.
여기서 기준 감성 정보는 후술하는 데이터베이스(300)에 미리 저장되며 일반적인 운전자들을 대상으로 각 운전자들이 평온 상태에 있을 때 검출된 음성, 표정, 몸짓, 심장 박동수를 포함하는 평균 데이터일 수 있고, 또는 차량에 탑승한 운전자 가 평온 상태에 있을 때 검출된 음성, 표정, 몸짓, 심장 박동수를 포함하는 검출 데이터일 수도 있다.
따라서, 여기서는 기준 감성 정보를 평균 데이터인 것을 예로 들어 설명한다.
영상 판단부(210)는 표정, 몸짓을 포함한 감성 정보를 수신하고, 기준 감성 정보에 포함된 표정과 몸짓을 기준으로 수신한 감성 정보에 포함된 표정과 몸짓을 비교하여 운전자의 얼굴 찡그림 여부 및 입 모양에 따른 운전자의 감성 상태(예컨대, 평온한 상태, 스트레스 상태, 화난 상태, 기분 나쁜 상태, 흥분한 상태 등)를 판단할 수 있다.
음성 판단부(220)는 음성을 포함한 감성 정보를 수신하고, 기준 감성 정보에 포함된 음성을 기준으로 수신된 음성에 육두문자가 포함되어 있는지 여부 및 해당 음성에 대한 성문 분석에 따른 운전자의 감성 상태를 판단한다.
따라서, 기준 감성 정보에 포함된 음성은 성분 분석이 이루어진 분석 데이터인 것이 바람직하고, 음성 판단부(220)도 수신된 음성에 육두문자 포함 여부를 판단하기 위해 음성을 인식할 수 있는 음성 인식 기술이 구현되어 있는 것이 바람직하다. 여기서 음성 인식 기술은 음절 또는 음운의 인식은 물론이고 억양의 차이나 성량의 차이까지 인식할 수 있는 것이 보다 더 바람직하다.
심장 박동수 판단부(230)는 심장 박동수를 포함한 감성 정보를 수신하여 심장 박동수에 따른 운전자의 감성 상태를 판단한다.
예를들어, 기준 감성 정보에 포함된 심장 박동수를 기준으로 수신된 심장 박 동수와 비교하여 기준대비 심장 박동수가 빨라졌는지 여부로 운전자의 감정 상태(예컨대, 흥분한 상태 등)를 판단할 수 있다.
감성 조절 수행 판단부(240)는 영상 판단부(210), 음성 판단부(220), 심장 박동수 판단부(230)의 판단결과를 근거로 운전자의 감성 조절 수행 여부를 판단한다.
예를들어, 감성 조절 수행 판단부(240)는 영상 판단부(210), 음성 판단부(220) 및 심장 박동수 판단부(230) 중 적어도 어느 하나 이상에서 운전자의 감성 상태가 평온한 상태가 아니라고 판단할 경우, 운전자의 감성 조절을 수행하도록 판단한다.
이렇게 운전자의 감성 조절을 수행하도록 판단한 경우, 제어부(200)는 후술하는 감성 조절 수행부(400)가 감성 조절을 수행하도록 제어한다.
제어부(200)가 감성 조절 수행부(400)를 제어함에 있어서, 운전자의 감성 상태에 따른 운전자의 감성 조절 지수와 그에 대응하는 감정 조절 수행 정보가 데이터베이스(300)에 평균 데이터로 기저장될 수 있다.
여기서 감성 조절 지수를 영상 판단부(210), 음성 판단부(220) 및 심장 박동수 판단부(230)의 판단 결과에 대응하는 값이라 할 경우, 각 판단부가 운전자의 감성 상태를 평온한 상태로 판단한 경우는 0, 각 판단부 중 어느 하나의 판단부에서 평온한 상태가 아니라고 판단한 경우는 1, 각 판단부 중 어느 두개의 판단부에서 평온한 상태가 아니라고 판단한 경우는 2, 각 판단부가 모두 평온한 상태가 아니라고 판단한 경우는 3으로 대응 시킬 수 있다.
감정 조절 수행 정보는 운전자의 감성 조절을 위한 음악 재생 목록, 유머, 농담, 사고 발생 가능성 안내, 방향제 분사 횟수, 산소 발생 횟수 등을 포함할 수 있다.
예를들어, 감성 조절 지수가 0인 경우는 운전자가 평온한 생태에 있는 경우이고, 이 때는 운전자의 감성 조절 수행을 하지 않아도 되므로, 이에 대한 감성 조절 수행 정보는 설정되지 않는다. 그러나, 감성 조절 지수가 1인 경우는 운전자가 스트레스를 적게 받은 상태이거나 약간 흥분한 상태 또는 조금 화난 상태이므로, 운전자의 감성 조절을 위한 음악 재생 목록으로는 가볍고, 부드러운 발라드라든지 클래식 정도에서 설정될 수 있고, 스트레스 지수가 3인 경우는 운전자가 가장 심한 스트레스를 받은 상태이거나 몹시 흥분한 상태 또는 몹시 화난 상태이므로, 운전자의 기분전환을 위해 빠르고, 경쾌한 비트의 신나는 댄스 음악들이 설정될 수 있다. 방향제 분사 횟수, 산소 발생 횟수 또한 감성 조절 지수별로 분사 및 발생 횟수가 다양하게 설정될 수 있고, 유머나 농담의 수위, 사고 발생 안내멘트 역시 운전자의 감성 조절 지수에 따라 다양하게 설정될 수 있다.
이런 감정 조절 수행 정보는 출고 전에 다수의 운전자들을 대상으로 실험을 거쳐 산출된 평균 데이터일 수 있고, 차량을 구입한 운전자가 직접 설정할 수 있는 설정 데이터일 수 있다.
또한 제어부(200)는 운전자의 감성 조절 수행을 하지 않도록 판단한 경우, 검출부(100)가 운전자의 감성 정보를 계속 검출하도록 제어하고, 저장된 감성 정보를 삭제하도록 데이터베이스(300)를 제어한다.
데이터베이스(300)는 검출된 운전자의 감성 정보를 저장하고, 운전자 감성 조절의 판단 기준이 되는 기준 감성 정보를 저장한다.
또한 데이터베이스(300)는 제어부(200)의 감성 조절 수행부(400)의 제어 방식에 따라 운전자의 감성 상태에 따른 운전자의 감성 조절 지수와 그에 대응하는 감정 조절 수행 정보를 저장할 수 있다.
감성 조절 수행부(400)는 운전자의 감성 조절을 위해 치유 음악의 재생, 유머, 농담 또는 사고 발생 가능성 안내 멘트의 제공, 방향제의 분사, 산소의 발생 중 적어도 하나 이상을 수행한다.
따라서, 감성 조절 수행부(400)는 차량에 장착된 오디오 장치(800), 공기정화 장치(900) 및 음성 장치(1000)를 포함하는 것이 바람직하다.
이렇게 감성 조절 수행부(400)에 의해 수행된 운전자의 감성 조절로 인해 운전자가 운전 중 받은 스트레스가 해소되거나, 화가 난 경우, 화를 누그러트릴 수 있어서 자칫 부주의로 인한 사고 발생을 미연에 방지할 수 있다.
또한, 본 발명의 차량 운전자의 감성 조절 시스템은 운전자의 조작에 따라 운전자의 기준 감성 정보를 갱신하기 위한 감성 정보를 검출하도록 하는 검출 수행 신호를 출력하는 조작부(미도시)를 더 포함할 수 있다.
예컨대, 조작부(미도시)는 기능이 선택되기 위한 기능키 또는 버튼을 구비하고, 사용자의 기능키 또는 버튼 조작에 따라 검출 수행 신호를 출력한다.
제어부(200)는 검출 수행 신호 수신시, 검출부(100)가 운전자의 음성, 표정, 몸짓, 심장 박동수를 포함하는 감성 정보를 검출하도록 제어하고, 수신된 감성 정 보를 운전자의 기준 감성 정보로 갱신 저장하도록 데이터베이스(300)를 제어할 수 있다.
이와 반대로, 제어부(200)가 감성 조절이 필요하다고 판단하여 감성 조절을 수행하도록 감성 조절 수행부(400)를 제어한 경우, 운전자가 감성 조절 수행이 필요없다고 생각하는 경우에는 조작부(미도시)의 특정버튼(예컨대, 배제 버튼)을 누름으로써 제어부(200)가 이 때의 운전자 표정, 몸짓, 음성, 또는 심장 박동수를 화난 상태가 아닌 즉, 평온 상태인 것으로 학습하고, 데이터베이스(300) 내의 기준 감성 정보를 조정하도록 구성할 수도 있다.
도 4는 본 발명에 따른 차량 운전자의 감성 조절 방법을 설명하기 위한 흐름도이다.
도 4에 도시한 바와 같이, 제어부(200)는 검출된 운전자의 감성 정보를 검출부(100)로부터 수신한다(S400).
제어부(200)는 수신된 감성 정보와 기저장된 기준 감성 정보를 비교한다(S410).
여기서 기준 감성 정보는 일반적인 운전자들을 대상으로 각 운전자들이 평온 상태에 있을 때 검출된 음성, 표정, 몸짓, 심장 박동수를 포함하는 평균 데이터일 수 있고, 또는 차량에 탑승한 운전자가 평온 상태에 있을 때 검출된 음성, 표정, 몸짓, 심장 박동수를 포함하는 검출 데이터일 수도 있다.
따라서 제어부(200)는 수신된 감성 정보와 기저장된 감성 정보 각각에 포함된 운전자의 표정과 몸짓을 비교하고, 음성을 비교하며, 심장 박동수를 비교한다.
제어부(200)는 비교 결과에 따라 운전자의 감성 조절 수행 여부를 판단한다(S420).
예컨대, 제어부(200)는 운전자의 얼굴 찡그림 여부 및 입 모양에 따른 운전자의 감성 상태(예컨대, 평온한 상태, 스트레스 상태, 화난 상태, 기분 나쁜 상태, 흥분한 상태 등)를 판단할 수 있고, 수신된 음성에 육두문자가 포함되어 있는지 여부 및 해당 음성에 대한 성문 분석에 따른 운전자의 감성 상태를 판단할 수 있으며, 기준 감성 정보에 포함된 심장 박동수 대비 운전자의 심장 박동수가 빨라졌는지 여부로 운전자의 감정 상태(예컨대, 흥분한 상태 등)를 판단할 수 있다.
판단결과, 운전자의 감성 조절을 수행하도록 판단한 경우, 제어부(200)는 감성 조절 수행부(400)가 감성 조절 수행(예컨대, 운전자의 감성 조절을 위해 치유 음악의 재생, 유머, 농담 또는 사고 발생 가능성 안내 멘트의 제공, 방향제의 분사, 산소의 발생 중 적어도 하나 이상을 수행)을 하도록 제어한다(S430).
제어부(200)가 감성 조절 수행부(400)를 제어함에 있어서, 운전자의 감성 상태에 따른 운전자의 감성 조절 지수와 그에 대응하는 감정 조절 수행 정보가 데이터베이스(300)에 평균 데이터로 기저장될 수 있다.
여기서 감성 조절 지수를 영상, 음성 및 심장 박동수를 통한 판단 결과에 대응하는 값이라 할 경우, 각 판단 결과 운전자의 감성 상태를 평온한 상태로 판단한 경우는 0, 각 판단 결과 중 어느 하나의 판단 결과에서 평온한 상태가 아니라고 판단한 경우는 1, 각 판단 결과 중 어느 두개의 판단 결과에서 평온한 상태가 아니라고 판단한 경우는 2, 각 판단 결과에서 모두 평온한 상태가 아니라고 판단한 경우 는 3으로 대응 시킬 수 있다.
감정 조절 수행 정보는 운전자의 감성 조절을 위한 음악 재생 목록, 유머, 농담, 사고 발생 가능성 안내, 방향제 분사 횟수, 산소 발생 횟수 등을 포함할 수 있다.
예를들어, 감성 조절 지수가 0인 경우는 운전자가 평온한 생태에 있는 경우이고, 이 때는 운전자의 감성 조절 수행을 하지 않아도 되므로, 이에 대한 감성 조절 수행 정보는 설정되지 않는다. 그러나, 감성 조절 지수가 1인 경우는 운전자가 스트레스를 적게 받은 상태이거나 약간 흥분한 상태 또는 조금 화난 상태이므로, 운전자의 감성 조절을 위한 음악 재생 목록으로는 가볍고, 부드러운 발라드라든지 클래식 정도에서 설정될 수 있고, 스트레스 지수가 3인 경우는 운전자가 가장 심한 스트레스를 받은 상태이거나 몹시 흥분한 상태 또는 몹시 화난 상태이므로, 운전자의 기분전환을 위해 빠르고, 경쾌한 비트의 신나는 댄스 음악들이 설정될 수 있다. 방향제 분사 횟수, 산소 발생 횟수 또한 감성 조절 지수별로 분사 및 발생 횟수가 다양하게 설정될 수 있고, 유머나 농담의 수위, 사고 발생 안내멘트 역시 운전자의 감성 조절 지수에 따라 다양하게 설정될 수 있다.
이런 감정 조절 수행 정보는 출고 전에 수 많은 운전자들을 대상으로 실험을 거쳐 산출된 평균 데이터일 수 있고, 차량을 구입한 운전자가 직접 설정할 수 있는 설정 데이터일 수 있다.
그러나, 판단결과, 운전자의 감성 조절을 수행하지 않도록 판단한 경우, 제어부(200)는 검출부(100)가 운전자의 감성 정보를 검출하도록 제어한다(S440).
이상 바람직한 실시예와 첨부도면을 참조하여 본 발명의 구성에 관해 구체적으로 설명하였으나, 이는 예시에 불과한 것으로 본 발명의 기술적 사상을 벗어나지 않는 범주내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
도 1은 본 발명에 따른 차량 운전자의 감성 조절 시스템의 구성을 설명한 블럭도.
도 2는 검출부의 내부 구성을 간략하게 설명한 블럭도.
도 3는 제어부의 내부 구성을 간략하게 설명한 블럭도.
도 4는 본 발명에 따른 차량 운전자의 감성 조절 방법을 설명한 흐름도.
<도면의 주요 참조부호에 대한 설명>
100 : 검출부 110 : 영상 검출부
120 : 음성 검출부 130 : 생체 데이터 검출부
200 : 제어부 210 : 영상 판단부
220 : 음성 판단부 230 : 심장 박동수 판단부
240 : 감성 조절 수행 판단부 300 : 데이터베이스
400 : 감성 조절 수행부 500 : 카메라
600 : 마이크 700 : 심장 박동수 측정기기
800 : 오디오 장치 900 : 공기정화 장치
1000 : 음성 장치

Claims (20)

  1. 차량에 탑승한 운전자의 음성, 표정, 몸짓, 심장 박동수를 포함하는 감성 정보를 검출하는 정보 검출부;
    검출된 상기 감성 정보와 기저장된 상기 운전자의 기준 감성 정보를 비교하여 상기 운전자의 감성 조절 수행 여부를 판단하고, 그에 따라 상기 운전자의 감성 조절을 위한 제어신호를 출력하는 제어부; 및
    상기 제어부의 제어신호에 따라 상기 운전자의 감성 조절을 수행하는 감성 조절 수행부
    를 포함하는 차량 운전자의 감성 조절 시스템.
  2. 제1항에 있어서,
    상기 검출된 운전자의 감성 정보, 상기 운전자 감성 조절의 판단 기준이 되는 기준 감성 정보 중 적어도 하나를 저장하는 데이터베이스
    를 더 포함하는 차량 운전자의 감성 조절 시스템.
  3. 제1항에 있어서, 상기 정보 검출부는,
    상기 운전자의 표정, 몸짓을 검출하는 영상 검출부;
    상기 운전자의 음성을 검출하는 음성 검출부; 및
    상기 운전자의 생체 데이터를 검출는 생체 데이터 검출부
    를 포함하는 것인 차량 운전자의 감성 조절 시스템.
  4. 제1항에 있어서, 상기 기준 감성 정보는,
    일반적인 운전자들을 대상으로 상기 각 운전자들이 평온 상태에 있을 때 검출된 음성, 표정, 몸짓, 심장 박동수를 포함하는 평균 데이터 또는 상기 차량에 탑승한 운전자가 평온 상태에 있을 때 검출된 음성, 표정, 몸짓, 심장 박동수를 포함하는 검출 데이터인 차량 운전자의 감성 조절 시스템.
  5. 제1항에 있어서, 상기 제어부는,
    상기 표정, 몸짓을 포함한 감성 정보를 수신하여 얼굴의 찡그림 여부 및 입모양에 따른 상기 운전자의 감성 상태를 판단하는 영상 판단부;
    상기 음성을 포함한 감성 정보를 수신하여 육두문자 포함여부 및 성문 분석에 따른 상기 운전자의 감성 상태를 판단하는 음성 판단부;
    상기 심장 박동수를 포함하는 생체 데이터를 수신하여 상기 운전자의 감성 상태를 판단하는 심장 박동수 판단부; 및
    상기 영상 판단부, 음성 판단부, 심장 박동수 판단부의 판단결과를 근거로 상기 운전자의 감성 조절 수행 여부를 판단하는 감성 조절 수행 판단부
    를 포함하는 것인 차량 운전자의 감성 조절 시스템.
  6. 제5항에 있어서, 상기 감성 조절 수행부는,
    상기 운전자의 감성 조절을 위해 치유 음악의 재생, 유머, 농담 또는 사고 발생 가능성 안내 멘트의 제공, 방향제의 분사, 산소의 발생 중 적어도 하나 이상을 수행하는 것인 차량 운전자의 감성 조절 시스템.
  7. 제1항에 있어서, 상기 제어부는,
    상기 운전자의 감성 조절 수행을 하지 않도록 판단한 경우, 상기 검출부가 상기 운전자의 감성 정보를 계속 검출하도록 제어하는 것인 차량 운전자의 감성 조절 시스템.
  8. 제1항에 있어서,
    상기 운전자의 조작에 따라 상기 운전자의 기준 감성 정보를 갱신하기 위한 감성 정보를 검출하도록 하는 검출 수행 신호를 출력하는 조작부를 더 포함하는 것인 차량 운전자의 감성 조절 시스템.
  9. 제8항에 있어서, 상기 제어부는,
    상기 검출 수행 신호 수신시, 상기 정보 검출부가 상기 운전자의 음성, 표정, 몸짓, 심장 박동수를 포함하는 감성 정보를 검출하도록 제어하고, 수신된 상기 감성 정보를 상기 운전자의 기준 감성 정보로 갱신 저장하도록 하는 것인 차량 운전자의 감성 조절 시스템.
  10. 제8항에 있어서,
    상기 조작부는 감성 조절을 배제하는 감성 조절 배제 신호를 출력하고,
    상기 제어부는 상기 운전자의 감성 조절 수행 중 상기 감성 조절 배제 신호 수신시, 상기 운전자의 감성 정보에 따라 판단된 상기 운전자의 감성 상태가 평온 상태인 것으로 학습하고, 상기 판단된 결과에 따라 상기 기준 감성 정보를 조정하는 것인 차량 운전자의 감성 조절 시스템.
  11. 차량에 탑승한 운전자의 감성을 조절하는 차량 운전자의 감성 조절 시스템의 제어 방법에 있어서,
    상기 운전자의 음성, 표정, 몸짓, 생체 데이터 중 적어도 하나의 감성 정보를 수신하는 단계;
    수신된 상기 감성 정보와 기저장된 상기 운전자의 기준 감성 정보를 비교하여 상기 운전자의 감성 조절 수행여부를 판단하는 단계; 및
    상기 판단결과에 따라 감성 조절 수행을 제어하는 단계
    를 포함하는 것인 차량 운전자의 감성 조절 방법.
  12. 제11항에 있어서, 상기 수신하는 단계는,
    상기 운전자의 음성, 표정, 몸짓, 심장 박동수, 체온 중 적어도 하나를 포함하는 상기 감성 정보를 검출하는 단계를 포함하는 것인 차량 운전자의 감성 조절 방법.
  13. 제12항에 있어서, 상기 검출하는 단계는,
    상기 운전자의 표정, 몸짓을 검출하는 단계;
    상기 운전자의 음성을 검출하는 단계; 및
    상기 운전자의 생체 데이터를 검출하는 단계 중 적어도 하나를 포함하는 것인 차량 운전자의 감성 조절 방법.
  14. 제11항에 있어서, 상기 기준 감성 정보는,
    일반적인 운전자들을 대상으로 상기 각 운전자들이 평온 상태에 있을 때 각각 검출된 음성, 표정, 몸짓, 심장 박동수에 대한 평균 데이터 또는 상기 운전자가 평온 상태에 있을 때 검출된 음성, 표정, 몸짓, 심장 박동수를 포함하는 검출 데이터인 차량 운전자의 감성 조절 방법.
  15. 제11항에 있어서, 상기 판단하는 단계는,
    상기 표정, 몸짓을 포함한 감성 정보를 수신하여 얼굴의 찡그림 여부 및 입모양에 따른 상기 운전자의 감성 상태를 판단하는 단계;
    상기 음성을 포함한 감성 정보를 수신하여 육두문자 포함여부 및 성문 분석에 따른 상기 운전자의 감성 상태를 판단하는 단계;
    상기 심장 박동수를 포함한 감성 정보를 수신하여 상기 심장 박동수에 따른 상기 운전자의 감성 상태를 판단하는 단계; 및
    상기 영상 판단, 음성 판단, 심장 박동수 판단을 근거로 상기 운전자의 감성 조절 수행 여부를 판단하는 단계
    를 포함하는 것인 차량 운전자의 감성 조절 방법.
  16. 제11항에 있어서, 상기 제어하는 단계는,
    상기 운전자의 감성 조절을 위해 치유 음악을 재생하도록 하는 단계;
    유머 또는 농담 전달 또는 사고가 발생할 수 있음을 안내하도록 하는 단계; 및
    방향제 분사 또는 산소를 발생시키도록 하는 단계 중 적어도 하나 이상
    을 포함하는 것인 차량 운전자의 감성 조절 방법.
  17. 제11항에 있어서, 상기 제어하는 단계는,
    상기 운전자의 감성 조절 수행을 하지 않도록 판단된 경우, 상기 운전자의 감성 정보를 계속 검출하도록 하는 단계를 더 포함하는 차량 운전자의 감성 조절 방법.
  18. 제11항에 있어서,
    상기 운전자의 조작에 따른 상기 운전자의 기준 감성 정보를 갱신하기 위한 감성 정보를 검출하도록 하는 검출 수행 신호를 수신하는 단계를 더 포함하는 차량 운전자의 감성 조절 방법.
  19. 제18항에 있어서, 상기 제어하는 단계는,
    상기 검출 수행 신호 수신시, 검출된 상기 운전자의 음성, 표정, 몸짓, 심장 박동수를 포함하는 감성 정보를 수신하는 단계; 및
    수신된 상기 감성 정보를 상기 운전자의 기준 감성 정보로 갱신 저장하도록 하는 단계
    를 포함하는 것인 차량 운전자의 감성 조절 방법.
  20. 제11항에 있어서,
    상기 운전자의 감성 조절 수행 중 상기 운전자의 조작에 따라 상기 감성 조절을 배제하는 감성 조절 배제 신호를 수신하는 단계;
    상기 운전자의 감성 정보에 따라 판단된 상기 운전자의 감성 상태가 평온 상태인 것으로 학습하는 단계; 및
    상기 판단 결과에 따라 상기 기준 감성 정보를 조정하는 단계
    를 더 포함하는 차량 운전자의 감성 조절 방법.
KR1020080120594A 2008-12-01 2008-12-01 차량 운전자의 감성 조절 시스템 및 방법 KR101173944B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080120594A KR101173944B1 (ko) 2008-12-01 2008-12-01 차량 운전자의 감성 조절 시스템 및 방법
US12/475,149 US20100134302A1 (en) 2008-12-01 2009-05-29 System and method for controlling emotion of car driver

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080120594A KR101173944B1 (ko) 2008-12-01 2008-12-01 차량 운전자의 감성 조절 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20100062145A true KR20100062145A (ko) 2010-06-10
KR101173944B1 KR101173944B1 (ko) 2012-08-20

Family

ID=42222310

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080120594A KR101173944B1 (ko) 2008-12-01 2008-12-01 차량 운전자의 감성 조절 시스템 및 방법

Country Status (2)

Country Link
US (1) US20100134302A1 (ko)
KR (1) KR101173944B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101305129B1 (ko) * 2011-08-29 2013-09-12 현대자동차주식회사 지능형 차량 운전자 기분전환 지원장치 및 방법
KR20190131886A (ko) * 2018-05-18 2019-11-27 현대자동차주식회사 차량 및 그 제어 방법
CN112785837A (zh) * 2019-11-11 2021-05-11 上海博泰悦臻电子设备制造有限公司 用户驾驶车辆时情绪识别方法及装置、存储介质和终端
KR20220074744A (ko) * 2020-11-27 2022-06-03 배익렬 안정시의 심전도 파형에 대응하는 음원을 이용한 운전자 스트레스 완화 시스템

Families Citing this family (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110245633A1 (en) * 2010-03-04 2011-10-06 Neumitra LLC Devices and methods for treating psychological disorders
US11017250B2 (en) 2010-06-07 2021-05-25 Affectiva, Inc. Vehicle manipulation using convolutional image processing
US10897650B2 (en) 2010-06-07 2021-01-19 Affectiva, Inc. Vehicle content recommendation using cognitive states
US10627817B2 (en) 2010-06-07 2020-04-21 Affectiva, Inc. Vehicle manipulation using occupant image analysis
US11704574B2 (en) 2010-06-07 2023-07-18 Affectiva, Inc. Multimodal machine learning for vehicle manipulation
US10911829B2 (en) 2010-06-07 2021-02-02 Affectiva, Inc. Vehicle video recommendation via affect
US11935281B2 (en) 2010-06-07 2024-03-19 Affectiva, Inc. Vehicular in-cabin facial tracking using machine learning
US11587357B2 (en) 2010-06-07 2023-02-21 Affectiva, Inc. Vehicular cognitive data collection with multiple devices
US10922567B2 (en) 2010-06-07 2021-02-16 Affectiva, Inc. Cognitive state based vehicle manipulation using near-infrared image processing
US10796176B2 (en) 2010-06-07 2020-10-06 Affectiva, Inc. Personal emotional profile generation for vehicle manipulation
US10779761B2 (en) 2010-06-07 2020-09-22 Affectiva, Inc. Sporadic collection of affect data within a vehicle
US11823055B2 (en) 2019-03-31 2023-11-21 Affectiva, Inc. Vehicular in-cabin sensing using machine learning
US10482333B1 (en) 2017-01-04 2019-11-19 Affectiva, Inc. Mental state analysis using blink rate within vehicles
US11151610B2 (en) 2010-06-07 2021-10-19 Affectiva, Inc. Autonomous vehicle control using heart rate collection based on video imagery
US11465640B2 (en) 2010-06-07 2022-10-11 Affectiva, Inc. Directed control transfer for autonomous vehicles
US11511757B2 (en) 2010-06-07 2022-11-29 Affectiva, Inc. Vehicle manipulation with crowdsourcing
US11410438B2 (en) * 2010-06-07 2022-08-09 Affectiva, Inc. Image analysis using a semiconductor processor for facial evaluation in vehicles
US11292477B2 (en) 2010-06-07 2022-04-05 Affectiva, Inc. Vehicle manipulation using cognitive state engineering
US11067405B2 (en) 2010-06-07 2021-07-20 Affectiva, Inc. Cognitive state vehicle navigation based on image processing
US11318949B2 (en) 2010-06-07 2022-05-03 Affectiva, Inc. In-vehicle drowsiness analysis using blink rate
CN102525412A (zh) * 2010-12-16 2012-07-04 北京柏瑞医信科技有限公司 用于促进情绪平衡、评估情绪状态和调节效果的方法和设备
EP2659486B1 (en) * 2010-12-30 2016-03-23 Nokia Technologies Oy Method, apparatus and computer program for emotion detection
US11270699B2 (en) * 2011-04-22 2022-03-08 Emerging Automotive, Llc Methods and vehicles for capturing emotion of a human driver and customizing vehicle response
CN102764475A (zh) * 2012-08-05 2012-11-07 四川大学 冲动控制仪及其控制方法
DE102012111253A1 (de) * 2012-09-27 2014-05-15 Claas Selbstfahrende Erntemaschinen Gmbh Verfahren zum Betreiben einer landwirtschaftlichen Arbeitsmaschine
KR20140080727A (ko) * 2012-12-14 2014-07-01 한국전자통신연구원 운전자 감성제어 장치 및 그 방법
EP2857276B1 (en) * 2013-08-20 2018-12-12 Harman International Industries, Incorporated Driver assistance system
CN105313898B (zh) 2014-07-23 2018-03-20 现代摩比斯株式会社 驾驶员状态感应装置及其方法
SG10201407018YA (en) * 2014-10-28 2016-05-30 Chee Seng Keith Lim System and method for processing heartbeat information
CN104575541A (zh) * 2015-01-21 2015-04-29 天津松下汽车电子开发有限公司 一种智能车载音响播放系统
CN104840204B (zh) 2015-04-10 2018-01-19 京东方科技集团股份有限公司 一种疲劳驾驶监控方法及设备
CN104771183A (zh) * 2015-04-21 2015-07-15 安徽阳光心健心理咨询有限公司 无束缚体感互动心理系统
DE102015220237A1 (de) * 2015-10-16 2017-04-20 Zf Friedrichshafen Ag Fahrzeugsystem und Verfahren zur Aktivierung einer Selbstfahreinheit zum autonomen Fahren
EP3384475B1 (en) * 2015-12-06 2021-12-22 Cerence Operating Company System and method of conversational adjustment based on user's cognitive state
CN105852823A (zh) * 2016-04-20 2016-08-17 吕忠华 一种医学用智能化息怒提示设备
CN105725996A (zh) * 2016-04-20 2016-07-06 吕忠华 一种智能控制人体器官情绪变化医疗器械装置及方法
JP6830206B2 (ja) * 2016-06-13 2021-02-17 パナソニックIpマネジメント株式会社 機器制御システム、情報処理装置および機器制御方法
WO2018009224A1 (en) * 2016-07-08 2018-01-11 Ford Global Technologies, Llc Characterizing route stress and stress-based route selection
US11382547B2 (en) 2016-09-12 2022-07-12 Embraer S.A. Brain stimulation system to provide a sense of wellbeing
US20180118218A1 (en) * 2016-10-27 2018-05-03 Ford Global Technologies, Llc Method and apparatus for vehicular adaptation to driver state
US10515390B2 (en) 2016-11-21 2019-12-24 Nio Usa, Inc. Method and system for data optimization
CN106539573A (zh) * 2016-11-25 2017-03-29 惠州市德赛工业研究院有限公司 一种智能手环及基于用户偏好的手环提醒方法
JP2018102705A (ja) * 2016-12-27 2018-07-05 本田技研工業株式会社 感情改善装置および感情改善方法
US10471829B2 (en) 2017-01-16 2019-11-12 Nio Usa, Inc. Self-destruct zone and autonomous vehicle navigation
US10286915B2 (en) 2017-01-17 2019-05-14 Nio Usa, Inc. Machine learning for personalized driving
JP6499682B2 (ja) * 2017-01-31 2019-04-10 本田技研工業株式会社 情報提供システム
US10150351B2 (en) * 2017-02-08 2018-12-11 Lp-Research Inc. Machine learning for olfactory mood alteration
US10922566B2 (en) 2017-05-09 2021-02-16 Affectiva, Inc. Cognitive state evaluation for vehicle navigation
MY192254A (en) * 2017-06-01 2022-08-11 Univ Kebangsaan Malaysia A system and a method to determine and control emotional state of a vehicle operator
US10068620B1 (en) 2017-06-20 2018-09-04 Lp-Research Inc. Affective sound augmentation for automotive applications
US10234302B2 (en) 2017-06-27 2019-03-19 Nio Usa, Inc. Adaptive route and motion planning based on learned external and internal vehicle environment
US10592785B2 (en) * 2017-07-12 2020-03-17 Futurewei Technologies, Inc. Integrated system for detection of driver condition
US10837790B2 (en) 2017-08-01 2020-11-17 Nio Usa, Inc. Productive and accident-free driving modes for a vehicle
CN107714056A (zh) * 2017-09-06 2018-02-23 上海斐讯数据通信技术有限公司 一种智能分析情绪的可穿戴设备及智能分析情绪的方法
US10635109B2 (en) 2017-10-17 2020-04-28 Nio Usa, Inc. Vehicle path-planner monitor and controller
US10606274B2 (en) 2017-10-30 2020-03-31 Nio Usa, Inc. Visual place recognition based self-localization for autonomous vehicles
US10935978B2 (en) 2017-10-30 2021-03-02 Nio Usa, Inc. Vehicle self-localization using particle filters and visual odometry
FR3074336B1 (fr) * 2017-11-29 2020-07-10 Valeo Comfort And Driving Assistance Dispositif et procede de detection d'emotion
DE102018000883B4 (de) 2018-02-03 2022-08-25 Louis Samuel Seidel Biofeedbacksystem zur Verwendung in einem Verfahren zur Prävention, Diagnose und Therapie von Stress und kognitivem Leistungsabfall bedingt durch der Unterhaltung, Kommunikation und Datenverarbeitung dienende, elektronische Bildschirmgeräte
KR102485441B1 (ko) * 2018-09-03 2023-01-06 현대자동차주식회사 차량 및 차량 시스템
CA3143234A1 (en) * 2018-09-30 2020-04-02 Strong Force Intellectual Capital, Llc Intelligent transportation systems
CN109549624A (zh) * 2018-11-04 2019-04-02 南京云思创智信息科技有限公司 一种基于深度学习的实时视频情感分析方法及系统
GB2579775B (en) 2018-12-11 2022-02-23 Ge Aviat Systems Ltd Aircraft and method of adjusting a pilot workload
GB2598063B (en) 2018-12-11 2022-09-07 Ge Aviat Systems Ltd Aircraft and method of controlling
US10960838B2 (en) 2019-01-30 2021-03-30 Cobalt Industries Inc. Multi-sensor data fusion for automotive systems
US10967873B2 (en) 2019-01-30 2021-04-06 Cobalt Industries Inc. Systems and methods for verifying and monitoring driver physical attention
US11887383B2 (en) 2019-03-31 2024-01-30 Affectiva, Inc. Vehicle interior object management
US11027650B2 (en) 2019-11-07 2021-06-08 Nio Usa, Inc. Method and apparatus for improving operation of a motor vehicle
CN111329498A (zh) * 2020-03-09 2020-06-26 郑州大学 多模态的驾驶员情绪辅助调节方法
CN113771859B (zh) * 2021-08-31 2024-01-26 智新控制系统有限公司 智能行车干预方法、装置、设备及计算机可读存储介质
KR20230042835A (ko) 2021-09-23 2023-03-30 쌍용자동차 주식회사 운전자 감성대응 주크박스 기능이 내장된 오디오장치 및 그 제어방법
CN114155882B (zh) * 2021-11-30 2023-08-22 浙江大学 一种基于语音识别的“路怒”情绪判断方法和装置
CN114566189B (zh) * 2022-04-28 2022-10-04 之江实验室 基于三维深度特征融合的语音情感识别方法及系统

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU570052B2 (en) * 1983-06-15 1988-03-03 Kershaw, Robert International Pty. Ltd. Braking apparatus
JPH0779803B2 (ja) * 1987-12-09 1995-08-30 日本電装株式会社 居眠り検出装置
JP3011358B2 (ja) * 1994-11-16 2000-02-21 パイオニア株式会社 心拍測定装置
US5850193A (en) * 1995-03-30 1998-12-15 Sumitomo Electric Industries, Ltd. Apparatus for assisting driver in carefully driving
US5689241A (en) * 1995-04-24 1997-11-18 Clarke, Sr.; James Russell Sleep detection and driver alert apparatus
US5813993A (en) * 1996-04-05 1998-09-29 Consolidated Research Of Richmond, Inc. Alertness and drowsiness detection and tracking system
JP3183161B2 (ja) * 1996-04-12 2001-07-03 三菱自動車工業株式会社 覚醒度推定装置
US7042345B2 (en) * 1996-09-25 2006-05-09 Christ G Ellis Intelligent vehicle apparatus and method for using the apparatus
US6016103A (en) * 1997-09-25 2000-01-18 Leavitt; Larry Sleep-detecting driving gloves
DE19803158C1 (de) * 1998-01-28 1999-05-06 Daimler Chrysler Ag Vorrichtung zur Vigilanzzustandsbestimmung
US6506153B1 (en) * 1998-09-02 2003-01-14 Med-Dev Limited Method and apparatus for subject monitoring
US6466232B1 (en) * 1998-12-18 2002-10-15 Tangis Corporation Method and system for controlling presentation of information to a user based on the user's condition
DE19983911B4 (de) * 1999-01-27 2018-09-06 Compumedics Sleep Pty. Ltd. Wachsamkeitsüberwachungssystem
KR100382154B1 (ko) * 2000-02-22 2003-05-01 박원희 운전자 상태 감시장치
DE10042367A1 (de) * 2000-08-29 2002-05-02 Bosch Gmbh Robert Verfahren und Vorrichtung zur Diagnose der Fahrtüchtigkeit eines Fahrers in einem Kraftfahrzeug
JP3495982B2 (ja) * 2000-12-21 2004-02-09 株式会社エム・アイ・ラボ 密閉空気式音センサを使用した運転者居眠り警報装置
US6980098B2 (en) * 2001-01-29 2005-12-27 Sony Corporation Information processing apparatus, information processing method and program executed in information processing apparatus
AUPR343401A0 (en) * 2001-02-28 2001-03-29 Nguyen, Hung Modelling and design for early warning systems using physiological responses
JP4514372B2 (ja) * 2001-08-28 2010-07-28 パイオニア株式会社 情報提供システム、情報提供方法、情報提供プログラム、情報提供システムにおけるサーバ装置および、情報提供システムにおける端末装置
US6731925B2 (en) * 2001-10-24 2004-05-04 Mouhamad Ahmad Naboulsi Safety control system for vehicles
EP2296008A1 (en) * 2002-02-19 2011-03-16 Volvo Technology Corporation Method for monitoring and managing driver attention loads
JP3846872B2 (ja) * 2002-06-27 2006-11-15 パイオニア株式会社 運転者精神状態情報提供システム
US7202792B2 (en) * 2002-11-11 2007-04-10 Delphi Technologies, Inc. Drowsiness detection system and method
DE10259522A1 (de) * 2002-12-19 2004-07-01 Robert Bosch Gmbh Radargestützte Sensierung von Lage und/oder Bewegung des Körpers oder im Körper von Lebewesen
JP2005211239A (ja) * 2004-01-28 2005-08-11 Toyota Motor Kyushu Inc 居眠り検出器、居眠り防止装置及び自動車
JP4316397B2 (ja) * 2004-02-09 2009-08-19 パイオニア株式会社 擬似音発生装置、車両、擬似音発生方法および擬似音発生プログラム
JP4305289B2 (ja) * 2004-06-10 2009-07-29 株式会社デンソー 車両用制御装置およびその装置を備える車両用制御システム
US7183932B2 (en) * 2005-03-21 2007-02-27 Toyota Technical Center Usa, Inc Inter-vehicle drowsy driver advisory system
US7301464B2 (en) * 2005-05-24 2007-11-27 Electronic Data Systems Corporation Process and method for safer vehicle navigation through facial gesture recognition and operator condition monitoring
JP4682714B2 (ja) * 2005-06-14 2011-05-11 トヨタ自動車株式会社 対話システム
KR100785689B1 (ko) 2005-12-29 2007-12-14 (재)대구경북과학기술연구원 장갑을 이용한 졸음 운전 방지 장치 및 그 제어 방법
JP4728839B2 (ja) * 2006-03-02 2011-07-20 株式会社デンソーアイティーラボラトリ 車載機器制御装置
JP4518083B2 (ja) * 2007-01-29 2010-08-04 株式会社デンソー 覚醒維持装置
US7652583B2 (en) * 2007-03-20 2010-01-26 Deere & Company Method and system for maintaining operator alertness
JP4375420B2 (ja) * 2007-03-26 2009-12-02 株式会社デンソー 眠気警報装置、及びプログラム

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101305129B1 (ko) * 2011-08-29 2013-09-12 현대자동차주식회사 지능형 차량 운전자 기분전환 지원장치 및 방법
KR20190131886A (ko) * 2018-05-18 2019-11-27 현대자동차주식회사 차량 및 그 제어 방법
CN112785837A (zh) * 2019-11-11 2021-05-11 上海博泰悦臻电子设备制造有限公司 用户驾驶车辆时情绪识别方法及装置、存储介质和终端
KR20220074744A (ko) * 2020-11-27 2022-06-03 배익렬 안정시의 심전도 파형에 대응하는 음원을 이용한 운전자 스트레스 완화 시스템
KR20220075056A (ko) * 2020-11-27 2022-06-07 배익렬 운전자 스트레스 모니터링 및 완화 시스템

Also Published As

Publication number Publication date
US20100134302A1 (en) 2010-06-03
KR101173944B1 (ko) 2012-08-20

Similar Documents

Publication Publication Date Title
KR101173944B1 (ko) 차량 운전자의 감성 조절 시스템 및 방법
CN106803423B (zh) 基于用户情绪状态的人机交互语音控制方法、装置及车辆
US11636851B2 (en) Multi-assistant natural language input processing
US9990176B1 (en) Latency reduction for content playback
US11170776B1 (en) Speech-processing system
US20210090575A1 (en) Multi-assistant natural language input processing
US11100922B1 (en) System and methods for triggering sequences of operations based on voice commands
US9756161B2 (en) Voice recognition apparatus, vehicle having the same, and method of controlling the vehicle
US7826945B2 (en) Automobile speech-recognition interface
US11538478B2 (en) Multiple virtual assistants
CN106796786A (zh) 语音识别系统
JP2004538543A (ja) 多モード入力を使用した多モード・フォーカス検出、参照の曖昧性の解決およびムード分類のためのシステムおよび方法
US11393477B2 (en) Multi-assistant natural language input processing to determine a voice model for synthesized speech
JP2007114475A (ja) 音声認識機器制御装置
JP2017090613A (ja) 音声認識制御システム
US11579841B1 (en) Task resumption in a natural understanding system
JP2010149757A (ja) 覚醒持続支援システム
KR20220152829A (ko) 차량 사운드 기반 감성 케어 장치 및 방법
JP2003114696A (ja) 音声認識装置、プログラム及びナビゲーションシステム
JP2005283647A (ja) 感情認識装置
KR20200016055A (ko) 지능형 졸음운전 방지 장치
US11273778B1 (en) Vehicle voice user interface
JP4654513B2 (ja) 楽器
US11404075B1 (en) Vehicle voice user interface
US20070192097A1 (en) Method and apparatus for detecting affects in speech

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150806

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee