KR101714089B1 - 차량 인터랙션 시스템 - Google Patents

차량 인터랙션 시스템 Download PDF

Info

Publication number
KR101714089B1
KR101714089B1 KR1020110136419A KR20110136419A KR101714089B1 KR 101714089 B1 KR101714089 B1 KR 101714089B1 KR 1020110136419 A KR1020110136419 A KR 1020110136419A KR 20110136419 A KR20110136419 A KR 20110136419A KR 101714089 B1 KR101714089 B1 KR 101714089B1
Authority
KR
South Korea
Prior art keywords
seat
occupant
vibration
gesture
passenger
Prior art date
Application number
KR1020110136419A
Other languages
English (en)
Other versions
KR20130068945A (ko
Inventor
이석범
이종복
노희진
박성민
홍기범
김성운
석동희
민정상
오광명
최진하
신동수
Original Assignee
현대자동차주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사 filed Critical 현대자동차주식회사
Priority to KR1020110136419A priority Critical patent/KR101714089B1/ko
Publication of KR20130068945A publication Critical patent/KR20130068945A/ko
Application granted granted Critical
Publication of KR101714089B1 publication Critical patent/KR101714089B1/ko

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/25Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using haptic output
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W50/16Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/215Selection or confirmation of options

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Combustion & Propulsion (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Percussion Or Vibration Massage (AREA)
  • Massaging Devices (AREA)

Abstract

탑승자의 제스쳐를 인지하는 인지수단, 탑승자의 제스쳐가 기설정된 소정의 패턴과 일치하는지 판단하는 판단수단, 탑승자의 제스쳐가 소정의 패턴과 일치하는 경우 탑승자에게 탑승자의 제스쳐가 올바로 인지되었음을 알리는 피드백 수단을 포함하고, 피드백수단은 탑승자의 좌석 내에 설치된 진동모터이며, 복수의 진동모터의 진동패턴은, 진동시기에 시계열적으로 차별을 두어 탑승자가 구별할 수 있는 서로 다른 피드백 신호를 발생시키거나, 서로 다른 복수의 위치 중 소정 위치 또는 소정 위치의 조합의 진동으로 탑승자가 구별할 수 있는 서로 다른 피드백 신호를 발생시키거나, 진동의 세기에 차별을 두어 탑승자가 구별할 수 있는 서로 다른 피드백 신호를 발생시킬 수 있는 차량 인터랙션 시스템이다.

Description

차량 인터랙션 시스템{Interaction System for Vehicles}
본 발명은 탑승자의 제스쳐를 인식하여 시각 또는 청각적이지 않은 방식으로 피드백을 함으로써 운전자의 시야나 신경이 분산되지 않도록 하는 차량 내 인터랙션 시스템에 관한 것이다.
차량 내 인터랙션 시스템에서 피드백은 시각적인 디스플레이나 조명, 또는 청각적인 소리가 대부분을 차지한다.
가령 운전자는 내비게이션의 터치 디스플레이부(11)를 조작하고, 이에 대해 내비게이션 시스템은 화면을 변경시키거나 소리를 내는 방식으로 운전자에게 운전자의 입력이 제대로 입력되었음을 피드백한다.
그러나 이러한 과정에서 운전자의 시각적 집중력이 디스플레이에 분산되고 청각적 집중력이 피드백 소리에 분산되기 때문에, 차량 내 인터랙션 시스템 조작과정에서 실제 많은 사고가 발생한다.
이에 카메라(12) 등을 사용하여 촬영되는 탑승자의 제스쳐를 인지하는 방식을 사용한다면 디스플레이 조작으로 인한 시야의 분산은 어느 정도 피할 수가 있겠지만, 여전히 기존의 시각적 내지 청각적 방식으로 피드백을 한다면 사고 위험을 낮추는 데에 한계가 있다.
한편 종래에는 안마시트가 있었지만 이는 별도의 스위치를 통해 작동되는 수동 방식이었을 뿐 운전자의 제스쳐에 직접적으로 반응하는 자동 방식이 아니었다.
이에 본 발명은 운전자의 시선이나 청각적 주의력 분산 없이 안전운행을 하면서 정확한 피드백을 제공할 수 있는 차량 인터랙션 시스템을 제공함을 목적으로 한다.
또한 본 발명은 안마 시트 등과 연계해서, 피드백 과정을 재미있고 안락하게 구성할 수 있는 인터랙션 시스템을 제공함을 목적으로 한다.
상기와 같은 과제를 해결하기 위해 본 발명은,
탑승자의 제스쳐를 인지하는 인지수단,
탑승자의 제스쳐가 기설정된 소정의 패턴과 일치하는지 판단하는 판단수단,
탑승자의 제스쳐가 소정의 패턴과 일치하는 경우 탑승자에게 탑승자의 제스쳐가 올바로 인지되었음을 알리는 피드백 수단을 포함하는 차량 인터랙션 시스템을 제공한다.
여기서 상기 피드백수단은 탑승자의 좌석 내에 설치된 진동모터일 수 있다.
여기서 상기 진동모터는 탑승자의 좌석 내에서 서로 다른 복수의 위치에 각각 설치되고,
상기 복수의 진동모터의 진동패턴은, 진동시기에 시계열적으로 차별을 두어 탑승자가 구별할 수 있는 서로 다른 피드백 신호를 발생시키거나, 서로 다른 복수의 위치 중 소정 위치 또는 소정 위치의 조합의 진동으로 탑승자가 구별할 수 있는 서로 다른 피드백 신호를 발생시키거나, 진동의 세기에 차별을 두어 탑승자가 구별할 수 있는 서로 다른 피드백 신호를 발생시킬 수 있다.
한편 상기 인지수단은 신체가 움직이는 부분을 인식할 수 있도록 좌석에 배치된 피에조센서, 압력센서 또는 정전센서일 수 있다.
또한 상기 피드백수단은 좌석 내에 복수 개 설치되며 인지수단(10)에 의해 인지된 위치가 구동될 수 있는 안마 액추에이터일 수 있다.
상기와 같은 본 발명에 의하면, 운전자는 시선분산 없는 안전 운전이 가능하고, 피드백 신호를 명확히 구분할 수 있으며, 장거리 운전이나 막히는 도로 운전시 지루하지 않게 운전을 할 수 있다.
도 1은 본 발명에 따른 인터랙션 시스템의 개략도이다.
이하 도 1을 참조하여 본 발명의 제 1실시예를 설명한다.
본 발명에 따른 차량 인터렉션 시스템은 인지수단(10), 제스쳐 식별 판단부(20), 저장부(30), 피드백수단(40)을 포함한다.
본 발명에서 피드백수단(40)은 탑승자(운전자)의 좌석으로서, 탑승자(운전자)의 좌석의 서로 다른 복수의 위치에 진동모터(미도시)를 내장한다. 이러한 진동모터(미도시)는 제스쳐 식별 판단부(20)에 의해 제어된다.
인지수단(10)은 탑승자의 제스쳐를 인식하는 터치 디스플레이부(11)와 탑승자의 영상을 촬영하고 탑승자의 동작을 인식하는 카메라(12)를 포함한다.
그리고 상기 인지수단(10)은 제스쳐 식별 판단부(20)와 연결되어 있어서 인지수단(10)에 의해 인지된 제스쳐를 수신하고, 제스쳐 식별 판단부(20)는 저장부(30)에 저장된 소정의 패턴 데이터를 수신할 수 있다.
그리고 제스쳐 식별 판단부(20)는 상기 인지수단(10)에 의해 인지된 제스쳐를 저장부(30)에 저장된 소정의 제스쳐 패턴과 비교하고, 해당 제스쳐가 소정의 패턴과 일치하는지 판단한다.
판단 결과 탑승자에 의해 입력된 패턴이 소정의 패턴과 일치하는 경우 해당 패턴이 입력되었다는 피드백신호를 발생시키고, 탑승자에 의해 입력된 패턴과 일치하는 패턴이 없는 경우 입력이 잘못되었음을 나타내는 피드백신호를 발생시킨다.
해당 신호에 따라 상기 좌석의 복수의 위치에 내장된 진동모터(미도시)가 작동하게 되는데, 진동시기에 시계열적으로 차이를 두거나, 서로 다른 복수의 위치 및 이러한 소정 위치의 조합에 해당하는 진동모터를 진동시키거나, 진동의 세기에 차별을 두어 피드백신호를 구별하여 발생시킬 수 있다. 또한, 운전자는 좌석에서 느껴지는 이러한 진동의 시기, 위치, 세기의 차이 등으로 신호를 구별하여 자신이 입력한 제스쳐가 제대로 인식되었는지 판단할 수 있다.
이하에서는 상술한 제1실시예를 변형한 제2실시예를 설명한다.
탑승자(운전자)의 좌석에는 서로 다른 복수의 위치에 안마 액추에이터(미도시)가 내장되어 있고, 이러한 안마 액추에이터(미도시)는 제스쳐 식별 판단부(20)에 의해 제어되거나 별도의 제어수단(예를 들어, 별도의 리모콘 등)에 의해 개별적으로 온오프 제어가 가능하다.
한편 탑승자의 좌석에는 신체의 움직임, 시트에 대한 압력 증가를 감지할 수 있는 피에조센서, 압력센서 또는 정전센서가 인지수단(10)으로서 설치될 수 있다.
한편 상기 인지수단(10)은 제스쳐 식별 판단부(20)에 연결되어 있는데, 제스쳐 식별 판단부(20)는 인지수단(10)에 의해 인지된 압력의 변화나 신체의 움직임이 가령 장기간 착석에 따른 불편함 등에 의한 소정의 압력의 변화나 신체의 움직임과 일치하는지 판단한다.
판단결과 해당 움직임이 소정의 움직임과 일치하는 경우, 이에 따라 해당 움직임이 발생한 부위의 안마 액추에이터를 작동시켜 운전자에게 피드백할 수 있다.

Claims (5)

  1. 탑승자의 제스쳐를 인지하는 인지수단(10),
    탑승자의 제스쳐가 기설정된 소정의 패턴과 일치하는지 판단하는 판단수단(20),
    탑승자의 제스쳐가 소정의 패턴과 일치하는 경우 탑승자에게 탑승자의 제스쳐가 올바로 인지되었음을 알리는 피드백 수단(40)을 포함하고,
    상기 피드백 수단(40)은, 상기 탑승자의 좌석 내에 복수 개 설치되고,
    상기 인지수단(10)은 상기 좌석에 탑승한 신체의 움직임 또는 좌석에 대한 압력 증가의 위치를 감지하며,
    상기 탑승자의 좌석 일부에서 상기 신체의 움직임 또는 좌석에 대한 압력 증가가 감지되면, 상기 신체의 움직임 또는 좌석에 대한 압력 증가가 감지된 위치에 설치된 피드백 수단이 구동되는 것을 특징으로 하는 차량 인터랙션 시스템.
  2. 청구항 1에 있어서,
    상기 피드백수단(40)은 탑승자의 좌석 내에 설치된 진동모터인 차량 인터랙션 시스템.
  3. 청구항 2에 있어서,
    상기 진동모터는 탑승자의 좌석 내에서 서로 다른 복수의 위치에 각각 설치되고,
    상기 복수의 진동모터의 진동패턴은, 진동시기에 시계열적으로 차별을 두어 탑승자가 구별할 수 있는 서로 다른 피드백 신호를 발생시키거나, 서로 다른 복수의 위치 중 소정 위치 또는 소정 위치의 조합의 진동으로 탑승자가 구별할 수 있는 서로 다른 피드백 신호를 발생시키거나, 진동의 세기에 차별을 두어 탑승자가 구별할 수 있는 서로 다른 피드백 신호를 발생시키는 차량 인터랙션 시스템.
  4. 청구항 1에 있어서,
    상기 인지수단(10)은 신체가 움직이는 부분을 인식할 수 있도록 좌석에 배치된 피에조센서, 압력센서 또는 정전센서인 차량 인터랙션 시스템.
  5. 청구항 1 또는 청구항 4에 있어서,
    상기 피드백수단(40)은 좌석 내에 복수 개 설치되며 상기 인지수단(10)에 의해 인지된 위치가 구동될 수 있는 안마 액추에이터인 차량 인터랙션 시스템.
KR1020110136419A 2011-12-16 2011-12-16 차량 인터랙션 시스템 KR101714089B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110136419A KR101714089B1 (ko) 2011-12-16 2011-12-16 차량 인터랙션 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110136419A KR101714089B1 (ko) 2011-12-16 2011-12-16 차량 인터랙션 시스템

Publications (2)

Publication Number Publication Date
KR20130068945A KR20130068945A (ko) 2013-06-26
KR101714089B1 true KR101714089B1 (ko) 2017-03-09

Family

ID=48864462

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110136419A KR101714089B1 (ko) 2011-12-16 2011-12-16 차량 인터랙션 시스템

Country Status (1)

Country Link
KR (1) KR101714089B1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103366506A (zh) * 2013-06-27 2013-10-23 北京理工大学 一种驾驶员行车途中接打手机行为的自动监控装置及方法
WO2017124480A1 (zh) * 2016-01-23 2017-07-27 刘建兵 调节座椅时的技术信息展示方法以及手势系统
WO2017124479A1 (zh) * 2016-01-23 2017-07-27 刘建兵 手势调节座椅技术的信息采集方法以及手势系统
GB2539329A (en) * 2016-06-03 2016-12-14 Daimler Ag Method for operating a vehicle, in particular a passenger vehicle
CN111469859A (zh) * 2020-03-27 2020-07-31 一汽奔腾轿车有限公司 一种汽车手势交互系统
GB2597492B (en) * 2020-07-23 2022-08-03 Nissan Motor Mfg Uk Ltd Gesture recognition system

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011030491A1 (ja) 2009-09-09 2011-03-17 パナソニック株式会社 車両制御装置及び車両制御方法
WO2011062869A1 (en) 2009-11-18 2011-05-26 Johnson Controls Technology Company Haptic feedback system for vehicle seating

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102006037156A1 (de) * 2006-03-22 2007-09-27 Volkswagen Ag Interaktive Bedienvorrichtung und Verfahren zum Betreiben der interaktiven Bedienvorrichtung
KR20100110640A (ko) * 2009-04-03 2010-10-13 현대자동차주식회사 운전자 정보 시스템의 진동 피드백 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011030491A1 (ja) 2009-09-09 2011-03-17 パナソニック株式会社 車両制御装置及び車両制御方法
WO2011062869A1 (en) 2009-11-18 2011-05-26 Johnson Controls Technology Company Haptic feedback system for vehicle seating

Also Published As

Publication number Publication date
KR20130068945A (ko) 2013-06-26

Similar Documents

Publication Publication Date Title
KR101714089B1 (ko) 차량 인터랙션 시스템
US10474357B2 (en) Touch sensing display device and method of detecting user input from a driver side or passenger side in a motor vehicle
US9349263B2 (en) Alert systems and methods for a vehicle
US10466800B2 (en) Vehicle information processing device
US9123215B2 (en) Alert systems and methods for a vehicle
KR101550604B1 (ko) 차량용 조작 장치
US8390440B2 (en) Method for displaying a visual warning signal
US9153108B2 (en) Alert systems and methods for a vehicle
EP3395600A1 (en) In-vehicle device
GB2423808A (en) Gesture controlled system for controlling vehicle accessories
KR20160036242A (ko) 제스처 인식 장치, 그를 가지는 차량 및 그 제어 방법
JP5588764B2 (ja) 車載機器操作装置
JP2017500241A (ja) 自動車用のヒューマンマシンインターフェース
JP6503285B2 (ja) 運転制御装置、運転制御方法及びプログラム
US20170096063A1 (en) System for warning of drowsiness of driver and method thereof
JP4033081B2 (ja) 車両用表示装置
JP2005153671A (ja) 車両用表示操作装置
JP6098316B2 (ja) 車載用表示装置
KR20120062215A (ko) 운전자를 위한 차량의 후측방 경보장치
CN110114809B (zh) 用于在具有变化的输出功能的光信号设备处提醒驾驶员起动的方法和装置
JP5018092B2 (ja) 車線逸脱防止装置
US10599226B2 (en) Operating system and method for operating an operating system for a motor vehicle
KR101483888B1 (ko) 운전자 졸음 방지장치
KR20130041420A (ko) 차량 내의 버튼 안내시스템
KR20130076214A (ko) 운전자의 포인팅 제스처를 이용한 차량 구동 장치 및 그 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant