KR20220120741A - 차량 및 그 제어방법 - Google Patents

차량 및 그 제어방법 Download PDF

Info

Publication number
KR20220120741A
KR20220120741A KR1020210023239A KR20210023239A KR20220120741A KR 20220120741 A KR20220120741 A KR 20220120741A KR 1020210023239 A KR1020210023239 A KR 1020210023239A KR 20210023239 A KR20210023239 A KR 20210023239A KR 20220120741 A KR20220120741 A KR 20220120741A
Authority
KR
South Korea
Prior art keywords
driver
vehicle
driving
sound source
sound
Prior art date
Application number
KR1020210023239A
Other languages
English (en)
Inventor
장경진
박동철
이진성
홍상진
Original Assignee
현대자동차주식회사
기아 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사, 기아 주식회사 filed Critical 현대자동차주식회사
Priority to KR1020210023239A priority Critical patent/KR20220120741A/ko
Priority to US17/519,802 priority patent/US20220269474A1/en
Priority to CN202111384882.2A priority patent/CN114954483A/zh
Publication of KR20220120741A publication Critical patent/KR20220120741A/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/026—Measuring blood flow
    • A61B5/0261—Measuring blood flow using optical means, e.g. infrared light
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/168—Evaluating attention deficit, hyperactivity
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6893—Cars
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00—Conjoint control of vehicle sub-units of different type or different function
    • B60W10/04—Conjoint control of vehicle sub-units of different type or different function including control of propulsion units
    • B60W10/08—Conjoint control of vehicle sub-units of different type or different function including control of propulsion units including control of electric propulsion units, e.g. motors or generators
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/105—Speed
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/107—Longitudinal acceleration
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/053—Measuring electrical impedance or conductance of a portion of the body
    • A61B5/0531—Measuring skin impedance
    • A61B5/0533—Measuring galvanic skin response
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0027—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/33—Controlling, regulating or measuring
    • A61M2205/3306—Optical measuring means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/33—Controlling, regulating or measuring
    • A61M2205/3317—Electromagnetic, inductive or dielectric measuring means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/33—Controlling, regulating or measuring
    • A61M2205/332—Force measuring means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/33—Controlling, regulating or measuring
    • A61M2205/3365—Rotational speed
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/33—Controlling, regulating or measuring
    • A61M2205/3368—Temperature
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/35—Communication
    • A61M2205/3546—Range
    • A61M2205/3553—Range remote, e.g. between patient's home and doctor's office
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/35—Communication
    • A61M2205/3546—Range
    • A61M2205/3561—Range local, e.g. within room or hospital
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/35—Communication
    • A61M2205/3576—Communication with non implanted data transmission devices, e.g. using external transmitter or receiver
    • A61M2205/3584—Communication with non implanted data transmission devices, e.g. using external transmitter or receiver using modem, internet or bluetooth
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/35—Communication
    • A61M2205/3576—Communication with non implanted data transmission devices, e.g. using external transmitter or receiver
    • A61M2205/3592—Communication with non implanted data transmission devices, e.g. using external transmitter or receiver using telemetric means, e.g. radio or optical transmission
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/50—General characteristics of the apparatus with microprocessors or computers
    • A61M2205/52—General characteristics of the apparatus with microprocessors or computers with memories providing a history of measured variating parameters of apparatus or patient
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/04—Heartbeat characteristics, e.g. ECG, blood pressure modulation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/04—Heartbeat characteristics, e.g. ECG, blood pressure modulation
    • A61M2230/06—Heartbeat rate only
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/08—Other bio-electrical signals
    • A61M2230/10—Electroencephalographic signals
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/50—Temperature
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/60—Muscle strain, i.e. measured on the user
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/65—Impedance, e.g. conductivity, capacity
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818—Inactivity or incapacity of driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872—Driver physiology
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B60W2420/42—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2510/00—Input parameters relating to a particular sub-units
    • B60W2510/08—Electric propulsion units
    • B60W2510/081—Speed
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00—Input parameters relating to overall vehicle dynamics
    • B60W2520/10—Longitudinal speed
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/10—Accelerator pedal position
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2200/00—Type of vehicle
    • B60Y2200/90—Vehicles comprising electric prime movers
    • B60Y2200/91—Electric vehicles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/13—Acoustic transducers and sound field adaptation in vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Psychology (AREA)
  • Acoustics & Sound (AREA)
  • Hematology (AREA)
  • Psychiatry (AREA)
  • Cardiology (AREA)
  • Developmental Disabilities (AREA)
  • Physiology (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Engineering & Computer Science (AREA)
  • Anesthesiology (AREA)
  • Signal Processing (AREA)
  • Child & Adolescent Psychology (AREA)
  • Artificial Intelligence (AREA)
  • Social Psychology (AREA)
  • Hospice & Palliative Care (AREA)

Abstract

운전자의 얼굴을 촬영하는 카메라, 상기 운전자의 피부 정보를 획득하는 센서, 스피커 및 상기 운전자의 얼굴 영상 및 상기 운전자의 피부 정보 중 적어도 하나에 기초하여 상기 운전자의 신체 상태를 판단하고, 상기 신체 상태에 기초하여 음원 및 파라미터(parameter)를 결정하고, 상기 음원 및 상기 파라미터에 상기 차량의 주행 정보를 반영하여 주행 사운드를 생성하고, 상기 주행 사운드를 출력하도록 상기 스피커를 제어하는 제어부를 포함할 수 있다.

Description

차량 및 그 제어방법{VEHICLE AND CONTROLLING METHOD OF VEHICLE}
본 발명의 일 실시예는 차량 및 그 제어방법에 관한 것이다.
현대 사회에서 자동차는 사람들이 가장 많이 이용하는 이동 수단으로서, 그 수는 점점 증가하고 있다. 과거에는 자동차는 단순히 이동 수단 이상의 의미는 존재하지 않았으나 현대사회에 들어와서는 자동차는 단순히 이동 수단을 넘어 자신을 표현하거나 드라이브를 즐기는 수단으로 많이 이용되고 있다.
이에 따라, 모터바이크나 경주용 자동차처럼 스피드를 즐기는 사람들이 많아지고 있는데 이러한 스피드를 즐기는 사람들은 단순한 자동차의 속도에서 나오는 속도감뿐만 아니라 차량의 엔진에서 발생되는 작동음과 진동음으로부터도 많은 흥분을 느낀다. 이에 일부 운전자들은 자신이 원하는 주행 사운드를 얻기 위해 엔진을 개조하여 사용하기도 한다.
특히, 전기 차량의 경우 차량의 엔진에서 발생되는 작동음과 진동음이 부재하기 때문에, 스피커를 통해 인위적으로 생성된 주행 사운드를 출력하기도 한다.
다만, 차량에 제공되는 주행 사운드는 제조사가 미리 설계한 주행 사운드이기 때문에 운전자의 수요를 만족시키기 어렵다.
상술한 문제점을 해결하기 위한 차량은 운전자의 신체 상태를 판단하고, 운전자의 신체 상태와 차량의 주행 정보에 기초하여 주행 사운드를 생성할 수 있다.
본 발명의 일 실시예에 따른 차량은 운전자의 얼굴을 촬영하는 카메라, 상기 운전자의 피부 정보를 획득하는 센서, 스피커 및 상기 운전자의 얼굴 영상 및 상기 운전자의 피부 정보 중 적어도 하나에 기초하여 상기 운전자의 신체 상태를 판단하고, 상기 신체 상태에 기초하여 음원 및 파라미터(parameter)를 결정하고, 상기 음원 및 상기 파라미터에 상기 차량의 주행 정보를 반영하여 주행 사운드를 생성하고, 상기 주행 사운드를 출력하도록 상기 스피커를 제어하는 제어부를 포함할 수 있다.
상기 신체 상태 별 상기 음원 및 상기 신체 상태 별 상기 파라미터의 매칭 데이터를 저장하는 메모리를 더 포함할 수 있다.
상기 제어부는, 상기 신체 상태에 기초하여 상기 음원 및 상기 파라미터를 상기 메모리로부터 수신할 수 있다.
상기 제어부는, 상기 얼굴 영상 중 혈류 영상을 추출하고, 상기 혈류 영상에 기초하여 상기 운전자의 맥박수를 추정할 수 있다.
상기 제어부는, 상기 얼굴 영상에 기초하여 혈류에 대한 시공간적 분해 영상(spatiotemporal slice)을 도출할 수 있다.
상기 제어부는, 상기 피부 정보는 상기 피부전도도를 포함하되, 상기 피부전도도에 대한 데이터의 노이즈(noise) 제거, 노멀라이제이션(normalization), 미리 정해진 기준을 만족하는 데이터 선택 중 적어도 하나를 수행할 수 있다.
상기 제어부는, 상기 운전자의 긴장 상태, 상기 운전자의 탈수 상태, 상기 운전자의 피로 상태 중 적어도 하나를 판단할 수 있다.
상기 제어부는, 인공지능 알고리즘인 SVM(support vector machine)을 이용하여 상기 신체 상태를 판단할 수 있다.
상기 주행 정보는 상기 차량의 모터의 RPM(rotation per minute), 상기 차량의 속도, 상기 차량의 가속도 및 상기 차량의 페달(pedal) 답력 중 적어도 하나를 포함할 수 있다.
본 발명의 다른 실시예에 따른 차량의 제어 방법은 운전자의 얼굴 영상 및 상기 운전자의 피부 정보 중 적어도 하나에 기초하여 상기 운전자의 신체 상태를 판단하고, 상기 신체 상태에 기초하여 음원 및 파라미터(parameter)를 결정하고, 상기 음원 및 상기 파라미터에 상기 차량의 주행 정보를 반영하여 주행 사운드를 생성하고, 상기 주행 사운드를 출력하는 것을 포함할 수 있다.
상기 신체 상태 별 상기 음원 및 상기 신체 상태 별 상기 파라미터의 매칭 데이터를 메모리에 저장하는 것을 더 포함할 수 있다.
상기 신체 상태에 기초하여 상기 음원 및 상기 파라미터를 메모리로부터 수신하는 것을 포함할 수 있다.
상기 얼굴 영상 중 혈류 영상을 추출하고, 상기 혈류 영상에 기초하여 상기 운전자의 맥박수를 추정하는 것을 포함할 수 있다.
상기 얼굴 영상에 기초하여 혈류에 대한 시공간적 분해 영상(spatiotemporal)을 도출하는 것을 포함할 수 있다.
상기 피부 정보는 상기 피부전도도를 포함하되, 상기 피부전도도에 대한 데이터의 노이즈(noise) 제거, 노멀라이제이션(normalization), 미리 정해진 기준을 만족하는 데이터 선택 중 적어도 하나를 수행하는 것을 포함할 수 있다.
상기 운전자의 긴장 상태, 상기 운전자의 탈수 상태, 상기 운전자의 피로 상태 중 적어도 하나를 판단하는 것을 포함할 수 있다.
인공지능 알고리즘인 SVM(support vector machine)을 이용하여 상기 신체 상태를 판단하는 것을 포함할 수 있다.
상기 주행 정보는 상기 차량의 모터의 RPM, 상기 차량의 속도, 상기 차량의 가속도 및 상기 차량의 페달(pedal) 답력 중 적어도 하나를 포함할 수 있다.
본 발명의 일 실시예에 따르면, 운전자의 신체 상태에 어울리는 주행 사운드를 제공함에 따라 운전자가 운전하는데 보다 큰 만족감을 느낄 수 있는 효과가 있다.
또한, 운전자의 신체 상태에 어울리는 주행 사운드를 제공함에 따라 운전자에게 주행의 즐거움을 줌으로써 차량의 상품성을 높일 수 있으며, 특히, 공유차와 같은 미래 모빌리티 분야에서 다양한 운전자에 맞추어 다양한 주행 사운드를 제공할 수 있는 장점이 있다.
도 1은 본 발명의 일 실시예에 따른 차량의 제어 블록도이다.
도 2는 본 발명의 일 실시예에 따른 운전자 얼굴 영상을 도시한다.
도 3은 본 발명의 일 실시예에 따른 피부 상태를 측정하는 장치 및 결과 그래프를 도시한다.
도 4는 본 발명의 일 실시예에 따른 주행 사운드를 합성하는 과정을 보여주는 그래프를 도시한다.
도 5는 본 발명의 일 실시예에 따른 운전자 얼굴 영상 기반 맥박수 분석 방법을 도시한다.
도 6은 본 발명의 일 실시예에 따른 피부 상태 측정 방법을 도시한다.
도 7은 본 발명의 일 실시예에 따른 운전자 상태 정보에 기초한 주행 사운드 생성 방법을 도시한다.
도 8은 본 발명의 일 실시예에 따른 운전자 상태 정보에 기초한 주행 사운드 생성 방법의 결과를 나타낸 도면이다.
명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다. 본 명세서가 실시예들의 모든 요소들을 설명하는 것은 아니며, 본 발명이 속하는 기술분야에서 일반적인 내용 또는 실시예들 간에 중복되는 내용은 생략한다. 명세서에서 사용되는 ‘부, 모듈, 부재, 블록’이라는 용어는 소프트웨어 또는 하드웨어로 구현될 수 있으며, 실시예들에 따라 복수의 '부, 모듈, 부재, 블록'이 하나의 구성요소로 구현되거나, 하나의 '부, 모듈, 부재, 블록'이 복수의 구성요소들을 포함하는 것도 가능하다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 간접적으로 연결되어 있는 경우를 포함하고, 간접적인 연결은 무선 통신망을 통해 연결되는 것을 포함한다.
또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
명세서 전체에서, 어떤 부재가 다른 부재 "상에" 위치하고 있다고 할 때, 이는 어떤 부재가 다른 부재에 접해 있는 경우뿐 아니라 두 부재 사이에 또 다른 부재가 존재하는 경우도 포함한다.
제1, 제2 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위해 사용되는 것으로, 구성요소가 전술된 용어들에 의해 제한되는 것은 아니다.
단수의 표현은 문맥상 명백하게 예외가 있지 않는 한, 복수의 표현을 포함한다.
각 단계들에 있어 식별부호는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 실시될 수 있다.
이하 첨부된 도면들을 참고하여 본 발명의 작용 원리 및 실시예들에 대해 설명한다.
도 1은 본 발명의 일 실시예에 따른 차량의 제어 블록도이다.
도 1을 참조하면, 차량(1)은 운전자의 얼굴을 촬영하는 카메라(110), 운전자의 피부 정보를 획득하는 센서(120), 통신부(CAN: Controller Area Network)(130), 스피커(140), 운전자의 얼굴 영상 및 운전자의 피부 정보 중 적어도 하나에 기초하여 운전자의 신체 상태를 판단하고, 신체 상태에 기초하여 음원 및 파라미터(parameter)를 결정하고, 음원 및 파라미터에 차량의 주행 정보를 반영하여 주행 사운드를 생성하고, 주행 사운드를 출력하도록 스피커(140)를 제어하는 제어부(100)를 포함할 수 있다.
카메라(110)는 운전석 상측에 마련될 수 있으나, 운전자의 얼굴 영상을 획득할 수 있는 위치라면 제한 없이 마련될 수 있다. 카메라(110)는 운전자의 얼굴을 촬영함으로써, 얼굴 영상을 획득하고, 획득한 얼굴 영상을 제어부(100)로 전송할 수 있다.
센서(120)는 운전자의 손가락 등 운전자의 신체에 탈부착이 용이한 곳에 장착되어, 피부전도도(GSR: galvanic skin response)를 측정하는 센서를 포함할 수 있다.
보다 상세히, 피부전도도 측정은 피부의 전기 전도도를 측정하는 것으로, 피부의 전기 전도도를 측정함으로써, 운전자의 교감신경계와 연관된 운전자의 심리적, 신체적인 각성 상태를 판단하는데 용이할 수 있다.
센서(120)는 운전자의 피부전도도를 측정하고, 측정 결과를 제어부(100)로 전송할 수 있다.
또한, 센서(120)는 차량의 운전석에 설치되어 운전자의 체온을 감지하는 체온 센서일 수 있고, 스티어링 휠에 마련되어 운전자의 손으로부터 심전도 신호를 감지하는 심전도 센서일 수 있고, 운전자의 웨어러블 디바이스로부터 생체 신호를 획득하는 수신 장치를 포함할 수 있음은 물론이다.
예를 들어, 생체 신호는 근전도 신호, 심전도 신호, 뇌전도 신호, 안전도 신호 등을 포함할 수 있다.
센서(120)는 차량 내의 다양한 위치에 마련될 수 있다. 예를 들어, 센서(120)는 시트, 안전벨트, 스티어링 휠 및 도어에 마련되는 손잡이 등에 마련될 수 있으나 이에 한정되는 것은 아니다.
통신부(130)는 전기차의 모터 RPM(rotate per minute), 차량(1)의 속도, 차량(1)의 가속도, 차량(1)의 가속 페달의 개도량 등의 정보를 수신하여, 제어부(100)로 전송할 수 있다.
통신부(130)는 외부 장치와 통신을 가능하게 하는 하나 이상의 구성 요소를 포함할 수 있으며, 예를 들어 근거리 통신 모듈, 유선 통신 모듈 및 무선 통신 모듈 중 적어도 하나를 포함할 수 있다. 또한, 통신부(130)는 차량 내부와 통신을 가능하게 하는 하나 이상의 구성 요소를 포함할 수 있음은 물론이며, 예를 들어 근거리 통신 모듈, 유선 통신 모듈 및 무선 통신 모듈 중 적어도 하나를 포함할 수 있다.
예를 들어, 근거리 통신 모듈은 블루투스 모듈, 적외선 통신 모듈, RFID(Radio Frequency Identification) 통신 모듈, WLAN(Wireless Local Access Network) 통신 모듈, NFC 통신 모듈, 직비(Zigbee) 통신 모듈 등 근거리에서 무선 통신망을 이용하여 신호를 송수신하는 다양한 근거리 통신 모듈을 포함할 수 있다.
예를 들어, 유선 통신 모듈은 캔(Controller Area Network; CAN) 통신 모듈, 지역 통신(Local Area Network; LAN) 모듈, 광역 통신(Wide Area Network; WAN) 모듈 또는 부가가치 통신(Value Added Network; VAN) 모듈 등 다양한 유선 통신 모듈뿐만 아니라, USB(Universal Serial Bus), HDMI(High Definition Multimedia Interface), DVI(Digital Visual Interface), RS-232(recommended standard232), 전력선 통신, 또는 POTS(plain old telephone service) 등 다양한 케이블 통신 모듈을 포함할 수 있다. 무선 통신 모듈은 와이파이(Wifi) 모듈, 와이브로(Wireless broadband) 모듈 외에도, GSM(global System for Mobile Communication), CDMA(Code Division Multiple Access), WCDMA(Wideband Code Division Multiple Access), UMTS(universal mobile telecommunications system), TDMA(Time Division Multiple Access), LTE(Long Term Evolution) 등 다양한 무선 통신 방식을 지원하는 무선 통신 모듈을 포함할 수 있다. 무선 통신 모듈은 신호를 송신하는 안테나 및 송신기(Transmitter)를 포함하는 무선 통신 인터페이스를 포함할 수 있다. 또한, 무선 통신 모듈은 제어부의 제어에 따라 무선 통신 인터페이스를 통해 제어부(200)로부터 출력된 디지털 제어 신호를 아날로그 형태의 무선 신호로 변조하는 신호 변환 모듈을 더 포함할 수 있다.
스피커(140)는 차량의 양쪽 도어에 마련될 수 있으나, 차량 내부의 운전자가 출력되는 사운드를 청취할 수 있는 위치라면 제한 없이 마련될 수 있다.
예를 들어, 스피커(140)는 제어부(110)로부터 전달 받은 제어 신호(전기 신호)를 주행 사운드로 출력할 수 있다.
또한, 스피커(140)는 보이스 코일, 보이스 코일에 전류를 공급되는 전류의 크기를 조절하여 출력 사운드의 음량을 조절하는 앰프 등의 구성 요소를 포함할 수 있다.
메모리(150)는 운전자의 신체 상태 별 음원, 운전자의 신체 상태 별 파라미터 등 운전자 신체 상태에 따라 분류된 복수의 음원들을 저장할 수 있다. 예를 들어, 메모리(150)는 운전자의 신체 상태가 일시적 긴장 상태인 경우에 대응하는 음원을 저장할 수 있고, 운전자의 신체 상태가 탈수 상태인 경우에 대응하는 음원을 저장할 수 있다. 또한, 메모리(150)는 운전자의 신체 상태가 피로가 쌓인 상태에 대응하는 음원을 저장할 수 있으며, 이 때, 운전자의 피로도를 다시 판단하고 운전자의 피로도에 대응하는 음원을 각각 저장할 수 있다.
메모리(150)는 별개의 칩으로 구현될 수 있고, 제어부(100)에 대응하는 프로세서와 단일 칩으로 구현될 수도 있다.
메모리(150)에 저장된 운전자의 감정 상태, 성별 및 연령을 판단하기 위한 프로그램은, CNN(Convolutional Neural Networks) 알고리즘, GAN(Generative Adversarial Networks) 알고리즘, RNN(Recurrent Neural Networks) 알고리즘, RNN 알고리즘의 일종인 LSTM(Long Short-Term Memory) 알고리즘, R-CNN(Region Based Convolutional Neural Networks) 알고리즘 등의 인공지능 알고리즘(인공 신경망 모델)을 포함할 수 있다.
메모리(150)는 각종 정보를 저장하기 위해 캐쉬, ROM(Read Only Memory), PROM(Programmable ROM), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM) 및 플래쉬 메모리(Flash memory)와 같은 비휘발성 메모리 소자 또는 RAM(Random Access Memory)과 같은 휘발성 메모리 소자 또는 하드디스크 드라이브(Hard Disk Drive, HDD), CD-ROM과 같은 저장 매체 중 적어도 하나로 구현될 수 있으나, 이에 한정되지는 않는다.
제어부(100)는 주행 사운드를 생성하기 위한 프로그램과 스피커(140)를 제어하기 위한 프로그램 등의 다양한 프로그램을 저장하는 적어도 하나의 메모리(150)를 포함할 수 있다. 또한, 메모리(150)에 저장된 프로그램을 실행할 수 있는 적어도 하나의 프로세서(미도시)를 포함할 수 있음은 물론이다.
제어부(100)는 카메라(110)로부터 운전자의 얼굴을 촬영한 운전자의 얼굴 영상을 수신할 수 있다.
제어부(100)는 운전자의 얼굴 영상에 Eulerian video magnification framework를 적용하여, 혈류 영상을 추출할 수 있다.
제어부(100)는 추출된 혈류 영상을 확대하고, 확대된 혈류 영상에 기초하여 혈류에 대한 시공간적 분해 영상(spatiotemporal slice)을 도출할 수 있다.
제어부(100)는 혈류 영상 및 혈류에 대한 시공간적 분해 영상을 이용하여 운전자의 맥박수를 추정할 수 있다.
제어부(100)는 센서(120)로부터 피부전도도를 포함하는 운전자의 피부 정보를 수신할 수 있다. 여기서, 센서(120)는 피부전도도 측정을 위한 것으로 GSR(galvanic skin response) 인식 센서일 수 있다.
제어부(100)는 센서(120)로부터 수신된 운전자의 피부 정보를 분석할 수 있다. 예를 들어, 제어부(100)는 피부 정보의 노이즈를 제거할 수 있고, 피부 정보의 노멀라이제이션(normalization)을 수행할 수 있고, 피부 정보 중 유의미한 데이터를 선정함으로써, 피부 정보를 분석할 수 있다.
제어부(100)는 센서(120)로부터 수신된 운전자의 피부전도도의 전류파형분석을 통해 운전자의 신체 상태와 관련된 생체 신호 특성을 판단할 수 있고, 제어부(100)는 운전자의 얼굴 영상으로부터 추정한 운전자의 맥박수 및 운전자의 피부전도도에 기초하여 운전자의 생체 신호 특성을 판단할 수 있다. 예를 들어, 제어부(100)는 생체 신호 특성으로 운전자가 일시적으로 긴장하고 있는지 여부, 운전자의 탈수 여부, 운전자의 피로도가 얼마나 쌓였는지 등을 판단할 수 있다.
제어부(100)는 운전자의 생체 신호 특성에 기초하여 인공지능 알고리즘인 SVM(support vector machine)을 이용하여 운전자의 신체 상태를 종합적으로 판단할 수 있다.
이 때, 제어부(100)는 인공지능 알고리즘에 기반한 운전자 신체 상태 종합 분석 데이터 및 다양한 학습모델에 기초하여 운전자의 신체 상태를 종합적으로 판단할 수 있다. 여기서, 인공지능 알고리즘에 기반한 운전자 신체 상태 종합 분석 데이터 및 학습모델은 선택적으로 외부 서버(2)로부터 수신할 수 있다.
이 때, 외부 서버(2)는 클라우드(cloud) 서버일 수 있으나 이에 한정하지 않는다.
예를 들어, 제어부(100)는 운전자의 신체 상태를 운전자가 매우 흥분되고 다소 피곤한 상태인 것으로 판단할 수 있고, 이에 적합한 음원 및 파라미터를 메모리(150)로부터 수신할 수 있다.
제어부(100)는 운전자의 신체 상태에 기초하여 운전자의 신체 상태에 대응하는 음원 및 파라미터를 메모리(150)로부터 수신할 수 있다.
이 때, 제어부(100)는 실시간으로 변화하는 운전자의 신체 상태에 기초하여 이에 대응하는 음원 및 피라미터를 실시간으로 수신할 수 있다. 또한, 제어부(100)는 미리 정해진 주기 마다 변화하는 운전자의 신체 상태에 기초하여 이에 대응하는 음원 및 파라미터를 미리 정해진 주기마다 수신할 수 있다.
예를 들어, 제어부(100)는 2분 마다 운전자의 신체 상태를 판단하고, 이에 대응하는 음원 및 파라미터를 수신할 수 있고, 음원과 파라미터 신호를 합성하여 주행 사운드를 생성함으로써, 2분 마다 새로 생성된 주행 사운드를 출력할 수 있다.
제어부(100)는 음원 및 파라미터에 차량(1)의 주행 정보를 반영하여 주행 사운드를 생성할 수 있다.
보다 상세히, 제어부(100)는 차량(1)의 주행 정보인 모터 RPM, 토크, APS(accelerator pedal sensor), 속도, 가속도 및 페달 답력 중 적어도 하나를 반영하여 주행 사운드를 생성할 수 있다. 예를 들어, 페달 답력에 대응하는 신호를 음원과 합성하여 주행 사운드를 생성할 수 있다.
또한, 제어부(100)는 음원의 튜닝 변수를 반영하여 주행 사운드를 생성할 수 있다.
보다 상세히, 제어부(100)는 음원의 튜닝 변수인 피치(pitch) 증가율, 피치(pitch) 랜덤 변동분, 그래인(grain) 크기, 그래인(grain) 위치, 필터의 종류, 필터의 주파수, 쉐퍼트 음(shepard tone) 레벨 중 적어도 하나를 반영하여 주행 사운드를 생성할 수 있다.
제어부(100)는 주행 사운드를 스피커(140)에서 출력하도록 제어할 수 있다.
제어부(100)는 차량(1) 내 구성요소들의 동작을 제어하기 위한 알고리즘 또는 알고리즘을 재현한 프로그램에 대한 데이터를 저장하는 메모리, 및 메모리에 저장된 데이터를 이용하여 전술한 동작을 수행하는 프로세서(미도시)로 구현될 수 있다. 이때, 메모리와 프로세서는 각각 별개의 칩으로 구현될 수 있다. 또는, 메모리와 프로세서는 단일 칩으로 구현될 수도 있다.
상술한 일 실시예에 따른 차량은 차량 내에서 늘 동일한 주행 사운드가 아니라 운전자의 신체 상태를 자동으로 반영한 다양한 주행 사운드를 제공할 수 있다.
이에 따라, 운전자에게 주행의 즐거움을 줌으로써 차량의 상품성을 높일 수 있으며, 특히, 공유차와 같은 미래 모빌리티 분야에서 다양한 운전자에 맞추어 다양한 주행 사운드를 제공할 수 있는 장점이 있다.
또한, 차량(1) 주행 중 운전자의 신체 상태를 인식한 후에, 이에 어울리는 주행 사운드를 제공함에 따라, 운전자가 피곤한 경우에는 차분하면서 밝은 느낌의 주행 사운드를 들으며 운전할 수 있고, 운전자가 신나는 경우에는 경쾌하고 스포티한 주행 사운드를 들으며 운전할 수 있고, 운전자가 우울한 경우에는 부드럽고 감성적인 주행 사운드를 들으며 운전할 수 있어, 운전자의 피곤함은 누그러지고, 운전자의 즐거움은 배가되는 효과를 가질 수 있다.
도 2는 본 발명의 일 실시예에 따른 운전자 얼굴 영상을 도시한다.
도 2(a)를 참조하면, 차량(1)은 카메라(110)를 통해 운전자 얼굴 영상을 촬영할 수 있다.
차량(1)은 촬영된 운전자의 얼굴 영상에 Eulerian video magnification framework를 적용하여, 혈류(11)를 확인하고, 혈류 영상을 추출할 수 있다.
도 2(b)를 참조하면, 차량(1)은 추출된 혈류 영상을 확대할 수 있다. (12)
차량(1)은 확대된 혈류 영상(12)에 기초하여 혈류에 대한 시공간적 분해 영상(spatiotemporal slice)을 도출할 수 있다.
도 3은 본 발명의 일 실시예에 따른 피부 상태를 측정하는 장치 및 결과 그래프를 도시한다.
도 3(a)를 참조하면, 차량(1)은 운전자의 손가락 등 운전자의 신체에 탈부착이 용이한 곳에 장착되어, 운전자의 피부전도도(GSR: galvanic skin response )를 측정하는 센서(120)를 포함할 수 있다.
보다 상세히, 도 3(b)를 참조하면, 차량(1)은 센서(120)로부터 측정된 운전자의 피부전도도에 대한 전류파형을 분석할 수 있다. 예를 들어, 차량(1)은
노이즈를 제거하고 의미 있는 생체 신호를 활용하기 위해, 생체 신호는 제1 주파수 대역의 신호를 통과시키는 제1 밴드패스 필터와, 제2 주파수 대역의 신호를 통과시키는 제2 밴드패스 필터에 의해 필터링 될 수 있다. 이 때, 제1 주파수 대역은 저주파 영역이고, 제2 주파수 대역은 고주파 영역일 수 있다.
도 4는 본 발명의 일 실시예에 따른 주행 사운드를 합성하는 과정을 보여주는 그래프이다.
도 4를 참조하면, 차량(1)은 메모리(150)로부터 수신된 음원 및 파라미터에 차량(1)의 주행 정보를 반영하여 주행 사운드를 생성할 수 있는데, 이를 위해, 차량(1)의 주행 정보인 모터 RPM, 토크, APS(accelerator pedal sensor), 속도, 가속도 및 페달 답력 중 적어도 하나의 정보를 통신부(130)를 통해 수신할 수 있다.
또한, 차량(1)은 메모리(150)로부터 수신된 음원의 튜닝 변수를 함께 반영하여 주행 사운드를 생성할 수 있다. 여기서 음원의 튜닝 변수는 피치(pitch) 증가율, 피치(pitch) 랜덤 변동분, 그래인(grain) 크기, 그래인(grain) 위치, 필터의 종류, 필터의 주파수, 쉐퍼드 음(shepard tone) 레벨 중 적어도 하나를 포함할 수 있다.
예를 들어, 차량(1)은 차량(1)의 주행 정보 중 어느 하나에 대응하는 신호를 음원과 합성하여 주행 사운드를 생성할 수 있다. 이 때, 실시간으로 변화하는 차량(1)의 주행 정보를 반영하여, 변화된 주행 정보에 대응하는 신호를 음원과 합성하여 실시간으로 변화된 주행 사운드를 생성할 수 있다.
또한, 차량(1)의 주행 정보에 대응하는 신호와 합성된 주행 사운드에 음원의 튜닝 변수 중 어느 하나를 반영하여 함께 합성함으로써, 주행 사운드를 생성할 수 있다.
도 5는 본 발명의 일 실시예에 따른 운전자 얼굴 영상 기반 맥박수 분석 방법을 도시한다.
도 5를 참조하면, 차량(1)은 카메라(110)로부터 운전자 얼굴 영상을 수신할 수 있다. (210)
차량(1)은 운전자 얼굴 영상에 Eulerian video magnification framework를 적용하여, 혈류를 확인하고, 혈류 영상을 추출할 수 있다. (220)
차량(1)은 추출된 혈류 영상을 확대하고, 확대된 혈류 영상에 기초하여 혈류에 대한 시공간적 분해 영상(spatiotemporal slice)을 도출할 수 있다. (230)
차량(1)은 혈류 영상 및 혈류에 대한 시공간적 분해 영상을 이용하여 운전자의 맥박수를 판단할 수 있다. (240)
도 6은 본 발명의 일 실시예에 따른 피부 상태 측정 방법을 도시한다.
도 6을 참조하면, 차량(1)은 피부전도도를 측정하는 GSR 센서(120)로부터 피부전도도의 측정 결과를 수신할 수 있다. (310)
차량(1)은 센서(120)로부터 수신된 운전자의 피부 정보를 분석할 수 있는데, 보다 상세히, 차량(1)은 피부전도도 데이터의 노이즈를 제거하고, 미리 정해진 조건을 만족하는 유의미한 데이터를 선정하고, 신호처리를 수행하고, 피부전도도에 대한 전류파형을 분석할 수 있다. (320)
차량(1)은 피부전도도의 전류파형분석을 통해 운전자의 신체 상태와 관련된 생체 신호 특성을 판단할 수 있는데, 예를 들어, 차량(1)은 생체 신호 특성으로 운전자가 일시적으로 긴장하고 있는지 여부, 운전자의 탈수 여부, 운전자의 피로도가 얼마나 쌓였는지 등을 판단할 수 있다. (330)
도 7은 본 발명의 일 실시예에 따른 운전자 상태 정보에 기초한 주행 사운드 생성 방법을 도시한다.
차량(1)은 운전자의 얼굴 영상과 운전자의 피부전도도를 수신할 수 있다. (410)
차량(1)은 얼굴 영상에 기초하여 혈류를 판단하고, 얼굴의 혈류 영상을 확대할 수 있다. 차량(1)은 확대된 얼굴의 혈류 영상에 기초하여 운전자의 맥박수를 추정할 수 있다. (420)
차량(1)은 피부전도도에 기초하여 신호 처리과정을 거쳐서 운전자의 생체 신호 특성을 추출할 수 있다. (430)
차량(1)은 운전자의 생체 신호 특성을 인공지능 알고리즘인 SVM(support vector machine)에 기반으로 분류하여 운전자의 신체 상태를 종합적으로 판단할 수 있다. (440)
보다 상세히, 차량(1)은 인공지능 알고리즘에 기반한 운전자 신체 상태 종합 분석 데이터 및 다양한 학습모델에 기초하여 운전자의 신체 상태를 종합적으로 판단할 수 있다.
여기서, 인공지능 알고리즘에 기반한 운전자 신체 상태 종합 분석 데이터 및 학습모델은 선택적으로 외부 서버(2)로부터 수신할 수 있다. 이 때, 외부 서버(2)는 클라우드(cloud) 서버일 수 있으나 이에 한정하지 않는다.
차량(1)은 운전자의 신체 상태에 기초하여 운전자의 신체 상태에 적합한 음원 및 파라미터를 결정할 수 있다. (450)
차량(1)은 현재 운전자의 신체 상태에 적합한 음원 및 파라미터를 메모리(150)로부터 수신할 수 있다.
예를 들어, 제어부(100)는 운전자의 신체 상태를 운전자가 매우 흥분되고 다소 피곤한 상태인 것으로 판단할 수 있고, 이에 적합한 음원 및 파라미터를 메모리(150)로부터 수신할 수 있다.
또한, 차량(1)은 실시간으로 변화하는 운전자의 신체 상태에 기초하여 변화된 신체 상태에 적합한 음원 및 파라미터를 결정하고, 결정된 음원 및 피라미터를 메모리(150)로부터 실시간으로 수신할 수 있다.
차량(1)은 주행 정보를 통신부(130)를 통해 수신할 수 있다. (460)
이 때, 차량(1)의 주행 정보는 모터 RPM, 토크, APS(accelerator pedal sensor), 속도, 가속도 및 페달 답력 중 적어도 하나를 포함할 수 있다.
차량(1)은 가상 사운드 구현 프로그램을 이용하여 음원 및 파라미터에 차량(1)의 주행 정보를 반영함으로써 주행 사운드를 생성할 수 있는데, 예를 들어, 페달 답력에 대응하는 신호를 운전자 신체 상태에 적합한 것으로 결정된 음원과 합성하여 주행 사운드를 생성할 수 있다. (470)
여기서, 차량(1)은 운전자 신체 상태에 적합한 음원 및 파라미터에 주행 정보를 반영하고, 음원의 튜닝 변수를 함께 반영하여 주행 사운드를 생성할 수 있다.
이 때, 음원의 튜닝 변수는 피치(pitch) 증가율, 피치(pitch) 랜덤 변동분, 그래인(grain) 크기, 그래인(grain) 위치, 필터의 종류, 필터의 주파수, 쉐퍼트 음(shepard tone) 레벨 중 적어도 하나를 포함할 수 있다.
차량(1)은 생성된 주행 사운드를 스피커(140)에서 출력하도록 제어할 수 있다. (480)
종래에는 가상의 주행 사운드가 주행 중 전기차 음원과 파라미터를 주행 조건에 연동시킴으로써, 전기차 음원과 파라미터는 차량 제조사가 미리 튜닝해서 저장한 파일을 이용하기 때문에 같은 주행 조건에서는 항상 같은 주행 사운드가 출력되었다. 이는 운전자의 현재 신체 상태와 관계없이 항상 정해진 주행 사운드만 출력된다는 단점이 있었다.
상술한 바와 같이, 본 발명의 일 실시예에 따른 차량은 주행 중에 운전자의 신체 상태를 판단하고, 운전자의 신체 상태에 따라 차량의 주행 조건에 연동하여 다양한 주행 사운드를 출력할 수 있는 효과가 있다.
도 8은 본 발명의 일 실시예에 따른 운전자 상태 정보에 기초한 주행 사운드 생성 방법의 결과를 나타낸 도면이다.
차량(1)은 운전자의 신체 상태에 대한 결과 표시(13)를 디스플레이(미도시)에 출력할 수 있다.
차량(1)은 운전자의 신체 상태에 따른 운전자의 맥박수를 디스플레이부(미도시)에 출력할 수 있다. 예를 들어, 운전자의 맥박수가 올라가면 운전자의 맥박수에 대한 표시(14)의 색상이 변화될 수 있다. 또한, 차량(1)은 운전자의 맥박수를 추정하기 위해 운전자의 얼굴 영상(15)을 촬영할 수 있고, 촬영 영상을 디스플레이부(미도시)에 출력할 수 있다.
한편, 개시된 실시예들은 컴퓨터에 의해 실행 가능한 명령어를 저장하는 기록매체의 형태로 구현될 수 있다. 명령어는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 프로그램 모듈을 생성하여 개시된 실시예들의 동작을 수행할 수 있다. 기록매체는 컴퓨터로 읽을 수 있는 기록매체로 구현될 수 있다.
컴퓨터가 읽을 수 있는 기록매체로는 컴퓨터에 의하여 해독될 수 있는 명령어가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(Read Only Memory), RAM(Random Access Memory), 자기 테이프, 자기 디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있을 수 있다.
이상에서와 같이 첨부된 도면을 참조하여 개시된 실시예들을 설명하였다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고도, 개시된 실시예들과 다른 형태로 본 발명이 실시될 수 있음을 이해할 것이다. 개시된 실시예들은 예시적인 것이며, 한정적으로 해석되어서는 안 된다.
1: 차량
100: 제어부
110: 카메라
120: 센서
130: 통신부
140: 스피커
150: 메모리
2: 서버

Claims (18)

  1. 운전자의 얼굴을 촬영하는 카메라;
    상기 운전자의 피부 정보를 획득하는 센서;
    스피커; 및
    상기 운전자의 얼굴 영상 및 상기 운전자의 피부 정보 중 적어도 하나에 기초하여 상기 운전자의 신체 상태를 판단하고, 상기 신체 상태에 기초하여 음원 및 파라미터(parameter)를 결정하고, 상기 음원 및 상기 파라미터에 상기 차량의 주행 정보를 반영하여 주행 사운드를 생성하고, 상기 주행 사운드를 출력하도록 상기 스피커를 제어하는 제어부;를 포함하는 차량.
  2. 제1항에 있어서,
    상기 신체 상태 별 상기 음원 및 상기 신체 상태 별 상기 파라미터의 매칭 데이터를 저장하는 메모리;를 더 포함하는 차량.
  3. 제1항에 있어서, 상기 제어부는,
    상기 신체 상태에 기초하여 상기 음원 및 상기 파라미터를 상기 메모리로부터 수신하는 차량.
  4. 제1항에 있어서, 상기 제어부는,
    상기 얼굴 영상 중 혈류 영상을 추출하고, 상기 혈류 영상에 기초하여 상기 운전자의 맥박수를 추정하는 차량.
  5. 제1항에 있어서, 상기 제어부는,
    상기 얼굴 영상에 기초하여 혈류에 대한 시공간적 분해 영상(spatiotemporal slice)을 도출하는 차량.
  6. 제1항에 있어서, 상기 제어부는,
    상기 피부 정보는 상기 피부전도도(GSR: galvanic skin response)를 포함하되, 상기 피부전도도에 대한 데이터의 노이즈(noise) 제거, 노멀라이제이션(normalization), 미리 정해진 기준을 만족하는 데이터 선택 중 적어도 하나를 수행하는 차량.
  7. 제1항에 있어서, 상기 제어부는,
    상기 운전자의 긴장 상태, 상기 운전자의 탈수 상태, 상기 운전자의 피로 상태 중 적어도 하나를 판단하는 차량.
  8. 제1항에 있어서, 상기 제어부는,
    인공지능 알고리즘인 SVM(support vector machine)을 이용하여 상기 신체 상태를 판단하는 차량.
  9. 제1항에 있어서,
    상기 주행 정보는 상기 차량의 모터의 RPM(rotation per minute), 상기 차량의 속도, 상기 차량의 가속도 및 상기 차량의 페달(pedal) 답력 중 적어도 하나를 포함하는 차량.
  10. 운전자의 얼굴 영상 및 상기 운전자의 피부 정보 중 적어도 하나에 기초하여 상기 운전자의 신체 상태를 판단하고,
    상기 신체 상태에 기초하여 음원 및 파라미터(parameter)를 결정하고,
    상기 음원 및 상기 파라미터에 상기 차량의 주행 정보를 반영하여 주행 사운드를 생성하고,
    상기 주행 사운드를 출력하는 것을 포함하는 차량의 제어 방법.
  11. 제10항에 있어서,
    상기 신체 상태 별 상기 음원 및 상기 신체 상태 별 상기 파라미터의 매칭 데이터를 메모리에 저장하는 것을 더 포함하는 차량의 제어 방법.
  12. 제 10항에 있어서,
    상기 신체 상태에 기초하여 상기 음원 및 상기 파라미터를 메모리로부터 수신하는 것을 포함하는 차량의 제어 방법.
  13. 제 10항에 있어서,
    상기 얼굴 영상 중 혈류 영상을 추출하고,
    상기 혈류 영상에 기초하여 상기 운전자의 맥박수를 추정하는 것을 포함하는 차량의 제어 방법.
  14. 제 10항에 있어서,
    상기 얼굴 영상에 기초하여 혈류에 대한 시공간적 분해 영상(spatiotemporal)을 도출하는 것을 포함하는 차량의 제어 방법.
  15. 제 10항에 있어서,
    상기 피부 정보는 상기 피부전도도를 포함하되, 상기 피부전도도에 대한 데이터의 노이즈(noise) 제거, 노멀라이제이션(normalization), 미리 정해진 기준을 만족하는 데이터 선택 중 적어도 하나를 수행하는 것을 포함하는 차량의 제어 방법.
  16. 제10항에 있어서,
    상기 운전자의 긴장 상태, 상기 운전자의 탈수 상태, 상기 운전자의 피로 상태 중 적어도 하나를 판단하는 것을 포함하는 차량의 제어 방법.
  17. 제10항에 있어서,
    인공지능 알고리즘인 SVM(support vector machine)을 이용하여 상기 신체 상태를 판단하는 것을 포함하는 차량의 제어 방법.
  18. 제 10항에 있어서,
    상기 주행 정보는 상기 차량의 모터의 RPM, 상기 차량의 속도, 상기 차량의 가속도 및 상기 차량의 페달(pedal) 답력 중 적어도 하나를 포함하는 차량의 제어 방법.
KR1020210023239A 2021-02-22 2021-02-22 차량 및 그 제어방법 KR20220120741A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020210023239A KR20220120741A (ko) 2021-02-22 2021-02-22 차량 및 그 제어방법
US17/519,802 US20220269474A1 (en) 2021-02-22 2021-11-05 Vehicle and control method thereof
CN202111384882.2A CN114954483A (zh) 2021-02-22 2021-11-22 车辆及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210023239A KR20220120741A (ko) 2021-02-22 2021-02-22 차량 및 그 제어방법

Publications (1)

Publication Number Publication Date
KR20220120741A true KR20220120741A (ko) 2022-08-31

Family

ID=82899551

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210023239A KR20220120741A (ko) 2021-02-22 2021-02-22 차량 및 그 제어방법

Country Status (3)

Country Link
US (1) US20220269474A1 (ko)
KR (1) KR20220120741A (ko)
CN (1) CN114954483A (ko)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10448831B2 (en) * 2017-03-31 2019-10-22 BraveHeart Wireless Inc. Wearable sensor
CN110651333B (zh) * 2017-06-21 2024-04-12 索尼公司 手术成像系统、方法和计算机程序产品
JP7014129B2 (ja) * 2018-10-29 2022-02-01 オムロン株式会社 推定器生成装置、モニタリング装置、推定器生成方法及び推定器生成プログラム
US20200334479A1 (en) * 2019-04-19 2020-10-22 GM Global Technology Operations LLC System and method for measuring passenger satisfaction in a vehicle
US11507857B2 (en) * 2019-10-01 2022-11-22 TeleLingo Systems and methods for using artificial intelligence to present geographically relevant user-specific recommendations based on user attentiveness
US11447143B2 (en) * 2019-10-18 2022-09-20 Ford Global Technologies, Llc Methods and system for adjusting vehicle operation based on a predicted state of a vehicle occupant

Also Published As

Publication number Publication date
US20220269474A1 (en) 2022-08-25
CN114954483A (zh) 2022-08-30

Similar Documents

Publication Publication Date Title
KR102330385B1 (ko) 감성 인식 차량 제어 장치, 시스템 및 방법
EP3549525A1 (en) Information processing apparatus, information processing method, and program
KR20190103097A (ko) 뷰티 카운슬링 정보 제공 방법 및 장치
US11532319B2 (en) Techniques for separating driving emotion from media induced emotion using an additive/subtractive, conjunctive, disjunctive, or Bayesian technique in a driver monitoring system
CN108392201B (zh) 大脑训练方法及相关设备
KR102675289B1 (ko) 차량 및 그 제어 방법
JP7183782B2 (ja) 感情推定装置、環境提供システム、車両、感情推定方法、および情報処理プログラム
CN113288145A (zh) 一种用于训练情绪控制能力的示教装置与方法
US20230218221A1 (en) Brain State Optimization with Audio Stimuli
WO2020051781A1 (en) Systems and methods for drowsiness detection
KR20220120741A (ko) 차량 및 그 제어방법
KR20220000654A (ko) 차량 및 그 제어방법
CN110103979B (zh) 疲劳驾驶告警处理方法、装置及电子设备
JP6648788B1 (ja) 運転制御調整装置および運転制御調整方法
JP7100575B2 (ja) 情報処理装置及びプログラム
CN113837128A (zh) 一种情绪识别方法、系统及存储介质
CN111783550B (zh) 驾驶人情绪的监控调节方法及系统
JP2016110583A (ja) 車両用対話制御装置
CN108959890A (zh) 电子终端中的控制方法及电子终端
CN115696174A (zh) 听音位调节方法、装置、电子设备、存储介质及车辆
CN118288896A (zh) 一种电动车心率音效联动生成方法、装置、设备及介质
CN118695164A (zh) 多模态车载智能音响的控制方法及装置、车载智能音响
CN118238826A (zh) 安全控制方法、装置、设备及存储介质
CN116501914A (zh) 语音交互指令确定方法、装置、电子设备及存储介质
CN116407135A (zh) 基于脑电波的记录仪控制方法、装置、设备及存储介质

Legal Events

Date Code Title Description
A201 Request for examination