KR20230039799A - 차량 및 그 제어 방법 - Google Patents

차량 및 그 제어 방법 Download PDF

Info

Publication number
KR20230039799A
KR20230039799A KR1020210121641A KR20210121641A KR20230039799A KR 20230039799 A KR20230039799 A KR 20230039799A KR 1020210121641 A KR1020210121641 A KR 1020210121641A KR 20210121641 A KR20210121641 A KR 20210121641A KR 20230039799 A KR20230039799 A KR 20230039799A
Authority
KR
South Korea
Prior art keywords
control
vehicle
speaker
feedback
user
Prior art date
Application number
KR1020210121641A
Other languages
English (en)
Inventor
문재민
박민재
김성왕
Original Assignee
현대자동차주식회사
기아 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사, 기아 주식회사 filed Critical 현대자동차주식회사
Priority to KR1020210121641A priority Critical patent/KR20230039799A/ko
Priority to US17/884,338 priority patent/US20230081386A1/en
Publication of KR20230039799A publication Critical patent/KR20230039799A/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G10L13/02—Methods for producing synthetic speech; Speech synthesisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
    • H04R1/025—Arrangements for fixing loudspeaker transducers, e.g. in a box, furniture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/403—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers loud-speakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148—Instrument input by voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/168—Target or limit values
    • B60K2370/148—
    • B60K2370/152—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/089—Driver voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/225—Feedback of the input speech
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/13—Acoustic transducers and sound field adaptation in vehicles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13—Aspects of volume control, not necessarily automatic, in stereophonic sound systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Otolaryngology (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

개시된 차량은, 사용자의 음성 입력을 획득하는 마이크; 차량 내부에 마련되는 스피커; 차량 내부에 마련되는 디스플레이; 및 상기 마이크, 상기 스피커 및 상기 디스플레이를 제어하는 제어부;를 포함하고, 상기 제어부는 상기 사용자의 음성 입력으로부터 제어 명령을 획득하고, 상기 제어 명령에 기초하여 제어 대상을 동작시킨 후 미리 정해진 대기 시간 동안 후속 제어 명령의 수신을 대기하고, 상기 대기 시간 동안 상기 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 피드백을 제공하도록 상기 스피커 또는 상기 디스플레이 중 적어도 하나를 제어할 수 있다.

Description

차량 및 그 제어 방법{VEHICLE AND METHOD FOR CONTROLLING THEREOF}
개시된 발명은 사용자의 음성 입력을 획득하고, 사용자의 음성 입력에 기초하여 차량에 마련된 다양한 장치들과 차량의 기능들을 제어할 수 있는 차량 및 그 제어 방법에 관한 것이다.
음성인식 기술이 발달함에 따라, 사용자 편의 및 운전 집중도 향상을 위해 차량에 음성 인식 기술이 적용되고 있다. 예를 들면, 차량에 탑승한 사용자가 차량의 장치를 동작시키기 위해 발화할 수 있다. 사용자의 음성 입력은 마이크를 통해 획득될 수 있고, 차량은 음성 입력에 대응하는 장치를 동작시킬 수 있다.
예를 들면, 사용자가 멀티미디어 장치를 동작시키기 위한 명령을 입력한 후 멀티미디어 장치에 관한 다른 명령을 입력할 수 있다. 차량의 시스템이 멀티미디어 장치의 동작 정보를 기억하고 있지 않으면, 후속 명령으로 다른 장치를 제어하게 되는 문제가 발생할 수 있다. 따라서 의도하지 않은 후속 제어를 방지하기 위해, 차량의 제어 시스템은 차량의 장치를 제어한 후 일정 시간 동안 제어된 장치의 동작 정보를 기억할 수 있다.
그런데, 사용자는 얼마 동안 후속 제어가 가능한지와 어떤 장치가 후속 제어 가능한지를 인지하기 어려울 수 있다.
개시된 발명은, 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 피드백을 제공할 수 있는 차량 및 그 제어 방법을 제공한다.
일 실시예에 따른 차량은 사용자의 음성 입력을 획득하는 마이크; 차량 내부에 마련되는 스피커; 차량 내부에 마련되는 디스플레이; 및 상기 마이크, 상기 스피커 및 상기 디스플레이를 제어하는 제어부;를 포함하고, 상기 제어부는 상기 사용자의 음성 입력으로부터 제어 명령을 획득하고, 상기 제어 명령에 기초하여 제어 대상을 동작시킨 후 미리 정해진 대기 시간 동안 후속 제어 명령의 수신을 대기하고, 상기 대기 시간 동안 상기 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 피드백을 제공하도록 상기 스피커 또는 상기 디스플레이 중 적어도 하나를 제어할 수 있다.
상기 제어부는 상기 제어 대상과 관련된 미리 정해진 피드백 가이드 정보에 기초하여, 상기 디스플레이를 통한 비주얼 피드백의 제공 또는 상기 스피커를 통한 사운드 피드백의 제공 중 적어도 하나를 결정할 수 있다.
상기 제어부는 상기 제어 대상을 나타내는 텍스트 또는 그래픽 오브젝트 중 적어도 하나를 상기 비주얼 피드백으로 표시하도록 상기 디스플레이를 제어할 수 있다.
상기 제어부는 상기 제어 대상과 관련된 미리 정해진 음향 효과를 상기 사운드 피드백으로 출력하도록 상기 스피커를 제어할 수 있다.
상기 제어부는 인공지능 어플리케이션을 호출하는 상기 사용자의 음성 입력에 응답하여, 상기 후속 제어 가능 상태에 있는 상기 제어 대상과 관련된 인공지능 발화를 상기 사운드 피드백으로 출력하도록 상기 스피커를 제어할 수 있다.
차량 내부의 복수의 장소들에 복수의 스피커들이 마련되고, 상기 제어부는 상기 제어 대상의 위치에 기초하여 상기 복수의 스피커들 중 상기 사운드 피드백을 출력할 적어도 하나의 스피커를 결정할 수 있다.
상기 제어부는 상기 스피커를 통해 미디어 어플리케이션에 의한 오디오 콘텐츠가 출력 중인 것에 기초하여, 상기 오디오 콘텐츠의 볼륨을 감소시킨 후 상기 사운드 피드백을 제공할 수 있다.
일 실시예에 따른 차량은, 차량의 센터페시아에 마련되고, 발광에 의해 상기 제어 대상의 동작 상태를 나타내기 위한 인디케이터;를 더 포함하고, 상기 제어부는 상기 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위해, 상기 인디케이터를 점멸할 수 있다.
일 실시예에 따른 차량은, 사용자의 조작 입력을 획득하는 버튼;을 더 포함하고, 상기 제어부는 상기 마이크를 통한 상기 사용자의 음성 입력 또는 상기 버튼을 통한 상기 사용자의 조작 입력으로부터 상기 제어 명령을 획득할 수 있다.
일 실시예에 따른 차량의 제어 방법은, 사용자의 음성 입력으로부터 제어 명령을 획득하고; 상기 제어 명령에 기초하여 제어 대상을 동작시킨 후 미리 정해진 대기 시간 동안 후속 제어 명령의 수신을 대기하고; 스피커 또는 디스플레이 중 적어도 하나를 통해, 상기 대기 시간 동안 상기 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 피드백을 제공하는 것;을 포함할 수 있다.
상기 피드백을 제공하는 것은, 상기 제어 대상과 관련된 미리 정해진 피드백 가이드 정보에 기초하여, 상기 디스플레이를 통한 비주얼 피드백의 제공 또는 상기 스피커를 통한 사운드 피드백의 제공 중 적어도 하나를 결정하는 것;을 포함할 수 있다.
상기 비주얼 피드백을 제공하는 것은 상기 제어 대상을 나타내는 텍스트 또는 그래픽 오브젝트 중 적어도 하나를 상기 디스플레이 상에 표시하는 것;을 포함할 수 있다.
상기 사운드 피드백을 제공하는 것은 상기 제어 대상과 관련된 미리 정해진 음향 효과를 상기 스피커를 통해 출력하는 것;을 포함할 수 있다.
상기 사운드 피드백을 제공하는 것은 인공지능 어플리케이션을 호출하는 상기 사용자의 음성 입력에 응답하여, 상기 후속 제어 가능 상태에 있는 상기 제어 대상과 관련된 인공지능 발화를 상기 스피커를 통해 출력하는 것;을 포함할 수 있다.
차량 내부의 복수의 장소들에 복수의 스피커들이 마련되고, 상기 사운드 피드백을 제공하는 것은 상기 제어 대상의 위치에 기초하여 상기 복수의 스피커들 중 상기 사운드 피드백을 출력할 적어도 하나의 스피커를 결정하는 것;을 포함할 수 있다.
상기 사운드 피드백을 제공하는 것은 상기 스피커를 통해 미디어 어플리케이션에 의한 오디오 콘텐츠가 출력 중인 것에 기초하여, 상기 오디오 콘텐츠의 볼륨을 감소시킨 후 상기 사운드 피드백을 출력하는 것;을 포함할 수 있다.
발광에 의해 상기 제어 대상의 동작 상태를 나타내기 위한 인디케이터가 차량의 센터페시아에 마련되고, 상기 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위해, 상기 인디케이터를 점멸시키는 것;을 더 포함할 수 있다.
사용자의 조작 입력을 획득하기 위한 버튼이 차량의 센터페시아에 마련되고, 상기 제어 명령은 마이크를 통한 상기 사용자의 음성 입력 또는 상기 버튼을 통한 상기 사용자의 조작 입력으로부터 획득될 수 있다.
개시된 차량 및 그 제어 방법은, 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 피드백을 제공할 수 있다.
개시된 차량 및 그 제어 방법은, 제어 대상의 후속 제어 가능 상태를 비주얼 피드백 또는 사운드 피드백 중 적어도 하나로 제공함으로써, 사용자가 어떤 제어 대상이 후속 제어 가능한 상태에 있는지 쉽게 알 수 있게 한다. 차량의 장치들 및/또는 기능들에 관한 후속 제어 가능 상태를 알리는 피드백을 적절히 제공함으로써, 사용자는 어떤 제어 대상이 음성 명령으로 후속 제어 가능한 상태에 있는지 쉽게 알 수 있다.
도 1은 일 실시예에 따른 차량의 외관을 도시한다.
도 2는 일 실시예에 따른 차량의 내부를 도시한다.
도 3은 일 실시예에 따른 차량의 내부에 마련되는 스피커들을 도시한다.
도 4는 일 실시예에 따른 차량의 제어 블록도이다.
도 5는 일 실시예에 따른 차량의 제어 방법을 설명하는 순서도이다.
도 6은 도 5에서 설명된 피드백의 제공 방법을 상세히 설명하는 순서도이다.
도 7은 제어 대상과 관련된 피드백 가이드 정보를 설명하는 표이다.
도 8은 디스플레이를 통해 제공되는 비주얼 피드백의 일 예를 도시한다.
도 9는 스피커를 통해 제공되는 사운드 피드백의 일 예를 도시한다.
도 10은 후속 제어 명령의 입력과 후속 제어 명령에 따른 차량의 동작을 보여준다.
도 11과 도 12는 디스플레이를 통해 제공되는 비주얼 피드백의 다른 예를 도시한다.
명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다. 본 명세서가 실시예들의 모든 요소들을 설명하는 것은 아니며, 본 발명이 속하는 기술분야에서 일반적인 내용 또는 실시예들 간에 중복되는 내용은 생략한다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 간접적으로 연결되어 있는 경우를 포함하고, 간접적인 연결은 무선 통신망을 통해 연결되는 것을 포함한다.
또한, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
단수의 표현은 문맥상 명백하게 예외가 있지 않는 한, 복수의 표현을 포함한다.
또한, "~부", "~기", "~블록", "~부재", "~모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미할 수 있다. 상기 용어들은 전기 회로(Electrical Circuit)을 의미할 수 있고, 적어도 하나의 하드웨어, 메모리에 저장된 적어도 하나의 소프트웨어 또는 프로세서에 의하여 처리되는 적어도 하나의 프로세스를 의미할 수도 있다.
각 단계들에 붙여지는 부호는 각 단계들을 식별하기 위해 사용되는 것으로 이들 부호는 각 단계들 상호 간의 순서를 나타내는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 실시될 수 있다.
이하에서는 첨부된 도면을 참조하여 본 발명의 실시예가 상세하게 설명된다.
도 1은 일 실시예에 따른 차량의 외관을 도시한다. 도 2는 일 실시예에 따른 차량의 내부를 도시한다.
도 1과 도 2를 참조하면, 차량(1)은 외장과 내장(120)을 갖는 차체(Body), 차체를 제외한 나머지 부분으로 주행에 필요한 기계 장치가 설치되는 차대(Chassis) 및 차륜(141)을 포함한다. 차량(1)의 외장은 프론트 패널(111), 본네트(112), 선루프(113), 트렁크(114), 도어(115), 창문(116), 램프(117), 사이드 미러(118) 및 안테나(119)를 포함할 수 있다. 또한, 차량(1)의 외장 전면에는 윈도우 글래스가 마련되고, 와이퍼(101)가 설치될 수 있다.
선루프(113)는 전동 선루프일 수 있다. 창문(116)은 도어(115)에 개폐 가능하게 마련될 수 있다. 램프(117)는 전방 시야를 밝혀 주변의 정보를 쉽게 볼 수 있도록 하고, 다른 차량과 보행자에 대한 신호를 제공하여 커뮤니케이션의 기능을 수행할 수 있다. 사이드 미러(118)는 운전자에게 후측방의 시야를 제공할 수 있다. 안테나(119)는 무선 통신 신호를 송수신할 수 있다. 예를 들면, 안테나(119)는 GPS 위성 신호, 방송 신호, 다른 차량과의 통신(V2V) 신호 및/또는 인프라와의 통신(V2I) 신호를 송수신할 수 있다.
도 2를 참조하면, 차량(1)의 내장(120)은 시트(121), 대시 보드(122), 클러스터(123) 및 센터페시아(124)를 포함할 수 있다. 시트(121)는 차량 내부의 공간에 탑승자가 안전하고 쾌적하게 앉을 수 있도록 만든 의자를 말한다. 이러한 시트(121)는 배치에 따라 운전석, 조수석, 뒷좌석으로 구분될 수 있다. 시트(121)의 전후 위치와 각도는 자동 또는 수동으로 조절될 수 있다. 또한, 차량(1)은 주행 방향을 조절하기 위한 조향부의 스티어링 휠(142), 차량(1)의 제동을 위한 브레이크 페달(143) 및 차량(1)의 가속을 위한 엑셀러레이터 페달(144)을 포함할 수 있다.
클러스터(123)는 대시 보드(122) 상에 배치되고, 다양한 지시등과 경고등을 포함할 수 있다. 예를 들면, 클러스터(123)는 타코미터, 속도계, 냉각수 온도계, 연료계, 방향전환 지시등, 상향등 표시등, 경고등, 안전벨트 경고등, 주행 거리계, 주행 기록계, 변속 레버 표시등, 도어 열림 경고등, 엔진 오일 경고등 및/또는 연료부족 경고등을 포함할 수 있다. 클러스터(123)는 디지털 방식으로 구현될 수 있고, 디스플레이를 포함할 수 있다.
또한, 대시 보드(122)에는 스피커(133)가 마련될 수 있다. 스피커(133)는, 후술되는 바와 같이, 차량(1) 내부의 다양한 위치에 설치될 수 있다. 예를 들면, 스피커(133)는 도어(115)의 안쪽과 리어 대시 보드에도 설치될 수 있다. 대시 보드(122)에는 공기 조화기의 송풍구도 배치될 수 있다.
센터페시아(124)에는 다양한 장치들이 배치될 수 있다. 예를 들면, 센터 페시아(124)에는, 다양한 버튼(125a)과 인디케이터(125b)를 포함하는 컨트롤 패널(125), 운전석과 조수석 사이에 마련되는 콘솔(126) 및 디스플레이(130)가 마련될 수 있다. 콘솔(126)에는 변속 레버, 주행 버튼, 중립 버튼, 주차 버튼, 사이드 브레이크 버튼, 컵과 같은 물건을 놓을 수 있는 공간이 마련될 수 있다. 컨트롤 패널(125) 및/또는 콘솔(126)에는 다이얼, 터치 패드 및/또는 외부 장치와 연결을 위한 멀티 인터페이스가 마련될 수도 있다.
스티어링 휠(142), 암 레스트, 도어 핸들 및 시트(121)에도 버튼, 터치 패드 또는 다이얼과 같은 입력장치가 마련될 수 있다. 예를 들면, 창문을 열거나 닫기 위한 윈도우 버튼(145)이 도어(115)의 내측에 마련될 수 있다.
차량(1) 내부에 마련되는 버튼(125a), 디스플레이(130) 및 스피커(133)는 인포테인먼트 장치의 역할을 수행할 수 있다. 인포테인먼트 장치는 AVN(Audio Video Navigation) 장치로 지칭될 수도 있다. 예를 들면, 디스플레이(130)는 오디오 기능, 비디오 기능, 내비게이션 기능, 방송 기능(DMB 기능), 라디오 기능, 컨텐츠 재생 기능, 인터넷 검색 기능 중 사용자에 의해 선택된 적어도 하나의 기능에 대한 영상을 표시할 수 있다.
디스플레이(130)는 대시 보드(122) 상에 매립식 또는 거치식으로 설치될 수 있다. 디스플레이(130)는 LED(Light Emitting Diode) 패널, OLED(Organic Light Emitting Diode) 패널 또는 LCD(Liquid Crystal Display) 패널을 포함할 수 있다. 디스플레이(130)는 터치 스크린을 포함하여 사용자의 터치 입력을 획득할 수도 있다.
이외에도, 차량(1)은 차량(1)의 구동을 위한 다양한 장치를 포함할 수 있다. 예를 들면, 차량(1)은 동력 발생 장치, 동력 전달 장치, 주행 보조 장치, 조향 장치, 제동 장치, 가속 장치, 현가 장치, 변속 장치, 연료 장치, 휠 및/또는 배터리를 포함할 수 있다.
또한, 차량(1)은 복수의 전자 부품들을 포함할 수 있다. 예를 들어, 차량(1)은 엔진 관리 시스템(Engine Management System, EMS), 변속기 제어 유닛(Transmission Control Unit, TCU), 전자식 제동 제어 모듈(Electronic Brake Control Module), 전자식 조향 장치(Electronic Power Steering, EPS), AVN 시스템(210), 공조 시스템(220), 바디 컨트롤 시스템(230) 및 운전자 보조 시스템(240)을 포함할 수 있다. 차량(1)이 전기 차량일 경우, 엔진, 변속기, 엔진 관리 시스템 및 변속기 제어 유닛은 차량(1)에 마련되지 않을 수 있다.
차량(1)의 전자 부품들은 차량용 통신 네트워크(NT)를 통하여 서로 통신할 수 있다. 예를 들어, 전자 부품들은 이더넷(Ethernet), 모스트(MOST, Media Oriented Systems Transport), 플렉스레이(Flexray), 캔(CAN, Controller Area Network) 및/또는 린(LIN, Local Interconnect Network)과 같은 통신 네트워크를 이용하여 데이터를 주고 받을 수 있다.
도 3은 일 실시예에 따른 차량의 내부에 마련되는 스피커들을 도시한다.
도 3을 참조하면, 스피커(133)는 차량(1)의 내부의 다양한 위치에 마련될 수 있다. 예를 들면, 스피커(133)는 전방 스피커(133F-1, 133F-2, 133F-3), 전방 좌측 스피커(133FL), 전방 우측 스피커(133FR), 중앙 스피커(133CL, 133CR), 후방 스피커(133R), 후방 좌측 스피커(133RL) 및 후방 우측 스피커(133RR)를 포함할 수 있다. 차량(1)에 설치되는 복수의 스피커들(133)은 각각 독립적으로 제어될 수 있다.
전방 스피커(133F-1, 133F-2, 133F-3)는 대시 보드(122)에 마련될 수 있고, 제1 전방 스피커(133F-1), 제2 전방 스피커(133F-2) 및 제3 전방 스피커(133F-3)를 포함할 수 있다. 전방 좌측 스피커(133FL)는 전방 좌측 도어에 마련될 수 있고, 전방 우측 스피커(133FR)는 전방 우측 도어에 마련될 수 있다. 중앙 스피커(133CL, 133CR)는 후방 좌측 도어에서 B 필러에 근접한 위치에 마련되는 좌측 중앙 스피커(133CL)와 우측 중앙 스피커(133CR)를 포함할 수 있다. 후방 스피커(133R)는 리어 대시보드의 중앙 부분에 마련될 수 있다. 후방 좌측 스피커(133RL)는 리어 대시보드의 좌측 부분에 마련될 수 있고, 후방 우측 스피커(133RR)는 리어 대시보드의 우측 부분에 마련될 수 있다.
도 4는 일 실시예에 따른 차량의 제어 블록도이다.
도 4를 참조하면, 차량(1)은 마이크(110), 컨트롤 패널(125), 디스플레이(130), 스피커(133), AVN 시스템(210), 공조 시스템(220), 바디 컨트롤 시스템(230), 운전자 보조 시스템(240) 및 제어부(300)를 포함할 수 있다. 제어부(300)는 차량(1)의 구성들과 전기적으로 연결되고, 각 구성들을 제어할 수 있다. 제어부(300)에 의해 제어되는 구성을 '제어 대상'으로 지칭할 수 있다.
마이크(110)는 차량(1) 내부에 마련되고, 사용자의 음성 입력을 획득할 수 있다. 마이크(110)는 차량(1) 내 다양한 위치에 마련될 수 있다. 예를 들면, 마이크(110)는 대시 보드(122), 센터페시아(124) 및/또는 스티어링 휠(142)에 설치될 수 있다. 제어부(300)는 마이크(110)를 통해 획득된 사용자의 음성 입력으로부터 제어 명령을 획득할 수 있고, 제어 명령에 기초하여 제어 대상을 동작시킬 수 있다. 예를 들면, 사용자의 음성 입력에는 창문(116)을 열거나 닫기 위한 창문 제어 명령이 포함될 수 있다. 제어부(300)는 창문 제어 명령에 따라 창문(116)의 동작을 제어할 수 있다. 제어 명령은 버튼(125a)을 통한 사용자의 조작 입력으로부터 획득될 수도 있다.
컨트롤 패널(125)은 버튼(125a)과 인디케이터(125b)를 포함할 수 있다. 버튼(125a)은 제어 대상의 동작을 실행하거나 중지하기 위해 마련될 수 있고, 인디케이터(125b)는 발광하여 제어 대상의 동작 상태를 나타낼 수 있다.
버튼(125a)과 인디케이터(125b)는 컨트롤 패널(125)뿐만 아니라 콘솔(126)에도 마련될 수 있고, 차량(1) 내부의 다양한 위치에 마련될 수 있다. 컨트롤 패널(125)은 센터페시아(124)뿐만 아니라 다른 위치에도 마련될 수도 있다. 예를 들면, 조향 장치(스티어링 휠), 암 레스트, 도어(115) 및/또는 시트(121)에도 컨트롤 패널(125)과 같은 입력 장치가 마련될 수 있다.
예를 들면, 버튼(125a)은 인공지능 어플리케이션을 호출하기 위한 인공지능 실행 버튼, 시동 명령을 입력하기 위한 시동 버튼, 공기 조화기를 동작시키기 위한 에어 컨트롤 버튼 및 창문을 열거나 닫기 위한 윈도우 버튼(145)을 포함할 수 있다. 이외에도 차량(1)에는 각종 기능과 관련하여 다양한 종류의 버튼(125a)이 마련될 수 있다. 또한, 버튼(125a)은 다양한 형태로 마련될 수 있다. 예를 들면, 버튼(125a)은 푸시 버튼, 토글 버튼 또는 터치 버튼으로 마련될 수 있다. 사용자는 버튼(125a)을 조작하여 제어 명령을 입력할 수 있다.
인디케이터(125b)는 제어 대상의 동작 상태와 제어 대상이 후속 가능 상태에 있음을 알릴 수 있다. 인디케이터(125b)는 LED로 마련될 수 있다. 예를 들면, 공기 조화기를 동작시키기 위한 에어 컨트롤 버튼에 관한 사용자의 조작 입력(예를 들면, 푸시 입력 또는 터치 입력)에 기초하여, 에어 컨트롤 버튼에 대응하는 인디케이터(125b)가 켜지거나 꺼질 수 있다. 또한, 공기 조화기에 관한 후속 제어가 가능한 상태임을 알리기 위해, 인디케이터(125b)가 점멸할 수 있다.
디스플레이(130)는 차량 상태 정보 및 주행 정보를 표시할 수 있다. 디스플레이(130)는 차량(1)의 기능, 상태 및/또는 동작과 관련된 여러 가지 정보를 표시할 수 있다. 디스플레이(130)는 차량(1)의 여러 기능을 실행시키거나 설정하기 위한 그래픽 엘리먼트(예를 들면, 아이콘, 텍스트, 이미지)를 포함하는 그래픽 유저 인터페이스(GUI)를 표시할 수 있다. 그래픽 유저 인터페이스(GUI)는 사용자의 입력과 상호작용 할 수 있다. 예를 들면, 디스플레이(130)는 운전자에 의해 설정된 목적지까지 주행 경로를 표시할 수 있고, 주행 경로를 안내하는 다양한 그래픽 사용자 인터페이스를 표시할 수 있다.
또한, 디스플레이(130)는 동작 중인 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 비주얼 피드백을 제공할 수 있다. 비주얼 피드백은 제어 대상과 관련된 미리 정해진 피드백 가이드 정보에 기초하여 결정될 수 있다. 비주얼 피드백은 제어 대상을 나타내는 텍스트 또는 그래픽 오브젝트 중 적어도 하나로 제공될 수 있다.
스피커(133)는 차량(1)의 기능, 상태 및/또는 동작과 관련된 소리(예를 들면, 음성, 경고음)를 출력할 수 있다. 스피커(133)는 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 사운드 피드백을 출력할 수 있다. 사운드 피드백은 미리 정해진 피드백 가이드 정보에 기초하여 결정될 수 있다. 피드백 가이드 정보는 메모리(320)에 미리 저장될 수 있다.
사운드 피드백은 제어 대상과 관련된 미리 정해진 음향 효과 및/또는 후속 제어 가능 상태에 있는 제어 대상과 관련된 인공지능 발화를 포함할 수 있다. 제어 대상의 위치에 기초하여, 차량(1) 내부에 마련된 복수의 스피커들(133) 중 사운드 피드백을 출력할 적어도 하나의 스피커가 결정될 수 있다. 또한, 스피커(133)를 통해 미디어 어플리케이션에 의한 오디오 콘텐츠가 출력 중인 경우, 제어부(300)는 오디오 콘텐츠의 볼륨을 감소시킨 후 스피커(133)를 통해 사운드 피드백을 출력할 수 있다.
AVN 시스템(210)은 오디오 기능, 비디오 기능 및 내비게이션 기능을 제공할 수 있다. 예를 들면, AVN 시스템(210)은 차량(1)의 현재 위치 정보를 획득하고, 현재 위치로부터 운전자에 의해 설정된 목적지까지 주행 경로를 안내할 수 있다. AVN 시스템(210)에 의해 설정되는 주행 경로는 디스플레이(130)를 통해 표시될 수 있다.
공조 시스템(220)은 차량(1) 내부의 공기를 조화시킬 수 있다. 공조 시스템(220)은 차량(1) 내부의 냉방 또는 난방을 수행할 수 있다. 바디 컨트롤 시스템(230)은 운전자에게 편의를 제공하거나 운전자의 안전을 보장하는 전장 부품들의 동작을 제어할 수 있다. 예를 들어, 바디 컨트롤 시스템(230)은 창문(116), 선루프(113), 시트(121), 사이드 미러(118), 트렁크(114), 램프(117), 와이퍼(101), 클러스터(123), 다기능 스위치 및 방향 지시 램프와 같은 장치들을 제어할 수 있다.
운전자 보조 시스템(240)은 운전자가 차량(1)을 조작(구동, 제동, 조향)하는 것을 보조할 수 있다. 예를 들어, 운전자 보조 시스템(240)은 차량(1) 주변의 환경(예를 들어, 다른 차량, 보행자, 사이클리스트(cyclist), 차선, 도로 표지판 등)을 감지하고, 감지된 환경에 응답하여 차량(1)의 구동, 제동 또는 조향 중 적어도 하나를 제어할 수 있다. 운전자 보조 시스템(240)은 차선 이탈 경고(Lane Departure Warning, LDW), 운전자 유지 보조(Lane Keeping Assist, LKA), 상향등 보조(High Beam Assist, HBA), 자동 긴급 제동(Autonomous Emergency Braking, AEB), 교통 표지판 인식(Traffic Sign Recognition, TSR), 스마트 크루즈 컨트롤(Smart Cruise Control, SCC) 또는 사각지대 감지(Blind Spot Detection, BSD) 중 적어도 하나를 제공할 수 있다.
제어부(300)는 차량(1)의 전자 장치들과 전기적으로 연결되어 각 장치들을 제어할 수 있다. 제어부(300)는 프로세서(310) 및 메모리(320)를 포함할 수 있다. 메모리(320)는 차량의 원격 제어 방법을 수행하기 위한 프로그램, 인스트럭션 및/또는 어플리케이션을 저장할 수 있다. 프로세서(310)는 메모리(320)에 저장된 프로그램, 인스트럭션 및/또는 어플리케이션을 실행할 수 있다. 프로세서(310)와 메모리(320)는 복수로 마련될 수도 있다. 제어부(300)는 ECU(Electronic Control Unit) 또는 MCU(Micro Controller Unit)과 같은 컨트롤 유닛들을 포함할 수 있다.
메모리(320)는 캐쉬, ROM(Read Only Memory), PROM(Programmable ROM), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM) 및 플래쉬 메모리(Flash memory)와 같은 비휘발성 메모리 소자를 포함할 수 있다. 또한, 메모리(320)는 RAM(Random Access Memory)과 같은 휘발성 메모리 소자를 포함할 수 있고, 하드디스크 드라이브(Hard Disk Drive, HDD), CD-ROM과 같은 저장 매체를 포함할 수도 있다. 메모리(320)의 종류는 예시된 것으로 한정되지 않는다.
전술된 구성들 이외에도 차량(1)은 다양한 장치들을 포함할 수 있다. 또한, 전술된 구성들 중 일부는 차량(1)에서 생략될 수도 있다.
도 5는 일 실시예에 따른 차량의 제어 방법을 설명하는 순서도이다.
도 5를 참조하면, 차량(1)의 제어부(300)는 마이크(110)를 통해 사용자의 음성 입력을 획득할 수 있다(401). 사용자의 음성 입력은 차량(1)의 장치를 동작시키기 위한 제어 명령을 포함하는 발화일 수 있다. 사용자의 음성 입력에는 제어 대상의 명칭과 제어 대상의 동작을 지시하는 명령어가 포함될 수 있다. 또한, 사용자의 음성 입력에는 인공지능 어플리케이션을 호출하기 위한 단어가 포함될 수 있다.
제어부(300)는 사용자의 음성 입력을 분석하여 제어 대상과 제어 명령을 식별 및/또는 획득할 수 있다(402). 예를 들면, 차량(1)의 장치를 동작시키기 위한 사용자의 음성 입력은 '후석 우측 창문 내려줘'와 같이 식별될 수 있다. 제어 대상은 '후석 우측 창문'으로 식별되고, 제어 명령은 '내림' 또는 '열림'으로 식별될 수 있다. 다른 예로, 공기 조화기를 동작시키기 위한 사용자의 음성 입력은 '에어컨 온도 낮춰줘'와 같이 식별될 수 있다. 제어부(300)는 제어 대상을 '공기 조화기'로 식별하고, 제어 명령을 '온도 낮춤'으로 식별할 수 있다.
사용자의 음성 입력을 분석하기 위해, 미리 저장된 대화 모델과 음성 인식 프로그램이 이용될 수 있다. 메모리(320)에는 대화 모델과 음성 인식 프로그램이 저장될 수 있다. 대화 모델은 공지된 머신 러닝 알고리즘 또는 딥러닝 알고리즘을 이용하여 학습될 수 있다.
제어부(300)는 획득된 제어 명령에 기초하여 제어 대상을 동작시킬 수 있다(403). 예를 들면, 제어부(300)는 제어 대상이 '후석 우측 창문'으로 식별되고, 제어 명령이 '열림'으로 식별되는 것에 기초하여, 후석 우측 창문을 열 수 있다. 제어부(300)는 제어 대상이 '공기 조화기'로 식별되고, 제어 명령이 '온도 낮춤'으로 식별되는 것에 기초하여, 차량(1) 내부의 온도가 낮아지도록 공조 시스템(220)을 제어할 수 있다.
제어부(300)는 제어 대상을 동작시킨 후 미리 정해진 대기 시간 동안 후속 제어 명령의 수신을 대기할 수 있다(404). 또한, 제어부(300)는 대기 시간 동안 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 피드백을 제공하도록 디스플레이(130) 또는 스피커(133) 중 적어도 하나를 제어할 수 있다.
제어부(300)는 제어 대상을 나타내는 텍스트 또는 그래픽 오브젝트 중 적어도 하나를 비주얼 피드백으로 표시하도록 디스플레이(130)를 제어할 수 있다. 제어부(300)는 제어 대상과 관련된 미리 정해진 음향 효과를 사운드 피드백으로 출력하도록 스피커(133)를 제어할 수 있다. 또한, 제어부(300)는 인공지능 어플리케이션을 호출하는 사용자의 음성 입력에 응답하여, 후속 제어 가능 상태에 있는 제어 대상과 관련된 인공지능 발화를 사운드 피드백으로 출력하도록 스피커(133)를 제어할 수 있다.
사용자가 대기 시간 이내에 후속 제어 명령을 포함하는 발화를 하는 경우, 제어부(300)는 사용자의 음성 입력으로부터 후속 제어 명령을 획득할 수 있고, 후속 제어 명령에 응답하여 제어 대상을 동작시킬 수 있다. 예를 들면, '후석 우측 창문 내려줘'와 같은 사용자 음성 입력에 응답하여 후석 우측 창문이 열린 뒤, 대기 시간 내에 '후석 우측 창문 닫아줘'와 같은 사용자 음성 입력이 획득될 수 있다. 제어부(300)는 '후석 우측 창문을 닫음'을 후속 제어 명령으로 식별할 수 있고, 후석 우측 창문을 제어하여 닫을 수 있다.
도 6은 도 5에서 설명된 피드백의 제공 방법을 상세히 설명하는 순서도이다.
도 6을 참조하면, 제어부(300)는 제어 대상과 관련된 미리 정해진 피드백 가이드 정보를 참조할 수 있다(501). 피드백 가이드 정보는 메모리(320)에 미리 저장될 수 있고, 제어 대상에 매칭되는 사운드 피드백, 비주얼 피드백 및/또는 인디케이터(125b)의 점멸을 포함할 수 있다.
제어부(300)는 제어 대상과 관련된 피드백 가이드 정보에 기초하여 디스플레이(130)를 통한 비주얼 피드백의 제공 또는 스피커(133)를 통한 사운드 피드백의 제공 중 적어도 하나를 결정할 수 있다. 또한 제어부(300)는 제어 대상과 관련된 피드백 가이드 정보에 기초하여 인디케이터(125b)의 점멸을 결정할 수 있다(502). 인디케이터(125b)의 점멸도 비주얼 피드백에 포함될 수 있다.
제어부(300)는 제어 대상과 피드백 가이드 정보를 참조하여 사운드 피드백의 제공이 가능한지 판단할 수 있다(503). 제어 대상과 관련된 비주얼 피드백 및/또는 인디케이터 피드백은 정의되어 있지만 사운드 피드백이 정의되어 있지 않은 것에 기초하여, 제어부(300)는 디스플레이(130)를 통한 비주얼 피드백의 제공 및/또는 제어 대상과 관련된 인디케이터(125b)의 점멸을 결정할 수 있다(504).
피드백 가이드 정보에 제어 대상과 관련된 사운드 피드백이 정의되어 있는 경우, 제어부(300)는 제어 대상의 위치에 기초하여 복수의 스피커들 중 사운드 피드백을 출력할 적어도 하나의 스피커를 결정할 수 있다(505). 예를 들면, 제어 대상이 '후석 우측 창문'인 경우, 후석 우측 창문에 가까이 위치한 후방 우측 스피커(133RR)를 통해 사운드 피드백이 출력될 수 있다. 제어 대상과 가까이 위치한 스피커(133)를 통해 사운드 피드백을 출력함으로써, 사용자가 후속 제어 가능 상태에 있는 제어 대상의 위치를 쉽게 파악할 수 있게 한다.
제어부(300)는 스피커(133)를 통해 사운드 피드백이 출력되기 전에, 미디어 어플리케이션에 의한 오디오 콘텐츠가 출력 중인지 식별할 수 있다(506). 제어부(300)는 스피커(133)를 통해 미디어 어플리케이션에 의한 오디오 콘텐츠가 출력 중인 것에 기초하여, 오디오 콘텐츠의 볼륨을 감소시킨 후 사운드 피드백을 제공할 수 있다(507). 따라서 사용자는 후속 제어 가능 상태에 관한 알림을 쉽게 인지할 수 있다. 미디어 어플리케이션에 의한 오디오 콘텐츠가 출력되고 있지 않은 경우, 제어부(300)는 미리 정해진 볼륨 또는 사용자에 의해 설정된 볼륨으로 사운드 피드백을 출력하도록 스피커(133)를 제어할 수 있다(508).
도 7은 제어 대상과 관련된 피드백 가이드 정보를 설명하는 표(600)다.
도 7의 표(600)를 참조하면, 피드백 가이드 정보는 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 비주얼 피드백, 사운드 피드백 및 인디케이터의 점멸을 정의한다. 피드백 가이드 정보는 제어 대상에 매칭되는 그래픽 유저 인터페이스, 음향 효과 및/또는 발광 패턴을 포함할 수 있다. 피드백 가이드 정보는 메모리(320)에 미리 저장될 수 있다. 비주얼 피드백은 디스플레이(130)를 통해 제공되는 피드백으로서, 디스플레이 피드백으로 지칭될 수도 있다. 사운드 피드백은 스피커(133)를 통해 제공될 수 있다.
차량(1)에 마련된 각종 장치들 및/또는 기능들이 제어 대상에 해당할 수 있다. 예를 들면, 제어 대상은 와이퍼(101), 사이드 미러(118), 창문(116), 선루프(113), 시트(121), 트렁크(114), 공조 시스템(220), AVN 시스템(210), 램프(117) 또는 대화/취침 모드일 수 있다.
와이퍼(101)와 관련하여, 와이퍼 사운드에 대응하는 음향 효과가 사운드 피드백으로 제공될 수 있다. 와이퍼 사운드는 와이퍼 모터 소리 또는 와이퍼 동작 시 발생하는 소리일 수 있다. 와이퍼(101)는 전방 윈도우 글래스에 위치하므로, 와이퍼 사운드는 전방 스피커(133F-1, 133F-2, 133F-3)를 통해 출력될 수 있다. 또한, 와이퍼(101)의 제어 상태를 알리기 위한 그래픽 유저 인터페이스가 디스플레이(130)를 통해 제공될 수도 있다.
사이드 미러(118)와 관련하여, 사이드 미러 사운드에 대응하는 음향 효과가 사운드 피드백으로 제공될 수 있다. 사이드 미러 사운드는 사이드 미러(118)의 모터 소리일 수 있다. 사이드 미러(118)는 차량(1)의 전방 좌측과 전방 우측에 위치하므로, 사이드 미러 사운드는 전방 좌측 스피커(133FL)와 전방 우측 스피커(133FR)를 통해 출력될 수 있다. 또한, 사이드 미러(118)의 제어 상태를 알리기 위한 그래픽 유저 인터페이스가 디스플레이(130)를 통해 제공될 수 있다.
창문(116)과 관련하여, 윈도우 사운드에 대응하는 음향 효과가 사운드 피드백으로 제공될 수 있다. 윈도우 사운드는 창문 모터 소리 또는 창문(116)이 열리거나 닫힐 때 발생하는 소리일 수 있다. 창문(116)은 전방 좌측 도어, 전방 우측 도어, 후방 좌측 도어 및 후방 우측 도어 각각에 마련되므로, 윈도우 사운드는 전방 좌측 스피커(133FL), 전방 우측 스피커(133FR), 후방 좌측 스피커(133RL), 후방 우측 스피커(133RR)를 통해 출력될 수 있다. 창문들(116) 중 일부만 제어 대상인 경우, 제어된 창문(116)과 가까이 위치한 스피커(133)에서 사운드 피드백이 출력될 수 있다. 또한, 창문(116)의 제어 상태를 알리기 위한 그래픽 유저 인터페이스가 디스플레이(130)를 통해 제공될 수 있다.
선루프(113)와 관련하여, 선루프 사운드에 대응하는 음향 효과가 사운드 피드백으로 제공될 수 있다. 선루프 사운드는 선루프 모터 소리 또는 선루프(113)가 열리거나 닫힐 때 발생하는 소리일 수 있다. 선루프(113)는 차량(1)의 천장 에 위치하므로, 선루프 사운드는 중앙 스피커(133CL, 133CR)를 통해 출력될 수 있다. 또한, 선루프(113)의 제어 상태를 알리기 위한 그래픽 유저 인터페이스가 디스플레이(130)를 통해 제공될 수 있다.
시트(121)와 관련하여, 시트 사운드에 대응하는 음향 효과가 사운드 피드백으로 제공될 수 있다. 시트 사운드는 시트 모터 사운드 또는 시트(121)가 움직일 때 발생하는 소리일 수 있다. 시트(121)는 차량(1) 내부에서 전방 좌측, 전방 우측, 후방 좌측 및 후방 우측에 배치될 수 있으므로, 시트 사운드는 전방 좌측 스피커(133FL), 전방 우측 스피커(133FR), 후방 좌측 스피커(133RL), 후방 우측 스피커(133RR)를 통해 출력될 수 있다. 시트들(121) 중 일부만 제어 대상인 경우, 제어된 시트(121)와 가까이 위치한 스피커(133)에서 사운드 피드백이 출력될 수 있다. 또한, 시트(121)의 제어 상태를 알리기 위한 그래픽 유저 인터페이스가 디스플레이(130)를 통해 제공될 수 있다.
트렁크(114)와 관련하여, 트렁크 사운드에 대응하는 음향 효과가 사운드 피드백으로 제공될 수 있다. 트렁크 사운드는 트렁크 모터 소리 또는 트렁크(114)가 열리거나 닫힐 때 발생하는 소리일 수 있다. 트렁크(114)는 차량(1)의 후방에 위치하므로, 트렁크 사운드는 후방 스피커(133R)를 통해 출력될 수 있다. 또한, 트렁크(114)의 제어 상태를 알리기 위한 그래픽 유저 인터페이스가 디스플레이(130)를 통해 제공될 수 있다.
공조 시스템(220), AVN 시스템(210), 램프(117) 각각에 관한 비주얼 피드백으로서, 공조 시스템(220), AVN 시스템(210), 램프(117) 각각이 후속 제어 가능한 상태에 있음을 알리기 위한 그래픽 유저 인터페이스가 디스플레이(130)를 통해 표시될 수 있다. 또한, 공조 시스템(220), AVN 시스템(210), 램프(117) 각각이 후속 제어 가능한 상태에 있음을 알리기 위해, 공조 시스템(220), AVN 시스템(210), 램프(117) 각각과 관련된 인디케이터(125b)가 점멸할 수 있다. 제어부(300)는 미리 정해진 발광 패턴에 기초하여 인디케이터(125b)의 점멸을 제어할 수 있다.
한편, 차량(1)은 다양한 편의 기능을 제공할 수 있다. 예를 들면, 차량(1)은 대화/취침 모드를 제공할 수 있다. 대화/취침 모드가 실행되면, 복수의 스피커들(133)의 출력 및/또는 볼륨이 조절될 수 있다. 예를 들면, 앞좌석에 탑승한 사람의 음성이 뒷좌석으로 잘 전달되도록 하기 위해, 제어부(300)는 후방 좌측 스피커(133RL), 후방 우측 스피커(133RR), 후방 스피커(133R) 및 중앙 스피커(133CL, 133CR) 각각의 출력 및/또는 볼륨을 감소시키거나 음소거시킬 수 있다. 제어부(300)는 대화/취침 모드를 실행한 후 대화/취침 모드에 관한 후속 제어가 가능한 상태임을 알리는 비주얼 피드백을 표시하도록 디스플레이(130)를 제어할 수 있다.
예시된 바와 같이, 차량(1)의 장치들 및/또는 기능들의 위치와 종류에 맞추어 후속 제어 가능 상태를 알리는 피드백이 제공될 수 있다. 사용자는 사운드 피드백이 출력되는 방향을 인지하여 제어 대상의 위치를 확인할 수 있다. 따라서 사용자는 주행 중 시선 분산 없이 제어 대상을 식별할 수 있다. 또한, 사용자는 비주얼 피드백의 유무와 비주얼 피드백의 표시 위치를 확인하여 제어 대상이 후속 제어 가능한 상태에 있는지 인지할 수 있다. 즉, 차량(1)의 장치들 및/또는 기능들에 관한 후속 제어 가능 상태를 알리는 피드백을 적절히 제공함으로써, 사용자는 어떤 제어 대상이 음성 명령으로 후속 제어 가능한 상태에 있는지 쉽게 알 수 있다.
도 8은 디스플레이를 통해 제공되는 비주얼 피드백의 일 예를 도시한다. 도 9는 스피커를 통해 제공되는 사운드 피드백의 일 예를 도시한다.
도 8을 참조하면, 제어부(300)는 인공지능 어플리케이션을 호출하는 사용자의 음성 입력에 응답하여, 인공지능 어플리케이션을 실행시킬 수 있다. 또한, 제어부(300)는 사용자와 인공지능 비서 간 대화 내용을 표시하도록 디스플레이(130)를 제어할 수 있다. 예를 들면, 사용자가 '블루포니'라고 발화하면, 제어부(300)는 인공지능 어플리케이션을 실행하고, 사용자의 음성 입력에 응답하는 인공지능 비서의 답변을 표시하도록 디스플레이(130)를 제어할 수 있다. 인공지능 비서의 답변은 스피커(133)를 통해 음성으로 출력될 수도 있다.
디스플레이(130)는 '후석 우측 창문 내려줘'라고 식별되는 사용자의 음성 입력에 응답하여, '뒷자리 오른쪽 창문을 열게요'와 같은 인공지능 비서의 답변을 표시할 수 있다. 또한, 제어부(300)는 사용자의 음성 입력으로부터 제어 대상인 '후석 우측 창문'과 제어 명령인 '열림'을 식별하고, 후석 우측 창문을 열 수 있다.
제어부(300)는 제어 대상을 동작시킨 후 미리 정해진 대기 시간 동안 후속 제어 명령의 수신을 대기할 수 있다. 제어부(300)는 대기 시간 동안 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 피드백을 제공하도록 디스플레이(130) 또는 스피커(133) 중 적어도 하나를 제어할 수 있다. 제어부(300)는 후석 우측 창문에 관한 후속 제어가 가능함을 알리기 위해, '뒤좌석 오른쪽 창문에 대한 후속 제어가 가능합니다.'와 같은 텍스트(702)를 비주얼 피드백으로 제공할 수 있다.
또한, 도 9를 참조하면, 차량(1) 내에 마련된 복수의 스피커들(133) 중, 후석 우측 창문에 가까이 위치한 후방 우측 스피커(133RR)를 통해 사운드 피드백이 출력될 수 있다. 예를 들면, '뒤좌석 오른쪽 창문에 대한 후속 제어가 가능합니다.'와 같은 인공지능 발화가 후방 우측 스피커(133RR)로부터 출력될 수 있다. 이러한 사운드 피드백은 대기 시간 동안 미리 정해진 주기마다 제공될 수 있다. 또한, 사운드 피드백은 인공지능 어플리케이션을 호출하는 사용자의 음성 입력에 응답하여 제공될 수도 있다.
사용자는 후방 우측 스피커(133RR)로부터 출력되는 윈도우 사운드를 인지함으로써, 후석 우측 창문이 후속 제어 가능한 상태에 있음을 알 수 있다.
도 10은 후속 제어 명령의 입력과 후속 제어 명령에 따른 차량의 동작을 보여준다.
도 10을 참조하면, 디스플레이(130)는 후석 우측 창문의 후속 제어 명령을 위한 사용자와 인공지능 비서 간의 대화 내용을 포함하는 화면(1001)을 표시할 수 있다. 사용자가 대기 시간 이내에 후속 제어 명령을 포함하는 발화를 하는 경우, 제어부(300)는 사용자의 음성 입력으로부터 후속 제어 명령을 획득할 수 있고, 후속 제어 명령에 응답하여 제어 대상을 동작시킬 수 있다. 예를 들면, 후석 우측 창문이 열린 뒤, 대기 시간 내에 '후석 우측 창문 닫아줘'와 같은 사용자 음성 입력이 획득될 수 있다. 제어부(300)는 '후석 우측 창문을 닫음'을 후속 제어 명령으로 식별할 수 있고, 후석 우측 창문을 제어하여 닫을 수 있다.
도 11과 도 12는 디스플레이를 통해 제공되는 비주얼 피드백의 다른 예를 도시한다.
도 11을 참조하면, 디스플레이(130)는 공기 조화기를 동작시키기 위한 사용자와 인공지능 비서 간의 대화 내용을 포함하는 화면(1101)을 표시할 수 있다. 공기 조화기를 동작시키기 위한 사용자의 음성 입력은 '블루포니, 에어컨 온도 낮춰줘'와 같이 식별될 수 있다.
제어부(300)는 인공지능 어플리케이션을 호출하는 단어인 '블루포니'를 식별하여 인공지능 어플리케이션을 실행할 수 있다. 또한, 제어부(300)는 제어 대상을 '공기 조화기'로 식별하고, 제어 명령을 '온도 낮춤'으로 식별할 수 있다. 제어부(300)는 제어 대상이 '공기 조화기'로 식별되고, 제어 명령이 '온도 낮춤'으로 식별되는 것에 기초하여, 차량(1) 내부의 온도가 낮아지도록 공조 시스템(220)을 제어할 수 있다. 차량(1) 내부의 목표 온도는 자동으로 설정될 수 있다. 예를 들면, 차량(1) 내부의 목표 온도는 섭씨 18도로 설정될 수 있다. 인공지능 비서의 발화는 '온도를 18도로 설정할게요.'와 같이 제공될 수 있다.
또한, 제어부(300)는 미리 정해진 대기 시간 동안 공기 조화기에 관한 후속 제어 명령의 수신을 대기할 수 있다. 제어부(300)는 대기 시간 동안 공기 조화기가 후속 제어 가능 상태에 있음을 알리기 위한 비주얼 피드백을 제공하도록 디스플레이(130)를 제어할 수 있다. 예를 들면, 디스플레이(130)는 '에어컨에 대한 후속 제어가 가능합니다.'와 같은 텍스트(1102)를 표시할 수 있다.
도 12를 참조하면, 공기 조화기가 후속 제어 가능 상태에 있음을 알리기 위한 비주얼 피드백(1102)은 디스플레이(130)의 화면 영역 내에서 아래 부분에 표시될 수 있다. 또한, 공기 조화기의 동작을 지시하는 인디케이터(125b)가 점멸할 수 있다. 인디케이터(125b)는 미리 정해진 발광 패턴에 기초하여 점멸할 수 있다.
전술된 바와 같이, 개시된 차량 및 그 제어 방법은, 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 피드백을 제공할 수 있다.
개시된 차량 및 그 제어 방법은, 제어 대상의 후속 제어 가능 상태를 비주얼 피드백 또는 사운드 피드백 중 적어도 하나로 제공함으로써, 사용자가 어떤 제어 대상이 후속 제어 가능한 상태에 있는지 쉽게 알 수 있게 한다.
한편, 개시된 실시예들은 컴퓨터에 의해 실행 가능한 프로그램 및/또는 명령어를 저장하는 기록매체의 형태로 구현될 수 있다. 명령어는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 프로그램 모듈을 생성하여 개시된 실시예들의 동작을 수행할 수 있다. 기록매체는 컴퓨터로 읽을 수 있는 기록매체로 구현될 수 있다.
컴퓨터가 읽을 수 있는 기록매체로는 컴퓨터에 의하여 해독될 수 있는 명령어가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(Read Only Memory), RAM(Random Access Memory), 자기 테이프, 자기 디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있을 수 있다.
이상에서와 같이 첨부된 도면을 참조하여 개시된 실시예들을 설명하였다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고도, 개시된 실시예들과 다른 형태로 본 발명이 실시될 수 있음을 이해할 것이다. 개시된 실시예들은 예시적인 것이며, 한정적으로 해석되어서는 안 된다.
1: 차량
110: 마이크
125: 컨트롤 패널
130: 디스플레이
133: 스피커
300: 제어부

Claims (18)

  1. 사용자의 음성 입력을 획득하는 마이크;
    차량 내부에 마련되는 스피커;
    차량 내부에 마련되는 디스플레이; 및
    상기 마이크, 상기 스피커 및 상기 디스플레이를 제어하는 제어부;를 포함하고,
    상기 제어부는
    상기 사용자의 음성 입력으로부터 제어 명령을 획득하고,
    상기 제어 명령에 기초하여 제어 대상을 동작시킨 후 미리 정해진 대기 시간 동안 후속 제어 명령의 수신을 대기하고,
    상기 대기 시간 동안 상기 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 피드백을 제공하도록 상기 스피커 또는 상기 디스플레이 중 적어도 하나를 제어하는, 차량.
  2. 제1항에 있어서,
    상기 제어부는
    상기 제어 대상과 관련된 미리 정해진 피드백 가이드 정보에 기초하여, 상기 디스플레이를 통한 비주얼 피드백의 제공 또는 상기 스피커를 통한 사운드 피드백의 제공 중 적어도 하나를 결정하는, 차량.
  3. 제2항에 있어서,
    상기 제어부는
    상기 제어 대상을 나타내는 텍스트 또는 그래픽 오브젝트 중 적어도 하나를 상기 비주얼 피드백으로 표시하도록 상기 디스플레이를 제어하는, 차량.
  4. 제2항에 있어서,
    상기 제어부는
    상기 제어 대상과 관련된 미리 정해진 음향 효과를 상기 사운드 피드백으로 출력하도록 상기 스피커를 제어하는, 차량.
  5. 제2항에 있어서,
    상기 제어부는
    인공지능 어플리케이션을 호출하는 상기 사용자의 음성 입력에 응답하여, 상기 후속 제어 가능 상태에 있는 상기 제어 대상과 관련된 인공지능 발화를 상기 사운드 피드백으로 출력하도록 상기 스피커를 제어하는, 차량.
  6. 제2항에 있어서,
    차량 내부의 복수의 장소들에 복수의 스피커들이 마련되고,
    상기 제어부는
    상기 제어 대상의 위치에 기초하여 상기 복수의 스피커들 중 상기 사운드 피드백을 출력할 적어도 하나의 스피커를 결정하는, 차량.
  7. 제2항에 있어서,
    상기 제어부는
    상기 스피커를 통해 미디어 어플리케이션에 의한 오디오 콘텐츠가 출력 중인 것에 기초하여, 상기 오디오 콘텐츠의 볼륨을 감소시킨 후 상기 사운드 피드백을 제공하는, 차량.
  8. 제1항에 있어서,
    차량의 센터페시아에 마련되고, 발광에 의해 상기 제어 대상의 동작 상태를 나타내기 위한 인디케이터;를 더 포함하고,
    상기 제어부는
    상기 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위해, 상기 인디케이터를 점멸시키는, 차량.
  9. 제1항에 있어서,
    사용자의 조작 입력을 획득하는 버튼;을 더 포함하고,
    상기 제어부는
    상기 마이크를 통한 상기 사용자의 음성 입력 또는 상기 버튼을 통한 상기 사용자의 조작 입력으로부터 상기 제어 명령을 획득하는, 차량.
  10. 사용자의 음성 입력으로부터 제어 명령을 획득하고;
    상기 제어 명령에 기초하여 제어 대상을 동작시킨 후 미리 정해진 대기 시간 동안 후속 제어 명령의 수신을 대기하고;
    스피커 또는 디스플레이 중 적어도 하나를 통해, 상기 대기 시간 동안 상기 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위한 피드백을 제공하는 것;을 포함하는 차량의 제어 방법.
  11. 제10항에 있어서,
    상기 피드백을 제공하는 것은,
    상기 제어 대상과 관련된 미리 정해진 피드백 가이드 정보에 기초하여, 상기 디스플레이를 통한 비주얼 피드백의 제공 또는 상기 스피커를 통한 사운드 피드백의 제공 중 적어도 하나를 결정하는 것;을 포함하는 차량의 제어 방법.
  12. 제11항에 있어서,
    상기 비주얼 피드백을 제공하는 것은
    상기 제어 대상을 나타내는 텍스트 또는 그래픽 오브젝트 중 적어도 하나를 상기 디스플레이 상에 표시하는 것;을 포함하는, 차량의 제어 방법.
  13. 제11항에 있어서,
    상기 사운드 피드백을 제공하는 것은
    상기 제어 대상과 관련된 미리 정해진 음향 효과를 상기 스피커를 통해 출력하는 것;을 포함하는, 차량의 제어 방법.
  14. 제11항에 있어서,
    상기 사운드 피드백을 제공하는 것은
    인공지능 어플리케이션을 호출하는 상기 사용자의 음성 입력에 응답하여, 상기 후속 제어 가능 상태에 있는 상기 제어 대상과 관련된 인공지능 발화를 상기 스피커를 통해 출력하는 것;을 포함하는 차량의 제어 방법.
  15. 제11항에 있어서,
    차량 내부의 복수의 장소들에 복수의 스피커들이 마련되고,
    상기 사운드 피드백을 제공하는 것은
    상기 제어 대상의 위치에 기초하여 상기 복수의 스피커들 중 상기 사운드 피드백을 출력할 적어도 하나의 스피커를 결정하는 것;을 포함하는, 차량의 제어 방법.
  16. 제11항에 있어서,
    상기 사운드 피드백을 제공하는 것은
    상기 스피커를 통해 미디어 어플리케이션에 의한 오디오 콘텐츠가 출력 중인 것에 기초하여, 상기 오디오 콘텐츠의 볼륨을 감소시킨 후 상기 사운드 피드백을 출력하는 것;을 포함하는 차량의 제어 방법.
  17. 제10항에 있어서,
    발광에 의해 상기 제어 대상의 동작 상태를 나타내기 위한 인디케이터가 차량의 센터페시아에 마련되고,
    상기 제어 대상이 후속 제어 가능 상태에 있음을 알리기 위해, 상기 인디케이터를 점멸시키는 것;을 더 포함하는 차량의 제어 방법.
  18. 제10항에 있어서,
    사용자의 조작 입력을 획득하기 위한 버튼이 차량의 센터페시아에 마련되고,
    상기 제어 명령은
    마이크를 통한 상기 사용자의 음성 입력 또는 상기 버튼을 통한 상기 사용자의 조작 입력으로부터 획득되는, 차량의 제어 방법.
KR1020210121641A 2021-09-13 2021-09-13 차량 및 그 제어 방법 KR20230039799A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020210121641A KR20230039799A (ko) 2021-09-13 2021-09-13 차량 및 그 제어 방법
US17/884,338 US20230081386A1 (en) 2021-09-13 2022-08-09 Vehicle and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210121641A KR20230039799A (ko) 2021-09-13 2021-09-13 차량 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20230039799A true KR20230039799A (ko) 2023-03-22

Family

ID=85479285

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210121641A KR20230039799A (ko) 2021-09-13 2021-09-13 차량 및 그 제어 방법

Country Status (2)

Country Link
US (1) US20230081386A1 (ko)
KR (1) KR20230039799A (ko)

Also Published As

Publication number Publication date
US20230081386A1 (en) 2023-03-16

Similar Documents

Publication Publication Date Title
US10532746B2 (en) Vehicle and controlling method thereof
CN108162982B (zh) 车辆操作功能的提示方法及系统和汽车
US9868447B2 (en) Controlling vehicle systems with mobile devices
US20170286785A1 (en) Interactive display based on interpreting driver actions
US20180226077A1 (en) Vehicle driving assist and vehicle having same
US6344793B1 (en) Process for assisting a user of a motor vehicle when operating components of the motor vehicle as well as a pertaining system
CN106469556B (zh) 语音识别装置、具有语音识别装置的车辆、控制车辆方法
WO2016006385A1 (ja) 音声認識装置及び音声認識システム
CN109658922B (zh) 车辆的用于处理用户输入的装置和方法
US20190228767A1 (en) Speech recognition apparatus and method of controlling the same
US10467905B2 (en) User configurable vehicle parking alert system
CN111845776A (zh) 一种车辆提醒方法和车辆
JP2016203815A (ja) 車載機器の動作制御装置
JP5775206B2 (ja) コンピューティング装置及びコンピュータによって実行される自動運転の方法
US11938820B2 (en) Voice control of vehicle systems
CN111724798B (zh) 车载设备控制系统、车载设备控制装置、车载设备控制方法及存储介质
JP2013206319A (ja) 車両用遠隔支援システム
KR20230039799A (ko) 차량 및 그 제어 방법
CN111511599A (zh) 用于运行辅助系统的方法和汽车用辅助系统
JP2020144285A (ja) エージェントシステム、情報処理装置、移動体搭載機器制御方法、及びプログラム
CN115431911A (zh) 交互控制方法、装置、电子设备、存储介质和车辆
CN114882579A (zh) 车载屏幕的控制方法、装置及车辆
KR20220010655A (ko) 주행모드 및 사용자 제어모션에 따른 자율주행 차량의 동적 칵핏 제어 시스템
JP2020059401A (ja) 車両制御装置、車両制御方法、プログラム
WO2023153314A1 (ja) 車内機器制御装置、車内機器制御方法

Legal Events

Date Code Title Description
A201 Request for examination