KR20220150640A - 차량 및 그의 제어방법 - Google Patents

차량 및 그의 제어방법 Download PDF

Info

Publication number
KR20220150640A
KR20220150640A KR1020210057871A KR20210057871A KR20220150640A KR 20220150640 A KR20220150640 A KR 20220150640A KR 1020210057871 A KR1020210057871 A KR 1020210057871A KR 20210057871 A KR20210057871 A KR 20210057871A KR 20220150640 A KR20220150640 A KR 20220150640A
Authority
KR
South Korea
Prior art keywords
vehicle
function
tactile input
controlling
control target
Prior art date
Application number
KR1020210057871A
Other languages
English (en)
Inventor
김성왕
임우택
박민재
이동현
Original Assignee
현대자동차주식회사
기아 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사, 기아 주식회사 filed Critical 현대자동차주식회사
Priority to KR1020210057871A priority Critical patent/KR20220150640A/ko
Priority to US17/670,887 priority patent/US20220355664A1/en
Priority to CN202210198475.0A priority patent/CN115312046A/zh
Publication of KR20220150640A publication Critical patent/KR20220150640A/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/25—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using haptic output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W50/16—Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03K—PULSE TECHNIQUE
    • H03K17/00—Electronic switching or gating, i.e. not by contact-making and –breaking
    • H03K17/94—Electronic switching or gating, i.e. not by contact-making and –breaking characterised by the way in which the control signals are generated
    • H03K17/96—Touch switches
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/139—Clusters of instrument input devices
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148—Instrument input by voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/089—Driver voice
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/13—Acoustic transducers and sound field adaptation in vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Automation & Control Theory (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

청각적 입력과 촉각적 입력을 모두 활용함으로써 사용자의 편의성 및 음성 인식 시스템의 활용성을 향상시킬 수 있는 차량은, 차량의 기능을 제어하기 위한 촉각적 입력(tactile input)을 수신하는 복수의 촉각적 입력 장치; 청각적 입력(audio input)을 수신하는 마이크; 및 상기 청각적 입력에 기초하여 상기 차량의 기능을 제어하는 음성 인식 시스템;을 포함하고, 상기 음성 인식 시스템은, 상기 촉각적 입력에 기초하여 제어 대상을 결정하고, 상기 청각적 입력에 기초하여 상기 결정된 제어 대상에 대한 제어 명령을 결정하고, 상기 제어 명령에 기초하여 상기 제어 대상을 제어한다.

Description

차량 및 그의 제어방법{VEHICLE AND METHOD FOR CONTROLLING THEREOF}
본 개시는 차량의 다양한 기능을 편리하게 제어할 수 있는 차량 및 그의 제어방법에 관한 것이다.
음성 인식 시스템은 사용자의 발화를 인식하고 인식된 발화에 대응되는 서비스를 제공할 수 있는 시스템이다.
최근에는 음성 인식 시스템을 이용한 다양한 종류의 서비스가 제공되고 있으며, 특히 차량 내부의 탑승자가 차량의 각종 기능을 제어하기 위한 명령을 발화하면 탑승자의 의도에 따라 차량의 각종 기능이 제어될 수 있다.
차량은 다양한 기능을 탑재하고 있기 때문에, 탑승자는 제어 대상과 제어 대상에 대한 제어 명령을 포함하는 발화 명령을 통해 차량의 각종 기능을 제어할 수 있다.
또한, 탑승자는 발화 명령 이전에 호출어를 이용하여 음성 인식 시스템을 활성화시켜야 한다.
그러나, 탑승자의 발화 명령이 길어질수록 발화 명령에 대한 인식의 정확도가 떨어질 수 밖에 없다.
본 개시는 청각적 입력과 촉각적 입력의 조합에 기초하여 차량의 다양한 기능을 편리하게 제어할 수 있는 차량 및 그의 제어방법을 제공하고자 한다.
상술한 목적을 달성하기 위한 일 실시예에 따른 차량은, 차량의 기능을 제어하기 위한 촉각적 입력(tactile input)을 수신하는 복수의 촉각적 입력 장치; 청각적 입력(audio input)을 수신하는 마이크; 및 상기 청각적 입력에 기초하여 상기 차량의 기능을 제어하는 음성 인식 시스템;을 포함하고, 상기 음성 인식 시스템은, 상기 촉각적 입력에 기초하여 제어 대상을 결정하고, 상기 청각적 입력에 기초하여 상기 결정된 제어 대상에 대한 제어 명령을 결정하고, 상기 제어 명령에 기초하여 상기 제어 대상을 제어할 수 있다.
또한, 상기 음성 인식 시스템은, 상기 촉각적 입력을 수신하는 것에 응답하여 활성화될 수 있다.
또한, 상기 음성 인식 시스템은, 상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제1 기능으로 결정할 수 있다.
또한, 상기 음성 인식 시스템은, 상기 차량의 제2 기능을 제어하기 위한 제2 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제2 기능으로 결정할 수 있다.
또한, 상기 음성 인식 시스템은, 상기 제1 촉각적 입력이 수신되고 있는 상태에서 상기 마이크를 통해 수신되는 상기 청각적 입력을 상기 제1 기능을 제어하기 위한 발화 명령으로 인식할 수 있다.
또한, 상기 음성 인식 시스템은, 상기 청각적 입력에 기초하여 사용자의 음성을 인식하고, 상기 사용자의 음성에 상기 제어 대상을 상기 차량의 제2 기능으로 특정하는 명령이 포함되어 있더라도, 상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제1 기능으로 결정할 수 있다.
또한, 상기 음성 인식 시스템은, 상기 청각적 입력에 기초하여 사용자의 음성을 인식하고, 상기 사용자의 음성에 제어 대상을 특정하는 명령이 포함되어 있지 않은 경우에만 상기 촉각적 입력에 기초하여 상기 제어 대상을 결정할 수 있다.
또한, 상기 복수의 촉각적 입력 장치는, 푸쉬 가능하게 마련되는 푸쉬 버튼, 상하좌우로 이동 가능하게 마련되는 이동 버튼 또는 터치 입력을 수신하는 터치 패드 중 어느 하나를 포함할 수 있다.
또한, 상기 복수의 촉각적 입력 장치는, 상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 제1 촉각적 입력 장치; 및 상기 차량의 제2 기능을 제어하기 위한 제2 촉각적 입력을 수신하는 제2 촉각적 입력 장치;를 포함할 수 있다.
또한, 상기 차량의 기능을 제어하기 위한 촉각적 입력은, 상기 차량의 기능을 온오프(ON/OFF)하거나, 상기 차량의 기능을 설정하기 위한 것일 수 있다.
상술한 목적을 달성하기 위한 일 실시예에 따른 차량의 제어방법은, 차량의 기능을 제어하기 위한 촉각적 입력을 수신하는 단계; 청각적 입력(audio input)을 수신하는 단계; 상기 촉각적 입력에 기초하여 제어 대상을 결정하는 단계; 상기 청각적 입력에 기초하여 상기 결정된 제어 대상에 대한 제어 명령을 결정하는 단계; 및 상기 제어 명령에 기초하여 상기 제어 대상을 제어하는 단계;를 포함할 수 있다.
또한, 상기 청각적 입력에 기초하여 상기 결정된 제어 대상에 대한 제어 명령을 결정하는 단계는, 상기 촉각적 입력을 수신하는 것에 응답하여 수행될 수 있다.
또한, 상기 촉각적 입력에 기초하여 제어 대상을 결정하는 단계는, 상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제1 기능으로 결정하는 것;을 포함할 수 있다.
또한, 상기 촉각적 입력에 기초하여 제어 대상을 결정하는 단계는, 상기 차량의 제2 기능을 제어하기 위한 제2 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제2 기능으로 결정하는 것;을 더 포함할 수 있다.
또한, 상기 청각적 입력에 기초하여 상기 결정된 제어 대상에 대한 제어 명령을 결정하는 단계는, 상기 제1 촉각적 입력이 수신되고 있는 상태에서 수신되는 상기 청각적 입력을 상기 제1 기능을 제어하기 위한 발화 명령으로 인식하는 단계;를 포함할 수 있다.
또한, 상기 차량의 제어방법은, 상기 청각적 입력에 기초하여 사용자의 음성을 인식하는 단계;를 더 포함하고, 상기 촉각적 입력에 기초하여 제어 대상을 결정하는 단계는, 상기 사용자의 음성에 상기 제어 대상을 상기 차량의 제2 기능으로 특정하는 명령이 포함되어 있더라도, 상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제1 기능으로 결정하는 단계;를 더 포함할 수 있다.
또한, 상기 차량의 제어방법은, 상기 청각적 입력에 기초하여 사용자의 음성을 인식하는 단계;를 더 포함하고, 상기 촉각적 입력에 기초하여 제어 대상을 결정하는 단계는, 상기 사용자의 음성에 제어 대상을 특정하는 명령이 포함되어 있지 않은 경우에만 수행될 수 있다.
또한, 상기 차량의 기능을 제어하기 위한 촉각적 입력을 수신하는 단계는, 푸쉬 가능하게 마련되는 푸쉬 버튼, 상하좌우로 이동 가능하게 마련되는 이동 버튼 또는 터치 입력을 수신하는 터치 패드 중 어느 하나에 의해 수행될 수 있다.
또한, 상기 차량의 기능을 제어하기 위한 촉각적 입력을 수신하는 단계는, 상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 제1 촉각적 입력 장치 및 상기 차량의 제2 기능을 제어하기 위한 제2 촉각적 입력을 수신하는 제2 촉각적 입력 장치를 포함하는 복수의 촉각적 입력 장치를 통해 수행될 수 있다.
또한, 상기 차량의 기능을 제어하기 위한 촉각적 입력은, 상기 차량의 기능을 온오프(ON/OFF)하거나, 상기 차량의 기능을 설정하기 위한 것일 수 있다.
개시된 발명에 따르면, 청각적 입력과 촉각적 입력을 모두 활용함으로써 사용자의 편의성 및 음성 인식 시스템의 활용성을 향상시킬 수 있다.
도 1은 일 실시예에 따른 차량의 제어 블록도이다.
도 2는 일 실시예에 따른 차량의 내부 구성 일부를 도시한 도면이다.
도 3은 일 실시예에 따른 차량의 제어방법에 관한 순서도이다.
도 4 내지 도 8은 다양한 실시예에 따라, 사용자가 차량의 기능을 제어하는 모습을 도시한 도면이다.
개시된 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법 및 장치는 첨부되는 도면과 함께 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 개시된 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 개시된 실시예들은 개시된 발명의 개시가 완전하도록 하고, 개시된 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 개시된 발명은 청구항의 범주에 의해 정의될 뿐이다.
개시된 명세서에서 사용되는 용어에 대해 간략히 설명하고, 개시된 발명에 대해 구체적으로 설명하기로 한다.
개시된 발명에서 사용되는 용어는 개시된 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 개시된 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 개시된 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에서 사용되는 "부"라는 용어는 소프트웨어, FPGA 또는 ASIC과 같은 하드웨어 구성요소를 의미하며, "부"는 어떤 역할들을 수행한다. 그렇지만 "부"는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. "부"는 어드레싱 할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 "부"는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 "부"들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 "부"들로 결합되거나 추가적인 구성요소들과 "부"들로 더 분리될 수 있다.
각 단계들에 붙여지는 부호는 각 단계들을 식별하기 위해 사용되는 것으로 이들 부호는 각 단계들 상호 간의 순서를 나타내는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 실시될 수 있다.
아래에서는 첨부한 도면을 참고하여 차량 및 차량의 제어방법의 실시예에 대하여 개시된 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그리고 도면에서 개시된 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략한다. 또한, 도면에서 동일한 도면 부호는 동일한 구성요소를 나타내며, 이에 대한 중복되는 설명은 생략하기로 한다.
도 1은 일 실시예에 따른 차량의 제어 블록도이다.
도 1을 참조하면, 일 실시예에 따른 차량(10)은 마이크(110), 복수의 촉각적 입력 장치(120), 음성 인식 시스템(130) 및 출력부(140)를 포함할 수 있다.
마이크(110)는 청각적 입력(audio input)을 수신하고, 청각적 입력에 대응되는 전기적 신호를 생성할 수 있다.
이를 위한 마이크(110)는 차량(10) 내의 사용자의 음성을 수신하기 위해 차량(10)의 내부에 배치될 수 있으며, 복수 개일 수 있으며, 어레이 형태로 배치될 수 있다.
마이크(110)는 사용자의 청각적 입력(예: 음성)을 전기적 신호로 변환하여 음성 인식 시스템(130)에 전달할 수 있다.
복수의 촉각적 입력 장치(120)는 차량(10)의 다양한 기능을 제어하기 위한 촉각적 입력(tactile input)을 수신할 수 있다.
촉각적 입력은 사용자의 물리적 조작(예: 푸쉬, 드래그, 터치)에 의한 입력을 의미할 수 있다.
사용자의 물리적인 조작을 가능하게 하기 위해, 복수의 촉각적 입력 장치(120)는 외부에서 가해지는 힘의 방향에 따라 상하좌우로 이동 가능하게 마련되는 이동 버튼, 외부에서 가해지는 힘에 따라 푸쉬 가능하게 마련되는 푸쉬 버튼, 또는 터치 입력을 수신하는 터치 패드 중 적어도 하나를 포함할 수 있다.
도 2는 일 실시예에 따른 차량의 내부 구성 일부를 도시한 도면이다.
도 2를 참조하면, 차량(10) 내부에는 다양한 촉각적 입력 장치(120)가 배치되어 있음을 확인할 수 있다.
복수의 촉각적 입력 장치(120) 각각은 차량(10)에서 제공하는 특정 기능을 제어하기 위한 촉각적 입력을 수신할 수 있다.
일 실시예에 따른 차량(10)에서 제공하는 각종 기능은 공조 제어 기능, 도어 제어 기능, 윈도우 제어 기능, 멀티 미디어 제어 기능, 시트 제어 기능, 썬루프 제어 기능, 조명 제어 기능, 내비게이션 제어 기능, 라디오 제어 기능, 자율 주행 제어 기능(예: 크루즈 제어 기능) 및 기타 차량 관련 설정 제어 기능 중 어느 하나를 포함할 수 있다. 다만, 나열된 차량(10)의 기능들은 일 예시에 불과하고, 예시들 외에 다른 기능들이 포함될 수도 있음은 물론이다.
일 실시예에서, 복수의 촉각적 입력 장치(120)는 차량(10)의 제1 기능(예: 통풍 시트 기능)을 제어하기 위한 제1 촉각적 입력(예: 푸쉬 입력)을 수신하는 제1 촉각적 입력 장치(120-1)(예: 푸쉬 버튼), 차량(10)의 제2 기능(예: 공조 제어 기능)을 제어하기 위한 제2 촉각적 입력(예: 푸쉬 입력)을 수신하는 제2 촉각적 입력 장치(120-2)(예: 푸쉬 버튼), 차량(10)의 제3 기능(예: 크루즈 제어 기능)을 제어하기 위한 제3 촉각적 입력(예: 이동 입력)을 수신하는 제3 촉각적 입력 장치(120-3)(예: 이동 버튼), 차량(10)의 제4 기능(예: 라디오 제어 기능)을 제어하기 위한 제4 촉각적 입력(예: 푸쉬 입력 또는 터치 입력)을 수신하는 제4 촉각적 입력 장치(120-4)(예: 푸쉬 버튼 또는 터치 패드), 차량(10)의 제n 기능(예: 썬루프 제어 기능)을 제어하기 위한 제n 촉각적 입력(예: 터치 입력)을 수신하는 제n 촉각적 입력 장치(120-n)(예: 터치 패드)를 포함할 수 있다.
이와 같이, 복수의 촉각적 입력 장치(120) 각각은 대응되는 기능을 제어하기 위해 독립적으로 마련될 수 있으며, 다양한 형태로 구현될 수 있다.
음성 인식 시스템(130)은 촉각적 입력과 청각적 입력의 조합에 기초하여 차량(10)의 기능을 제어할 수 있다.
일 실시예에서, 음성 인식 시스템(130)은 촉각적 입력에 기초하여 제어 대상을 결정하고, 청각적 입력에 기초하여 제어 대상에 대한 제어 명령을 결정하고, 제어 명령에 기초하여 제어 대상을 결정할 수 있다.
다시 말해서, 음성 인식 시스템(130)은 복수의 촉각적 입력 장치(120) 중 어느 하나의 촉각적 입력 장치(예: 제1 촉각적 입력 장치(120-1))를 통해 수신한 촉각적 입력에 기초하여 제어 대상이 무엇인지 결정할 수 있으며, 이후 수신되는 청각적 입력에 기초하여 제어 대상을 어떻게 제어할 지 결정할 수 있다.
음성 인식 시스템(130)은 전술한 동작 및 후술하는 동작을 수행하는 프로그램과 이를 실행하기 위해 필요한 각종 데이터가 저장된 적어도 하나의 메모리와 저장된 프로그램을 실행하는 적어도 하나의 프로세서를 포함할 수 있다.
음성 인식 시스템(130)에 포함되는 메모리와 프로세서가 복수 개 마련되는 경우에는, 이들이 하나의 칩 상에 집적될 수도 있고 물리적으로 분리될 수도 있다.
일 실시예에서, 음성 인식 시스템(130)은 청각적 입력(예: 발화 명령)을 처리기 위한 음성 처리기를 포함할 수 있다.
음성 처리기는 마이크(110)를 통해 입력되는 사용자의 청각적 입력(예: 발화 명령)을 텍스트 정보로 변환하는STT(Speech to Text) 엔진과 텍스트를 분석하여 발화 명령에 포함된 사용자 의도를 판단하는 대화 관리기를 포함할 수 있다.
대화 관리기는 텍스트에 자연어 이해 기술(Natural Language Understanding)을 적용하여 발화 명령에 대응되는 사용자 의도를 파악할 수 있다.
구체적으로, 대화 관리기는 텍스트 형태의 발화 명령에 대해 형태소 분석을 수행하여 입력 문자열을 형태소열로 바꿔준다. 또한, 대화 관리기는 발화 명령으로부터 개체명을 식별할 수 있다. 개체명은 인명, 장소명, 조직명, 시간, 날짜, 화폐, 가족을 나타내는 명칭, 차량(10)의 각종 전자 장치의 명칭 등의 고유 명사로서, 개체명 인식은 문장에서 개체명을 식별하고 식별된 개체명의 종류를 결정하는 작업이다. 대화 관리기는 개체명 인식을 통해 문장에서 중요한 키워드를 추출하여 문장의 의미를 파악할 수 있다.
또한, 대화 관리기는 사용자의 발화 명령으로부터 도메인을 인식할 수 있다. 도메인은 사용자가 발화한 언어의 주제를 식별할 수 있는 것으로서, 예를 들어, 제어 대상인 기능의 종류가 도메인이 될 수 있다. 따라서, 내비게이션 장치, 윈도우 구동 유닛, 통풍 시트 구동 유닛, 라디오 유닛, 썬루프 구동 유닛, 크루즈 기능 제어 유닛, 공조 기능 제어 유닛 등의 차량(10)의 내부의 전자 장치 유닛이 도메인이 될 수 있다.
또한, 대화 관리기는 사용자의 발화 명령으로부터 제어 명령을 인식할 수 있다. 제어 명령은 사용자가 발화한 언어의 목적을 식별할 수 있는 것으로서, 제어 대상에 대한 제어 명령을 포함할 수 있다.
예를 들어, 제어 명령은 온오프(ON/OFF) 명령 및 기능 설정 명령 등을 포함할 수 있다. 온오프(ON/OFF) 명령은 특정 기능을 활성화시키거나 비활성화시키기 위한 명령이고, 기능 설정 명령은 특정 기능에 대한 세부 사항을 설정하기 위한 명령을 포함할 수 있다.
예를 들어, 기능 설정 명령은 '제어 대상(예: 윈도우)을 개방하기 위한 명령', '제어 대상(예: 공조 장치)의 설정 온도를 특정 온도로 변경하기 위한 명령', '제어 대상(예: 크루즈 제어 기능)의 설정 속도를 특정 속도로 변경하기 위한 명령', '제어 대상(예: 라디오)의 주파수를 특정 주파수로 변경하기 위한 명령', '제어 대상(예: 통풍 시트 기능)의 단계를 특정 강도로 변경하기 위한 명령', '제어 대상(예: 공조 장치)의 모드를 변경하기 위한 명령' 등을 포함할 수 있다.
이와 같이, 대화 관리기는 사용자의 발화 명령에 대응되는 도메인, 개체명, 제어 명령 등의 정보에 기초하여 사용자 의도를 파악하고, 사용자 의도에 대응되는 액션을 추출할 수 있다.
예를 들어, 제어 대상이 "공조 장치"이고, 제어 명령이 "실행"으로 결정된 경우, 그에 대응되는 액션은 '공조 장치 (오브젝트)_ON(오퍼레이터)'으로 정의될 수 있으며, , 제어 대상이 "윈도우"이고, 제어 명령이 "개방"으로 결정된 경우, 그에 대응되는 액션은 '창문(오브젝트)_OPEN(오퍼레이터)'으로 정의될 수 있다.
출력부(140)는 차량(10)의 다양한 기능을 수행할 수 있는 각종 전자 장치를 포함할 수 있다. 예를 들어, 출력부(140)는 내비게이션 장치, 윈도우 구동 유닛, 통풍 시트 구동 유닛, 라디오 유닛, 썬루프 구동 유닛, 크루즈 기능 제어 유닛, 공조 기능 제어 유닛 등의 차량(10)의 내부의 전자 장치를 포함할 수 있다.
일 실시예에서, 출력부(140)는 음성 인식 시스템(130)을 통해 결정된 제어 대상을 포함할 수 있다.
예를 들어, 음성 인식 시스템(130)은 '공조 장치 실행'이라는 액션 데이터를 추출하면, 출력부(140)(예: 공조 기능 제어 유닛)에게 공조 장치를 온시키는 제어 신호를 송출할 수 있다.
실시예에 따라, 마이크(110), 복수의 촉각적 입력 장치(120), 음성 인식 시스템(130) 및 출력부(140)는 차량 통신 네트워크를 통해 통신할 수 있다.
차량 통신 네트워크는 이더넷(Ethernet), 모스트(MOST, Media Oriented Systems Transport), 플렉스레이(Flexray), 캔(CAN, Controller Area Network), 린(LIN, Local Interconnect Network) 등의 통신 방식을 채용할 수 있다.
일 실시예에서, 복수의 촉각적 입력 장치(120)가 촉각적 입력을 수신하면, 촉각적 입력에 대응되는 통신 메시지가 캔 통신으로 연결된 다른 모듈(예: 바디 컨트롤 모듈(Body Control Module), 음성 인식 시스템(130))에 직접적으로 또는 간접적으로 전달될 수 있다.이상에서는 차량(10)의 각종 구성요소에 대하여 설명하였다. 이하에서는 도 3 내지 도 8을 참조하여 상술하여 설명한 차량(10)의 구성요소들을 활용한 차량(10)의 제어방법을 설명한다.
도 3은 일 실시예에 따른 차량의 제어방법에 관한 순서도이고, 도 4 내지 도 8은 다양한 실시예에 따라, 사용자가 차량의 기능을 제어하는 모습을 도시한 도면이다.
음성 인식 시스템(130)은 사용자의 발화를 입력 받고, 발화에 대응되는 도메인, 사용자 의도 및 슬롯(slot)을 결정할 수 있다. 이 때, 슬롯은 제어 대상에 대한 제어량을 포함할 수 있다.
일 실시예에 따르면, 음성 인식 시스템(130)은 촉각적 입력 장치(120)로부터 수신한 촉각적 입력에 기초하여 도메인 및 사용자 의도 중 적어도 하나를 결정할 수 있으며, 청각적 입력(예: 사용자의 발화)에 기초하여 사용자 의도 및 슬롯 중 적어도 하나를 결정할 수 있다.
다양한 실시예에 따라, 음성 인식 시스템(130)은 촉각적 입력을 수신한 촉각적 입력 장치(120)의 종류에 따라 도메인 및 사용자 의도, 도메인, 또는 사용자 의도를 결정할 수 있으며 촉각적 입력에 의해 결정되지 않은 항목은 사용자 발화에 기초하여 결정할 수 있다.
다시 말해서, 일 실시예에 따른 음성 인식 시스템(130)은 사용자의 발화에만 의존하여 도메인, 사용자 의도 및 슬롯을 모두 결정하는 것이 아니라, 사용자의 물리적인 조작에 기초하여 도메인, 사용자 의도 및 슬롯 중 일부(예: 도메인)를 결정할 수 있다. 이에 따라, 일 실시예에 따른 음성 인식 시스템(130)에 의하면, 촉각적 입력에 기초하여 결정되는 사항(예: 도메인)과 청각적 입력에 기초하여 결정되는 사항(예: 사용자 의도, 슬롯)은 서로 상이할 수 있다.
예를 들어, 사용자가 에어컨 버튼을 누르고 "17도로 켜줘"라고 발화한 경우, 일 실시예에 따른 음성 인식 시스템(130)은 사용자가 에어컨 버튼을 누른 것에 기초하여 도메인을 '에어컨'으로 결정할 수 있으며, 사용자가 "17도로 켜줘"라고 발화한 것에 기초하여 사용자 의도를 'Turn on'으로 결정할 수 있으며, 슬롯을 '17도'로 결정할 수 있다.
또 다른 예로, 사용자가 라디오 버튼을 누르고 "97.9"라고 발화한 경우, 일 실시예에 따른 음성 인식 시스템(130)은 사용자가 라디오 버튼을 누른 것에 기초하여 도메인을 '라디오'로 결정할 수 있으며, 사용자가 "97.9"라고 발화한 것에 기초하여 사용자 의도를 '주파수 조절'로 결정할 수 있으며, 슬롯을 '97.9'로 결정할 수 있다.
또 다른 예로, 사용자가 풍량 버튼을 누르고 "위로"라고 발화한 경우, 일 실시예에 따른 음성 인식 시스템(130)은 사용자가 풍량 버튼을 누른 것에 기초하여 도메인을 '풍량 제어 기능'으로 결정하고, 사용자 의도를 '풍량 조절'로 결정할 수 있으며, 사용자가 "위로"라고 발화한 것에 기초하여 슬롯을 '상향'으로 결정할 수 있다.
이하에서는 도면을 참조하여 상술한 내용을 보다 구체적으로 후술한다.
도 3을 참조하면, 복수의 촉각적 입력 장치(120) 중 어느 하나의 촉각적 입력 장치(예: 제1 촉각적 입력 장치(120-1))는 사용자의 물리적인 조작에 따라 촉각적 입력을 수신할 수 있다(1000).
예를 들어, 차량(10)의 제1 기능을 제어하기 위한 제1 촉각적 입력 장치(120-1)는 제1 촉각적 입력을 수신할 수 있다.
음성 인식 시스템(130)은 촉각적 입력 장치(120)가 촉각적 입력을 수신하는 것에 응답하여(1000) 활성화될 수 있다.
구체적으로, 차량(10)의 공조 기능을 제어하기 위한 제1 촉각적 입력 장치(120-1)가 제1 촉각적 입력을 수신하면, 캔 통신을 통해 제1 촉각적 입력에 대응되는 통신 메시지가 출력될 수 있으며, 음성 인식 시스템(130)은 제1 촉각적 입력에 대응되는 통신 메시지를 수신할 수 있다.
예를 들어, 공조 장치의 설정 온도를 조절하기 위한 촉각적 입력에 대응되는 통신 메시지의 이름은 "Air_Temp"로 정의될 수 있으며, 촉각적 입력에 대응되는 통신 메시지는 사용자 의도를 포함하는 적어도 하나의 신호를 포함할 수 있다. 예를 들어, 공조 장치의 설정 온도를 조절하기 위한 촉각적 입력에 대응되는 통신 메시지에 포함된 신호는 공조 장치의 설정 온도를 낮추기 위한 의도를 포함하는 제1 신호와, 공조 장치의 설정 온도를 높이기 위한 의도를 포함하는 제2 신호를 포함할 수 있으며, 제1 신호의 이름은 "Temp_Low"로 정의될 수 있고, 제2 신호의 이름은 "Temp_High"로 정의될 수 있다.
실시예에 따라, 음성 인식 시스템(130)은 촉각적 입력 장치(120)를 통해 촉각적 입력이 수신되고 있는 상태에서 활성화될 수 있다. 다양한 실시예에 따라, 음성 인식 시스템(130)은 촉각적 입력 장치(120)를 통해 촉각적 입력을 수신한 후 미리 설정된 시간(예: 2초) 동안 활성화될 수도 있다.
예를 들어, 음성 인식 시스템(130)은 캔 통신을 통해 제1 촉각적 입력에 대응되는 통신 메시지를 수신한 것에 응답하여 활성화될 수 있다.
일 실시예에 의하면, 사용자는 음성 인식 시스템(130)을 호출하기 위한 호출 명령을 발화할 필요가 없어 사용자의 편의를 도모할 수 있다.
음성 인식 시스템(130)은 활성화 상태에서 촉각적 입력에 기초하여 제어 대상을 결정할 수 있다(1100). 예를 들어, 음성 인식 시스템(130)은 제1 촉각적 입력 장치(120-1)가 차량(10)의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 것에 응답하여 제어 대상을 제1 기능으로 결정할 수 있다.
일 실시에에서, 음성 인식 시스템(130)은 캔 통신을 통해 수신한 통신 메시지에 포함된 텍스트 정보에 기초하여 제어 대상을 결정할 수 있다.
예를 들어, 음성 인식 시스템(130)은 캔 통신을 통해 수신한 통신 메시지의 이름이 "Air_Temp"로 정의된 경우 제어 대상을 "공조 장치 온도 설정 기능"으로 결정할 수 있다.마찬가지로, 음성 인식 시스템(130)은 제2 촉각적 입력 장치(120-2)가 차량(10)의 제2 기능을 제어하기 위한 제2 촉각적 입력을 수신하는 것에 응답하여 제어 대상을 제2 기능으로 결정할 수 있다.
예를 들어, 음성 인식 시스템(130)은 캔 통신을 통해 수신한 통신 메시지의 이름이 "Sheet_Fan"로 정의된 경우 제어 대상을 "통풍 시트 기능"으로 결정할 수 있다.
이를 위해, 음성 인식 시스템(130)은 통신 메시지의 이름 또는 통신 메시지에 포함된 신호의 이름과 대응되는 도메인 정보를 저장하는 데이터 베이스를 포함할 수 있다.
일 실시예에 의하면, 사용자의 발화 명령에 도메인, 즉, 제어 대상이 포함되어 있지 않더라도 음성 인식 시스템(130)은 어떤 종류의 촉각적 입력 장치(120)가 촉각적 입력을 수신하였는지에 기초하여 제어 대상을 결정할 수 있다.
일 실시예에 의하면, 사용자가 발화 명령에 제어 대상을 포함시키지 않아도 되기 때문에 발화 명령에 포함된 문구의 길이가 짧아 질 수 있으며, 이에 따라 음성 인식 시스템(130)은 사용자의 의도를 더욱 정확하게 파악할 수 있다.
일 실시예에서, 마이크(110)는 청각적 입력을 수신할 수 있으며(1200), 촉각적 입력을 수신하여 활성화 상태로 변경된 음성 인식 시스템(130)은 마이크(110)를 통해 수신된 청각적 입력에 기초하여 제어 명령을 결정할 수 있다(1300).
다시 말해서, 음성 인식 시스템(130)은 제1 촉각적 입력 장치(120-1)를 통해 제1 촉각적 입력이 수신되고 있는 상태에서 마이크(110)를 통해 수신되는 청각적 입력을 제1 기능을 제어하기 위한 발화 명령으로 인식할 수 있다.
음성 인식 시스템(130)은 촉각적 입력에 기초하여 결정된 제어 대상과, 청각적 입력에 기초하여 결정된 제어 명령에 기초하여 최종 액션을 결정하고, 결정된 최종 액션에 따라 출력부(140)를 제어할 수 있다(1400).
일 실시예에서, 음성 인식 시스템(130)은 캔 통신을 통해 결정된 최종 액션에 대응되는 통신 메시지를 출력할 수 있고, 최종 액션에 대응되는 모듈(예: BCM)은 캔 통신을 통해 수신된 통신 메시지에 기초하여 대응되는 전장품을 제어할 수 있다.
다시 말해서, 음성 인식 시스템(130)은 청각적 입력에 기초하여 결정된 제어 명령에 기초하여 촉각적 입력에 기초하여 결정된 제어 대상을 제어할 수 있다.
일 실시예에 의하면, 사용자는 음성 인식 시스템(130)을 호출할 필요 없이 제어하고 싶은 기능과 관련된 촉각적 입력 장치를 조작하고, 대응되는 제어 명령만을 발화함으로써 차량(10)의 다양한 기능을 간단하게 제어할 수 있다.
도 4를 참조하면, 사용자가 제1 촉각적 입력 장치(120-1)(예: 통풍 시트 기능과 관련된 푸쉬 버튼)를 푸쉬하고 있는 것에 응답하여 음성 인식 시스템(130)이 활성화될 수 있으며, 사용자가 제1 촉각적 입력 장치(120-1)를 푸쉬한 상태로 "3단"이라고 발화하는 것에 응답하여 음성 인식 시스템(130)은 제어 대상을 통풍 시트 기능으로 결정하고, 제어 명령을 "3단으로 실행"으로 결정할 수 있다.
이에 따라, 음성 인식 시스템(130)은 최종 액션을 '통풍 시트_ON_LEVEL 3'로 결정할 수 있고, 최종 액션에 기초하여 출력부(140)(예: 통풍 시트 제어 유닛)를 제어할 수 있다.
도 5를 참조하면, 사용자가 제2 촉각적 입력 장치(120-2)(예: 공조 장치의 방향 설정 모드와 관련된 푸쉬 버튼)를 푸쉬하고 있는 것에 응답하여 음성 인식 시스템(130)이 활성화될 수 있으며, 사용자가 제2 촉각적 입력 장치(120-2)를 푸쉬한 상태로 "위, 아래"라고 발화하는 것에 응답하여 음성 인식 시스템(130)은 제어 대상을 공조 기능으로 결정하고, 제어 명령을 "위아래 모드"으로 결정할 수 있다.
이에 따라, 음성 인식 시스템(130)은 최종 액션을 '공조 장치_MODE_UPDOWN'으로 결정할 수 있고, 최종 액션에 기초하여 출력부(140)(예: 공조 기능 제어 유닛)를 제어할 수 있다.
도 6을 참조하면, 사용자가 제3 촉각적 입력 장치(120-3)(예: 크루즈 기능 속도 설정을 위한 이동 버튼)를 위로 밀고 있는 것에 응답하여 음성 인식 시스템(130)이 활성화될 수 있으며, 사용자가 제3 촉각적 입력 장치(120-3)를 위로 밀고 있는 상태로 "80km"라고 발화하는 것에 응답하여 음성 인식 시스템(130)은 제어 대상을 크루즈 제어 기능으로 결정하고, 제어 명령을 "80km로 설정"으로 결정할 수 있다.
이에 따라, 음성 인식 시스템(130)은 최종 액션을 '크루즈 기능_ON_80km'으로 결정할 수 있고, 최종 액션에 기초하여 출력부(140)(예: 크루즈 기능 제어 유닛)를 제어할 수 있다.
도 7 및 도 8을 참조하면, 사용자가 제4 촉각적 입력 장치(120-4)(예: 라디오 기능 설정을 위한 푸쉬 버튼 또는 터치 패드)를 푸쉬(또는 터치) 하고 있는 것에 응답하여 음성 인식 시스템(130)이 활성화될 수 있으며, 사용자가 제4 촉각적 입력 장치(120-4)를 푸쉬(또는 터치) 하고 있는 상태로 "97.7"라고 발화하는 것에 응답하여 음성 인식 시스템(130)은 제어 대상을 라디오 제어 기능으로 결정하고, 제어 명령을 "주파수 97.7"로 결정할 수 있다.
이에 따라, 음성 인식 시스템(130)은 최종 액션을 '라디오 기능 _FREQUENCY_97.7'으로 결정할 수 있고, 최종 액션에 기초하여 출력부(140)(예: 라디오 기능 제어 유닛)를 제어할 수 있다.
다양한 실시예에 따라, 사용자는 촉각적 입력 또는 청각적 입력 중 어느 하나에 대하여 우선 순위를 설정할 수 있다.
다양한 실시예에 따라, 촉각적 입력에 대하여 우선순위가 설정된 경우, 음성 인식 시스템(130)은 청각적 입력에 기초하여 사용자의 음성을 인식하고, 사용자의 음성에 제어 대상을 차량(10)의 제2 기능으로 특정하는 명령이 포함되어 있더라도, 차량(10)의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 것에 응답하여 제어 대상을 제1 기능으로 결정할 수 있다.
예를 들어, 사용자가 라디오 제어 기능과 관련된 촉각적 입력 장치(120-4)를 푸쉬하면서 "공조 장치 켜줘"라고 발화하는 경우, 음성 인식 시스템(130)은 사용자의 발화 명령에서 식별된 제어 대상(공조 제어 기능)을 무시하고, 제어 대상을 라디오 제어 기능으로 결정할 수 있다.
일 실시예에 의하면, 사용자가 제어 대상을 잘못 발화하는 경우에도 올바른 제어 대상을 제어할 수 있다.
다양한 실시예에 따라, 청각적 입력에 대하여 우선순위가 설정된 경우, 음성 인식 시스템(130)은 사용자의 음성에 제어 대상을 특정하는 명령이 포함되어 있지 않은 경우에만 촉각적 입력에 기초하여 제어 대상을 결정할 수도 있다.
예를 들어, 사용자가 라디오 제어 기능과 관련된 촉각적 입력 장치(120-4)를 푸쉬하면서 "공조 장치 켜줘"라고 발화하는 경우, 음성 인식 시스템(130)은 사용자의 발화 명령에서 식별된 "공조 장치"를 제어 대상으로 결정할 수 있다.
일 실시예에 의하면, 사용자가 차량(10) 내부의 모든 촉각적 입력 장치를 음성 인식 시스템(130)을 활성화시키기 위한 입력 장치로서 활용할 수 있다.
최근에는 차량에서 제공되는 기능들이 다양해짐에 따라 사용자가 특정 기능의 정확한 명칭을 알고 있지 못한 경우가 많으며, 이에 따라 사용자가 음성 인식 기능을 사용하여 특정 기능을 제어하고 싶은 경우에 세밀한 물리적인 조작이 불가피하다.
일 실시예에 의하면, 사용자가 특정 기능을 제어하기 위한 촉각적 입력 장치의 위치만을 알고 있고, 특정 기능의 명칭을 정확히 알지 못하더라도 특정 촉각적 입력 장치를 누르거나, 터치하거나, 이동시키면서 발화하는 것만으로 용이하게 특정 기능을 제어할 수 있다.
또한, 일 실시예에 따르면 직접적인 물리적 조작이 필요한 촉각적 입력 장치를 활용하기 때문에, 사용자의 의도를 명확하게 파악할 수 있다.
차량 및 그의 제어방법의 예는 이에 한정되는 것이 아니며 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이다. 그러므로 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 본 발명의 범위는 전술한 설명이 아니라 청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
한편, 개시된 실시예들은 컴퓨터에 의해 실행 가능한 명령어를 저장하는 기록매체의 형태로 구현될 수 있다. 명령어는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 프로그램 모듈을 생성하여 개시된 실시예들의 동작을 수행할 수 있다. 기록매체는 컴퓨터로 읽을 수 있는 기록매체로 구현될 수 있다.
컴퓨터가 읽을 수 있는 기록매체로는 컴퓨터에 의하여 해독될 수 있는 명령어가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(Read Only Memory), RAM(Random Access Memory), 자기 테이프, 자기 디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있을 수 있다.
10: 차량 110: 마이크
120: 복수의 촉각적 입력 장치 130: 음성 인식 시스템
140: 출력부

Claims (20)

  1. 차량의 기능을 제어하기 위한 촉각적 입력(tactile input)을 수신하는 복수의 촉각적 입력 장치;
    청각적 입력(audio input)을 수신하는 마이크; 및
    상기 청각적 입력에 기초하여 상기 차량의 기능을 제어하는 음성 인식 시스템;을 포함하고,
    상기 음성 인식 시스템은,
    상기 촉각적 입력에 기초하여 제어 대상을 결정하고, 상기 청각적 입력에 기초하여 상기 결정된 제어 대상에 대한 제어 명령을 결정하고, 상기 제어 명령에 기초하여 상기 제어 대상을 제어하는 차량.
  2. 제1항에 있어서,
    상기 음성 인식 시스템은,
    상기 촉각적 입력을 수신하는 것에 응답하여 활성화되는 차량.
  3. 제1항에 있어서,
    상기 음성 인식 시스템은,
    상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제1 기능으로 결정하는 차량.
  4. 제3항에 있어서,
    상기 음성 인식 시스템은,
    상기 차량의 제2 기능을 제어하기 위한 제2 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제2 기능으로 결정하는 차량.
  5. 제3항에 있어서,
    상기 음성 인식 시스템은,
    상기 제1 촉각적 입력이 수신되고 있는 상태에서 상기 마이크를 통해 수신되는 상기 청각적 입력을 상기 제1 기능을 제어하기 위한 발화 명령으로 인식하는 차량.
  6. 제1항에 있어서,
    상기 음성 인식 시스템은,
    상기 청각적 입력에 기초하여 사용자의 음성을 인식하고, 상기 사용자의 음성에 상기 제어 대상을 상기 차량의 제2 기능으로 특정하는 명령이 포함되어 있더라도, 상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제1 기능으로 결정하는 차량.
  7. 제1항에 있어서,
    상기 음성 인식 시스템은,
    상기 청각적 입력에 기초하여 사용자의 음성을 인식하고, 상기 사용자의 음성에 제어 대상을 특정하는 명령이 포함되어 있지 않은 경우에만 상기 촉각적 입력에 기초하여 상기 제어 대상을 결정하는 차량.
  8. 제1항에 있어서,
    상기 복수의 촉각적 입력 장치는,
    푸쉬 가능하게 마련되는 푸쉬 버튼, 상하좌우로 이동 가능하게 마련되는 이동 버튼 또는 터치 입력을 수신하는 터치 패드 중 어느 하나를 포함하는 차량.
  9. 제1항에 있어서,
    상기 복수의 촉각적 입력 장치는,
    상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 제1 촉각적 입력 장치; 및
    상기 차량의 제2 기능을 제어하기 위한 제2 촉각적 입력을 수신하는 제2 촉각적 입력 장치;를 포함하는 차량.
  10. 제1항에 있어서,
    상기 차량의 기능을 제어하기 위한 촉각적 입력은,
    상기 차량의 기능을 온오프(ON/OFF)하거나, 상기 차량의 기능을 설정하기 위한 것인 차량.
  11. 차량의 기능을 제어하기 위한 촉각적 입력을 수신하는 단계;
    청각적 입력(audio input)을 수신하는 단계;
    상기 촉각적 입력에 기초하여 제어 대상을 결정하는 단계;
    상기 청각적 입력에 기초하여 상기 결정된 제어 대상에 대한 제어 명령을 결정하는 단계; 및
    상기 제어 명령에 기초하여 상기 제어 대상을 제어하는 단계;를 포함하는 차량의 제어방법.
  12. 제11항에 있어서,
    상기 청각적 입력에 기초하여 상기 결정된 제어 대상에 대한 제어 명령을 결정하는 단계는,
    상기 촉각적 입력을 수신하는 것에 응답하여 수행되는 차량의 제어방법.
  13. 제11항에 있어서,
    상기 촉각적 입력에 기초하여 제어 대상을 결정하는 단계는,
    상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제1 기능으로 결정하는 것;을 포함하는 차량의 제어방법.
  14. 제13항에 있어서,
    상기 촉각적 입력에 기초하여 제어 대상을 결정하는 단계는,
    상기 차량의 제2 기능을 제어하기 위한 제2 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제2 기능으로 결정하는 것;을 더 포함하는 차량의 제어방법.
  15. 제13항에 있어서,
    상기 청각적 입력에 기초하여 상기 결정된 제어 대상에 대한 제어 명령을 결정하는 단계는,
    상기 제1 촉각적 입력이 수신되고 있는 상태에서 수신되는 상기 청각적 입력을 상기 제1 기능을 제어하기 위한 발화 명령으로 인식하는 단계;를 포함하는 차량의 제어방법.
  16. 제11항에 있어서,
    상기 청각적 입력에 기초하여 사용자의 음성을 인식하는 단계;를 더 포함하고,
    상기 촉각적 입력에 기초하여 제어 대상을 결정하는 단계는,
    상기 사용자의 음성에 상기 제어 대상을 상기 차량의 제2 기능으로 특정하는 명령이 포함되어 있더라도, 상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 것에 응답하여 상기 제어 대상을 상기 제1 기능으로 결정하는 단계;를 더 포함하는 차량의 제어방법.
  17. 제11항에 있어서,
    상기 청각적 입력에 기초하여 사용자의 음성을 인식하는 단계;를 더 포함하고,
    상기 촉각적 입력에 기초하여 제어 대상을 결정하는 단계는,
    상기 사용자의 음성에 제어 대상을 특정하는 명령이 포함되어 있지 않은 경우에만 수행되는 차량의 제어방법.
  18. 제11항에 있어서,
    상기 차량의 기능을 제어하기 위한 촉각적 입력을 수신하는 단계는,
    푸쉬 가능하게 마련되는 푸쉬 버튼, 상하좌우로 이동 가능하게 마련되는 이동 버튼 또는 터치 입력을 수신하는 터치 패드 중 어느 하나에 의해 수행되는 차량의 제어방법.
  19. 제11항에 있어서,
    상기 차량의 기능을 제어하기 위한 촉각적 입력을 수신하는 단계는,
    상기 차량의 제1 기능을 제어하기 위한 제1 촉각적 입력을 수신하는 제1 촉각적 입력 장치 및 상기 차량의 제2 기능을 제어하기 위한 제2 촉각적 입력을 수신하는 제2 촉각적 입력 장치를 포함하는 복수의 촉각적 입력 장치를 통해 수행되는 차량의 제어방법.
  20. 제11항에 있어서,
    상기 차량의 기능을 제어하기 위한 촉각적 입력은,
    상기 차량의 기능을 온오프(ON/OFF)하거나, 상기 차량의 기능을 설정하기 위한 것인 차량의 제어방법.
KR1020210057871A 2021-05-04 2021-05-04 차량 및 그의 제어방법 KR20220150640A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020210057871A KR20220150640A (ko) 2021-05-04 2021-05-04 차량 및 그의 제어방법
US17/670,887 US20220355664A1 (en) 2021-05-04 2022-02-14 Vehicle having voice recognition system and method of controlling the same
CN202210198475.0A CN115312046A (zh) 2021-05-04 2022-03-02 具有语音识别系统的车辆及控制该车辆的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210057871A KR20220150640A (ko) 2021-05-04 2021-05-04 차량 및 그의 제어방법

Publications (1)

Publication Number Publication Date
KR20220150640A true KR20220150640A (ko) 2022-11-11

Family

ID=83855176

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210057871A KR20220150640A (ko) 2021-05-04 2021-05-04 차량 및 그의 제어방법

Country Status (3)

Country Link
US (1) US20220355664A1 (ko)
KR (1) KR20220150640A (ko)
CN (1) CN115312046A (ko)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10037023A1 (de) * 2000-07-29 2002-02-21 Bosch Gmbh Robert Verfahren und System zur akustischen Funktionssteuerung im Kraftfahrzeug
GB2371669B (en) * 2001-07-03 2002-12-11 20 20 Speech Ltd Control of apparatus by artificial speech recognition
WO2013101066A1 (en) * 2011-12-29 2013-07-04 Intel Corporation Direct grammar access

Also Published As

Publication number Publication date
US20220355664A1 (en) 2022-11-10
CN115312046A (zh) 2022-11-08

Similar Documents

Publication Publication Date Title
US10803869B2 (en) Voice enablement and disablement of speech processing functionality
KR20200034430A (ko) 전자 장치, 시스템 및 음성 인식 서비스 이용 방법
JP3479691B2 (ja) 実時間作動での音声対話又は音声命令による１つ又は複数の機器の自動制御方法及びこの方法を実施する装置
US8005681B2 (en) Speech dialog control module
US10629201B2 (en) Apparatus for correcting utterance error of user and method thereof
US9368107B2 (en) Permitting automated speech command discovery via manual event to command mapping
EP2963644A1 (en) Audio command intent determination system and method
US10950229B2 (en) Configurable speech interface for vehicle infotainment systems
US10431221B2 (en) Apparatus for selecting at least one task based on voice command, vehicle including the same, and method thereof
US11996099B2 (en) Dialogue system, vehicle, and method of controlling dialogue system
KR20220037187A (ko) 차량용 음성 인식 장치, 이를 이용한 차량 문제상황 처리 방법 및 컴퓨터 프로그램
US10522141B2 (en) Vehicle voice recognition including a wearable device
KR20220150640A (ko) 차량 및 그의 제어방법
WO2019202351A1 (ja) 機器制御装置及び機器を制御する制御方法
US11646031B2 (en) Method, device and computer-readable storage medium having instructions for processing a speech input, transportation vehicle, and user terminal with speech processing
KR102417899B1 (ko) 차량의 음성인식 시스템 및 방법
US11735172B2 (en) Flexible-format voice command
KR102527346B1 (ko) 차량용 음성 인식 장치, 이를 이용한 차량의 주행상태를 고려한 응답 제공 방법 및 컴퓨터 프로그램
KR102279319B1 (ko) 음성분석장치 및 음성분석장치의 동작 방법
KR20220129366A (ko) 음성 인식 시스템 및 그 제어 방법
KR20230113081A (ko) 음성 인식 시스템 및 음성 인식 서비스 제공 방법
JP2008233009A (ja) カーナビゲーション装置及びカーナビゲーション装置用プログラム
KR20230092180A (ko) 차량 및 그의 제어방법
KR20230126571A (ko) 자연어 처리 장치 및 자연어 처리 방법
CN116798415A (zh) 对话管理方法、用户终端和计算机可读记录介质

Legal Events

Date Code Title Description
A201 Request for examination