KR20170121090A - 차량 및 그 제어방법 - Google Patents

Abstract

사용자가 음성 인식으로 전화 걸기를 시도하였으나, 전화 걸기를 수행할 수 있는 상태가 아닌 경우, 사용자에게 이에 관한 정보를 제공하고 발화된 명령어를 재사용함으로써 동작의 끊김 없이 전화 걸기를 수행할 수 있는 차량 및 그 제어방법을 제공한다.
일 실시예에 따른 사용자의 단말기와 연결되어 전화 걸기를 수행할 수 있는 차량은, 상기 사용자의 음성을 입력 받는 음성 입력부; 상기 입력된 음성에 포함된 명령어를 인식하는 음성 인식부; 상기 전화 걸기를 수행하기 위한 준비 상태를 판단하는 제어부; 및 상기 전화 걸기를 수행하기 위한 준비가 완료되지 않은 경우, 상기 준비 상태에 관한 정보를 표시하는 디스플레이부;를 포함한다.

Description

차량 및 그 제어방법{VEHICLE AND CONTROL METHOD FOR THE SAME}

개시된 발명은 사용자의 음성을 인식하고, 인식된 음성에 따라 특정 기능을 수행하는 차량 및 그 제어방법에 관한 것이다.

차량에 대한 기술이 발전함에 따라, 차량이 수행하는 기본적인 기능인 주행 이외에도 사용자의 편의를 위한 다양한 기능이 제공되고 있다.

이처럼 차량이 수행할 수 있는 기능이 다양해지면서 사용자의 조작 부하가 증가되고, 조작 부하의 증가는 운전에 대한 집중도를 저하시켜 안전 운전을 방해하는 요인이 된다. 또한, 기기의 조작이 미숙한 사용자는 차량이 수행할 수 있는 기능을 제대로 활용하지 못하게 된다.

따라서, 사용자의 조작 부하를 감소시키기 위한 사용자 인터페이스에 대한 연구 및 개발이 요구되는바, 특히, 사용자의 음성을 인식하여 해당 음성에 대응되는 기능을 수행하는 음성 인식 기술이 차량에 적용되면, 사용자의 조작 부하를 효과적으로 감소시킬 수 있을 것으로 기대된다.

사용자가 음성 인식으로 전화 걸기를 시도하였으나, 전화 걸기를 수행할 수 있는 상태가 아닌 경우, 사용자에게 이에 관한 정보를 제공하고 발화된 명령어를 재사용함으로써 동작의 끊김 없이 전화 걸기를 수행할 수 있는 차량 및 그 제어방법을 제공한다.

일 실시예에 따른 사용자의 단말기와 연결되어 전화 걸기를 수행할 수 있는 차량은, 상기 사용자의 음성을 입력 받는 음성 입력부; 상기 입력된 음성에 포함된 명령어를 인식하는 음성 인식부; 상기 전화 걸기를 수행하기 위한 준비 상태를 판단하는 제어부; 및 상기 전화 걸기를 수행하기 위한 준비가 완료되지 않은 경우, 상기 준비 상태에 관한 정보를 표시하는 디스플레이부;를 포함한다.

상기 디스플레이부는, 상기 준비 상태에 관한 정보를, 상기 전화 걸기를 수행하기 위한 준비가 진행된 정도와 상기 준비가 완료된 상태에 대한 비율로 표시할 수 있다.

상기 디스플레이부는, 상기 준비 상태에 관한 정보를, 상기 전화 걸기를 수행하기 위한 준비가 완료될 때까지의 잔여 시간으로 표시할 수 있다.

상기 제어부는, 상기 단말기와 상기 차량이 연결되었는지 여부, 상기 단말기로부터 전화번호 정보가 저장된 폰북 데이터를 전달받았는지 여부 및 상기 폰북 데이터를 이용하여 인식용 폰북 데이터베이스를 생성하였는지 여부 중 적어도 하나를 판단할 수 있다.

상기 디스플레이부는, 상기 단말기와 상기 차량이 연결되지 않은 경우, 상기 단말기와 상기 차량의 연결을 가이드하기 위한 화면을 표시할 수 있다.

상기 제어부는, 상기 인식된 명령어가 전화 걸기와 관련된 명령어인지 여부를 판단하고, 상기 인식된 명령어가 전화 걸기와 관련된 명령어인 경우에 상기 전화 걸기를 수행하기 위한 준비 상태를 판단할 수 있다.

상기 입력된 음성을 저장하는 저장부;를 더 포함할 수 있다.

상기 음성 인식부는, 상기 전화 걸기를 수행하기 위한 준비가 완료되기 전에는 음성 인식에 사용되는 기본 데이터베이스를 사용하여 상기 입력된 음성에 포함된 명령어를 인식할 수 있다.

상기 음성 인식부는, 상기 전화 걸기를 수행하기 위한 준비가 완료된 이후에는 상기 인식용 폰북 데이터베이스를 사용하여 상기 저장부에 저장된 음성에 포함된 명령어를 재인식할 수 있다.

상기 음성 인식부는, 상기 인식된 명령어에 대한 신뢰값을 계산하고, 상기 디스플레이부는,

상기 계산된 신뢰값이 미리 설정된 임계값 이하인 경우에, 상기 전화 걸기와 관련된 명령어의 재발화를 가이드하기 위한 화면을 표시할 수 있다.

상기 디스플레이부는, 상기 전화 걸기와 관련된 적어도 하나의 명령어를 포함하는 리스트를 표시할 수 있다.

일 실시예에 따른 사용자의 단말기와 연결되어 전화 걸기를 수행할 수 있는 차량의 제어방법은, 상기 사용자의 음성을 입력 받고; 상기 입력된 음성에 포함된 명령어를 인식하고; 상기 인식된 명령어가 상기 전화 걸기와 관련된 명령어인지 여부를 판단하고; 상기 인식된 명령어가 상기 전화 걸기와 관련된 명령어이면, 상기 전화 걸기를 수행하기 위한 준비 상태를 판단하고; 상기 전화 걸기를 수행하기 위한 준비가 완료되지 않은 경우, 상기 준비 상태에 관한 정보를 표시하는 것;을 포함한다.

상기 준비 상태에 관한 정보를 표시하는 것은, 상기 전화 걸기를 수행하기 위한 준비가 진행된 정도와 상기 준비가 완료된 상태에 대한 비율로 표시하는 것을 포함할 수 있다.

상기 준비 상태에 관한 정보를 표시하는 것은, 상기 전화 걸기를 수행하기 위한 준비가 완료될 때까지의 잔여 시간으로 표시하는 것을 포함할 수 있다.

상기 전화 걸기를 수행하기 위한 준비 상태를 판단하는 것은, 상기 단말기와 상기 차량이 연결되었는지 여부, 상기 단말기로부터 전화번호 정보가 저장된 폰북 데이터를 전달받았는지 여부 및 상기 폰북 데이터를 이용하여 인식용 폰북 데이터베이스를 생성하였는지 여부 중 적어도 하나를 판단하는 것을 포함할 수 있다.

상기 준비 상태에 관한 정보를 표시하는 것은, 상기 단말기와 상기 차량이 연결되지 않은 경우, 상기 단말기와 상기 차량의 연결을 가이드하기 위한 화면을 표시하는 것을 포함할 수 있다.

상기 입력된 음성을 저장하는 것;을 더 포함할 수 있다.

상기 전화 걸기를 수행하기 위한 준비가 완료되면, 상기 인식용 폰북 데이터베이스를 사용하여 상기 저장된 음성에 포함된 명령어를 재인식하는 것;을 더 포함할 수 있다.

상기 전화 걸기를 수행하기 위한 준비가 완료되면, 상기 인식된 명령어에 대한 신뢰값을 계산하고, 상기 계산된 신뢰값이 미리 설정된 임계값 이하인 경우에, 상기 전화 걸기와 관련된 명령어의 재발화를 가이드하기 위한 화면을 표시하는 것;을 더 포함할 수 있다.

상기 전화 걸기와 관련된 명령어의 재발화를 가이드하기 위한 화면을 표시하는 것은, 상기 전화 걸기와 관련된 적어도 하나의 명령어를 포함하는 리스트를 표시하는 것을 포함할 수 있다.

일 측면에 따른 차량 및 그 제어방법에 의하면, 사용자가 음성 인식으로 전화 걸기를 시도하였으나, 전화 걸기를 수행할 수 있는 상태가 아닌 경우, 사용자에게 이에 관한 정보를 제공하고 발화된 명령어를 재사용함으로써 동작의 끊김 없이 전화 걸기를 수행할 수 있다.

도 1은 일 실시예에 따른 차량의 제어 블록도이다.
도 2는 일 실시예에 따른 차량을 외부에서 바라본 외관도이다.
도 3은 일 실시예에 따른 차량의 내부 구성을 나타낸 도면이다.
도 4는 일 실시예에 따른 차량이 음성 인식을 통해 수행하는 동작의 과정을 나타낸 흐름도이다.
도 5 내지 도 8은 전화 걸기를 위한 준비 상태를 나타내기 위한 화면의 예시이다.
도 9는 전화 걸기를 위한 준비가 완료된 이후의 동작을 설명하기 위한 흐름도이다.
도 10은 사용자의 재발화를 유도하기 위한 화면의 예시이다.
도 11은 전화 걸기 준비 상태를 확인하기 위한 이전 단계를 더 구체화한 동작 흐름도이다.
도 12는 일 실시예에 따른 차량의 제어방법에 관한 순서도이다.
도 13은 일 실시예에 따른 차량의 제어방법에 있어서, 인식 결과를 처리하는 과정을 나타낸 순서도이다.

이하 첨부된 도면을 참조하여 차량 및 그 제어방법에 관한 실시예를 상세하게 설명하도록 한다.

도 1은 일 실시예에 따른 차량의 제어 블록도이다.

도 1을 참조하면, 차량(100)은 사용자의 음성을 입력 받는 음성 입력부(110), 입력된 사용자의 음성을 저장하는 저장부(120), 사용자의 음성을 인식하는 음성 인식부(130), 인식된 음성에 대응되는 동작이 실행되도록 제어하는 제어부(140) 및 인식된 음성에 대응되는 동작과 관련된 정보를 표시하는 디스플레이부(151)를 포함한다. 개시된 발명의 실시예에서, 사용자는 차량(100)에 탑승한 운전자 및 동승자를 모두 포함하는 것으로 한다.

음성 입력부(110)는 마이크로폰(microphone)을 포함할 수 있고, 사용자의 발화(utterance)된 음성이 입력되면 이를 전기적 신호로 변환한다. 저장부(120)는 사용자의 음성을 비일시적 또는 일시적으로 저장할 수 있고, 저장된 음성은 음성 인식부(120)로 전달된다. 저장부(120)는 비휘발성 메모리 또는 휘발성 메모리를 포함할 수 있다. 또한, 저장부(120)는 음성을 저장하기 위한 버퍼로 별도로 구현될 수도 있고, 다른 정보들을 함께 저장하는 것도 가능하다.

음성 인식부(130)는 음성 인식 엔진(speech recognition engine)을 포함하고, 음성 인식 엔진은 입력된 음성에 음성 인식(speech recognition) 알고리즘을 적용하여 사용자가 발화한 음성을 인식하고, 인식 결과를 생성할 수 있다.

이 때, 입력된 음성은 음성 인식을 위한 더 유용한 형태로 변환될 수 있는바, 음성 신호로부터 시작 지점과 끝 지점을 검출하여 입력된 음성에 포함된 실제 음성 구간을 검출한다. 이를 EPD(End Point Detection)이라 한다.

그리고, 검출된 구간 내에서 켑스트럼(Cepstrum), 선형 예측 코딩(Linear Predictive Coefficient: LPC), 멜프리퀀시켑스트럼(Mel Frequency Cepstral Coefficient: MFCC) 또는 필터 뱅크 에너지(Filter Bank Energy) 등의 특징 벡터 추출 기술을 적용하여 입력된 음성의 특징 벡터를 추출할 수 있다.

그리고, 추출된 특징 벡터와 훈련된 기준 패턴과의 비교를 통하여 인식 결과를 얻을 수 있다. 이를 위해, 음성의 신호적인 특성을 모델링하여 비교하는 음향 모델(Acoustic Model) 과 인식 어휘에 해당하는 단어나 음절 등의 언어적인 순서 관계를 모델링하는 언어 모델(Language Model)이 사용될 수 있다.

음향 모델은 다시 인식 대상을 특징 벡터 모델로 설정하고 이를 음성 데이터의 특징 벡터와 비교하는 직접 비교 방법과 인식 대상의 특징 벡터를 통계적으로 처리하여 이용하는 통계 방법을 나뉠 수 있다.

직접 비교 방법은 인식 대상이 되는 단어, 음소 등의 단위를 특징 벡터 모델로 설정하고 입력 음성이 이와 얼마나 유사한지를 비교하는 방법으로서, 대표적으로 벡터 양자화(Vector Quantization) 방법이 있다. 벡터 양자화 방법에 의하면 입력된 음성 데이터의 특징 벡터를 기준 모델인 코드북(codebook)과 매핑시켜 대표 값으로 부호화함으로써 이 부호 값들을 서로 비교하는 방법이다.

통계적 모델 방법은 인식 대상에 대한 단위를 상태 열(State Sequence)로 구성하고 상태 열 간의 관계를 이용하는 방법이다. 상태 열은 복수의 노드(node)로 구성될 수 있다. 상태 열 간의 관계를 이용하는 방법은 다시 동적 시간 와핑(Dynamic Time Warping： DTW), 히든 마르코프 모델(Hidden Markov Model: HMM), 신경 회로망을 이용한 방식 등이 있다.

동적 시간 와핑은 같은 사람이 같은 발음을 해도 신호의 길이가 시간에 따라 달라지는 음성의 동적 특성을 고려하여 기준 모델과 비교할 때 시간 축에서의 차이를 보상하는 방법이고, 히든 마르코프 모델은 음성을 상태 천이 확률 및 각 상태에서의 노드(출력 심볼)의 관찰 확률을 갖는 마르코프 프로세스로 가정한 후에 학습 데이터를 통해 상태 천이 확률 및 노드의 관찰 확률을 추정하고, 추정된 모델에서 입력된 음성이 발생할 확률을 계산하는 인식 기술이다.

한편, 단어나 음절 등의 언어적인 순서 관계를 모델링하는 언어 모델은 언어를 구성하는 단위들 간의 순서 관계를 음성 인식에서 얻어진 단위들에 적용함으로써 음향적인 모호성을 줄이고 인식의 오류를 줄일 수 있다. 언어 모델에는 통계적 언어 모델과 유한 상태 네트워크(Finite State Automata： FSA)에 기반한 모델이 있고, 통계적 언어 모델에는 Unigram, Bigram, Trigram 등 단어의 연쇄 확률이 이용된다.

음성 인식부(130)는 음성을 인식함에 있어 상술한 방식 중 어느 방식을 사용해도 무방하다. 예를 들어, 히든 마르코프 모델이 적용된 음향 모델을 사용할 수도 있고, 음향 모델과 음성 모델을 통합한 N-best 탐색법을 사용할 수 있다. N-best 탐색법은 음향 모델과 언어 모델을 이용하여 N개까지의 인식 결과 후보를 선택한 후, 이들 후보의 순위를 재평가함으로써 인식 성능을 향상시킬 수 있다.

음성 인식부(130)는 인식 결과의 신뢰성을 확보하기 위해 신뢰값(confidence value)을 계산할 수 있다. 신뢰값은 음성 인식 결과에 대해서 그 결과를 얼마나 믿을 만한 것인가를 나타내는 척도이다. 일 예로, 인식된 결과인 음소나 단어에 대해서, 그 외의 다른 음소나 단어로부터 그 말이 발화되었을 확률에 대한 상대값으로 정의할 수 있다. 따라서, 신뢰값은 0 에서 1 사이의 값으로 표현할 수도 있고, 0 에서 100 사이의 값으로 표현할 수도 있다.

신뢰값이 미리 설정된 임계값(threshold)을 초과하는 경우에는 인식 결과를 제어부(140)에 출력하여 인식 결과에 대응되는 동작이 수행되도록 할 수 있고, 신뢰값이 임계값 이하인 경우에는 인식 결과를 거절(rejection)할 수 있다.

음성 인식부(130)는 소프트웨어, 하드웨어 또는 이들의 조합을 이용하여 컴퓨터로 읽을 수 있는 기록 매체 내에서 구현될 수 있다. 하드웨어적인 구현에 의하면, ASICs(Application Specific Integrated Circuits), DSPs(Digital Signal Processors), DSPDs(Digital Signal Processing Devices), PLDs(Programmable Logic Devices), FPGAs(Field Programmable Gate Arrays), 프로세서(processor), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(micro-processor) 등의 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다.

소프트웨어적인 구현에 의하면, 적어도 하나의 기능 또는 동작을 수행하는 별개의 소프트웨어 모듈과 함께 구현될 수 있고, 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다.

제어부(140)는 음성 인식부(130)가 출력한 인식 결과에 대응되는 동작을 수행하기 위해 차량(100)에 포함된 각종 구성요소를 제어할 수 있다. 출력된 인식 결과는 사용자가 발화한 음성에 포함된 명령어일 수 있고, 제어부(140)는 인식된 명령어에 맵핑된 동작을 수행할 수 있다. 예를 들어, 인식된 명령어가 전화 걸기에 관련된 명령어인 경우, 제어부(140)는 전화 걸기를 위한 제어를 수행할 수 있다.

또한, 제어부(140)는 인식된 명령어에 맵핑된 동작을 수행할 수 있는 상태가 아닌 경우에는, 디스플레이부(151)에 그와 관련된 정보를 표시하여 사용자로 하여금 현재 상태를 파악하고 현재 상태에 대응되는 적절한 동작을 취할 수 있도록 유도할 수 있다. 이와 관련된 구체적인 설명은 후술하기로 한다.

도 2는 일 실시예에 따른 차량을 외부에서 바라본 외관도이고, 도 3은 일 실시예에 따른 차량의 내부 구성을 나타낸 도면이다.

도 2를 참조하면, 일 실시예에 따른 차량(100)은 차량(100)의 외관을 형성하는 본체(1), 차량(100)을 이동시키는 차륜(51, 52), 차륜(51, 52)을 회전시키는 구동 장치(60), 차량(100) 내부를 외부로부터 차폐시키는 도어(71, 72(도 3 참조)), 차량(100) 내부의 운전자에게 차량(100) 전방의 시야를 제공하는 전면 유리(30), 운전자에게 차량(100) 후방의 시야를 제공하는 사이드 미러(81, 82)를 포함한다.

차륜(51, 52)은 차량의 전방에 마련되는 전륜(51), 차량의 후방에 마련되는 후륜(52)을 포함하며, 구동 장치(60)는 본체(1)가 전방 또는 후방으로 이동하도록 전륜(51) 또는 후륜(52)에 회전력을 제공한다. 이와 같은 구동 장치(60)는 화석 연료를 연소시켜 회전력을 생성하는 엔진(engine) 또는 축전기(미도시)로부터 전원을 공급받아 회전력을 생성하는 모터(motor)를 채용할 수 있다.

도어(71, 72)는 본체(1)의 좌측 및 우측에 회동 가능하게 마련되어 개방 시에 운전자가 차량(100)의 내부에 탑승할 수 있도록 하며, 폐쇄 시에 차량(100)의 내부를 외부로부터 차폐시킨다.

전면 유리(30)는 본체(100)의 전방 상측에 마련되어 차량(100) 내부의 운전자가 차량(100) 전방의 시각 정보를 획득할 수 있도록 하는 것으로서, 윈드 쉴드 글래스(windshield glass)라고도 한다.

또한, 사이드 미러(81, 82)는 본체(1)의 좌측에 마련되는 좌측 사이드 미러(81) 및 우측에 마련되는 우측 사이드 미러(82)를 포함하며, 차량(100) 내부의 운전자가 차량(100) 측면 및 후방의 시각 정보를 획득할 수 있도록 한다.

이외에도 차량(100)은 후면 또는 측면의 장애물 내지 다른 차량을 감지하는 근접 센서, 강수 여부 및 강수량을 감지하는 레인 센서 등의 감지 장치를 포함할 수 있다.

도 3을 참조하여 차량(100)의 내부 구조를 설명한다.

대시보드(10)의 중앙 영역인 센터페시아(11)에는 AVN 장치(150)가 마련될 수 있다. AVN 장치(150)는 오디오, 비디오 및 내비게이션 기능을 통합적으로 수행하거나, 이들 중 일부의 기능을 수행할 수 있는 장치로서, 디스플레이(151)는 오디오 화면, 비디오 화면 및 내비게이션 화면 중 적어도 하나를 선택적으로 표시할 수 있고, 뿐만 아니라 차량(100)의 제어와 관련된 각종 제어 화면, 차량의 상태에 관한 정보를 나타내는 화면 또는 AVN 장치(150)에서 실행할 수 있는 부가 기능과 관련된 화면을 표시할 수 있다.

디스플레이(151)는 LCD(Liquid Crystal Display), LED(Light Emitting Diode), PDP(Plasma Display Panel), OLED(Organic Light Emitting Diode), CRT(Cathode Ray Tube) 등의 다양한 디스플레이 장치 중 하나로 구현될 수 있다.

사용자는 입력부(152)를 조작하여 AVN(150)을 제어하기 위한 명령을 입력할 수 있다. 입력부(152)는 도 3에 도시된 바와 같이 디스플레이(151)와 인접한 영역에 하드 키 타입으로 마련될 수도 있고, 디스플레이(151)가 터치 스크린 타입으로 구현되는 경우에는 디스플레이(151)가 입력부(152)의 기능도 함께 수행할 수 있다.

센터 콘솔(40)에는 죠그 셔틀(jog shuttle) 타입 또는 하드 키 타입의 센터 입력부(43)가 마련될 수 있다. 센터 콘솔(40)은 운전석(21)과 조수석(22) 사이에 위치하여 기어조작 레버(41)와 트레이(42)가 형성된 부분을 의미한다. 센터 입력부(43)는 AVN 장치(150)에 포함된 입력부(152)의 전부 또는 일부 기능을 수행할 수 있다.

일 실시예에 따른 차량(100)은 사용자가 입력부를 물리적으로 조작하여 입력하는 제어 명령을 음성 입력부(110)를 통해 음성으로 입력 받을 수도 있다.

효과적인 음성의 입력을 위하여 음성 입력부(110)는 도 3에 도시된 바와 같이 헤드라이닝(13)에 장착될 수 있으나, 차량(100)의 실시예가 이에 한정되는 것은 아니며, 대시보드(10) 위에 장착되거나 스티어링 휠(12)에 장착되는 것도 가능하다. 이 외에도 사용자의 음성을 입력 받기에 적합한 위치이면 어디든 제한이 없다.

차량(100)의 내부에는 음향을 출력할 수 있는 스피커(161)가 마련되는바, 오디오 기능, 비디오 기능, 내비게이션 기능 및 기타 부가 기능을 수행함에 있어 필요한 음향이 스피커(161)를 통해 출력될 수 있고, 사용자에게 필요한 정보를 제공하기 위한 음향이 출력될 수도 있다.

도 4는 일 실시예에 따른 차량이 음성 인식을 통해 수행하는 동작의 과정을 나타낸 흐름도이다.

일 예로, 차량(100)은 사용자의 음성을 인식하여 전화 걸기를 수행할 수 있다. 후술하는 실시예에서는 전화 걸기를 예로 들어 차량(100)의 동작을 구체적으로 설명한다.

사용자가 차량(100)을 이용해 전화 걸기를 수행하기 위한 명령어를 포함하는 음성을 음성 입력부(110)를 통해 입력하면, 음성 입력부(110)는 입력된 음성을 전기적인 신호로 변환하고 저장부(120)는 전기적인 신호로 변환된 음성을 저장한다.

제어부(140)는 현재 전화 걸기를 수행하기 위한 준비가 완료된 상태인지 여부를 확인하고, 준비가 완료됐으면 명령어 인식 결과를 처리하고, 준비가 완료되지 않았으면 준비 상황을 디스플레이하여 사용자에게 현재 상태에 관한 정보를 제공한다.

구체적으로, 제어부(140)는 전화 걸기를 수행하기 위한 준비가 완료된 상태인지 판단하기 위해, 차량(100)과 사용자의 단말기가 연결되었는지 여부, 사용자의 단말기에 저장된 전화번호부의 데이터가 차량(100)에 전달되었는지 여부 및 사용자가 발화한 명령어에 전화번호부의 데이터가 포함되는지 여부를 판단하기 위해 사용되는 데이터베이스가 생성되었는지 여부 등을 판단할 수 있다. 여기서, 사용자의 단말기는 스마트폰, 태블릿 PC, 스마트 워치, 스마트 글래스 등 전화 걸기 기능을 수행할 수 있는 전자 기기이면 되고, 그 종류에 대해서는 제한을 두지 않는다.

차량(100)과 사용자의 단말기는 유선 또는 무선으로 연결될 수 있다. 무선으로 연결되는 경우에는 다양한 무선 통신 방식이 적용될 수 있고, 이를 위해 적절한 무선 통신 모듈이 차량(100)과 사용자의 단말기에 구비될 수 있다. 일 예로, 블루투스 통신 방식을 통해 차량(100)과 사용자의 단말기가 연결될 수 있는 바, 이를 위해 차량(100)과 사용자의 단말기에는 블루투스 통신 모듈이 포함될 수 있다.

사용자의 단말기에 저장된 전화번호부는 이름 또는 명칭과 그에 맵핑된 전화번호 정보를 포함한다. 후술하는 실시예에서는 전화번호부에 포함된 정보를 폰북(Phone book) 데이터라 하기로 한다.

차량(100)이 연결된 사용자의 단말기로부터 폰북 데이터를 전달받으면, 즉 다운로드 받으면, 폰북 데이터에 저장된 이름 또는 명칭을 발화하여 그에 맵핑된 전화번호에 전화를 걸 수 있다. 이를 위해, 제어부(140)는 폰북 데이터를 다운로드 받은 후에 음성 인식을 위해 사용되는 인식용 폰북 데이터베이스(DB)를 생성할 수 있고, 음성 인식부(130)는 사용자가 발화한 명령어가 인식용 폰북 데이터베이스에 포함된 이름 또는 명칭을 포함하는지 여부를 판단할 수 있다.

즉, 음성 인식을 통해 전화 걸기를 수행하기 위해서는 단말기와 차량(100)의 연결, 폰북 데이터의 다운로드 또는 인식용 폰북 데이터베이스의 생성이 선행되어야 한다. 따라서, 제어부(140)는 차량(100)이 전화 걸기를 수행하기 위한 준비가 완료된 상태인지 여부를 판단하기 위해, 단말기와 차량(100)의 연결, 폰북 데이터의 다운로드 및 인식용 폰북 데이터베이스의 생성 여부 중 적어도 하나를 판단할 수 있다. 경우에 따라, 이들 중 적어도 하나가 완료되면 전화 걸기 준비가 완료된 상태인 것으로 판단할 수도 있고, 모두 완료된 경우에만 전화 걸기 준비가 완료된 상태인 것으로 판단할 수도 있다.

일 예로, 폰북 데이터를 이용하지 않고 전화 걸기를 수행하는 것도 가능한 바, 이 경우 단말기와 차량의 연결 여부만을 판단하는 것도 가능하다.

제어부(140)가 판단한 결과, 전화 걸기를 수행하기 위한 준비가 완료되지 않은 경우에는, 사용자에게 현재 준비 상태에 관한 정보를 제공할 수 있고, 일 예로 디스플레이부(151)를 통해 시각적으로 정보를 제공할 수 있다. 이하, 도 5 내지 도 8을 참조하여 시각적인 정보의 제공 방식에 대해 설명한다.

도 5 내지 도 8은 전화 걸기를 위한 준비 상태를 나타내기 위한 화면의 예시이다.

도 5및 도 6을 참조하면, 디스플레이부(151)는 일 영역에 프로그레스바(progress bar)(151a, 151b)를 표시하여 준비 상태에 관한 정보를 제공할 수 있다. 예를 들어, 현재 준비 상태를 퍼센테이지로 나타낼 수 있는바, 사용자는 프로그레스바(progress bar)(151a, 151b)를 보고 전화 걸기를 위한 준비가 80% 완료되었음을 확인할 수 있고, 이를 통해 언제 전화 걸기를 수행할 수 있는지 파악할 수 있다.

또는, 현재 준비 상태에 관한 정보를 더 직관적으로 제공하기 위해, 도 7에 도시된 바와 같이 준비가 완료되기까지 남은 잔여 시간을 나타내는 아이콘(151c)을 표시하는 것도 가능하다. 또는, 잔여 시간을 프로그레스바의 형태로 나타내는 것도 가능함은 물론이다. 준비 상태에 관한 정보를 제공하는 방식에 대해서는 제한을 두지 않는다. 또한, 디스플레이부(151)를 통한 시각적인 정보의 제공뿐만 아니라 스피커(161)를 통한 청각적인 정보의 제공도 가능하다.

이와 같이, 일 실시예에 따른 차량(100)에 따르면, 전화 걸기를 수행하기 위한 준비가 완료되지 않은 경우, 바로 음성 인식을 종료하는 것이 아니라, 사용자에게 현재 상태에 관한 정보를 제공함으로써 사용자로 하여금 언제 음성 인식을 이용한 전화 걸기를 수행할 수 있는지 파악하도록 할 수 있다.

한편, 사용자의 단말기가 차량(100)에 연결되지 않은 경우에는, 단말기 연결을 위한 사용자의 동작이 요구된다. 따라서, 이 경우에는 도 8에 도시된 바와 같이, 단말기를 연결하라는 내용을 포함하는 팝업(151e)을 디스플레이부(151)에 표시할 수 있다.

또한, 디스플레이부(151)는 전화 걸기를 수행하기 위한 준비가 완료되지 않은 경우, 음성 인식을 수행하기 이전 화면을 다시 표시함으로써, 준비가 완료될 때까지 사용자가 원래 사용하던 기능을 연속적으로 사용할 수 있게 한다. 일 예로, 사용자가 내비게이션 기능을 사용한 경우에는 도 5 내지 도 8에 도시된 바와 같이 디스플레이부(151)는 경로 안내 화면으로 복귀하여, 전화 걸기 준비가 완료될 때까지 경로 안내를 수행할 수 있다.

도 9는 전화 걸기를 위한 준비가 완료된 이후의 동작을 설명하기 위한 흐름도이고, 도 10은 사용자의 재발화를 유도하기 위한 화면의 예시이다.

도 9를 참조하면, 입력 음성을 저장하고, 준비 상태를 확인하고, 준비가 완료되지 않은 경우에는 준비 상태를 디스플레이하는 과정은 앞서 도 4의 예시에서 설명한 바와 같다.

전화 걸기를 위한 준비가 완료된 경우, 음성 인식부(130)는 저장부(120)에 저장된 음성을 전달받고, 전달된 음성에 포함된 명령어를 인식한다. 이 때, 인식용 폰북 데이터베이스를 이용하여 명령어를 인식할 수 있다.

전술한 바와 같이, 음성 인식부(130)는 인식된 명령어에 대한 신뢰값을 계산할 수 있고, 신뢰값이 미리 설정된 임계값(TH)을 초과하는 경우에는 결과의 신뢰성이 보장된 것으로 판단하여 명령어에 대응되는 인식 결과를 처리한다. 예를 들어, 인식된 명령어가 인식용 폰북 데이터베이스에 포함된 이름 또는 명칭과 대응되는 경우, 해당 이름 또는 명칭에 맵핑된 전화 번호에 전화 걸기를 수행할 수 있다.

그러나, 신뢰값이 미리 설정된 임계값(TH) 이하인 경우에는 사용자의 재발화를 유도할 수 있다. 이 경우, 도 10에 도시된 바와 같이, 디스플레이부(151)에 전화 걸기와 관련된 상세한 가이드 화면(151d)을 표시함으로써, 사용자가 현재 단계에서 어떤 명령어를 발화해야 하는지 용이하게 파악할 수 있도록 가이드할 수 있다.

전화 걸기를 위해 발화할 수 있는 명령어로는 도 10의 예시에 도시된 바와 같이, "call name", "dial #", "redial", "call history" 등이 있다. 여기서, "name"는 사용자가 원하는 이름 또는 명칭을 의미하고, "#" 는 사용자가 원하는 전화 번호를 의미한다.

사용자가 "call name"을 발화하는 경우, 해당 이름 또는 명칭에 맵핑된 전화 번호로 전화 걸기가 수행될 수 있고, "dial #"을 발화하는 경우, 해당 전화 번호로 전화 걸기가 수행될 수 있으며, "redail"을 발화하는 경우, 가장 최근에 발신한 전화 번호로 다시 전화 걸기를 수행할 수 있고, "call history"를 발화하는 경우, 최근 통화 목록을 디스플레이부(151)에 표시할 수 있다.

도 11은 전화 걸기 준비 상태를 확인하기 위한 이전 단계를 더 구체화한 동작 흐름도이다.

도 11을 참조하면, 사용자가 음성 입력부(110)를 통해 음성을 입력하면, 저장부(120)가 입력된 음성을 저장하고, 음성 인식부(130)는 입력된 음성을 인식한다. 즉, 입력된 음성에 포함된 명령어를 인식한다. 이 때, 음성 인식부(130)는 자체적으로 구비하고 있는 기본 데이터베이스를 사용할 수 있다.

제어부(140)는 인식된 명령어가 전화 걸기와 관련된 명령어인 경우, 예를 들어, 인식된 명령어에 "call", "dial" 등의 명령어가 포함된 경우, 사용자의 의도가 전화 걸기인 것으로 판단하고, 전화 걸기를 수행하기 위한 준비가 완료된 상태인지 여부를 판단할 수 있다. 전화 걸기와 관련된 명령어는 기본 데이터베이스에 포함될 수 있고, 어떤 명령어가 전화 걸기와 관련된 명령어인지에 관한 정보는 저장부(120) 또는 제어부(140)에 미리 저장될 수 있다.

준비가 완료되지 않은 경우에는 준비 상황을 디스플레이하고, 준비가 완료되면 음성 인식부(130)가 명령어를 인식하고 인식 결과에 대응되는 처리를 수행한다. 이 때, 음성 인식부(130)는 저장부(120)에 저장된 음성을 다시 불러올 수 있고, 기본 데이터베이스가 아닌 인식용 폰북 데이터베이스를 이용하여 인식할 수 있다.

인식된 명령어가 전화 걸기와 관련된 것이 아닌 경우에는, 해당 프로세스를 수행할 수 있다. 예를 들어, 인식된 명령어가 오디오, 비디오 또는 내비게이션 기능을 제어하기 위한 명령어인 경우에는 그에 해당하는 프로세스를 수행할 수 있다.

즉, 당해 예시에 의하면, 사용자가 발화한 명령어가 전화 걸기와 관련된 명령어인 경우에만 전화 걸기 준비 상태를 판단함으로써, 불필요한 동작의 수행할 방지할 수 있다.

다만, 차량의 실시예가 이에 한정되는 것은 아닌바, 사용자가 발화한 명령어가 전화 걸기와 관련된 명령어인지 여부와 무관하게, 사용자의 음성이 입력되면 바로 전화 걸기를 수행하기 위한 준비가 완료된 상태인지 여부를 판단하는 것도 가능하다.

이하, 차량의 제어방법에 관한 실시예를 설명한다.

일 실시예에 따른 차량의 제어 방법에는 전술한 차량(100)이 사용될 수 있다. 따라서, 앞서 도 1 내지 도 11을 참조한 설명은 차량의 제어 방법에도 동일하게 적용될 수 있다.

도 12는 일 실시예에 따른 차량의 제어방법에 관한 순서도이다.

도 12를 참조하면, 음성 입력부(110)를 통해 사용자가 발화한 음성을 입력 받는다(310). 일 예로, 음성 입력부(110)는 사용자의 조작에 의해 온(ON) 될 수 있다.

저장부(120)는 입력된 음성을 저장하고(311), 음성 인식부(130)는 기본 데이터베이스를 이용하여 사용자의 음성에 포함된 명령어를 인식한다(312).

제어부(140)는 인식된 명령어가 전화 걸기와 관련된 명령어인지 여부를 판단한다(313). 예를 들어, 명령어에 "call" 또는 "dial"과 같은 명령어가 포함된 경우에 전화 걸기와 관련된 명령어인 것으로 판단할 수 있다.

전화 걸기와 관련된 명령어가 아닌 경우에는(313의 아니오), 전화 걸기를 수행하기 위한 당해 프로세스는 종료하고, 인식된 명령어에 대응되는 프로세스를 수행한다.

인식된 명령어가 전화 걸기와 관련된 명령어인 경우에는(313의 예), 전화 걸기 준비 상태를 확인한다(314). 예를 들어, 사용자의 단말기가 차량(100)에 연결되었는지 여부, 폰북 데이터를 다운로드하였는지 여부 및 인식용 폰북 데이터베이스를 생성하였는지 여부를 판단할 수 있다. 이들 중 하나라도 완료되지 않은 경우에는 준비가 완료되지 않은 것으로 판단할 수 있다.

준비가 완료되지 않은 경우에는(315의 아니오), 준비 상태를 표시할 수 있다(318). 예를 들어, 디스플레이부(151)의 일 영역에 준비 상태를 퍼센테이지로 나타내는 프로그레스바(progress bar)(151a, 151b)를 표시할 수도 있고, 준비가 완료되기까지의 잔여 시간을 표시하는 아이콘(151c)을 표시할 수도 있다. 준비 상태에 관한 정보를 제공하는 방식에 대해서는 제한을 두지 않는다. 또한, 디스플레이부(151)를 통한 시각적인 정보의 제공뿐만 아니라 스피커(161)를 통한 청각적인 정보의 제공도 가능하다.

준비가 완료되면(315의 예), 인식용 폰북 데이터베이스를 이용하여 명령어를 인식하고(316) 인식 결과를 처리한다(316). 이 때, 사용자가 명령어를 재발화하지 않더라도 저장부(120)에 저장된 음성을 다시 불러와 인식할 수 있다. 인식 결과의 처리는 인식된 명령어에 대응되는 동작의 수행을 의미하는바, 인식된 명령어에 이름 또는 명칭이 포함된 경우에는 해당 이름 또는 명칭에 맵핑된 전화 번호에 전화 걸기를 수행할 수 있고, 전화 번호가 포함된 경우에는 해당 전화 번호에 전화 걸기를 수행할 수도 있으며, redial 이 포함된 경우에는 가장 최근에 발신한 전화 번호에 전화 걸기를 수행할 수 있다.

도 13은 일 실시예에 따른 차량의 제어방법에 있어서, 인식 결과를 처리하는 과정을 나타낸 순서도이다.

도 13을 참조하면, 사용자로부터 음성을 입력 받고(320), 입력된 음성을 저장하고(321), 기본 데이터베이스를 이용하여 명령어를 인식하고(322), 전화 걸기와 관련된 명령어인 경우(323의 예), 전화 걸기 준비 상태를 확인하고(324), 준비가 완료되지 않은 경우(325의 아니오), 준비 상태를 표시(320)하는 과정은 전술한 도 12의 예시에서와 같다.

전화 걸기를 위한 준비가 완료되면(325의 예), 인식용 폰북 데이터베이스를 이용하여 명령어를 인식하고(326), 인식된 명령어에 대해 신뢰값을 계산한다.

신뢰값이 미리 설정된 임계값(TH)을 초과하는 경우에는 인식 결과를 처리하고, 신뢰값이 미리 설정된 임계값(TH)을 초과하지 않는 경우에는 사용자의 재발화를 유도한다(329). 후자의 경우, 사용자의 의도가 음성 인식을 통한 전화 걸기의 수행임이 이미 파악되었으므로, 전술한 도 10에 도시된 바와 같이, 전화 걸기와 관련된 사용자의 발화를 가이드하기 위한 화면을 표시할 수 있다.

상기 도 12 및 도 13의 예시에서는 입력된 음성에 포함된 명령어가 전화 걸기와 관련된 명령어인 경우에 전화 걸기 준비 상태를 확인하는 등의 후속 동작을 수행하는 것으로 설명하였으나, 차량의 제어방법의 실시예가 이에 한정되는 것은 아니다. 차량의 실시예에서 설명한 바와 마찬가지로, 입력된 음성에 포함된 명령어가 전화 걸기와 관련된 명령어인지 여부와 무관하게 전화 걸기 준비 상태를 확인하는 것도 가능하다.

전술한 실시예에 따른 차량 및 그 제어방법에 의하면, 사용자가 음성 인식으로 전화 걸기를 시도하였으나, 전화 걸기를 수행할 수 있는 상태가 아닌 경우, 사용자에게 이에 관한 정보를 제공하고 발화된 명령어를 재사용함으로써 동작의 끊김 없이 전화 걸기를 수행할 수 있다.

또한, 인식 결과의 신뢰값이 임계값 이하인 경우에는, 전화 걸기와 관련된 명령어를 포함하는 상세한 가이드 화면을 제공함으로써, 사용자가 적절한 명령어를 재발화하도록 유도할 수 있다.

상기의 설명은 기술적 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명의 기술 분야에서 통상의 지식을 가진 자라면 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 수정, 변경 및 치환이 가능할 것이다. 따라서, 상기에 개시된 실시예 및 첨부된 도면들은 기술적 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예 및 첨부된 도면에 의하여 기술적 사상의 범위가 한정되는 것은 아니다. 그 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술적 사상은 권리범위에 포함되는 것으로 해석되어야 할 것이다.

또한, 본 명세서에서 사용한 용어는 실시예를 설명하기 위해 사용된 것으로, 개시된 발명을 제한 및/또는 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는다.

또한, 본 명세서 전체에서 사용되는 "~부(unit)", "~기"등의 용어는 적어도 하나의 기능이나 동작을 수행하는 단위를 의미할 수 있다.

100: 차량 110: 음성 입력부
120: 저장부 130: 음성 인식부
140: 제어부 150: AVN 장치

Claims (18)

1. 사용자의 단말기와 연결되어 전화 걸기를 수행할 수 있는 차량에 있어서,
   상기 사용자의 음성을 입력 받는 음성 입력부;
   상기 입력된 음성에 포함된 명령어를 인식하는 음성 인식부;
   상기 전화 걸기를 수행하기 위한 준비 상태를 판단하는 제어부; 및
   상기 전화 걸기를 수행하기 위한 준비가 완료되지 않은 경우, 상기 준비 상태에 관한 정보를 표시하는 디스플레이부;를 포함하고,
   상기 디스플레이부는,
   상기 단말기와 상기 차량이 연결되지 않은 경우, 상기 단말기와 상기 차량의 연결을 가이드하기 위한 화면을 표시하는 차량.
2. 제 1 항에 있어서
   상기 디스플레이부는,
   상기 준비 상태에 관한 정보를, 상기 전화 걸기를 수행하기 위한 준비가 진행된 정도와 상기 준비가 완료된 상태에 대한 비율로 표시하는 차량.
3. 제 1 항에 있어서,
   상기 디스플레이부는,
   상기 준비 상태에 관한 정보를, 상기 전화 걸기를 수행하기 위한 준비가 완료될 때까지의 잔여 시간으로 표시하는 차량.
4. 제 1 항에 있어서,
   상기 제어부는,
   상기 단말기와 상기 차량이 연결되었는지 여부, 상기 단말기로부터 전화번호 정보가 저장된 폰북 데이터를 전달받았는지 여부 및 상기 폰북 데이터를 이용하여 인식용 폰북 데이터베이스를 생성하였는지 여부 중 적어도 하나를 판단하는 차량.
5. 제 4 항에 있어서,
   상기 제어부는,
   상기 인식된 명령어가 전화 걸기와 관련된 명령어인지 여부를 판단하고, 상기 인식된 명령어가 전화 걸기와 관련된 명령어인 경우에 상기 전화 걸기를 수행하기 위한 준비 상태를 판단하는 차량.
6. 제 5 항에 있어서,
   상기 입력된 음성을 저장하는 저장부;를 더 포함하는 차량.
7. 제 6 항에 있어서,
   상기 음성 인식부는,
   상기 전화 걸기를 수행하기 위한 준비가 완료되기 전에는 음성 인식에 사용되는 기본 데이터베이스를 사용하여 상기 입력된 음성에 포함된 명령어를 인식하는 차량.
8. 제 7 항에 있어서
   상기 음성 인식부는,
   상기 전화 걸기를 수행하기 위한 준비가 완료된 이후에는 상기 인식용 폰북 데이터베이스를 사용하여 상기 저장부에 저장된 음성에 포함된 명령어를 재인식하는 차량.
9. 제 1 항에 있어서,
   상기 음성 인식부는,
   상기 인식된 명령어에 대한 신뢰값을 계산하고,
   상기 디스플레이부는,
   상기 계산된 신뢰값이 미리 설정된 임계값 이하인 경우에, 상기 전화 걸기와 관련된 명령어의 재발화를 가이드하기 위한 화면을 표시하는 차량.
10. 제 9 항에 있어서,
    상기 디스플레이부는,
    상기 전화 걸기와 관련된 적어도 하나의 명령어를 포함하는 리스트를 표시하는 차량.
11. 사용자의 단말기와 연결되어 전화 걸기를 수행할 수 있는 차량의 제어방법에 있어서,
    상기 사용자의 음성을 입력 받고;
    상기 입력된 음성에 포함된 명령어를 인식하고;
    상기 인식된 명령어가 상기 전화 걸기와 관련된 명령어인지 여부를 판단하고;
    상기 인식된 명령어가 상기 전화 걸기와 관련된 명령어이면, 상기 전화 걸기를 수행하기 위한 준비 상태를 판단하고;
    상기 전화 걸기를 수행하기 위한 준비가 완료되지 않은 경우, 상기 준비 상태에 관한 정보를 표시하는 것;을 포함하고,
    상기 준비 상태에 관한 정보를 표시하는 것은,
    상기 단말기와 상기 차량이 연결되지 않은 경우, 상기 단말기와 상기 차량의 연결을 가이드하기 위한 화면을 표시하는 것을 포함하는 차량의 제어방법.
12. 제 11 항에 있어서
    상기 준비 상태에 관한 정보를 표시하는 것은,
    상기 전화 걸기를 수행하기 위한 준비가 진행된 정도와 상기 준비가 완료된 상태에 대한 비율로 표시하는 것을 포함하는 차량의 제어방법.
13. 제 11 항에 있어서,
    상기 준비 상태에 관한 정보를 표시하는 것은,
    상기 전화 걸기를 수행하기 위한 준비가 완료될 때까지의 잔여 시간으로 표시하는 것을 포함하는 차량의 제어방법.
14. 제 11 항에 있어서,
    상기 전화 걸기를 수행하기 위한 준비 상태를 판단하는 것은,
    상기 단말기와 상기 차량이 연결되었는지 여부, 상기 단말기로부터 전화번호 정보가 저장된 폰북 데이터를 전달받았는지 여부 및 상기 폰북 데이터를 이용하여 인식용 폰북 데이터베이스를 생성하였는지 여부 중 적어도 하나를 판단하는 것을 포함하는 차량의 제어방법.
15. 제 14 항에 있어서,
    상기 입력된 음성을 저장하는 것;을 더 포함하는 차량의 제어방법.
16. 제 15 항에 있어서
    상기 전화 걸기를 수행하기 위한 준비가 완료되면, 상기 인식용 폰북 데이터베이스를 사용하여 상기 저장된 음성에 포함된 명령어를 재인식하는 것;을 더 포함하는 차량의 제어방법.
17. 제 11 항에 있어서,
    상기 전화 걸기를 수행하기 위한 준비가 완료되면, 상기 인식된 명령어에 대한 신뢰값을 계산하고,
    상기 계산된 신뢰값이 미리 설정된 임계값 이하인 경우에, 상기 전화 걸기와 관련된 명령어의 재발화를 가이드하기 위한 화면을 표시하는 것;을 더 포함하는 차량의 제어방법.
18. 제 17 항에 있어서,
    상기 전화 걸기와 관련된 명령어의 재발화를 가이드하기 위한 화면을 표시하는 것은,
    상기 전화 걸기와 관련된 적어도 하나의 명령어를 포함하는 리스트를 표시하는 것을 포함하는 차량의 제어방법.
    

Images