KR20060070266A

KR20060070266A - 감성 인식 차량용 오디오 시스템 및 그 제어 방법

Info

Publication number: KR20060070266A
Application number: KR1020040108941A
Authority: KR
Inventors: 김태수
Original assignee: 주식회사 현대오토넷
Priority date: 2004-12-20
Filing date: 2004-12-20
Publication date: 2006-06-23

Abstract

본 발명은 감성 인식 차량용 오디오 시스템에서, 입력되는 음성을 음성 인식하고, 입력되는 영상을 영상 인식하고, 상기 음성 인식 결과와 영상 인식 결과에 상응하게 상기 감성 인식 차량용 오디오 시스템의 동작을 제어한다. 즉, 본 발명은 차량용 오디오 시스템의 사용자의 음성과 표정 등을 인식하여 사용자의 감성 상태를 판단하고, 상기 판단한 감성 상태에 상응하게 차량용 오디오 시스템의 동작을 제어함으로써 사용자 편의성을 증가시킨다.

음성 인식, 영상 인식, 감성 상태

Description

감성 인식 차량용 오디오 시스템 및 그 제어 방법{A SENSITIVITY RECOGNITION CAR AUDIO SYSTEM AND METHOD THEREOF}

도 1은 본 발명의 실시예에서의 기능을 수행하는 차량용 오디오 시스템의 내부 구조를 도시한 블록도

도 2는 본 발명의 실시예에 따른 차량용 오디오 시스템의 동작 제어를 위한 사용자 감성 인식 과정을 도시한 순서도

본 발명은 차량용 오디오 시스템 및 그 제어 방법에 관한 것으로서, 특히 감성 인식 방식을 사용하여 사용자의 감성 상태에 따라서 차량용 오디오 시스템의 동작을 제어하는 시스템 및 방법에 관한 것이다.

최근 들어, 차량이 필수 불가결한 수단으로 인식되면서 차량 주행에 필수적으로 필요한 디바이스들, 일 예로 엔진 등과 같이 차량 주행에 필수적으로 필요한 디바이스들 이외에 차량 운전자에게 각종 편의를 제공하도록 하는 다양한 디바이스 들, 일 예로 차량용 오디오 시스템(car audio system) 등이 활발하게 연구 및 개발되고 있다. 그러나, 현재 연구 및 개발되고 있는 차량용 오디오 시스템은 이전 차량용 오디오 시스템에 비해서 그 기능이 향상되었지만, 단지 사용자가 직접 수동으로 조작하는 방식에 의해 TAPE 및 CD(Compact Disk)를 플레이하거나, AM(Amplitude Modulation)/FM(Frequency Modulation) 방송을 수신하여 출력하는 정도의 기능만을 제공하는데 그치고 있다. 따라서, 사용자가 차량을 주행할 경우에도 직접 사용자가 상기 차량용 오디오 시스템을 수동으로 조작하여야만 하므로 차량 주행 안전성을 저해하는 상황이 발생할 수 있으며, 또한 사용자가 상기 차량용 오디오 시스템을 직접 수동으로 조작해야만 구동이 가능하다는 번거로움이 있었다.

따라서, 본 발명의 목적은 감성 인식 방식을 사용하여 동작을 제어하는 차량용 오디오 시스템 및 그 제어 방법을 제공함에 있다.

상기한 목적을 달성하기 위한 본 발명의 장치는; 감성 인식 차량용 오디오 시스템에 있어서, 입력되는 음성을 인식하는 음성 인식부와, 입력되는 영상을 인식하는 영상 처리부와, 상기 음성 인식부에서 인식한 음성 인식 결과와 상기 영상 처리부에서 인식한 영상 인식 결과에 상응하게 상기 차량용 오디오 시스템의 동작을 제어하는 제어부를 포함함을 특징으로 한다.

상기한 목적을 달성하기 위한 본 발명의 방법은; 감성 인식 차량용 오디오 시스템 제어 방법에 있어서, 입력되는 음성을 인식하는 과정과, 입력되는 영상을 인식하는 과정과, 상기 음성 인식 결과와 영상 인식 결과에 상응하게 상기 감성 인식 차량용 오디오 시스템의 동작을 제어하는 과정을 포함함을 특징으로 한다.

상기한 목적들을 달성하기 위한 본 발명의 다른 방법은; 감성 인식 차량용 오디오 시스템 제어 방법에 있어서, 음성 인식 데이터와 영상 인식 데이터를 사용하여 다수개의 감성 상태들을 생성한 후 저장하는 과정과, 상기 다수개의 감성 상태들 각각에 상응하여 상기 감성 인식 차량용 오디오 시스템에서 플레이 가능한 음악 데이터들중 특정 음악 데이터들을 선택하여 매핑하는 과정과, 이후 상기 감성 인식 차량용 오디오 시스템의 동작 모드를 감성 인식 오디오 모드로 변경함을 요청받으면 상기 감성 인식 차량용 오디오 시스템의 동작 모드를 감성 인식 오디오 모드로 변경하는 과정과, 상기 감성 인식 오디오 모드에서 음성 및 화상을 입력받는 과정과, 상기 입력받은 음성 및 화상을 인식하고, 그 음성 인식 결과 및 영상 인식 결과에 상응하는 감성 상태에 상응하게 상기 감성 인식 차량용 오디오 시스템의 동작을 제어하는 과정을 포함함을 특징으로 한다.

이하, 본 발명에 따른 첨부한 도면을 참조하여 상세히 설명한다. 하기의 설명에서는 본 발명에 따른 동작을 이해하는데 필요한 부분만이 설명되며 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.

본 발명은 감성 인식 방식을 사용하여 그 동작을 제어하는 차량용 오디오 시 스템 및 방법을 제안한다. 특히, 본 발명은 음성 인식 방식과 영상 인식 방식을 사용하여 사용자의 감성 상태에 상응하게 그 동작을 제어하는 차량용 오디오 시스템 및 방법을 제안한다.

도 1은 본 발명의 실시예에서의 기능을 수행하는 차량용 오디오 시스템의 내부 구조를 도시한 블록도이다.

상기 도 1을 참조하면, 상기 차량용 오디오 시스템은 제어부(100)와, 메모리(memory)(110)와, 키입력부(120)와, 표시부(130)와, 오디오 처리부(140)와, AM(Amplitude Modulation)/FM(Frequency Modulation) 튜너(tuner)(150)와, TAPE 플레이어(player)(160)와, CD(Compact Disk) 플레이어(170)와, 카메라(180)와, 영상 처리부(185)와, 마이크(190)와, 음성 인식부(195)로 구성된다.

먼저, 상기 제어부(100)는 상기 차량용 오디오 시스템의 전반적인 동작을 제어한다. 특히, 본 발명의 실시예에서 상기 제어부(100)는 상기 카메라(180)를 통해 촬영되는 영상, 즉 사용자 표정을 영상 인식 방식을 사용하여 인식하고, 상기 마이크(190)를 통해서 입력되는 음원, 즉 사용자 음성을 음성 인식 방식을 사용하여 인식한 후 상기 영상 인식 및 음성 인식 결과를 사용하여 최종적으로 사용자의 감성 상태를 판단하고, 상기 판단된 사용자의 감성 상태에 상응하게 상기 차량용 오디오 시스템의 전반적인 동작을 제어한다.

일 예로, 상기 사용자의 감성 상태를 3가지 감성 상태들, 일 예로 '기분 좋음'감성 상태와, '보통' 감성 상태와, '기분 나쁨' 감성 상태로 구분 가능하다고 가정하기로 한다. 일 예로 상기 영상 인식 및 음성 인식 결과 사용자의 감성 상태 가 기분 나쁨 감성 상태라고 가정하면, 상기 제어부(100)는 상기 기분 나쁨 감성 상태에 상응하게 플레이 가능한 음악들중 경쾌한 음악들을 선곡하여 플레이하도록 제어한다. 여기서, 상기 기분 나쁨 감성 상태에 상응하게 플레이되도록 음악들을 선택하는 과정은 미리 사용자가 음악들을 선택해놓는 등의 다양한 형태로 구현될 수 있으므로 그 상세한 설명을 생략하기로 한다. 한편, 상기 영상 인식 방식 및 음성 인식 방식은 이미 널리 알려진 기술이므로 여기서는 그 상세한 설명을 생략하기로 한다.

상기 메모리(110)는 프로그램 메모리와, 데이터 메모리들을 구비한다. 상기 프로그램 메모리는 상기 차량용 오디오 시스템의 각 프로그램들을 저장하며, 상기 데이터 메모리는 상기 차량용 오디오 시스템의 각종 데이터들 및 상기 제어부(100)의 동작중에 발생되는 데이터를 일시적으로 저장한다. 특히, 본 발명의 실시예에서 상기 메모리(110)는 상기 영상 인식 및 음성 인식을 위한 영상 인식 관련 데이터들과 음성 인식 관련 데이터들을 저장한다. 여기서, 상기 영상 인식 및 음성 인식을 위한 영상 인식 관련 데이터들과 음성 인식 관련 데이터들 역시 이미 널리 알려진 데이터들이므로 여기서는 그 상세한 설명을 생략하기로 한다.

상기 키 입력부(120)는 숫자를 입력하기 위한 키들 및 각종 기능들을 설정하기 위한 기능키들을 구비한다. 특히, 본 발명의 실시예에서 상기 키입력부(120)는 상기 차량용 오디오 시스템의 동작 모드를 감성 인식 오디오 모드로 설정하기 위한 감성 인식 오디오 모드키 등을 구비한다. 여기서, 상기 감성 인식 오디오 모드키는 상기 키 입력부(120)에 구비되어 있는 키들을 조합하여 생성하거나 혹은 새로운 키 들로 정의할 수 있음은 물론이다.

상기 표시부(130)는 상기 제어부(100)에서 출력하는 데이터를 표시한다. 여기서, 상기 표시부(130)는 LCD(Liquid Crystal Display unit)로 구현할 수 있으며, 이 경우 상기 표시부(130)는 LCD 제어부(LCD controller)와, 데이터를 저장할 수 있는 메모리 및 LCD 표시 소자 등을 구비할 수 있다.

상기 AM/FM 튜너(150)는 AM 모드 및 FM 모드에 상응하게 수신되는 무선 주파수(RF: Radio Frequency) 신호를 튜닝하여 상기 오디오 처리부(140)로 출력한다. 상기 TAPE 플레이어(160)는 TAPE를 리드(read)하여 상기 TAPE에 기록되어 있는 음원 신호를 상기 오디오 처리부(140)로 출력한다. 상기 CD 플레이어(170)는 CD를 리드하여 상기 CD에 기록되어 있는 음원 신호를 상기 오디오 처리부(140)로 출력한다.

상기 오디오 처리부(140)는 상기 제어부(100)의 제어에 따라 상기 AM/FM 튜너(150)와, TAPE 플레이어(160) 및 CD 플레이어(170)에서 출력하는 신호를 입력하여 디지털 신호 처리하여 출력한다. 여기서, 상기 오디오 처리부(140)는 디지털 신호 프로세서(DSP: Digital Signal Processor, 이하 'DSP'라 칭하기로 한다) 등으로 구현할 수 있다. 또한, 상기 오디오 처리부(140)는 상기 마이크(180)를 통해 외부로부터 입력되는 음원 신호를 디지털 신호 처리하여 상기 음성 인식부(195)로 전달한다. 상기 음성 인식부(195)는 상기 마이크(180)를 통해 외부로부터 입력되는 음원 신호를 음성 인식하여 그 음성 인식 결과를 상기 제어부(100)로 출력한다.

상기 카메라(180)는 촬영되는 영상을 상기 영상 처리부(185)로 전달하고, 상 기 영상 처리부(185)는 상기 카메라(180)에서 촬영한 영상 신호를 영상 인식하여 그 영상 인식 결과를 상기 제어부(100)로 출력한다.

상기 도 1에서는 본 발명의 실시예에서의 기능을 수행하는 차량용 오디오 시스템의 내부 구조에 대해서 설명하였으며, 다음으로 도 2를 참조하여 본 발명의 실시예에 따른 차량용 오디오 시스템의 동작 제어를 위한 사용자 감성 인식 동작에 대해서 설명하기로 한다.

상기 도 2는 본 발명의 실시예에 따른 차량용 오디오 시스템의 동작 제어를 위한 사용자 감성 인식 과정을 도시한 순서도이다.

상기 도 2를 참조하면, 먼저 상기 차량용 오디오 시스템의 제어부(100)는 211단계에서 대기 모드로 동작하다가 213단계에서 키입력부(120)로부터 키신호가 입력되면, 상기 입력된 키신호가 감성 인식 오디오 모드키 신호인지 검사한다. 상기 검사 결과 상기 키입력부(120)로부터 입력된 키신호가 상기 감성 인식 오디오 드키 신호가 아닐 경우 상기 제어부(100)는 215단계로 진행한다. 상기 215단계에서 상기 제어부(100)는 상기 키입력부(120)로부터 입력된 키신호에 해당하는 해당 작업을 수행한 후 종료한다.

한편, 상기 213단계에서 검사 결과 상기 키입력부(120)로부터 입력된 키신호가 상기 감성 인식 오디오 모드키 신호일 경우 상기 제어부(100)는 217단계로 진행한다. 상기 217단계에서 상기 제어부(100)는 상기 차량용 오디오 시스템의 동작 모드를 감성 인식 오디오 모드로 전환한 후 219단계로 진행한다. 상기 219단계에서 상기 제어부(100)는 마이크(190)로부터 사용자 음성을 입력받고 221단계로 진행한 다. 상기 221단계에서 상기 제어부(100)는 카메라(180)로부터 사용자 영상을 입력받고 223단계로 진행한다.

상기 223단계에서 상기 제어부(100)는 상기 입력받은 사용자의 음성을 음성 인식부(195)를 통해 음성 인식하도록 제어하고, 상기 입력받은 사용자의 영상을 영상 처리부(185)를 통해 영상 인식하도록 제어하여 그 음성 인식 결과 및 영상 인식 결과를 가지고 사용자 감성 상태를 인식한 후 225단계로 진행한다.

상기 225단계에서 상기 제어부(100)는 상기 인식한 사용자 감성 상태에 상응하게 상기 차량용 오디오 시스템의 동작을 제어하고 종료한다. 상기 사용자 감성 상태에 상응하게 상기 차량용 오디오 시스템의 동작을 제어하는 동작에 대해서는 상기 도 1에서 설명하였으므로 여기서는 그 상세한 설명을 생략하기로 한다.

한편, 본 발명에서는 상기 음성 인식 및 감성 인식 결과에 따라, 즉 사용자 감성 상태에 따라 차량용 오디오 시스템의 동작을 제어하는 경우만을 일 예로 하여 설명하였으나, 이와 동일하게 사용자 감성 상태에 따라 차량내 에어 컨디셔너(air conditioner)의 동작 등을 제어할 수 있다. 일 예로 상기 인식된 사용자 감성 상태가 기분 나쁨 감성 상태일 경우에는 상기 에어 컨디셔너의 온도 및 풍량을 미리 설정한 설정 풍량으로 조정하여 동작하도록 제어할 수 있다.

한편 본 발명의 상세한 설명에서는 구체적인 실시예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해 져야 한다.

상술한 바와 같은 본 발명은, 사용자의 감성 상태에 따라 차량용 오디오 시스템의 동작을 제어함으로써 사용자가 직접 수동으로 일일이 차량용 오디오 시스템을 조작하지 않아도 되므로 사용자의 수동 조작에 따른 번거로움을 제거한다는 이점을 가진다. 또한, 사용자의 감성 상태에 따라 차량용 오디오 시스템의 동작을 제어하기 때문에 사용자 취향에 가장 적합한 형태로 차량용 오디오 시스템의 동작을 제어할 수 있어 사용자 편의성을 향상시킨다는 이점을 가진다.

Claims

감성 인식 차량용 오디오 시스템에 있어서,

입력되는 음성을 인식하는 음성 인식부와,

입력되는 영상을 인식하는 영상 처리부와,

상기 음성 인식부에서 인식한 음성 인식 결과와 상기 영상 처리부에서 인식한 영상 인식 결과에 상응하게 상기 차량용 오디오 시스템의 동작을 제어하는 제어부를 포함함을 특징으로 하는 감성 인식 차량용 오디오 시스템.
제1항에 있어서,

상기 시스템은 TAPE를 리드하여 음악 데이터들을 플레이하는 TAPE 플레이어와,

CD(Compack Diask)를 리드하여 음악 데이터들을 플레이하는 CD 플레이어를 더 포함함을 특징으로 하는 감성 인식 차량용 오디오 시스템.
제2항에 있어서,

상기 제어부는 상기 음성 인식 결과와 상기 영상 인식 결과에 상응하게 상기 리드한 음악 데이터들중 특정 음악 데이터들을 선택하여 플레이하도록 제어함을 특 징으로 하는 감성 인식 차량용 오디오 시스템.
감성 인식 차량용 오디오 시스템 제어 방법에 있어서,

입력되는 음성을 인식하는 과정과,

입력되는 영상을 인식하는 과정과,

상기 음성 인식 결과와 영상 인식 결과에 상응하게 상기 감성 인식 차량용 오디오 시스템의 동작을 제어하는 과정을 포함함을 특징으로 하는 감성 인식 차량용 오디오 시스템 제어 방법.
제4항에 있어서,

상기 음성 인식 결과와 영상 인식 결과에 상응하게 상기 감성 인식 차량용 오디오 시스템의 동작을 제어하는 과정은;

상기 음성 인식 결과와 영상 인식 결과에 상응하게 상기 감성 인식 차량용 오디오 시스템에서 플레이 가능한 음악 데이터들중 특정 음악 데이터들을 선택하여 플레이하도록 제어하는 것임을 특징으로 하는 감성 인식 차량용 오디오 시스템 제어 방법.
감성 인식 차량용 오디오 시스템 제어 방법에 있어서,

음성 인식 데이터와 영상 인식 데이터를 사용하여 다수개의 감성 상태들을 생성한 후 저장하는 과정과,

상기 다수개의 감성 상태들 각각에 상응하여 상기 감성 인식 차량용 오디오 시스템에서 플레이 가능한 음악 데이터들중 특정 음악 데이터들을 선택하여 매핑하는 과정과,

이후 상기 감성 인식 차량용 오디오 시스템의 동작 모드를 감성 인식 오디오 모드로 변경함을 요청받으면 상기 감성 인식 차량용 오디오 시스템의 동작 모드를 감성 인식 오디오 모드로 변경하는 과정과,

상기 감성 인식 오디오 모드에서 음성 및 화상을 입력받는 과정과,

상기 입력받은 음성 및 화상을 인식하고, 그 음성 인식 결과 및 영상 인식 결과에 상응하는 감성 상태에 상응하게 상기 감성 인식 차량용 오디오 시스템의 동작을 제어하는 과정을 포함함을 특징으로 하는 감성 인식 차량용 오디오 시스템 제어 방법.
제6항에 있어서,

상기 음성 인식 결과 및 영상 인식 결과에 상응하는 감성 상태에 상응하게 상기 감성 인식 차량용 오디오 시스템의 동작을 제어하는 과정은;

상기 음성 인식 결과 및 영상 인식 결과에 상응하는 감성 상태에 매핑되어 있는 음악 데이터들을 플레이하도록 제어하는 것임을 특징으로 하는 감성 인식 차량용 오디오 시스템 제어 방법.