KR20130098932A - 모바일 장치를 이용한 오디오 및 조명 감성 제어 시스템 및 방법 - Google Patents

Abstract

본 발명의 일측면에 따르면,
오디오 데이터를 모바일 장치로 전송하거나, 모바일 장치로부터 오디오 제어 데이터를 오디오 및 조명 감성 제어 시스템에 전송받기 위한 오디오 무선 통신부;
상기 오디오 무선 통신부에 의해 전송받은 오디오 제어 데이터를 입력 제어 신호와 음원 데이터로 분석하고, 상기 입력 제어 신호에 의하여 상기 오디오 시스템을 제어하는 제어신호를 발생시키는 오디오 제어부;
상기 오디오 제어부의 제어신호에 의하여 음원 데이터를 저장하거나 추출되는 오디오 음원 저장부;
상기 오디오 제어부의 제어신호에 의하여 음원 데이터를 재생하는 오디오 음원 재생부;,
상기 오디오 제어부의 제어신호를 바탕으로 음원 감성 평가가 설정된 경우에는 재생된 음원을 바탕으로 음원의 음색, 리듬, 세기에 대한 특징을 일정 구간마다 추출하는 음원 특징 추출부;
상기 특징 추출부에서 추출된 특징에 의하여 음원에서 설정된 감성데이터에 의해 감성지수를 판단하는 감성 평가부;
상기 감성평가부에서 판단한 감성지수에 의하여 매칭되는 조명색 제어신호를 발생시키는 조명색 제어신호 변환부;
상기 조명색 제어신호에 의하여 조명장치의 조명색을 변환할 수 있는 조명 변환 제어신호를 발생시켜서 상기 조명장치로 전송하는 조명제어 전송 신호 변환부;를 포함하는 오디오시스템을 포함하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 시스템이 제공된다.

Description

모바일 장치를 이용한 오디오 및 조명 감성 제어 시스템 및 방법{SYSTEM AND METHOD FOR AUDIO AND LIGHTING EMOTIONAL CONTROL USING MOBILE DEVICE}

본 발명은 모바일 장치를 이용하여 오디오 시스템을 제어하고 음원을 기반으로 조명을 제어하는 방법 및 장치에 관한 것이다.

종래의 오디오 시스템들은 음원을 재생하기 위해 음원이 들어 있는 시디, 테이프 혹은 저장장치를 오디오 시스템에 물리적으로 연결이 필요로 했고, 새로운 음원을 오디오 시스템을 통해 듣기 위해서는 이러한 저장장치를 오디오 시스템에서 분리하여 음원을 다운로드 받거나 새로운 음원을 연결해야하는 다소 번거로운 과정들을 거쳐야했다.

최근 들어서 음원을 재생할 수 있는 모바일 장치들이 보급되기 시작하였고, 이러한 장치들은 사람에게 원하는 음원을 더 많이 들을 수 있는 기회를 제공하게 되었다.

또한, 조명은 단순히 어둠을 밝히는 기능과 장식용으로 활용되어 왔으나 최근에는 음원과 매칭되는 조명장치가 개발되고 있다.

이에, 한국공개특허 제10-2011-008494(음악을 시각적으로 연출하는 엘이디 조명 장치 및 이의 제어 방법)에서, 입력되는 음악의 악기별 음계와 강약 및 빠르기에 맞춰 엘이디 조명이 연출되도록 함으로써, 각종 무대조명이나 경관 조명 등에 적용하여 음악을 시각적으로 느낄 수 있도록 연출하는 엘이디 조명장치 및 이의 제어방법에 관한 기술이 제공되고 있다.

한국공개특허 제10-2011-008494(음악을 시각적으로 연출하는 엘이디 조명 장치 및 이의 제어 방법)

본 발명은 개인용 모바일 장치로 오디오 시스템을 제어하기 위한 제어용 시스템과 제어 방법에 관한 것으로 오디오 시스템으로부터 모바일 장치로 음원 목록을 가져오고, 입력장치를 통해 음원을 선택하여 재생하거나 삭제 등의 오디오 제어를 하고, 오디오 시스템의 음원을 모바일 장치로 다운로드 하거나, 모바일 장치의 음원을 오디오 시스템으로 업로드하는 오디오 시스템을 제어하는 수단을 구비한 오디오 제어 장치 및 제어 방법을 제공하는 것에 있다.

또한, 오디오의 재생과 연동하여 조명을 제어하기 위하여 음원의 감성 평가를 위하여 음원의 특징을 추출하는 방법 및 음원의 다중 감성 특징을 분석하고 인식하는 방법, 특징된 다중 감성을 바탕으로 조명색을 제어하는 방법, 조명색을 바탕으로 실제 조명 제어 신호로 변환하는 방법을 제공한다.

본 발명의 일 측면에 따르면, 오디오 데이터를 모바일 장치로 전송하거나, 모바일 장치로부터 오디오 제어 데이터를 오디오 및 조명 감성 제어 시스템에 전송받기 위한 오디오 무선 통신부; 상기 오디오 무선 통신부에 의해 전송받은 오디오 제어 데이터를 입력 제어 신호와 음원 데이터로 분석하고, 상기 입력 제어 신호에 의하여 상기 오디오 시스템을 제어하는 제어신호를 발생시키는 오디오 제어부; 상기 오디오 제어부의 제어신호에 의하여 음원 데이터를 저장하거나 추출되는 오디오 음원 저장부; 상기 오디오 제어부의 제어신호에 의하여 음원 데이터를 재생하는 오디오 음원 재생부; 상기 오디오 제어부의 제어신호를 바탕으로 음원 감성 평가가 설정된 경우에는 재생된 음원을 바탕으로 음원의 음색, 리듬, 세기에 대한 특징을 일정 구간마다 추출하는 음원 특징 추출부; 상기 특징 추출부에서 추출된 특징에 의하여 음원에서 설정된 감성데이터에 의해 감성지수를 판단하는 감성 평가부;

상기 감성평가부에서 판단한 감성지수에 의하여 매칭되는 조명색 제어신호를 발생시키는 조명색 제어신호 변환부; 상기 조명색 제어신호에 의하여 조명장치의 조명색을 변환할 수 있는 조명 변환 제어신호를 발생시켜서 상기 조명장치로 전송하는 조명제어 전송 신호 변환부;를 포함하는 오디오시스템을 포함하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 시스템이 제공된다.

본 발명의 다른 측면에 따르면, 오디오 장치 및 조명장치를 제어하기 위한 신호를 전송하거나 상기 오디오 장치로부터 오디오 데이터를 전송받기 위한 모바일 무선 통신부; 상기 오디오 및 조명장치를 제어하기 위한 제어신호를 생성하는 모바일 제어부; 상기 모바일 제어부의 제어신호에 의해 상기 모바일 무선 통신부에 의해 전송받은 오디오 데이터에서 음원 정보 또는 음원의 리스트를 추출하여 표시하는 화면 표시부; 상기 화면 표시부에 표시된 음원리스트, 음원 정보를 포함하는 입력 조건 신호를 선택하여 입력하는 모바일 입력부; 상기 모바일 제어부의 제어신호에 의하여 음원 데이터를 저장하거나 추출되는 모바일 음원 저장부; 상기 모바일 제어부의 제어신호에 의해 상기 입력부에서 선택된 음원에 대하여 감성지수를 추출하는 모바일 감성 평가부; 상기 모바일 감성 평가부에서 추출된 감성지수에 의하여 매칭되는 조명색 제어신호를 발생시키는 조명색 제어신호 변환부; 상기 조명색 제어신호에 의하여 조명장치의 조명색을 변환할 수 있는 조명 변환 제어신호를 발생시켜서 상기 모바일 무선통신부를 통하여 조명장치로 전송하는 조명제어 전송 신호 변환부;를 포함하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어시스템이 제공된다.

본 발명의 다른 측면에 따르면,

모바일 장치를 이용한 오디오 및 조명 감성 제어 방법에 있어서

(1) 상기 모바일 장치가 오디오 및 감성 제어시스템에 음원 정보 및 음원 리스트의 요청을 포함하는 오디오 제어데이터를 전송하는 단계; (2) 상기 모바일 장치가 상기 오디오시스템으로부터 상기 오디오 제어데이터를 전송받아 상기 오디오 제어 데이터에 포함된 음원 정보 또는 음원 리스트를 화면표시부에 표시하는 단계

(3) 상기 화면 표시부에서 음원 리스트 또는 음원 정보가 선택되는 단계; (4) 상기 모바일 장치가 상기 선택된 음원을 저장하는 단계; (5) 상기 모바일 장치가 상기 선택된 음원에 대응하는 감성지수를 추출하는 단계; (6) 상기 모바일 장치가 상기 감성지수에 대응되는 조명색을 추출하는 단계; (7) 상기 모바일 장치가 상기 추출된 조명색을 상기 화면 표시부에 표시하는 단계; (8) 상기 모바일 장치가 상기 선택된 음원을 오디오시스템으로 전송하는 단계; (9) 상기 모바일 장치가 상기 추출된 조명색에 대한 조명제어 전송 신호를 조명장치로 전송하는 단계를 포함하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법이 제공된다.

본 발명의 일 실시예에 따르면, 모바일 장치 사용자가 기존의 오디오 시스템이 구비된 호텔 등의 개인의 편의를 위한 시설에서 무선 통신을 통해 개인이 보유한 음원 파일을 오디오 시스템으로 전송하거나 오디오 시스템에서 재생하고, 오디오 시스템에 있는 음원을 모바일 장치로 다운로드할 수 있는 효과가 있다.

본 발명의 일 실시예에 따르면, 기존에 설치되어 있는 오디오의 스피커 장치를 통해 모바일 장치에 저장된 음원을 재생하여 쾌적한 음원 감상을 할 수 있고, 모바일 장치의 상태 표시 및 입력 장치를 통해 오디오 시스템의 상태를 확인하거나 편리하게 제어할 수 있다. 또한, 오디오 시스템의 메모리에 저장된 음원을 삭제하기 전까지는 이전 사용자에 의해 저장된 음원이 남아있으며 이는 다른 모바일 장치 사용자에게 공유될 수 있다.

또한, 재생되는 오디오와 연동하여 오디오 음원의 감성을 가장 잘 표현할 수 있는 FULL 컬러 LED 조명 시스템과 연동함으로 그 음악의 감상 효과를 극대화할 수 있다.

또한, 모바일 장치를 통하여 음원의 감성 평가에 원하는 방향으로의 가중치를 조절할 수 있도록 감성 이퀄라이저를 제공함으로 원래 음원의 감성과 사용자가 원하는 감성 경향성을 조합하여 조명색이 제어되도록 함으로 사용자의 의도도 반영할 수 있는 조명제어가 가능하도록 할 수 있다.

도 1은 본 발명의 일실시 예에 따른 모바일 장치를 이용한 오디오 및 조명 감성 제어 시스템의 구성도이다.
도 2는 본 발명의 일실시 예에 따른 감성 이퀄라이저의 예이다.
도 3은 본 발명의 또 다른 실시 예에 따른 모바일 장치를 이용한 오디오 및 조명 감성 제어 시스템의 구성도이다.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는바, 특정 실시예들을 도면에 예시하고 이를 상세한 설명을 통해 상세히 설명하고자 한다.

그러나 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.

본 발명을 설명함에 있어서, 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.

그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.

또한, 어떤 부분이 어떤 구성 요소를 포함한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다.

이하, 첨부된 도면들을 참조하여 본 발명의 실시를 위한 구체적인 내용을 설명하도록 한다.

도 1은 본 발명의 일 실시 예에 따른 모바일 장치를 이용한 오디오 및 조명 감성 제어 시스템의 구성도이다.

본 발명의 일 실시예에 따른 모바일장치를 이용한 오디오 제어 장치는, 오디오 데이터를 모바일 장치로 전송하거나, 모바일 장치로부터 오디오 제어 데이터를 오디오 및 조명 감성 제어 장치에 전송받기 위한 오디오 무선 통신부(11)와 상기 오디오 무선 통신부(11)에 의해 전송받은 오디오 제어 데이터를 입력 제어 신호와 음원 데이터로 분석하고, 상기 입력 제어 신호에 의하여 상기 오디오 및 감성제어장치(10)를 제어하는 제어신호를 발생시키는 오디오 제어부(12), 상기 오디오 제어부(12)의 제어신호에 의하여 음원 데이터를 저장하거나 추출되는 오디오 음원저장부(13), 상기 오디오 제어부의 제어신호에 의하여 음원 데이터를 재생하는 오디오 음원 재생부(14), 상기 오디오 제어부(12)의 제어신호를 바탕으로 음원 감성 평가가 설정된 경우에는 재생된 음원을 바탕으로 음원의 음색, 리듬, 세기에 대한 특징을 일정 구간마다 추출하는 음원 특징 추출부(15), 상기 특징 추출부(15)에서 추출된 특징에 의하여 음원에서 설정된 감성데이터에 의해 감성지수를 판단하는 감성 평가부(16), 상기 감성평가부(16)에서 판단한 감성지수에 의하여 매칭되는 조명색 제어신호를 발생시키는 조명색 제어신호 변환부(18)를 포함한다.

또한, 본 발명의 일 실시예에 따른 모바일 장치는, 오디오 및 감성 제어 장치를 제어하기 위한 상기 오디오 제어 데이터를 전송하거나, 오디오 및 감성 제어 장치로부터 오디오 데이터를 전송받기 모바일 무선 통신부(21), 상기 모바일 무선 통신부(21)에 의해 전송받은 오디오 데이터에서 음원 정보 또는 음원의 리스트를 추출하여 화면 표시부에 표시하거나, 상기 오디오 및 조명 감성 제어 장치를 제어하기 위한 제어정보를 상기 화면 표시부(23)에 표시하기 위한 모바일 화면 표시 제어부(미 도시됨), 상기 화면 표시부(23)에 표시되는 제어정보를 이용하여 사용자가 선택적으로 입력 조건을 입력하기 위한 모바일 입력부(22), 상기 음원 정보 또는 음원의 리스트를 저장하거나 추출되는 모바일 음원 저장부(24), 상기 모바일 입력부(22)의 입력 조건 신호에 의해 조명 제어 분위기에 대한 가중치 제어신호를 발생시키는 모바일 분위기 제어부(25)를 포함한다.

본 발명의 또 다른 실시예서는 상기 모바일장치는 상기 모바일 입력부(22)의 입력신호에 따라 선택된 음원을 바탕으로 음원의 음색, 리듬, 세기에 대한 특징을 일정 구간마다 추출하는 음원 특징 추출부(미 도시됨), 상기 특징 추출부에서 추출된 특징에 의하여 음원에서 설정된 감성데이터에 의해 감성지수를 판단하는 감성 평가부(미 도시됨), 상기 감성평가부에서 판단한 감성지수에 의하여 매칭되는 조명색 제어신호를 발생시키는 조명색 제어신호 변환부 및 상기 조명색 제어신호에 의하여 조명장치의 조명색을 변환할 수 있는 조명 변환 제어신호를 발생시켜서 상기 조명장치로 전송하는 조명제어 전송 신호 변환부(미 도시됨)를 더 포함할 수 있다.

본 발명의 일 실시예에 따른 모바일 장치에 제공되는 음원 목록은 리스트 형태로 표시된다. 상기 리스트는 주어진 검색 명령어에 대한 일치도와 각 음원의 사용 빈도수를 바탕으로 한 가중치 값 바탕으로 구성된다. 사용자는 상기 리스트를 드래깅을 통하여 이동할 수 있다.

본 발명의 일 실시예에 따르면, 상기 모바일 장치(20)의 화면 표시부(23)에서는 우선 제목 목록만을 보여주며, 제목을 선택하면 추가 음원 정보가 제공되도록 할 수 있다.

무선 통신부(11)는 Wifi 또는 CDMA, LTE, Wibro, Zigbee, 블루투스 등의 원거리에서 무선으로 데이터를 주고받을 수 있는 기능을 하는 모듈 장치를 포함한다.

이를 통하여 오디오 및 감성제어장치(10)와 모바일 장치(20)는 데이터를 주고 받을 수 있으며, 모바일 장치(20)를 통한 제어 명령어 및 음원 파일을 전송할 수 있다.

음원 저장부(13, 24)는 NAND Flash 메모리 또는 NOR Flash 메모리, SD Card 등의 음원 파일을 저장할 수 있는 메모리 장치를 포함한다. 오디오 및 감성제어장치(10) 또는 모바일 장치(10)에 있는 음원 파일을 전송받으면 저장할 수 있다.

음원재생부(14)는 음원의 디지털 신호를 오디오 재생이 가능하도록 아날로그 신호로 변환하고 증폭하는 장치이다. 또한, 음원 저장부(13)에 있는 음원 파일을 호출하여 재생할 수 있다.

사용자 입력부(22)는 모바일 장치의 입력 수단으로 본 발명의 일 실시예에 따른 오디오 및 조명 감성 제어 장치(10)를 제어하기 위해 사용자가 터치하여 입력된 좌표와 그 좌표에 해당하는 명령이 존재할 때 무선 통신 모듈을 통해 명령어를 오디오 및 감성제어장치(10)로 전송하게 된다.

제어부(12)는 마이크로프로세서 또는 오디오 및 감성제어장치(10)를 제어할 수 있는 제어용 칩으로 FPGA, DSP칩 등을 포함한다.

도 1을 참조하며, 모바일 장치(20)는 무선통신부(21), 화면표시부(22), 입력부(23), 음원저장부(24), 분위기 제어부(25)를 포함한다.

도 2를 참조하면, 본 발명의 일 실시예에 따른 분위기 제어부(25)는 오디오의 주파수 대역에 따른 이퀄라이저와 유사하게 조명 분위기 제어를 위한 대표 감성(본 발명의 일 실시예에서는 기쁨, 평화로 적용됨)에 대한 가중치를 두기 위하여 사용되며, 도 2에 도시되 바와 같이 설정된 값을 이용하여 0~1의 가중치 값이 설정된다.

상기 설정된 값은 각 음원에 대응하는 각 분위기별로 데이터베이스화하여 음원에 따라 축적된 데이터베이스에 의해 제어할 수 있다.

본 발명의 일 실시예에 따른 오디오 및 조명 감성 제어 장치(10)는 음원을 저장할 수 있는 저장부(13)와 무선통신을 할 수 있는 통신장치(11), 음원을 소리로 나타내는 스피커(30), 이들을 제어하는 제어부(12)를 포함하고 있는 오디오 장치를 포함한다.

또한, 음원을 저장할 수 있는 음원 저장부(24)와 무선 통신을 할 수 있는 무선통신부(21), 정보를 표시할 수 있는 화면표시부(23)와 사용자 입력을 할 수 있는 입력부(22)를 포함하고 있는 모바일 장치 및 FULL 컬러 조명 장치를 포함할 수 있다.

본 발명의 일 실시예에 따른 오디오 및 조명 감성 제어 장치(10)는 모바일 장치(20)와 통신을 하기 위해 Wifi 또는 CDMA, LTE, Wibro, Zigbee, 블루투스 등을 통해 연결된다.

또한, 무선 통신을 통해 받은 오디오 제어 데이터를 분석하여 음원을 재생하거나 모바일 장치(20)로 필요한 정보를 보내줄 수 있다.

본 발명의 일 실시예에 따르면, 모바일 장치(20)에서 음원의 리스트를 요청하면, 오디오 및 조명 감성 제어 장치(10)는 음원저장부(13)에 있는 음원들의 파일 이름을 목록으로 만들어 보내게 된다. 또한, 선택한 음원을 요청한다면 그 음원에 대한 데이터를 무선통신부(11)를 통하여 보내게 되고, 모바일 장치(20)에서 이를 수신하여 음원 저장부(24)에 저장할 수 있도록 한다.

본 발명의 일 실시예에 따르면, 오디오 제어부(12)는 무선통신부(11)에서 전송된 오디오 제어 데이터를 분석하기 위해 미리 만들어놓은 프로토콜에 맞추어 제어의 진행 여부를 결정하고, 입력 제어 신호 및 음원 데이터를 구분하여 분석한다.

또한, 오디오 및 조명 감성 제어 장치(10)는 모바일 장치(20)와 프로토콜이 일치되도록 선택적으로 동기화시켜서 제어를 진행할 수도 있다.

또한, 오디오 제어부(12)는 분석한 제어 신호를 음원 저장 및 불러오기를 위한 절차 또는 음원 재생에 필요한 절차를 처리하게 된다.

음원저장부(13)는 SD Card, Nand Flash, 하드디스크 등의 음원을 저장할 수 있는 저장 장치로 이루어져 있으며, 음원 재생부에서 재생을 위해 음원 데이터를 요청하거나, 모바일 장치(20)에서 음원 데이터를 요청할 경우 이를 엑세스하여 음원 데이터를 추출하여 내보내게 된다.

또한, 모바일 장치에서 전송된 음원 데이터를 저장할 수 있다.

음원재생부(14)는 음원 데이터를 오디오로 재생할 수 있는 아날로그 신호로 바꾸는 디코더와 이를 소리로 출력하는 스피커(30)를 포함할 수 있으며, 오디오 제어부(12)의 재생 제어신호에 의해 음원을 재생할 수 있다.

음원 특징 추출부(15)에서는 음원의 음색, 리듬, 세기 등의 특징을 일정한 간격으로 추출하게 된다.

본 발명의 일 실시예에 따르면, 기본 음원의 특징을 추출하는 하위특징 추출과 이의 조합에 의한 상위 특징 추출의 두 단계로 특징추출이 이루어진다.

하위특징 추출은 FFT(Fast Fourier Transform) 후에 음의 세기는 계수의 합, 세기의 비율은 이웃한 밴드(범위) 안에서 계수의 비율에 의하여 구할 수 있다. 이와 함께 인간의 청각민감도를 고려한 주파도 영역의 특징점을 추출한다.

본 발명의 일실시예에 따르면, 10초에 한 번씩, MFCC(mel-frequency cepstral coefficient: 음원 인지 양상이 선형적이지 않고 로그 스케일과 비슷한 멜 스케일을 따르는 특징을 가지는 것)특징을 추출하여 음원을 분석하여 특징 추출을 한다.

또는 이와 유사한 음원 분석을 통하여 각 밴드 주파수에 해당하는 소리의 특성을 분석할 수 있다.

본 발명의 일 실시예에 따르면, 상위특징의 경우에는 다수의 하위 특징의 조합에 의하여, 보다 긴 시간에서의 음악의 특징을 추출하게 된다. 음색은 옥타브 기반의 주파수의 최대값, 최소값 및 주파수 영역에서의 밴드의 범위, 형태를 바탕으로 특징을 추출하게 되며, 리듬의 경우에는 리듬의 강도, 규칙성, 속도 등에 대한 특징값을 추출하게 된다.

본 발명의 일 실시예에 따르면, 음원 조성에 대한 특징값에 대한 템플릿을 바탕으로 각 조성의 빈도를 조사하여, 장조 및 단조의 비율을 파악하여 특징을 추출한다.

본 발명의 일 실시예에 따르면, 상기와 같이 오디오 특징들로부터 감성을 분석하기 위해서 추출된 특징값에 대한 감성 분류를 GMM(Gaussian Mixture Models) 기법을 이용하여 분석함으로써, 해당 음원에 대하여 각각의 감성에 대한 값을 얻을 수 있게 된다.

본 발명의 일 실시예에 따르면, 상기 음원 특징 추출부가 오디오 및 조명 감성 제어 장치(10)에 포함되도록 하였으나, 도 다른 실시예에서는 상기 음원 특징 추출부를 모바일장치(20)에 포함하도록 하여 모바일장치(20)에서 음원의 특징을 추출하여 감성지수를 추출하도록 할 수 있다.

본 발명의 일 실시예에 따르면, 상기 모바일 장치(20)에서 오디오 및 조명 감성 제어 장치(10)에 음원 목록을 요청하면, 음원 장치로부터 받은 음원정보를 모바일 장치(20)의 화면표시부(23)에 표시하게 되며, 표시된 화면에서 사용자가 선택된 음원 정보를 오디오 및 조명 감성 제어 장치(10)오디오 제어 장치에 요청할 수 있다.

상기 모바일 장치(20)는 무선 통신을 통해 오디오 및 조명 감성 제어 장치(10)로부터 받은 데이터를 분석하여 오디오 및 조명 감성 제어 장치(10)를 제어하거나 시스템으로 필요한 정보를 보내줄 수 있다.

본 발명의 일 실시예에 따르면, 모바일 장치(20)에서 음원의 리스트를 요청하면, 오디오 및 조명 감성 제어 장치(10)는 음원저장부(13)에 있는 음원들의 파일 이름을 목록으로 만들어 보내게 되고, 모바일장치(20)는 이를 받아서 화면 표시부(23)를 통해 디스플레이하게 된다.

또한, 선택한 음원을 요청한다면 그 음원에 대한 데이터를 보내어 모바일 장치(20)에서 저장할 수 있도록 한다.

화면표시부(23)는 LCD 혹은 AMOLED 등으로 이루어져 있고, 오디오 및 감성제어장치(10()의 상태나 음악 리스트 제어 버튼 등을 표시할 수 있는 유저 인터페이스로 꾸며질 수 있다.

모바일 장치(20)의 입력부(22)는 터치 스크린, 버튼 등을 포함하며, 화면 표시부를 통해 사용자가 원하는 명령을 선택할 수 있고, 선택한 명령을 무선 통신부를 통해 오디오 및 감성제어장치(10)를 제어할 수 있다.

본 발명의 일 실시예에 따르면, 분위기 제어를 위한 이퀼라이저를 화면 표시부(23)를 통하여 표시하고 사용자의 입력에 따라 각 대표 분위기에 대한 가중치 값을 얻어서 이를 오디오 및 조명 감성 제어 장치(10)로 무선으로 보냄으로써, 오디오 및 조명 감성 제어 장치(10)에서 조명의 감성 평가부에서 가중치 값을 적용할 수 있도록 한다.

본 발명의 또 다른 실시예에 따르면 음원 감성 평가부를 모바일 장치(20)에 더 포함하여 상기 선택된 가중치 값에 의해 모바일장치(20)에서 조명의 감성지수를 추출할 수 있다.

오디오 및 조명 감성 제어 장치(10)의 음원 특징 추출부(15)에서는 음원의 음색, 리듬, 세기 등의 특징을 일정한 간격 (본 발명의 일 실시예에서는 10초, 30초를 선택적으로 적용한다.)으로 계산하게 된다.

본 발명의 일 실시예에 따르면, 음의 세기는 스펙트럼 분석을 통하여 얻을 수 있으며, FFT(Fast Fourier Transform) 후에 세기는 계수의 합, 세기의 비율은 이웃한 밴드(범위) 안에서 계수의 비율에 의하여 숫자화 하게 된다.

또한, 음색은 옥타브 기반의 주파수의 최대값, 최소값 및 주파수 영역에서의 밴드의 범위, 형태를 바탕으로 특징을 추출하였으며, 리듬의 경우에는 리듬의 강도, 규칙성, 속도 등에 대한 특징값을 추출하였다.

도 3은 본 발명의 또 다른 실시 예에 따른 모바일 장치를 이용한 오디오 및 조명 감성 제어 시스템의 구성도를 나타낸다.

도 3을 참조하면, 본 발명의 또 다른 실시예에 의한 모바일 장치는 오디오 장치 및 조명장치를 제어하기 위한 신호를 전송하거나 상기 오디오 장치로부터 오디오 데이터를 전송받기 위한 모바일 무선 통신부(51), 오디오/조명제어장치(10) 및 조명장치(40) 를 제어하기 위한 제어신호를 생성하는 모바일 제어부(54), 모바일 제어부(54)의 제어신호에 의해 모바일 무선 통신부(51)에 의해 전송받은 오디오 데이터에서 음원 정보 또는 음원의 리스트를 추출하여 표시하는 화면 표시부(53), 화면 표시부에 표시된 음원리스트, 음원 정보를 포함하는 입력 조건 신호를 선택하여 입력하는 모바일 입력부(미 도시됨), 모바일 제어부(54)의 제어신호에 의하여 음원 데이터를 저장하거나 추출되는 모바일 음원 저장(55), 모바일 제어부(54)의 제어신호에 의해 상기 입력부에서 선택된 음원에 대하여 감성지수를 추출하는 모바일 감성 평가부(58), 모바일 감성 평가부(58)에서 추출된 감성지수에 의하여 매칭되는 조명색 제어신호를 발생시키는 조명색 제어신호 변환부(59), 조명색 제어신호에 의하여 조명장치의 조명색을 변환할 수 있는 조명 변환 제어신호를 발생시켜서 상기 모바일 무선통신부(51)를 통하여 조명장치(40)로 전송하는 조명제어 전송 신호 변환부(60);를 포함을 포함한다.

본 발명의 일 실시예에서는 상기 모바일 감성 평가부(58)는 음원 특징 추출부(57)를 더 포함한다.

또한, 본 발명의 일 실시예에서는 모바일 입력부(52)의 입력 조건 신호에 의해 조명 제어 분위기에 대한 가중치 제어신호를 발생시키는 분위기 제어부(55)를함한다.

상기 분위기 제어부(55)는 도 2에 도시된 바와 같이 이퀄라이저와 유사하게 조명 분위기 제어를 위한 감성의 가중치를 선택할 수 있도록 한다.

도 3을 참조하면, 본 발명의 일 실시예인 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법은, 모바일 장치(50)가 오디오장치(70)에 음원 정보 및 음원 리스트의 요청을 포함하는 오디오 제어데이터를 전송한다.

본 발명의 일 실시예에 따르면, 상기 오디오 장치는 조명 감성제어를 포함할 수 있다.

다음, 상기 모바일 장치(50)가 상기 오디오장치(70)로부터 상기 오디오 제어데이터를 전송받아 상기 오디오 제어 데이터에 포함된 음원 정보 또는 음원 리스트를 화면표시부(53)에 표시하게 된다.

사용자는 화면 표시부(53)에서 음원 리스트 또는 음원 정보를 선택한다.

다음 선택된 음원을 음원저장부(55)에 저장하고, 선택된 음원에 대응하는 감성지수를 추출하게 된다.

다음, 추출된 감성지수에 대응되는 조명색을 추출하여, 상기 추출된 조명색을 상기 화면 표시부(53)에 표시하게 된다.

다음,모바일 장치(50)는 상기 선택된 음원을 재생하기 위하여 오디오장치(70)로 전송하며 또한, 원하는 조명으로 제어하기 위하여 상기 추출된 조명색에 대한 조명제어 전송 신호를 조명장치(40)로 전송하게 된다.

본 발명의 일실시예에 따르면, 상기 감성지수에 따라 대응되는 조명색을 추출하는 것은 상기 감성 지수를 일부 감성지수만 사용하여 2차원 또는 전체 3개의 축에 대한 감성 지수를 사용하여 3차원 감성 공간에 각각의 감성에 대응시킨 다음, 상기 3차원 좌표를 바탕으로 조명에 대한 색상 또는 색상과 채도 값을 각 감성 지수의 축에 대응하는 조명색의 조합에 의하여 얻도록 하였다.

상기 감성지수에 따라 대응되는 조명색을 추출하는 것은 상기 감성 지수를 3차원 감성 공간에 각각의 감성에 대응시킨 다음, 상기 3차원 좌표를 바탕으로 색을 표시하는 3차원 값을 얻도록 하였다.

또한, 상기 감성지수에 따른 조명색 변환을 위하여 3축의 감성 좌표에 각각의 감성을 표현하고 이를 바탕으로 FULL 컬러 조명 제어를 위한 3가지 색에 대한 매핑을 할 수 있다.

또한, 감성지수는 multi-label 인식기를 이용하여 각 음원에 대한 다양한 감성 인식에 대한 데이터베이스를 구축하고 상기 데이터베이스를 바탕으로 사용자의 다중 감성을 선택하도록 함으로써, 하나의 음원에 대한 다중감성 지수를 추출할 수 있다.

또한, 본 발명의 일 실시예에 따르면, 상기 감성지수를 추출하는 것은, 각 음원에 대하여 대칭되는 다중 감성이 축적된 감성 데이터베이스를 구축하고, 상기 감성 데이터베이스로부터 상기 선택된 음원에 대하여 상기 다중 감성 중 어느 하나 이상을 선택하도록 함으로써, 감성 지수를 추출하는 방법이 채택된다.

또한, 감성지수는, 이퀄리이저에서 제공된 사용자의 가중치에 대한 geometric mean을 이용하여 각 감정 지수의 최종 weight을 구할 수 있다.

본 발명의 일 실시예에 따르면, 모바일 장치로써 조명의 분위기 제어를 위하여 사용자가 원하는 조명의 감성 방향을 나타내는 감성 이퀼라이저를 제공하고 이를 사용자가 입력을 받아 직접 또는 간접적으로 사용자의 입력을 이용하여 조명을 조정할 수 있다.

본 발명의 일 실시예에 따르면, 음원 감성 평가를 위하여 음원의 multi-label 인식기에 의한 다중 감성과 사용자의 감성 이퀄라이저에 감성값의 조합에 의하여 최종 감성값을 계산하게 된다.

음원 특징을 바탕으로 한 음원 감성 평가는 multi-label 인식기를 이용하여 하나의 음원에 대한 다양한 감성 인식이 가능함을 바탕으로 사용자의 다중 감성 표기를 바탕으로 학습함으로 하나의 음원에 대한 다중감성 지수를 얻어낼 수 있다.

또한, 이퀄리이저에서 제공된 사용자의 가중치에 대하여 geometric mean을 이용하여 각 감정 지수의 최종 weight을 구할 수 있다. 여기서 사용자의 감성 이퀄라이저 값이나 multi-label 값은 0~1 사이의 값으로 정규화 값을 설정되도록 하였다.

다른 실시예에서는 최종 weight를 계산하기 전에 정규화의 과정을 거치도록 할 수 있다.

본 발명의 일 실시예에 따르면, 다중 감성 지수 조명색 변환을 위하여 3축의 감성 좌표에 각각의 감성을 표현하고 이를 바탕으로 FULL 컬러 조명 제어를 위한 3가지 색에 대한 매핑을 찾아 적용할 수 있다.

본 발명의 일실시예에 따르며, 감성지수에 대응되는 조명색을 추출하기 위하여, 감성 지수를 3차원 감성 공간(흥분-이완, 쾌-불쾌, 개방-폐쇄)에 각각의 감성에 대응시킨 후, 이 3차원 좌표를 바탕으로 색을 표시하는 3차원 값을 얻도록 하였다.

조명에 대한 3차원 공간에서 3차원 색 공간으로의 매핑은 선형 매핑으로 근사화 시켰으며, 이는 최소자승법에 의하여 구할 수 있다.

본 발명의 일 실시예에 따르면, 3차원 색채 매핑은 색채 감성 대표색을 사용하여 각각의 감성공간에 해당하는 대표색을 지정하고, 이를 바탕으로 구하도록 하였다.

본 발명의 일 실시예에서는, 흥분-이완에 해당하는 축에 대하여 빨강-하늘을 대비시키고, 괘-불쾌 축에 대하여 초록-보라에 대응시키며, 개방-폐쇄에 해당하는 축에 대하여 노랑과 파랑을 대비시키는 방법이 채택되었다.

본 발명의 또 다른 실시예에서는 이러한 색에 대한 대응은 나라와 환경, 연령에 따라 다를 수 있기 때문에 선택적으로 변화를 줄 수 있도록 하는 선택적 수단이 포함된다.

본 발명의 일 실시예에서는 모든 감각들이 균형을 이루는 경우에는 백색 조명이 되도록 색에 대한 스케일 및 가중치를 조절하도록 하였다.

이때 각 감성에 대한 색은 감성에 대한 대표색을 바탕으로 정의되며 감성의 세기는 색의 밝기 정보와 대응하도록 하였다. 이를 위하여 각 감성의 색을 HSV 색 공간에서 조정한 후에 다시 이를 RGB 색 공간으로 변환하도록 한다.

FULL 컬러 조명 제어를 위하여 조명에서 조도와 색상을 제어하는 것이 필요하고, 또한 조도 및 색상의 전이를 효율적으로 제어하는 것이 필요하다.

이를 위하여 본 발명의 일 실시예에서는 기본 조도를 FFT(Fast Fourier Transform)를 통하여 구한 음의 세기 정보를 바탕으로 제어하고, 색상은 오디오에서 분석한 실시간 감성 지수 또는 데이터 베이스에 구축되어 있는 감성 지수 값을 사용하여 제어하도록 하는 방법을 채택하였다.

즉, 음의 음량의 최대값을 S_max라고 할 때, S_max의 경우에 주어진 선택된 감성지수에 따라, 선택된 색상을 C라고 하면, C의 최대값에 밝기에 매칭을 시키도록 하였다.

실제적으로 C값은 R, G, B값의 조합 비율에 의하여 결정되고, C값은 R, G, B 값의 비율이 일정할 때 동일한 색상을 나타낸다. 본 발명의 일 실시예에서는 이때, R, G, B 중에 가장 큰 값이 최대 밝기인 255를 가지도록 하며, 상대적인 비율로 G 와 B 값도 이에 맞추어 매칭시키도록 하는 방법을 채택하였다.

본 발명의 또 다른 실시예에서, 음의 세기의 변화에 대하여 하위특징을 매번 뽑을 때마다 샘플링되며, 이 샘플링된 음의 세기의 값의 적용에 있어서는 Direct 모드인 경우에는 매번 음의 세기에 따라 밝기를 조정하도록 하고, Smooth 모드의 경우에는 밝기 값의 변화에 대하여 Low Pass Filtering을 하여 밝기가 천천히 변하도록 하는 방법이 채택된다. 이때 Low Pass Filter의 필터링 주파수는 음의 탬포를 바탕으로 자동으로 조정할 수 있게 된다. Direct모드와 Smooth 모드는 사용자가 선택할 수 있도록 선택모드에 포함하였으며, Automatic으로 선택할 경우에는 템포가 빠른 Rock과 같은 음악의 경우에는 Direct 모드로, 클래식 곡은 Smooth 모드에 따라 제어되도록 하였다.

본 발명의 일 실시예에 따르면, 색상은 감성지수에 따라 설정된 색상에 대하여 추정된 가중치를 바탕으로 색상의 가중치를 두도록 하였다.

예를 들면, 오디오 감성 평가에 의하여 평가된 감성지수가 흥분 0.9, 개방 0.7인 경우에, 흥분-이완에 해당하는 색상이 빨강-하늘, 흥분에 해당하는 빨강에 0.9의 가중치와 하늘에 0.1의 가중치를 두었다.

또한, 개방-폐쇄가 노랑-파랑에 대응하는 경우에 노랑에 0.7의 가중치, 파랑에 0.3의 가중치를 두고 이를 바탕으로 색을 조합하게 되면 HSV에서 HS공간에서의 값을 계산할 수 있으며, 앞에서 구한 음의 세기를 바탕으로 V를 계산함으로 HSV공간의 좌표값이 산출할 수 있게 된다.

상기 HSV공간의 좌표값은 필요한 경우에 다시 RGB값으로 변환하여 DMX512 프로토콜 등을 이용하여 R, G, B값에 의하여 조명의 밝기와 색상을 제어하게 된다.

본 발명의 일 실시예에 따르면, 음이 단조인지 장조인지를 구분하는 기능이 포함되며, 단조인 경우에는 파란색 계통으로 offset 주고, 장조인 경우에는 노란색 계통으로 offset을 주어 추가적으로 음악적 특성을 바탕으로 한 색의 변환이 가능하도록 제어된다.

본 발명의 또 다른 실시예에 따르면, 음원 특징과 감성에 대응되는 조명신호를 데이터베이스화하여 음원에 따라 추출하여 적용할 수 있다.

조명 제어신호 변환부(18)는 RGB 신호를 바탕으로 이의 시간적인 흐름을 중심으로 DMX 512형태에 맞추어 Full 컬러 LED 조명을 제어하기 위하여 각 시간에 인식된 감성을 바탕으로 조명 색의 자연스러운 변화가 연출되도록 조정하고 이를 바탕으로 실제 조명 제어가 이루어지도록 한다.

조명의 자연스럽고 효과적인 제어를 위하여 유사한 감성의 경우에는 비슷한 색상으로 나타나서 자연스러운 interpolation에 의하여 나타낼 수 있으나, 상반된 2가지의 감성이 대표적으로 나타나는 경우에는 일정간격으로 각각의 감성에 해당하는 조명을 규칙적으로 바꾸어 보이도록 한다.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다.

본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석 되어야 할 것이다.

10: 오디오 및 조명 감성 제어 장치
11, 21, 51; 무선 통신부
12, 54: 제어부
13, 55: 음원 저장부
14: 음원 재생부
15, 57: 특징 추출부
16, 58: 감성평가부
17, 59: 조명색 변환부
18, 60: 조명 제어신호 변환부
20: 모바일 장치
21: 무선 통신부
22: 화면 표시부
23: 입력부
24: 음원 저장부
25: 분위기 제어부
30: 스피커 장치
40: 조명장치

Claims (14)

1. 오디오 데이터를 모바일 장치로 전송하거나, 상기 모바일 장치로부터 오디오 제어 데이터를 전송받기 위한 오디오 무선 통신부;
   상기 오디오 무선 통신부에 의해 전송받은 오디오 제어 데이터를 입력 제어 신호와 음원 데이터로 분석하고, 상기 입력 제어 신호에 의하여 상기 오디오 및 조명 감성 제어 시스템을 제어하는 제어신호를 발생시키는 오디오 제어부;
   상기 오디오 제어부의 제어신호에 의하여 음원 데이터를 저장하거나 추출되는 오디오 음원 저장부;
   상기 오디오 제어부의 제어신호에 의하여 음원 데이터를 재생하는 오디오 음원 재생부;
   상기 오디오 제어부의 제어신호를 바탕으로 음원 감성 평가가 설정된 경우에는 재생된 음원을 바탕으로 음원의 음색, 리듬, 세기에 대한 특징을 일정 구간마다 추출하는 음원 특징 추출부;
   상기 특징 추출부에서 추출된 특징에 의하여 음원에서 설정된 감성데이터에 의해 감성지수를 판단하는 감성 평가부;
   상기 감성평가부에서 판단한 감성지수에 의하여 매칭되는 조명색 제어신호를 발생시키는 조명색 변환부;
   상기 조명색 제어신호에 의하여 조명장치의 조명색을 변환할 수 있는 조명 변환 제어신호를 발생시켜서 상기 조명장치로 전송하는 조명제어 전송 신호 변환부;를 포함하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 시스템
   
2. 제1항에 있어서
   상기 모바일 장치는 오디오 및 감성 제어 시스템을 제어하기 위한 상기 오디오 제어 데이터를 전송하거나, 오디오 및 감성 제어 시스템으로부터 오디오 데이터를 전송받는 모바일 무선 통신부;
   상기 모바일 무선 통신부에 의해 전송받은 오디오 데이터에서 음원 정보 또는 음원의 리스트를 추출하여 화면 표시부에 표시하거나, 상기 오디오 및 조명 감성 제어 시스템을 제어하기 위한 제어정보를 상기 화면 표시부에 표시하기 위한 모바일 화면 표시 제어부;
   상기 화면 표시부에 표시되는 제어정보를 이용하여 사용자가 선택적으로 입력 조건을 입력하기 위한 모바일 입력부;
   상기 음원 정보 또는 음원의 리스트를 저장하거나 추출되는 모바일 음원 저장부;
   상기 모바일 입력부의 입력 조건 신호에 의해 조명 제어 분위기에 대한 가중치 제어신호를 발생시키는 모바일 분위기 제어부;
   를 포함하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 시스템
3. 제1항에 있어서,
   상기 오디오 제어부는 상기 오디오 무선통신부로부터 상기 오디오 제어 데이터를 전송받아 상기 모바일 장치와 미리 설정된 프로토콜에 의하여 제어를 진행하게 되며, 상기 입력된 입력 제어 신호에 따라 상기 음원 데이터의 저장 및 추출에 대한 제어신호를 발생하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어시스템
   
4. 오디오 장치 및 조명장치를 제어하기 위한 신호를 전송하거나 상기 오디오 장치로부터 오디오 데이터를 전송받기 위한 모바일 무선 통신부;
   상기 오디오 장치 및 조명장치를 제어하기 위한 제어신호를 생성하는 모바일 제어부;
   상기 모바일 제어부의 제어신호에 의해 상기 모바일 무선 통신부에 의해 전송받은 오디오 데이터에서 음원 정보 또는 음원의 리스트를 추출하여 표시하는 화면 표시부;
   상기 화면 표시부에 표시된 음원리스트, 음원 정보를 포함하는 입력 조건 신호를 선택하여 입력하는 모바일 입력부;
   상기 모바일 제어부의 제어신호에 의하여 음원 데이터를 저장하거나 추출되는 모바일 음원 저장부;
   상기 모바일 제어부의 제어신호에 의해 상기 입력부에서 선택된 음원에 대하여 감성지수를 추출하는 모바일 감성 평가부;
   상기 모바일 감성 평가부에서 추출된 감성지수에 의하여 매칭되는 조명색 제어신호를 발생시키는 조명색 변환부
   상기 조명색 제어신호에 의하여 조명장치의 조명색을 변환할 수 있는 조명 변환 제어신호를 발생시켜서 상기 모바일 무선통신부를 통하여 조명장치로 전송하는 조명제어 전송 신호 변환부;를 포함하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어시스템
   
5. 제4항에 있어서
   상기 모바일 입력부의 입력 조건 신호에 의해 조명 제어 분위기에 대한 가중치 제어신호를 발생시키는 모바일 분위기 제어부를 포함하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어시스템
   
6. 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법에 있어서
   (1) 상기 모바일 장치가 오디오 장치에 음원 정보 및 음원 리스트의 요청을 포함하는 오디오 제어데이터를 전송하는 단계;
   (2) 상기 모바일 장치가 상기 오디오 장치로부터 상기 오디오 제어데이터를 전송받아 상기 오디오 제어 데이터에 포함된 음원 정보 또는 음원 리스트를 화면표시부에 표시하는 단계
   (3) 상기 화면 표시부에서 음원 리스트 또는 음원 정보가 선택되는 단계;
   (4) 상기 모바일 장치가 상기 선택된 음원을 저장하는 단계;
   (5) 상기 모바일 장치가 상기 선택된 음원에 대응하는 감성지수를 추출하는 단계;
   (6) 상기 모바일 장치가 상기 감성지수에 대응되는 조명색을 추출하는 단계;
   (7) 상기 모바일 장치가 상기 추출된 조명색을 상기 화면 표시부에 표시하는 단계;
   (8) 상기 모바일 장치가 상기 선택된 음원을 상기 오디오 장치로 전송하는 단계;
   (9) 상기 모바일 장치가 상기 추출된 조명색에 대한 조명제어 전송 신호를 조명장치로 전송하는 단계를 포함하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법
   
7. 제6항에 있어서,
   상기 (6) 단계에서 상기 감성지수에 대응되는 조명색을 추출하는 것은, 상기 감성 지수를 3차원 좌표 공간으로 표현된 3차원 감성 공간 지수로 변환시킨 다음, 상기 3차원 감성 공간 지수에 대응하는 3차원 색을 추출하도록 하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법
   
8. 제6항에 있어서,
   상기 (5) 단계에서 상기 감성지수를 추출하는 것은, 각 음원에 대하여 대칭되는 다중 감성이 축적된 감성 데이터베이스를 구축하고, 상기 감성 데이터베이스로부터 상기 선택된 음원에 대하여 상기 다중 감성 중 어느 하나 이상을 선택하도록 함으로써, 상기 감성 지수를 추출하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법
   
9. 제6항에 있어서
   상기 (5) 단계에서 상기 감정지수를 추출하는 것은, 상기 화면표시부에서 표시된 이퀄라이저로부터 선택된 사용자 가중값에 의하여 각 감정 지수의 최종 weight를 구하여 상기 감정지수를 추출하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법
   
10. 제6항에 있어서,
    상기 (5) 단계에서 상기 감정지수를 추출하는 것은, 짧은 시간 간격을 기반으로 한 특징 추출과 긴 시간 간격을 바탕으로 한 특징 추출을 조합하는 방법을 이용하여 상기 선택된 음원의 신호를 분석하여 상기 감성지수를 추출하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법.
    
11. 제6항에 있어서,
    상기 감성지수를 추출하는 단계에서 짧은 시간 간격을 기반으로 한 특징 추출과 긴 시간 간격을 바탕으로 한 특징 추출을 조합하는 방법을 이용하여 오디오 신호를 분석하여 감성지수를 추출하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법.
    
12. 제11항에 있어서,
    상기 특징추출은 멜로디, 음색 및 음조를 포함하도록 추출하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법.
    
13. 제7항에 있어서,
    상기 3차원 감성 공간 지수에 대한 대표색상을 정하고, 상기 모바일 장치에 입력된 감성의 가중치를 바탕으로 대표색상에 대한 가중치를 조정하여 조명의 색상을 설정하고, 조명의 밝기는 음원의 세기를 바탕으로 제어되는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법.
    
14. 제7항에 있어서
    상기 3차원 색을 추출하는 것은,
    3차원 감성 공간 지수에 대한 대표색상을 정하되,
    상기 대표색상은 HSV 색상값에서 상기 음원의 감성지표에 의하여 색상 및 채도를 결정하고, 상기 음원의 세기를 바탕으로 V(밝기)를 결정하며, 상기 모바일 장치에 입력된 감성의 가중치를 적용하여 조명의 색상을 설정한 후, 상기 HSV 값을 RGB 값으로 변환하는 것을 특징으로 하는 모바일 장치를 이용한 오디오 및 조명 감성 제어 방법.

Images