KR100684018B1 - 악기 이미지 기반의 연주 효과 처리방법 및 모바일 단말기 - Google Patents

Abstract

본 발명은 음원 표시 방법에 관한 것으로, 특히 모바일 단말기의 음악 파일 등의 재생시 악기의 연주효과를 화면창에 표시하는 악기 이미지 기반의 연주 효과 처리방법 및 모바일 단말기에 관한 것이다.

본 발명에 따른 악기 이미지 기반의 연주 효과 처리방법은, 음원 데이터에서 음 정보를 추출하는 단계; 상기 추출된 음 정보에 해당하는 연주 효과를 악기 이미지에 대응시켜 시각적인 변화로 표시하는 단계를 포함하는 것을 특징으로 한다.

모바일 단말, 연주 효과

Description

악기 이미지 기반의 연주 효과 처리방법 및 모바일 단말기{method for displaying performance image of musical instrument and mobile terminal}

도 1은 본 발명의 실시 예에 따른 모바일 단말기의 구성을 보여주는 도면.

도 2는 본 발명의 실시 예에 따른 모바일 단말기의 음원 표시 방법을 나타내는 플로우 차트.

도 3은 본 발명의 실시 예에 따른 모바일 단말기의 키 번호와 대응하여 악기 메뉴의 구성을 예시한 도면.

도 4는 본 발명의 실시 예에 따른 연주효과를 모바일 단말기의 화면창에 보여주는 도면.

<도면의 주요 부분에 대한 부호의 설명>

11...무선 송수신부 12...입력부

13...메모리부 14...음원 처리부

15...표시부 16...스피커

17...제어부

본 발명은 음원 표시 방법에 관한 것으로, 특히 모바일 단말기의 음악 파일 등의 재생시 악기의 연주효과를 화면창에 표시하는 악기 이미지 기반의 연주 효과 처리방법 및 모바일 단말기에 관한 것이다.

최근들어, 이동통신 단말기는 이동하면서 음성 호, 데이터 호 등의 서비스를 제공받는 고유의 기능 외에도, 해당 단말기 자체에 탑재된 음악 청취, 일정관리, 게임 등의 응용 프로그램을 통해 사용자에게 멀티미디어 서비스를 제공하는 등 일상생활에 있어 필수품으로 자리잡고 있다.

또한 이동통신 단말기에 장착 가능한 음원생성 기술의 발달로 인하여 화려한 소리를 내는 벨소리 기능을 갖춘 단말기가 개발되고 있으며, 현재 단말기에 채택되어 사용되고 있는 음향 기술은 미디 음원을 이용하여 화음을 내는 방식이다.

이러한 방식에 의하면, 각각 특유의 악기에 해당하는 여러 종류의 미디 음원을 저장하고 있는 미디 음원이 단말기에 내장되어 음악 데이터 파일에 기록된 순서에 따라 각 미디 음원의 소리가 스피커를 통해 전달되도록 한다.

이때 사용되는 미디 음원의 개수에 따라 40폴리(또는 40화음), 64폴리(64화음)등으로 구분되며 원음에 가까운 음원을 재생하여 사용자에게 청각적인 즐거움은 물론, 노래방 기능 등을 통해 별도의 멀티미디어 서비스를 제공하기에 이르렀다.

그러나, 이러한 기능은 이동통신 단말기에 전화가 수신될 경우 화면창에 발신자 식별정보(CID:Caller ID)나 간단한 애니메이션을 디스플레이하고 동시에 벨소리를 제공하여 단순하게 전화가 왔음을 알려준다.

또한 단말기의 전화 메시지가 도착한 경우 도착한 메시지의 개수등을 텍스트 로 디스플레이해주며 단말기의 대기모드에서는 단순한 시간정보 등을 표현해준다.

따라서 지금까지의 휴대폰의 벨소리나 음악파일 등은 청각으로만 감지할 수 있었고 시각적인 효과를 중시하는 사용자에게는 단말기 사용상의 만족을 주지 못하는 문제가 있었다.

본 발명은 상기 문제점을 해결하기 위해 안출된 것으로서, 휴대폰과 같은 모바일 단말기의 벨소리나 음악파일 등을 재생할 때 표시창에 악기 등의 연주효과가 출력되도록 하여 시각적으로도 효과를 줄 수 있는 악기 이미지 기반의 연주 효과 처리방법 및 모바일 단말기를 제공함에 있다.

상기와 같은 목적을 달성하기 위한 본 발명에 따른 악기 이미지 기반의 연주 효과 처리방법은,

상기 추출된 음 정보에 해당하는 연주 효과를 악기 이미지에 대응시켜 시각적인 변화로 표시하는 단계를 포함하는 것을 특징으로 한다.

본 발명에서, 상기 음 정보는 음원 데이터의 멜로디로부터 추출되는 것을 특징으로 한다.

본 발명에서, 상기 음 정보는 음원 데이터의 멜로디로부터 추출된 음계 정보를 시간 순으로 테이블화 한 것을 특징으로 한다.

본 발명에서, 상기 추출된 음 정보에 해당하는 연주 효과는 재생되는 음에 동기되어 시각적인 변화로 표시되는 것을 특징으로 한다.

본 발명에서, 상기 악기 이미지는 적어도 하나 이상의 악기 이미지들 중에서 선택되는 것을 특징으로 한다.

또한 상기와 같은 목적을 달성하기 위한 본 발명에 따른 모바일 단말기는,

음원 데이터에서 음 정보를 추출하는 음원 처리부;

음 정보에 해당하는 연주 효과를 구현하기 위한 악기 이미지를 저장하는 메모리부;

상기 추출된 음 정보에 해당하는 연주 효과를 악기 이미지에 대응시켜 시각적인 변화로 표시되도록 처리하는 제어부;

상기 연주 효과가 대응된 악기 이미지가 표시되는 표시부를 포함하는 것을 특징으로 한다.

본 발명에서, 상기 음원 데이터는 미디(MIDI) 기반의 데이터인 것을 특징으로 한다.

본 발명에서, 상기 악기 이미지는 적어도 하나 이상의 악기 이미지들 중에서 선택되는 것을 특징으로 한다.

본 발명에서, 상기 표시부는 주/부 화면창 중 적어도 하나 이상인 것을 특징으로 한다.

본 발명에서, 상기 음원 처리부는 음원 데이터의 음 길이와 높이 정보를 시간적으로 정렬하여 테이블화하는 것을 특징으로 한다.

본 발명에서, 상기 음원 처리부는 이미지로 표시되는 악기 연주 효과와 오디오 출력을 동기화시키는 것을 특징으로 한다.

본 발명에서, 상기 악기 이미지는 건반 악기 이미지인 것을 특징으로 한다.

이하 첨부된 도면을 참조하여 본 발명의 실시 예를 설명하면 다음과 같다.

도 1은 본 발명의 실시 예에 따른 모바일 단말기의 구성을 보여주는 도면이다.

도 1을 참조하면, 본 발명에 따른 모바일 단말기는 기지국과의 무선통신을 위한 무선 송수신부(11)와, 모바일 단말기의 사용을 위한 키조작을 할 수 있도록 하는 키패드와 각종 버튼을 포함하는 입력부(12)와, 사용자에 의해 작곡된 음악파일 등이 저장되는 메모리부(13)와, 악기 효과를 디스플레이 할 수 있도록 음원을 분석하여 처리하는 음원 처리부(14)와, 상기 악기 효과를 디스플레이하고 소리로 출력하는 표시부(15) 및 스피커(16)와 상기 모바일 단말기의 각부의 동작을 제어하는 제어부(17)를 포함하여 구성된다.

상기 무선 송수신부(11)는 이동통신 기지국으로부터 무선 신호(예를 들어, 음성데이터, 음원데이터 등)를 수신하고 마이크 등을 통해 입력된 음성 신호 및 입력부(12)를 통해 입력된 데이터 등을 기지국으로 전송하는 등 기지국과의 무선통신을 수행한다.

상기 입력부(12)는 일반적인 모바일 단말기의 키패드 구성을 하며, 사용자로부터 벨소리 작곡을 위한 키 입력신호, 벨소리 선택 명령, 벨소리와 함께 화면창에 디스플레이될 악기 이미지 지정 명령 등의 입력 기능을 수행한다.

상기 메모리부(13)는 플래시 메모리, RAM, ROM 등의 메모리들로 구성되고, 플래시 메모리에는 MP3 등 음악 파일이나 벨소리 등이 저장될 수 있고 ROM에는 휴 대폰 오퍼레이팅 프로그램 등이 저장될 수 있다.

상기 음원 처리부(14)는 벨소리가 재생될 때 상기 벨소리의 음원을 분석하여 화면창에 악기의 연주 효과가 디스플레이될 수 있도록 음원을 분석하여 처리한다.

미디 벨소리를 예를 들어 설명하면, 상기 미디(Music Instrument Digital Interface:MIDI) 형식은 트랙별로 음표와 제어 신호로 구성되며 음높이와 길이를 가지는 데이터 값들의 연속으로 이루어진다.

따라서 상기 음원 처리부(14)에서는 출력하고자 하는 음원 데이터의 주 멜로디를 추출하여 분석하고 그 음의 높이와 길이 등의 음계 정보를 시간순으로 목록화하여 정렬하고 이를 신서사이저(Synthesizer)장치(미도시)를 통해 오디오 신호로 변환한 후 스피커(16)를 통해 출력하게 된다.

이때 벨소리가 울리거나 음악파일이 재생되는 시간에 동기화시켜 해당하는 음 높이와 음의 길이동안 악기에 연주 효과를 주어 동시에 표시부(15)에 출력하게 된다.

여기서 상기 표시부(15)는 입력부(12)의 키 입력에 따른 동작 상태, 현재 시각 등을 표시하는 기능을 수행하며 본 발명에 따른 악기 연주 효과를 디스플레이 하고 모바일 단말기의 주/부 화면창 모두가 될 수 있다.

예를 들면, 벨소리가 스피커로 출력됨과 동시에 화면창에 피아노 건반이 디스플레이 되고, 상기 재생되는 벨소리의 음원 데이터를 분석하여 음 높이와 음 길이에 해당하는 피아노의 건반 위치에 누른 효과를 주어 디스플레이한다.

제어부(17)는 호 연결, 데이터 통신, 멀티미디어 컨텐츠의 실행 등의 처리를 제어하는 것은 물론 음원 데이터를 메모리부(14)에 저장하고 표시부(15) 및 스피커(16)에 출력되도록 하는 기능을 포함하여 각 부를 제어하는 역할을 한다.

도 2는 본 발명의 실시 예에 따른 모바일 단말기의 음원 표시 방법을 나타내는 플로우 차트이고, 도 3은 본 발명의 실시 예에 따른 모바일 단말기의 키 번호와 대응하여 악기 메뉴의 구성을 예시한 도면이다.

도 2를 참조하면, 통화신호 수신시 벨소리 출력신호 또는 사용자가 벨소리 등의 음악 파일을 작곡하고 이를 확인하기 위한 신호가 입력되면(S11) 제어부에서는 이를 음원 처리부로 출력하게 된다.

또는 상기 제어부에서 메모리부를 제어하여 기저장된 벨소리 등의 음악 파일 리스트를 메뉴 화면상에서 선택되도록 하거나, 웹사이트에서 제공하는 다양한 음원 데이터를 전송 요청하여 다운로드 할 수 있도록 하여 이를 음원 처리부로 출력하게 된다.

상기 음원 처리부에서는 입력된 음원 데이터를 분석하여 주 멜로디의 음 높이와 길이의 분석정보를 추출한 후(S12) 이를 시간순으로 테이블화하고 정렬하여 음원 분석정보를 생성하게 된다(S13).

예를 들면, 미디 음원일 경우 트랙별로 수많은 음표와 제어 신호로 구성되며 음의 높이와 길이를 가지는 데이터 값들의 연속으로 이루어지는데 이를 분석하여 주 멜로디를 추출하게 되고 일반적으로 상기 미디 음원의 1번 트랙 정보에 주 멜로디가 포함된다.

따라서 상기 분석된 주 멜로디의 음의 높이와 길이 등의 음계 정보를 시간순 으로 테이블화하여 정렬하고 이를 악기 연주효과에 맞게 표시창에 디스플레이되도록 동기화 시키게 된다.

또한 입력되는 음원 데이터는 미디 음원 뿐만 아니라 MP3 등의 음악파일이 포함되며 상기 음원 데이터들의 음원 추출 방법은 이미 공지된바 자세하게 설명하지 않는다.

이후, 상기 사용자에 의해 선택된 악기의 연주효과가 상기 음원 분석정보에 대응되도록 화면창에 표시되며 동시에 스피커로 연주음을 출력하게 된다(S14).

여기서 상기 연주음의 빠르기를 사용자가 메뉴를 선택하여 조절할 수 있다. 또한 악기의 이미지도 사용자에 의해 선택되거나 음악 파일 재생시 자동으로 선택되어 표시될 수 있다.

여기서 상기 악기 이미지는 하나 이상이며, 서로 다른 악기 종류를 포함한다.

또한 음원 데이터의 분석 과정에 오류가 생기면 단순히 악기 이미지만 표시되거나 음원 분석정보와 동기화되지 않은 임의적인 악기 연주효과가 표시되며, 미리 지정된 악기 이미지 또는 임의의 악기 이미지가 자동으로 선택되어 연주효과가 표시될 수 있다.

또한 음원 데이터의 분석 과정없이 벨소리나 음악파일 재생시 단순히 악기의 연주효과가 디스플레이 되도록 선택할 수 있다.

또한 음악파일 등이 재생될 때 입력부의 키를 누룸으로써 키 번호에 대응하는 악기로 변경할 수 있다.

예를 들면, 도 3은 키 번호에 대응하는 악기 메뉴를 보여주고 있으며, 음악파일 재생시 상기 키 번호의 선택에 따라 대응하는 악기의 연주효과가 화면창에 표시된다.

또한 상기 악기효과는 주 멜로디의 음을 연주효과로 사용하고 빠르기를 사용자가 선택할 수 있기 때문에 상기 연주효과를 보면서 실제 악기를 연주할 수 있도록 연습할 수 있다.

예를 들면, 동요의 '작은별'을 본 발명에 따른 모바일 단말기를 이용하여 피아노 악기효과로 표시하면, 가사로 '반짝 반짝 작은별 아름답게 비치네'의 연주부분인 '도도 솔솔 라라솔 파파미미 레레도'의 음의 높이와 길이에 해당하는 피아노의 건반이 눌러지도록 화면창에 디스플레이 되고 사용자가 연주음의 빠르기를 조절하여 실제 악기를 연주할 수 있도록 연습할 수 있다.

또한 상기 악기 메뉴는 인터넷 등에서 사업자가 제공하는 악기 정보를 다운로드하여 재구성할 수 있으며 선택된 악기에 해당하는 악기소리로 연주음을 출력할 수 있다.

도 4는 본 발명의 실시 예에 따른 연주효과를 모바일 단말기의 화면창에 보여주는 도면이다.

도 4를 참조하면, 본 발명에서는 저장된 음악파일, 사용자가 작곡한 음악파일, 단말기의 착신 벨소리 등이 울리거나 재생될 때 동시에 연주명(11)이나 악기의 누름/해제 등의 연주효과(12)를 화면창(10)에 디스플레이하는 부가기능을 추가하여 상품성을 향상시켜주는 효과가 있다.

또한 상기 악기 연주 효과를 디스플레이 하는 표시부는 모바일 단말기의 주/부 화면창이 포함되어 구성될 수 있다.

이제까지 본 발명에 대하여 그 실시 예를 중심으로 살펴보았으며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 본질적 기술 범위 내에서 상기 본 발명의 상세한 설명과 다른 형태의 실시 예들을 구현할 수 있을 것이다. 여기서 본 발명의 본질적 기술범위는 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

본 발명에 따른 악기 이미지 기반의 연주 효과 처리방법 및 모바일 단말기에 의하면, 모바일 단말기에 벨소리나 음악파일 재생시 이를 시각적으로 화면상에 표시함으로써 시각적인 효과를 중시하는 사용자에게 단말기 사용상의 만족을 제공하는 효과가 있다.

또한 모바일 단말기의 벨소리나 음악파일 재생시 동시에 화면창에 악기 연주효과를 디스플레이하는 부가기능을 추가시킴으로써 상품성을 향상시키는 효과가 있다.

Claims (12)

1. 음원 데이터에서 음 정보를 추출하는 단계;

   상기 추출된 음 정보에 해당하는 연주 효과를 악기 이미지에 대응시켜 시각적인 변화로 표시하는 단계를 포함하는 것을 특징으로 하는 악기 이미지 기반의 연주 효과 처리방법.
2. 제 1 항에 있어서,

   상기 음 정보는 음원 데이터의 멜로디로부터 추출되는 것을 특징으로 하는 악기 이미지 기반의 연주 효과 처리방법.
3. 제 1 항에 있어서,

   상기 음 정보는 음원 데이터의 멜로디로부터 추출된 음계 정보를 시간 순으로 테이블화 한 것을 특징으로 하는 악기 이미지 기반의 연주 효과 처리방법.
4. 제 1 항에 있어서,

   상기 추출된 음 정보에 해당하는 연주 효과는 재생되는 음에 동기되어 시각적인 변화로 표시되는 것을 특징으로 하는 악기 이미지 기반의 연주 효과 처리방법.
5. 제 1 항에 있어서,

   상기 악기 이미지는 적어도 하나 이상의 악기 이미지들 중에서 선택되는 것을 특징으로 하는 악기 이미지 기반의 연주 효과 처리방법.
6. 음원 데이터에서 음 정보를 추출하는 음원 처리부;

   음 정보에 해당하는 연주 효과를 구현하기 위한 악기 이미지를 저장하는 메모리부;

   상기 추출된 음 정보에 해당하는 연주 효과를 악기 이미지에 대응시켜 시각적인 변화로 표시되도록 처리하는 제어부;

   상기 연주 효과가 대응된 악기 이미지가 표시되는 표시부를 포함하는 것을 특징으로 하는 모바일 단말기.
7. 제 6 항에 있어서,

   상기 음원 데이터는 미디(MIDI) 기반의 데이터인 것을 특징으로 하는 모바일 단말기.
8. 제 6 항에 있어서,

   상기 악기 이미지는 적어도 하나 이상의 악기 이미지들 중에서 선택되는 것을 특징으로 하는 모바일 단말기.
9. 제 6항에 있어서,

   상기 표시부는 주/부 화면창 중 적어도 하나 이상인 것을 특징으로 하는 모바일 단말기.
10. 제 6항에 있어서,

    상기 음원 처리부는 음원 데이터의 음 길이와 높이 정보를 시간적으로 정렬하여 테이블화하는 것을 특징으로 하는 모바일 단말기.
11. 제 6항에 있어서,

    상기 음원 처리부는 이미지로 표시되는 악기 연주 효과와 오디오 출력을 동기화시키는 것을 특징으로 하는 모바일 단말기.
12. 제 6 항에 있어서,

    상기 악기 이미지는 건반 악기 이미지인 것을 특징으로 하는 모바일 단말기.

Images