KR20060083862A

KR20060083862A - 음악과 음성의 합성 시스템 및 방법과 이를 이용한 서비스시스템 및 방법

Info

Publication number: KR20060083862A
Application number: KR1020060002103A
Authority: KR
Inventors: 서문종
Original assignee: 서문종
Priority date: 2005-01-18
Filing date: 2006-01-09
Publication date: 2006-07-21
Also published as: WO2006078108A1; KR20050014037A; JP2008527458A; KR100819740B1; US20090292535A1

Abstract

본 발명은 음악메일 서비스 시스템 및 방법에 관한 것이다.

음악, 메일, 편지, 이메일.

Description

음악과 음성의 합성 시스템 및 방법과 이를 이용한 서비스 시스템 및 방법{SYSTEM AND METHOD FOR SYNTHESIZING MUSIC AND VOICE, AND SERVICE SYSTEM AND METHOD THEREOF}

도1은 본 발명의 실시예에 따른 음악메일 서비스 시스템의 개략적인 구성도이다.

도2는 음악과 음성을 시간축 상에 나타낸 그래프이다.

도3은 일반적인 음악과 음성의 합성 방법에 따른 합성음 그래프이다.

도4는 음성의 무음구간에 따라 음악의 볼륨이 조정된 그래프이다.

도5는 볼륨이 조정된 음악과 음성을 합성한 그래프이다.

도6은 종료 엘레먼트의 볼륨특성 그래프이다.

도7은 다운 엘레먼트의 볼륨특성 그래프이다.

도8은 업 엘레먼트의 볼륨특성 그래프이다.

도9는 다운 및 업 엘레먼트의 합성에 따른 활성음성 엘레먼트 구간의 구현 예이다.

도10은 음성 분리를 위한 개념도이다.

도11은 음악의 다운포인트 지정예를 나타낸 도면이다.

도12는 분리된 음성의 합성예를 나타낸 것이다.

도13은 본 발명의 실시예에 따른 음성과 음악의 합성을 위한 장치의 개략적인 구성도이다.

일반적으로 현재 상용화되어 있는 음악메일 서비스 방법은, 메일을 보내고자하는 사용자가 원하는 곡을 선택하고, 이를 상대방에게 제공하는 단순한 음악만을 전송하는 서비스에 불과하여 사용자의 욕구를 충족시키지 못하고 있다.

본 발명은 상술한 문제점을 해결하기 위하여 사용자의 음성이 포함되어있을 뿐 아니라 수신자가 쉽게 내용을 파악할 수도 있고, 보통의 음악방송과 같이 음악메일을 제공할 수 있는 시스템 및 방법을 제공함에 있다.

본 발명의 또 다른 목적은 사용자의 음성과 음악을 혼합하되 사용자의 음성에 적합하게 볼륨이 조절되고, 다양한 믹싱 효과 구현이 가능한 시스템 및 방법을 제공함에 있다.

상술한 문제점을 해결하기 위하여 본 발명은 사용자로부터 음성을 수신하기 위한 수신부; 다수의 음악 데이터를 저장하고 있는 데이터베이스; 및, 상기 수신부로부터 입력되는 음성의 무음부분 검출에 따라 상기 데이터베이스에 저장된 음악의 볼륨을 조절하고, 조절된 음악과 수신된 음성을 합성하는 합성부를 구비하는 것을 특징으로 한다.

또한, 본 발명은 사용자로부터 입력되는 음성을 수신하기 위한 수신부; 다수의 음악 데이터를 저장하고 있는 데이터베이스; 및, 상기 수신된 음성을 무음부분 검출에 의해 다수의 음성엘레먼트로 분리하고, 분리된 음성엘레먼트를 상기 데이터베이스에 저장된 음악과 합성하는 합성부를 구비하는 것을 특징으로 한다.

또한, 본 발명은 사용자로부터 입력되는 음성을 수신하기 위한 수신부; 곡별로 하나 이상으로 분리된 음악엘레먼트를 저장하고 있는 데이터베이스; 및, 상기 하나 이상으로 분리된 음악 엘레먼트와 상기 음성을 수신된 음성의 무음부분에 따라 합성하는 합성부를 구비하는 것을 특징으로 한다.

또한, 본 발명은 사용자로부터 입력되는 음성을 수신하기 위한 수신부; 곡별로 하나 이상으로 분리된 음악엘레먼트를 저장하고 있는 데이터베이스; 및, 상기 검출된 무음부분에 따라 하나 이상의 음성 엘레먼트로 분리하고, 분리된 상기 음성 엘레먼트와 상기 음악엘레먼트를 합성하는 합성부를 구비함을 특징으로 한다.

또한, 본 발명은 사용자로부터 입력되는 음성을 수신하는 단계; 상기 수신된 음성의 무음 부분을 검출하는 단계; 상기 검출된 무음부분에 의해 음악 볼륨을 조절하는 단계; 상기 조절된 음악과 상기 수신된 음성을 합성하는 단계; 및, 상기 합 성된 음성을 송신하는 단계를 구비함을 특징으로 한다.

또한, 본 발명은 사용자로부터 입력되는 음성을 수신하는 단계; 상기 수신된 음성의 무음 부분을 검출하는 단계; 상기 검출된 무음부분에 의해 하나 이상으로 분리된 음악 엘레먼트와 상기 음성을 합성하는 단계를 구비함을 특징으로 한다.

또한, 본 발명은 사용자로부터 입력되는 음성을 수신하는 단계; 상기 수신된 음성의 무음 부분을 검출하는 단계; 상기 검출된 무음부분에 따라 하나 이상의 음성 엘레먼트로 분리하는 단계; 및, 선택된 음악에 상기 음성 엘레먼트를 결합하여 음악과 음성을 합성하는 단계를 구비함을 특징으로 한다.

또한, 본 발명은 사용자로부터 입력되는 음성을 수신하는 제1단계; 상기 수신된 음성의 무음 부분을 검출하는 제2단계; 상기 검출된 무음부분에 따라 하나 이상의 음성 엘레먼트로 분리하는 제3단계; 및, 기 분리된 음악의 엘레먼트와 상기 음성 엘레먼트를 결합하여 음악과 음성을 합성하는 제4단계를 구비함을 특징으로 한다.

도1은 본 발명의 실시예에 따른 음악메일 서비스 시스템의 개략적인 구성도이고, 도2는 음악과 음성을 시간축 상에 나타낸 그래프이며, 도3은 일반적인 음악과 음성의 합성 방법에 따른 합성음 그래프이고, 도4는 음성의 무음구간에 따라 음악의 볼륨이 조정된 그래프이며, 도5는 볼륨이 조정된 음악과 음성을 합성한 그래프이고, 도6은 종료 엘레먼트의 볼륨특성 그래프이며, 도7은 다운 엘레먼트의 볼륨특성 그래프이고, 도8은 업 엘레먼트의 볼륨특성 그래프이며, 도9는 다운 및 업 엘레먼트의 합성에 따른 활성음성 엘레먼트 구간의 구현 예이고, 도10은 업 및 다운 엘레먼트의 합성에 따른 구현예이다.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 설명한다.

도1에 도시된 바와 같이 본 발명은 송수신부(10)와 합성부(20) 및, 데이터베이스부(30)로 구성됨을 특징으로 한다.

송수신부(10)는 인터넷이나 이동통신망, 일반전화망 등과 연결되어 사용자로부터 음성을 입력받고 음성과 음악이 합성된 합성음을 특정 사용자에게 송신한다.

합성부(20)는 입력된 음성과 사용자가 기 지정한 음악을 합성한다. 합성은 일반적으로 단순 합산에 의한 합성을 의미하는 것은 아니다. 즉, 도2에 도시된 바와 같은 음악과 음성을 단순 합성하게 되면 도3에 도시된 바와 같이 음악과 음성이 혼제되어 음성 내용을 수신자가 알아들을 수가 없고, 합성의 효과가 반감되는 문제점이 있다. 따라서, 본 발명의 실시예에서는 도4에 도시된 바와 같이 음성의 무음 구간을 검출하고, 무음구간과 음성 활성화된 구간에 따라 음악의 볼륨을 조절하여 도5에 도시됨과 같이 합성할 수 있다. 도5를 자세히 보면, 음성이 없는 부분에서는 음악만이 나오고, 음성이 있는 부분에서는 음악의 볼륨이 낮아지도록 하여 사용자 음성이 쉽게 들릴 수 있도록 하였다. 이때, 음성을 무음구간(도2의 A, B, C) 기준으로 다수의 음성엘레먼트로 나눌 수도 있을 것이다. 이렇게 분리된 음성은 기 분리된 음악과 합성되거나, 음악의 도입부분이나 종료 부분에 맞추어 음성블랭크 부분(A, B, C)의 길이 조절이 임의로 조절이 가능할 것이다.

합성부(20)는 음성을 음악과 합성함에 앞서 입력되는 음성을 블랭크 구간을 참조하여 다수의 음성엘레먼트로 분리할 수 있다. 예를 들어 무음이 1초가 넘는 부 분을 기준으로 다수의 엘레먼트로 분리할 수도 있고, 입력되는 전체적인 길이를 다수의 구간으로 나누고, 해당부분에 근접한 블랭크를 기준으로 다수의 음성엘레먼트로 분리할 수도 있을 것이다. 예를 들어 30초의 음성이 입력되는 경우 이를 두개의 엘레먼트로 분리하되 앞뒤의 엘레먼트를 분리하기 위해, 중간부분인 15초 부분에 근접한 블랭크(무음 부분)를 기준으로 앞뒤로 두개의 음성엘레먼트로 분리할 수 있을 것이다. 이때 하나의 엘레먼트 안에 음성이 없는 블랭크 구간의 길이가 일정치 이상이 되면 이를 축소하여 블랭크의 길이를 줄일 수도 있을 것이다.

한편, 통화 중에는 다수의 잡음이 입력되게 되는데, 이러한 잡음의 제거는 예를 들어 특정 화이트노이즈(회선잡음과 같이 음성입력의 처음부터 끝까지 지속되는 잡음)를 전체적으로 제거한다거나, 가성대역의 주파수대 외는 필터링을 통해 제거하는 등의 방법을 이용하여 음성만을 입력받을 수 있을 것이다.

데이터베이스부(30)는 다수의 음악 데이터가 저장되어 있으며, 음악 데이터는 도 6, 7, 8에 도시된 바와 같이 다수의 음악 엘레먼트로 구성될 수 있다. 음악 엘레먼트는 음악의 비트나 리듬, 혹은 입력되는 소리의 크기, 가수의 목소리 시작부분 등을 기준으로 하여 자동적으로 생성할 수도 있고, 사용자가 임의로 설정하여 엘레먼트를 구성할 수도 있다.

도6은 종료엘레먼트의 볼륨설정 예를 나타낸 것으로 A 구간은 음성이 끝난 부분에서 볼륨이 상승되는 구간이고, B구간은 상승된 상태에서 음성은 없고, 음악만 나오는 구간이다. B 구간은 즉, 음악에서 클라이막스 부분을 발췌하여 종료엘레먼트를 구성할 수 있을 것이다. C 구간은 마지막 여운을 남기기 위하여 천천히 볼 륨을 줄이는 구간이다.

도 7은 D구간의 시작점에서 음성이 시작될 때 배경음으로 쓰일 수 있는 다운엘레먼트를 도시한 것이다. A 구간은 급격한 상승구간이며, A 구간은 처음부터 100% 볼륨으로 시작할 수도 있을 것이다. B구간은 음성이 시작되기 전, 블랭크 구간이 될 것이다. C 구간은 음악의 다운에 적합한 부분을 기준으로 하여 음악 볼륨을 다운시킨 구간이며, C 구간이나 D 구간의 시작 부위에서 음성이 시작되도록 음성엘레먼트를 조절하여 합성할 수 있다. D 구간은 음성엘레먼트 구간으로 음성이 활성화된 부분이며, 음성이 활성화된 부분의 길이 조절은 D 구간의 길이를 임의로 조절하여 합성하면 된다. 음악이 배경음으로 되고, 음성이 주가 되는 부분에서는 도7의 D구간과 도8의 A 구간을, 합성하되, 음성이 끝나는 부분의 엘레먼트에 맞추어 클라이막스의 음악엘레먼트를 합성하여 믹싱의 효과를 최대화할 수 있다. 이때, 도7의 D 구간이나, 도8의 B 구간의 길이를 조절하여 음성이 활성화된 엘레먼트의 길이에 맞추어 음악 배경을 조정할 수 있다. 이렇게 하면 음성이 시작되는 부분과 음성이 끝나는 부분 모두에서 가장 합당한 부분의 음악을 믹싱할 수 있다. 도8은 음성이 다수로 나누어진 경우에 사용될 수 있는 브릿지 부분이다.

도 8은 D 구간만큼 음성의 블랭크 구간(도 2의 A, B, C와 같은)이 맞지 않아도 음성엘레먼트를 구분한 경우 앞뒤의 음성엘레먼트를 B와 F 구간에 배치하여 믹싱 할 수 있다.

도 9는 도7과 8의 엘레먼트를 합성한 것으로 D, E, F 구간은 음성이 활성화되는 구간이며, B, H 구간은 음성이 없고, 음악만 나오는 부분이 된다. 즉, T는 목 소리가 나오고 음악은 볼륨이 줄여져 배경으로 깔리는 것이고, T' 구간은 음성이 끝나고 음악만 나오는 부분이 된다.

상술한 실시예에서 믹싱이 배경음으로 낮게 깔리는 것만을 예로 들었으나 음성이 있는 부분에서 완전이 음악이 아웃되는 것으로도 구현이 가능함은 물론이다.

이상의 설명은 음성과 음악을 합성하는 방법에 관하여 설명하였으나, 이렇게 합성된 소리는 사용자의 선택에 따라 예약되어 특정사용자에게 음악메일로 특정일에 전송될 수 있고, 컬러링이나 필링, 착신음, 이메일 등으로 전송이 설정될 수 있음은 물론이다. 웹을 통하여 상기 기능을 서비스 할 경우 기본적인 멘트를 제공하여 줄 수도 있을 것이며, 녹음된 소리를 다시 들려주고, 재녹음이 이루어질 수 있도록 할 수 있다.

한편, 본 발명에서 언급하고 있는 음악은 일반적인 팝이나 클레식 음악을 포함하는 것은 물론이요, 자연음이나 기타 영화의 오리지널사운드트랙 등 녹음된 사운드를 포괄적으로 지칭하는 것이다.

또한 상술한 실시예에서는 서버기반의 서비스에 중점을 두어 설명하였으나, 이와 같은 동작이 클라언트 기반의 프로그램으로 구현 또한 가능하며 이때 사용되는 음악은 별도의 음악컨텐츠 서버에서 제공을 하거나 사용자가 직접 제작 또는 구입한 음원을 사용할 수도 있다.

도13은 음성과 음악을 합성하기 위한 장치의 개략적인 블럭구성도이며, 클라이언트 기반의 단말기에서도 합성이 가능한 장치를 예로 든 것이며, 도1에 도시된 합성부(20) 및 데이터베이스(30)을 포함하여 구현된 것이다. 다만, 데이터베이스 (30)의 경우 배경이 되는 음악을 저장하는 기능은 인터넷과 같은 통신망을 통해 음악파일을 다운받음으로써, 구현할 수도 있다.

제어부(100)는 음성과 음악의 합성을 위한 전반적인 제어 동작을 수행한다.

필터링부(160)는 입력되는 아날로그 음성을 셈플링하여 디지털 신호로 변환하고, 변환된 신호를 퓨리에 변환하여 시간축상의 데이터를 주파수축상의 데이터로 변환한 다음, 인간이 낼 수 없는 저역이나 고역의 주파수를 차단하여 음성만을 입력받을 수 있도록 처리한다. 이러한 디지털적인 처리는 아날로그 필터로 구현할 수도 있다. 즉, 필터링부(160)는 주변 잡음이나 회선잡음 등을 제거하여 사람의 목소리만을 음성 합성에 이용할 수 있도록 하는 것이다. 또한, 필터링부(160)는 일정하게 입력되는 화이트노이즈를 제거하는 역할을 수행한다. 예를 들어 팬이 돌고 있는 공간에서는 발성을 하지 않더라도 팬 소음이 입력되는 것을 감지할 수 있는데, 이는 사람의 목소리가 입력되지 않는 시간대와 입력되는 시간대의 신호 차를 통해 쉽게 제거할 수 있다. 측, T 시간대의 신호 s와, T+t 시간대의 신호 s+S의 신호에서 화이트잡음 s를 제거함으로써, 음성입력 동안 일정하게 입력되는 잡음을 제거한다. 또한, 필터링부는 피크 잡음을 제거하는 역할 도 수행한다. 즉, 시간축 상의 신호에서 갑자기 큰 소리가 입력될 경우(엠프리튜드가 일정치 이상의 큰 신호가 입력되면) 해당 피크 신호를 제거함으로써, 피크 잡음을 제거하는 역할 도 수행한다.

음성분리부(140)는 입력된 음성의 전체적인 시간과 무음조절부(130)를 통해 무음부분을 검출하여 임의의 엘레먼트로 음성을 분리한다. 예를 들어 도 10의 상부와 같이 하나의 음성이 입력될 경우, 시간을 고려하여 B 위치를 분리 위치로 정하 고, 음성을 전후 두 부분으로 분리한다. 만일 B와 같은 무음 부분이 없을 경우 A 또는 C 지점이 분리 부분이 될 것이다. 입력되는 음성의 분리는 음악의 높낮이 조절을 위한 것으로, 분리가 자동으로 이루어질 수도 있고, 사용자가 해당하는 부분의 음성을 차례로 입력함으로써, 분리가 이루어질 수도 있다. 예를 들어, 핸드폰의 1번 버튼을 누르고 음성의 제1엘레먼트를 입력하고, 2번을 누르고 음성의 제2엘레먼트를 입력할 수도 있다. 또는 안내정보에 따라 해당하는 음성을 분리하여 입력할 수도 있다.

무음조절부(130)는 입력되는 음성으로부터 일정치 이하의 크기를 가지는 신호를 무음으로 처리하여 사용자가 음성을 입력하지 않는 부분으로 판단한다. 이때, 고려되어야 할 사항은 입력되는 신호의 유무는 물론이고, 음성이 입력되지 않는 시간이 일정치 이상이 되는 부분을 무음부분으로 판단한다. 즉, 음성이 입력되지 않는 시간길이에 따라 무음 부분을 검출한다. 무음 조절부(130)는 음성의 분리를 위한 보조 동작을 수행하는 것은 물론이고, 도 10의 하단부에 도시됨과 같이 음성이 소정 갯수로 분리된 후에는 음성엘레먼트 전후단의 무음부분은 삭제하고(제1 및 제2 엘레먼트 전후단 참조), 중간 부분의 무음(A, C)이 일정 시간 이상이 되면 일부 무음 부분을 소정 시간 삭제한다(A', C').

저장부(120)는 입력되는 음성 및 분리된 음성을 저장하고, 합성을 위한 배경 음악과 합성된 파일을 저장한다.

합성부(150)는 제어부(100)의 제어를 받아 저장된 음성과 음악을 디지털 처리를 통해 합성한다. 이때, 합성되는 음성과 음악은 볼륨이 조절된다. 음성의 경우 평균크기 이하의 음성이나 평규치 이상의 음성이 입력되면 이를 증폭하거나, 감소시켜 청취에 문제가 없도록 하며, 음악의 볼륨은 시작 부위는 원음 그대로를 사용하거나, 페이드인(무음에서 본래의 볼륨으로 서서히 커지는) 볼륨제어를 사용하고, 종점에서는 페이드아웃(본래의 볼륨에서 무음으로 서서히 작아지는) 볼륨제어를 사용하며, 음성 엘레먼트의 시작 부위에서는 일정치로 볼륨을 줄이는 다운제어를 사용하고, 음성엘레먼트의 끝 부위에서는 본래의 볼륨으로 회복시키는 업제어를 사용한다. 경우에 따라서는 페스트 포워드(빠른 순방향 재생), 페스트 리워드(빠른 역방향 재생), 리워드(역방향 재생) 방법을 사용할 수도 있다.

한편, 입력된 음성의 시간 길이가 음악의 길이를 초과할 경우 동일 음악을 반복적으로 사용하거나, 다른 음악을 믹싱하여 배경음악으로 사용할 수도 있다.

이하, 도10, 11, 12를 참조하여 입력된 음성을 두개의 엘레먼트로 분리한 다음, 2개의 음악을 이용하여 합성하는 예를 설명한다.

도10에서 사용자가 음성을 입력하면(도10의 상단) 먼저, 필터링부(160)를 통해 잡음을 제거하고 임시저장한다. 이후 음성분리부(140)는 무음조절부(130)을 통해 무음부위를 검출하고, 입력된 음성의 시간을 고려하여 입력된 음성을 2개의 엘레먼트로 분리한다(도10의 하단). 또한, 무음조절부(130)를 통해 일정치 이상 입력된 무음부분은 일부 삭제하여 무음 부분을 조절한다.

도11은 합성하기 위한 음악을 도시한 것으로 도시된 번호(1, 2, 3, ...9)는 음성엘레먼트가 합성될 수 있는 지점 및 음악이 다운될 수 있는 다운포인트(DP) 지점을 나타낸 것이다. 일반적으로 음악의 분위기가 바뀌는 부분, 가수의 가창이 시 작되는 부분, 후렴이 시작되는 부분, 각 절(예를 들어 1절, 2절 3절의 시작부위)의 시작 부분, 어절이 시작되는 부분, 단어가 시작되는 부분, 독주나 합주가 시작되는 부분, 악장이나 마디가 시작되는 부분 등이 된다. 이러한 다운포인트는 짧게는 수초에서 길게는 수십초 간격으로 다수가 설정되어 있다.

도10의 하단부와 같이 음성의 분리가 완료되면 합성부(150)를 통해 음성과 음악을 합성한다.

도12의 '가'지점은 첫번째 다운포인트(1)가 있는 부분으로 이 부분에서 음성의 제1엘레먼트의 합성을 시작한다. 이때, 제1엘레먼트의 시작부위인 '가' 지점에서 음악은 다운콘트롤되며, 제1엘레먼트가 종료되는 '나' 지점에서 음악은 업콘트롤이 이루어진다. 이때 음악의 입장에서보면 4번 다운포인트를 지난 지점이지만 5번 다운포인트는 지나지 않는 곳이 된다. 이때, 다음의 다운포인트인 5번까지의 시간이 일정치 이하가 되면 5번의 다운포인트에 음성의 제2엘레먼트 합성을 시작하는 것이 아니라, 다음 다음인 6번 다운포인트에 제2엘레먼트 합성을 시작한다. '다' 지점에서 음악은 다운콘트롤 된다. 위와 같이 다운포인트에 의해 음성의 제1 및 제2 엘레먼트간의 시간을 조절할 수도 있지만 특정 시간길이를 지정하여 제2엘레먼트 합성지점을 조절할 수도 있다. 예를 들어 제1엘레먼트가 끝나는 '나' 지점에서 20초가 경과된 부위에서 제2엘레먼트가 위치하여 합성이 이루어질 수도 있다. 바람직하게는 다운포인트 지점에서 제2엘레먼트 합성을 시작하는 것이 믹싱효과를 최대로 증대시킬 수 있다.

한편, 제2엘레먼트의 합성이 시작되었지만 음악의 길이가 '라' 지점까지 뿐 이므로, '라' 지점에서 동일 음악이나 여타 다른 음악을 합성하여 음성만 합성되지 않도록 하였다. 이때의 음악 합성은 도 9의 'E'지점에 도시됨과 같이 사용자가 듣기에 동일한 음량이 들릴 수 있도록 상호 교차된 볼륨콘트롤을 사용한다.

음성의 제2엘레먼트 합성이 종료되는 '마' 지점에서 음악은 업콘트롤되며, 전술한 바와 같이 다음 다운포인트까지의 시간이 일정치 이상이되면 다음 다운포인트인 3' 지점에서 페이드아웃콘트롤을 하고, 시간이 일정치 이상이되지 않으며, 다음 다음인 4' 다운포인트에서 페이드아웃콘트롤을 한다.

도14는 상술한 방법에 의해 음성과 음악이 합성된 결과물을 이용한 서비스예를 나타낸 것으로 도1을 참조하여 설명한다.

200단계에서 사용자가 통신망(이동통신망, 유선통신망, 인터넷망)을 통해 서버에 접속하면 사용자 확인 프로세서를 처리한다. 사용자가 합성 서비스를 원하면 220 단계로 진행하고 그렇지 않으면 211 단계로 진행하여 여타 동작을 수행한다.

220 단계에서 사용자가 통신망을 통해 음성을 입력한다. 이때 음성입력은 휴대폰이나 일반 유선전화기, 인터넷에 접속된 컴퓨터의 마이크를 통해 이루어진다. 음성입력은 전술한 바와 같이 임의의 메뉴 안내에 따라 사용자가 직접 다수의 음성엘레먼트로 나누어 입력하거나, 사용자가 입력한 전체적인 음성의 길이, 및 무음 구간을 참조하여 다수의 엘레먼트로 분리한다. 물론 하나의 엘레먼트만을 이용하여 합성이 이루어질 수도 있다. 230 단계는 합성부(20)에 의해 전술한 음성의 분리 및 이를 이용한 합성 과정으로 다운포인트에 의해 합성이 이루어지거나 도입엘레먼트, 브릿지 엘레먼트, 종료엘레먼트를 이용하여 합성을 하고, 사용자로부터 적용 대상 을 확인받고, 해당 과금을 수행한다. 예를 들어 합성된 음이 음성메지시이면 메시지 전송시간과 대상자 정보를 입력받고 250 단계에서 해당 시간에 메시지를 전송하고, 메시지 전송결과를 사용자에게 통보한다. 음성메시지의 경우 해당 시간에 사용자가 설정한 대상자에게 전화를 걸고 안내메시지를 송신한 다음 합성된 음을 들려준다. 예를 들어 "1234님이 5678님께 보내신 DJ메일 메시지 입니다."

적용대상이 벨소리나 컬러링(통화연결음)이면 해당 사용자나 교환기에 음 설정을 하거나, 벨소리 관련 다운로드 기능을 통해 벨소리를 설정할 수 있도록 한다. 설정이 완료되면 해당 설정에 관한 정보를 사용자에게 단문형태로 전송한다.

이상에서 살펴본 바와 같이 본 발명은 음성과 음악을 적절하게 합성함으로써, 이를 듣는 사용자가 믹싱의 효과를 최대한 느낄 수 있는 장점이 있다.

또한, 사람이 일일이 볼륨을 조절하지 않아도 뛰어난 믹싱효과를 창출할 수 있는 효과가 있다.

Claims

음악과 음성을 합성하기 위한 시스템에 있어서,

사용자로부터 음성을 수신하기 위한 수신부;

다수의 음악 데이터를 저장하고 있는 데이터베이스; 및,

상기 수신부로부터 입력되는 음성의 무음부분 검출에 따라 상기 데이터베이스에 저장된 음악의 볼륨을 조절하고, 조절된 음악과 수신된 음성을 합성하는 합성부를 구비하는 것을 특징으로 하는 시스템.
음악과 음성을 합성하기 위한 시스템에 있어서,

사용자로부터 입력되는 음성을 수신하기 위한 수신부;

다수의 음악 데이터를 저장하고 있는 데이터베이스; 및,

상기 수신된 음성을 무음부분 검출에 의해 다수의 음성엘레먼트로 분리하고, 분리된 음성엘레먼트를 상기 데이터베이스에 저장된 음악과 합성하는 합성부를 구비하는 것을 특징으로 하는 시스템.
음악과 음성을 합성하기 위한 시스템에 있어서,

사용자로부터 입력되는 음성을 수신하기 위한 수신부;

곡별로 하나 이상으로 분리된 음악엘레먼트를 저장하고 있는 데이터베이스; 및,

상기 하나 이상으로 분리된 음악 엘레먼트와 상기 음성을 수신된 음성의 무음부분에 따라 합성하는 합성부를 구비하는 것을 특징으로 하는 시스템.
음악과 음성을 합성하기 위한 시스템에 있어서,

사용자로부터 입력되는 음성을 수신하기 위한 수신부;

곡별로 하나 이상으로 분리된 음악엘레먼트를 저장하고 있는 데이터베이스; 및,

상기 검출된 무음부분에 따라 하나 이상의 음성 엘레먼트로 분리하고, 분리된 상기 음성 엘레먼트와 상기 음악엘레먼트를 합성하는 합성부를 구비함을 특징으로 하는 음악과 음성의 합성 시스템.
음악과 음성을 합성하기 위한 방법에 있어서,

사용자로부터 입력되는 음성을 수신하는 단계;

상기 수신된 음성의 무음 부분을 검출하는 단계;

상기 검출된 무음부분에 의해 음악 볼륨을 조절하는 단계;

상기 조절된 음악과 상기 수신된 음성을 합성하는 단계; 및,

상기 합성된 음성을 송신하는 단계를 구비함을 특징으로 하는 음악메일 서비스 방법.
음악과 음성을 합성하기 위한 방법에 있어서,

사용자로부터 입력되는 음성을 수신하는 단계;

상기 수신된 음성의 무음 부분을 검출하는 단계;

상기 검출된 무음부분에 의해 하나 이상으로 분리된 음악 엘레먼트와 상기 음성을 합성하는 단계를 구비함을 특징으로 하는 음악과 음성의 합성 방법.
음악과 음성을 합성하기 위한 방법에 있어서,

사용자로부터 입력되는 음성을 수신하는 단계;

상기 수신된 음성의 무음 부분을 검출하는 단계;

상기 검출된 무음부분에 따라 하나 이상의 음성 엘레먼트로 분리하는 단계; 및,

선택된 음악에 상기 음성 엘레먼트를 결합하여 음악과 음성을 합성하는 단계를 구비함을 특징으로 하는 음악과 음성의 합성 방법.
음악과 음성을 합성하기 위한 방법에 있어서,

사용자로부터 입력되는 음성을 수신하는 제1단계;

상기 수신된 음성의 무음 부분을 검출하는 제2단계;

상기 검출된 무음부분에 따라 하나 이상의 음성 엘레먼트로 분리하는 제3단계; 및,

기 분리된 음악의 엘레먼트와 상기 음성 엘레먼트를 결합하여 음악과 음성을 합성하는 제4단계를 구비함을 특징으로 하는 음악과 음성의 합성 방법.
음악과 음성을 합성하여 서비스 하기 위한 방법에 있어서,

인터넷을 통하여 사용자로부터 입력되는 음성을 수신하는 제1단계;

상기 수신된 음성의 무음 부분을 검출하는 제2단계;

상기 검출된 무음부분에 따라 하나 이상의 음성 엘레먼트로 분리하는 제3단계;

기 분리된 음악의 엘레먼트와 상기 음성 엘레먼트를 결합하여 음악과 음성을 합성하는 제4단계; 및,

상기 합성된 음악과 음성을 상기 인터넷을 통하여 전송하는 제5단계

를 구비함을 특징으로 하는 음악과 음성의 합성 방법.
음악과 음성을 합성하기 위한 방법에 있어서,

사용자로부터 음성을 입력받는 제1단계;

입력된 음성에 따라 음악의 볼륨을 조절하기 위한 구간을 결정하는 제2단계;

설정된 상기 음악의 도입부에서 상기 음성의 시작부위를 매칭시켜 합성하되, 상기 음악의 볼륨은 다운시키고, 상기 음성의 종료 부위에서 상기 음악의 볼륨을 업시키는 제3단계;

상기 볼륨이 업된 상태에서 설정된 시간이 도래하면 상기 음악의 볼륨을 페이드아웃시키는 제4단계를 구비함을 특징으로 하는 음악과 음성의 합성 방법.

(설정된 시간은 기 지정된 다수의 특정 시간중 음성이 종료 된 후에 최소 1구간이 경과된 후의 다운 포인트임)
음악과 음성을 합성하기 위한 방법에 있어서,

사용자로부터 음성을 입력받는 제1단계;

입력된 음성의 시간이나 무음부위에 따라 하나 이상으로 분리되거나 사용자에 의해 하나 이상으로 분리되어 입력된 음성 엘레먼트를 음악과 합성하되,

상기 각각의 음성 엘레먼트 시작부위에서는 음악이 다운되고, 각각의 음성엘레먼트 종료부위에서는 음악이 업되도록 합성하는 것을 특징으로 하는 음악과 음성 의 합성 방법.
음악과 음성을 합성하기 위한 방법에 있어서,

사용자로부터 음성을 입력받는 제1단계;

입력된 음성의 시간이나 무음부위에 따라 하나 이상으로 분리되거나 사용자에 의해 하나 이상으로 분리되어 입력된 음성 엘레먼트를 음악과 합성하되,

상기 각각의 음성 엘레먼트 시작부위에 따라 음악이 다운되고, 각각의 음성엘레먼트 종료부위에 따라 음악이 업되도록 합성하며,

상기 각각의 음성 엘레먼트 간의 시간간격은 일정 시간 이상이 되도록 합성하는 것을 특징으로 하는 음악과 음성의 합성 방법.
음악과 음성을 합성하기 위한 방법에 있어서,

사용자로부터 음성을 입력받는 제1단계;

입력된 음성의 시작 부분을 음악의 특정 부위에 매칭시켜 합성하되, 음성의 시작 부위에서 음악의 볼륨을 다운시켜 합성하는 제2단계; 및,

음성의 종료 부위에서 음악을 업시켜 합성하는 제3단계를 구비함을 특징으로 하는 음악과 음성의 합성 방법.
청구항 13에 있어서,

상기 3단계에서,

일정 시간이 경과되면 음악을 페이드아웃시켜 합성하는 제4단계를 더 구비함을 특징으로 하는 음악과 음성의 합성 방법.
청구항 13에 있어서,

상기 입력된 음성의 무음 부분이 일정시간 이상이면 무음 부분을 축소하여 합성하는 것을 특징으로 하는 음악과 음성의 합성 방법.
청구항 13에 있어서,

상기 입력된 음성을 무음부분이나 시간길이를 고려하여 2개 이상의 엘리먼트로 분리하여 음악과 합성하는 것을 특징으로 하는 음악과 음성의 합성 방법.
청구항 16에 있어서,

상기 분리된 각각의 엘리먼트 사이는 음악이 업되어 합성되되, 다음 음성 엘리먼트의 시작 부위에서 음악의 볼륨을 다운시켜 합성하는 것을 특징으로 하는 음 악과 음성의 합성 방법.
청구항 17에 있어서,

상기 분리된 각각의 엘리먼트 사이의 시간 동안 음악이 업되어 합성되되, 다음 음성 엘리먼트의 합성은 다음의 다운포인트 지점에서 합성이 시작됨을 특징으로 하는 음악과 음성의 합성 방법.
음악과 음성을 합성하기 위한 방법에 있어서,

음성을 입력받는 제1단계;

음악에 설정된 다수의 다운포인트 중 어느 하나의 다운포인트에서 상기 입력된 음성의 시작부위를 합성하는 제2단계;

상기 음성의 시작부위에서 상기 음악의 볼륨을 다운시켜 합성하는 제3단계; 및,

상기 음성의 종료부위에서 상기 음악의 볼륨을 업시켜 합성하는 제4단계를 구비함을 특징으로 하는 음악과 음성의 합성 방법.
음악과 음성을 합성하기 위한 방법에 있어서,

입력된 음성의 총 시간이나 무음부위에 따라 하나 이상으로 분리하거나 사용자에 의해 하나 이상으로 분리되어 입력된 음성 엘레먼트를 저장하는 제1단계;

상기 음성 엘레먼트를 순서에 따라 합성하되 음성 엘레먼트의 시작부위를 음악에 설정된 다수의 다운포인트 중 어느 하나의 다운포인트에서 상기 입력된 음성의 시작부위를 합성하고, 상기 음성의 시작부위에서 상기 음악의 볼륨을 다운시켜 합성하는 제2단계; 및,

음성 엘레먼트의 종료부위에서 상기 음악의 볼륨을 업시켜 합성하는 제3단계를 구비함을 특징으로 하는 음악과 음성의 합성 방법.
청구항 20에 있어서,

상기 다수의 음성엘레먼트를 합성 함에 있어서,

전후 음성엘레먼트 사이는 일정 시간 간격으로 합성되거나,

1개의 이상의 다운포인트를 포함하는 것을 특징으로 하는 음악과 음성의 합성 방법.
청구항 20에 있어서,

상기 입력받은 음성이 음악의 길이보다 길 경우 음악을 반복하거나 여타 다른 음악을 믹싱하여 음성과 합성하는 것을 특징으로 하는 음악과 음성의 합성 방 법.