KR100555858B1

KR100555858B1 - 재생장치

Info

Publication number: KR100555858B1
Application number: KR1019990002418A
Authority: KR
Inventors: 가노고헤이; 이시즈카미나코; 사토다카히로; 미즈키마사유키
Original assignee: 소니 가부시끼 가이샤
Priority date: 1998-01-26
Filing date: 1999-01-26
Publication date: 2006-03-03
Also published as: US6463014B1; CN1661715A; KR19990068144A; CN1263027C; CN1226065A; CN1271627C; CN100481248C; ID21804A; CN1495754A; US6618336B2; US20030076757A1; MY121856A

Abstract

본 발명의 재생장치에 있어서, 입력되는 오디오신호를 복수의 대역으로 분할하고, 각 대역의 엔벨로프치를 검파한다. 엔벨로프치의 변화에 따라 소정 음원이 중첩된다. 또한 재생된 오디오신호의 엔벨로프치에 따라, 재생된 음악의 템포가 계측되고 계측된 템포에 동기하여 애니메이션 표시가 변화된다. 또한 리듬박스가 계측된 템포에 동기하여 재생되고, 동기를 수행하도록 계측된 템포에 따라 음장이 자동적으로 선택된다.

재생장치, 중첩, 템포, 음악판별, 순회성 검출, 엔벨로프검파

Description

재생장치 {REPRODUCING APPARATUS}

도 1은 본 발명의 실시형태인 재생장치의 외관사시도이다.

도 2는 본 발명에 따른 재생장치의 구성을 도시하는 블록도이다.

도 3은 본 발명에 따른 제1 실시형태의 재생장치의 동작을 도시하는 흐름도이다.

도 4는 도2에 도시된 본 발명의 실시형태에 따른 재생장치의 음원발생장치(16)에 의하여 발생된 음색의 예를 도시하는 표이다.

도 5는 본 발명의 제2 실시형태에 따른 재생장치의 동작을 도시하는 흐름도이다.

도 6은 본 발명의 제2 실시형태에 따른 재생장치의 표시부(14)에 표시될 표시패턴을 도시한다.

도 7은 본 발명의 제3 실시형태에 따른 재생장치의 동작을 도시하는 흐름도이다.

도 8은 본 발명의 제4 실시형태에 따른 재생장치의 동작을 도시하는 흐름도이다.

도 9는 본 발명의 제3 및 제4 실시형태에 따른 재생장치의 동작을 도시하는 흐름도이다.

도 10(A)는 본 발명의 제3 실시형태에서 재생음이 예측보다 빨리 왔을 경우에 있어서 리듬동기의 타이밍도이다.

도 10(B)는 본 발명의 제3 실시형태에서 재생음이 예측보다 늦게 왔을 경우에 있어서 리듬동기의 타이밍도이다.

도 11은 본 발명의 제4 실시형태에 따른 재생장치의 패턴의 순회검출을 도시하는 도이다.

본 발명은 예를 들어 재생된 오디오신호 레벨에 따라서 소정의 음원이 중첩되고, 재생된 음악의 템포가 상기 재생된 오디오신호의 엔벨로프에 따라서 계측되어 애니메이션 표현을 상기 계측된 템포와 동기되도록 변화시키며, 리듬박스는 상기 계측된 템포와 동기되어 재생되며, 음장(sound field)이 자동적으로 선택되고 상기 계측된 템포에 따라서 중첩되는 재생장치에 관한 것이다.

종래 컴팩트 디스크(이하 CD라 칭함: 등록상표임) 플레이어, 미니디스크(이하 MD라 칭함: 등록상표임) 플레이어, 레코더, 튜너, 앰프(앰플리파이어) 및 스피커 등을 포함하는 오디오 시스템이 알려져 있다.

이러한 오디오 시스템에서, CD 또는 MD에 기록된 오디오신호를 재생할 때, 일반적으로 사용자(유저)는 리듬박스 또는 드럼패드를 사용하여 발생된 리듬을 재생된 음에 중첩하여 재생을 수행하였다.

종래 오디오 시스템에 있어서, 상기 CD 또는 MD에 기록된 오디오신호는 복수의 대역으로 분할되고 그 레벨은 액정표시장치(이하 LCD)에 벨트형(belt-like form)으로 표시되었다.

상기 벨트형 레벨 표시는 일반적으로 오디오 전기 신호를 각 주파수 대역으로 분할하고 각 주파수 대역의 진폭이 레벨로써 표시되어 파형의 기본파, 고조파 성분의 분포 및 진폭을 표시화면상으로 볼 수 있는 소위 스펙트럼 애널라이저(spectrum analyzer) 형식으로 수행되었다.

그러나 첫 째, 상기 종래의 오디오 시스템은 유저가 그의 감각에 의하여 리듬박스 또는 드럼패드의 음을 재생음에 맞추도록 하고 있었으므로, 상기 리듬이 어긋나거나 해서, 모든 음악에 대응한 음의 중첩을 할 수 없는 문제가 있었다.

둘 째, 종래 재생장치는 상기 스펙트럼 애널라이저 표시와 동일한 표시를 행하고 있었으므로, 순간적인 음역 레벨의 표시에 머물러, 모든 음악에 대응하는 적극적인 표시를 할 수 없다고 하는 문제가 있었다.

셋 째, 상기 유저가 그의 감각에 의하여 리듬박스 또는 드럼패드로부터의 음을 재생음에 맞추도록 하고 있었으므로, 만일 재생될 신호의 오디오 음의 템포가 변화되면 그 변화를 반영하기 어려운 문제가 있었다.

네 째, 상기 유저가 스스로 음악을 판별하고, 복잡한 수동조작에 의하여 음장을 설정해야 하기 때문에, 상기 종래의 오디오 시스템은 사용자가 그의 감각에 의하여 리듬박스 또는 드럼패드로부터의 음을 재생된 오디오신호와 합성하기 때문에 상기 리듬이 어긋날 수 있으며, 모든 음악에 대하여 항상 최적의 음장을 설정할 수 없다는 문제가 있었다.

따라서 본 발명의 목적은 상기 첫 번째 문제를 해결하기 위하여 리듬박스 또는 드럼패드로부터의 음을 모든 음악에 적합하도록 중첩할 수 있는 재생장치를 제공하는데 있다.

상기 목적을 달성하기 위하여, 본 발명의 첫 번째 태양으로부터 재생장치는 입력되는 오디오신호를 복수의 대역(帶域)으로 분할하는 대역분할수단과, 상기 대역분할수단에 의해 분할된 각 대역에 있어서의 엔벨로프치를 검파하는 엔벨로프검파수단과, 상기 엔벨로프검파수단으로 검파한 엔벨로프치를 각 대역마다 유지하는 제1 기억수단과, 상기 제1 기억수단에 기억되어 있는 엔벨로프치를 시계열적(時系列的)으로 시프트하여 유지하는 제2 기억수단과, 상기 제2 기억수단에 유지되고 있는 시계열적으로 시프트되는 전회의 엔벨로프치와 상기 제1 기억수단에 유지되고 있는 금회의 엔벨로프치의 차분치(差分値)를 연산하는 연산수단과, 복수의 효과음을 발생하는 음원(音源)발생수단과, 상기 연산수단에 의해 연산된 차분치에 따라 상기 음원발생수단으로부터 발생하는 음원을 전환하는 음원발생제어수단를 구비한다.

또한 본 발명의 목적은 상기 두 번째 문제를 해결하기 위하여 모든 음악에 대응하여 대화식으로 표시할 수 있는 재생장치를 제공하는데 있다. 상기 목적을 달성하기 위하여, 본 발명의 두 번째 태양으로부터 재생장치는 입력되는 오디오신호를 복수의 대역으로 분할하는 대역분할수단과, 상기 대역분할수단에 의해 분할된 각 대역에 있어서의 엔벨로프치를 검파하는 엔벨로프검파수단과, 상기 엔벨로프검파수단으로 검파한 엔벨로프치를 각 대역마다 유지하는 제1 기억수단과, 상기 제1 기억수단에 기억되어 있는 엔벨로프치를 시계열적으로 시프트하여 유지하는 제2 기억수단과, 상기 제2 기억수단에 유지되고 있는 시계열적으로 시프트되는 전회의 엔벨로프치와 상기 제1 기억수단에 유지되고 있는 금회의 엔벨로프치의 차분치를 연산하는 연산수단과, 복수의 표시패턴을 기억하고 있는 화상메모리와, 상기 화상메모리로부터 독출된 표시패턴을 표시하는 표시수단과, 상기 연산수단에 의해 연산된 차분치에 따라 상기 화상메모리로부터 발생되는 표시패턴을 변화시키는 화상메모리 제어수단을 구비한다.

또한 본 발명의 목적은 상기 세 번째 문제를 해결하기 위하여 모든 음악에 대응하여 리듬박스 또는 드럼박스로부터 음을 중첩할 수 있는 재생장치를 제공하는데 있다. 상기 목적을 달성하기 위하여, 본 발명의 세 번째 태양으로부터 재생장치는 입력되는 오디오신호를 복수의 대역으로 분할하는 대역분할수단과, 상기 대역분할수단에 의해 분할된 각 대역에 있어서의 엔벨로프치를 검파하는 엔벨로프검파수단과, 상기 엔벨로프검파수단으로 검파한 엔벨로프치를 각 대역마다 유지하는 제1 기억수단과, 상기 제1 기억수단에 기억되어 있는 엔벨로프치를 시계열적으로 시프트하여 유지하는 제2 기억수단과, 상기 제2 기억수단에 유지되고 있는 시계열적으로 시프트되는 전회의 엔벨로프치와 상기 제1 기억수단에 유지되고 있는 금회의 엔벨로프치의 차분치를 연산하는 연산수단과, 상기 연산수단으로부터의 차분치에 따라 입력된 오디오신호의 템포를 측정하는 템포측정수단과, 복수 종류의 리듬패턴을 발생하는 리듬음원 발생수단과, 상기 입력된 오디오신호와 상기 리듬음원 발생수단으로부터 발생된 리듬패턴을 중첩하는 중첩수단과, 상기 템포측정수단으로부터의 템포정보에 따라 상기 리듬음원 발생수단으로부터 발생되는 리듬음원을 상기 입력된 오디오신호에 동기시키는 리듬음원발생 제어수단을 구비한다.

또한 본 발명의 목적은 상기 네 번째 문제를 해결하기 위하여 모든 음악에 대응하여 음장이 자동적으로 설정되는 재생장치를 제공하는데 있다.

본 발명의 실시형태는 다음 항목에서 설명된다.

1. 본 발명의 제1 내지 제4 실시형태에 따른 블록도의 설명.

2. 본 발명의 제1 내지 제4 실시형태의 동작 설명.

3. 본 발명의 제1 실시형태에 따른 처리절차의 설명.

4. 본 발명의 제2 실시형태에 따른 처리절차의 설명.

5. 본 발명의 제3 실시형태에 따른 처리절차의 설명.

6. 본 발명의 제4 실시형태에 따른 처리절차의 설명.

7. 본 발명의 제3 및 제4 실시형태에 따른 리듬 동기절차.

8. 본 발명에 따른 리듬동기 동작의 설명.

9. 본 발명에 따른 순회패턴검출 동작의 설명.

1. 본 발명의 제1 내지 제4 실시형태에 따른 블록도의 설명.

우선 본 실시형태에 따른 재생장치의 구성을 도 1의 외관사시도를 참조하여 설명한다.

도 1에 있어서, 재생장치는 CD/MD를 재생조작 가능한 CD/MD 데크조작부(40)와, FM라디오방송을 수신조작 가능한 튜너조작부(41)와 오디오신호의 증폭조작 가능한 앰프조작부(42)와, 앰프로 증폭된 오디오신호를 음으로 바꾸는 스피커(43,44)로 이루어지고, CD나 MD에 기록된 오디오신호의 재생을 행한다. 그리고, CD/MD조작부(40)와, 튜너조작부(41)와, 앰프조작부(42)는 동일 상자체에 내장되어 있다.

특히 본 발명의 제1 실시형태에 있어서는 재생된 오디오신호의 엔벨로프치의 차분치로부터 특정의 템포를 검출하고, 특정의 템포에 따라 음원발생수단에서 발생되는 음원을 전환(switch)하도록 하여, 재생되는 음악에 맞춰 자동적으로 음을 중첩시키는 것이다.

특히 본 발명의 제2 실시형태에 있어서는 표시부(45)에서, 단지 CD나 MD에 기록된 오디오신호를 복수의 대역으로 나누고, 오디오신호의 레벨에 따라 벨트형의 표시를 행하는 스펙트럼 애널라이저와 같은 표시에 머물지 않고, CD/MD조작부(40) 또는 튜너조작부(41)로부터 스피커를 통해 재생되는 음악에 대응하여, 예를 들면 비트가 강한 음악이면 격렬한 동작의 애니메이션을 표시하고, 반대로 흐름이 완만한 음악이면 부드러운 동작의 애니메이션을 표시하도록 하여, 적극적인 화상의 표시를 행하도록 한 것이다.

특히 본 발명의 제3 실시형태에 있어서는 재생된 오디오신호의 엔벨로프치의 차분치로부터 특정의 템포를 검출하고, 특정의 템포에 따라 리듬 제너레이터(Rhythm generator)에서 리듬을 발생하도록 하고, 재생되는 음악에 맞춰 자동적으로 리듬을 중첩시키는 것이다.

특히 본 발명의 제4 실시형태에 있어서는 재생된 오디오신호의 엔벨로프치의 차분치로부터 특정의 템포 및 순회성을 검출하고, 이 템포 및 순회성으로부터 음악을 인식하도록 하여, 재생되는 음악에 맞춰 자동적으로 최적의 음장이 되도록 재생음을 제어하는 것이다.

다음에, 본 발명의 제1 내지 제4 실시형태의 재생장치의 구성을 나타낸 블록도를 도 2를 참조하여 설명한다.

도 2에 있어서, 이 본 실시형태의 재생장치는 CD나 MD에 기록된 오디오신호의 재생을 행하여 아날로그오디오신호를 출력하는 재생수단(1)을 가진다. 재생수단(1)은 도 1에 나타낸 재생장치에 대응한다. 또, 본 실시형태의 재생장치는 아날로그오디오신호를 4밴드의 대역으로 나누는 밴드패스필터 BPF(2-1(125Hz), 2-2(500Hz), 2-3(2kHz), 2-4(8kHz))와, 각 대역의 엔벨로프를 검파하는 엔벨로프검파회로(3-1, 3-2, 3-3, 3-4)와, 엔벨로프검파된 아날로그오디오신호를 디지털치로 변환하는 A/D변환회로(4-1, 4-2, 4-3, 4-4)와, 디지털치로부터 전회의 샘플링치와 금회의 샘플링치와의 차분치를 연산하는 연산회로(5-1, 5-2, 5-3, 5-4)를 가진다.

연산회로(5-1)는 전회의 샘플링치를 격납(store)하는 레지스터(5-1-3)와, 금회의 샘플링치를 격납하는 레지스터(5-1-2)와, 레지스터(5-1-3)에 격납된 전회의 샘플링치와 레지스터(5-1-2)에 격납된 금회의 샘플링치와의 차분을 연산하는 차분연산회로(5-1-1)를 가진다. 그리고, CPU(6)로부터 레지스터(5-1-2)에는 래치신호가, 레지스터(5-1-3)에는 리셋신호가, 각 샘플링 종료 시에 공급된다. 그리고, 도 시는 하지 않지만, 연산회로(5-2, 5-3, 5-4)도 연산회로(5-1)와 동일한 구성, 즉 전회의 샘플링치를 격납하는 레지스터와, 금회의 샘플링치를 격납하는 레지스터와, 레지스터에 격납된 전회의 샘플링치와 레지스터에 격납된 금회의 샘플링치와의 차분을 연산하는 차분연산회로를 가지고 있다.

또, 본 실시형태의 재생장치는 밴드패스필터 BPF(2-1(125Hz), 2-2(500Hz), 2-3(2kHz), 2-4(8kHz))로부터 엔벨로프검파회로(3-1, 3-2, 3-3, 3-4), A/D변환회로(4-1, 4-2, 4-3, 4-4), 연산회로(5-1, 5-2, 5-3, 5-4)까지의, 샘플링동작의 제어 및 연산동작이 제어된 후단회로의 제어를 행하는 동시에, 특히 차분치로부터 음악의 템포를 계측하여 템포에 따라 후술하는 음원발생기(16)로부터 발생되는 음원을 음성합성기(20)로 재생오디오신호에 중첩하도록 제어하는 CPU(6)를 가진다.

또, 본 실시형태의 재생장치는 후술하는 표시부에 스펙트럼 애널라이저 표시 또는 음악에 대응한 애니메이션 표시를 하는가를 선택하는 스펙트럼 애널라이저/애니메이션 선택키(7)와, 후술하는 재생음에 중첩시키는 음색을 선택하는 음색선택키(8)와, 후술하는 음원 또는 리듬박스에 의한 재생음에 대한 음의 중첩을 랜덤으로 선택하는 랜덤선택키(9)와, 연산회로(5-1, 5-2, 5-3, 5-4)에 의한 차분치의 계측에 의해 재생음의 템포를 계측 개시하기 위한 템포계측키(10)와, 후술하는 음원 또는 리듬박스에 의한 재생음에 대한 음의 중첩을 스타트시키는 리듬중첩 스타트키(11)를 가진다.

음색선택키(8)에 의해 중첩되는 음색은 도 4에 나타낸 바와 같이, 타악기음(30), 효과음(31), 및 사람의 목소리(32) 등이다. 또, 타악기음(30)은 드럼의 음색으로서 Tight kick, Loose snare, Open/Close Hihat, Low/High Tom, Side stick, 라틴계 타악기음으로서 Hand clap, Open/Close Conga, Cabasa, Claves, Low/High Cowbell, Tambourin, Techno kick, Low/High Whistle, Scratch가 있다.

이와 같이, 타악기음(30)에서는 동일 음색으로 저음과 고음(Low/High)의 2종류를 가지는 것이 있다. 또, 타악기음(30)에서는 동일 음색으로 공명음과 차폐음(Open/Close)의 2종류를 가지는 것이 있다. 또, 효과음(31)으로서 Punch, Beep, Squeal, Clush가 있다. 또, 사람의 목소리로서, Ha, Go, Hey, Aoh, Shout, Yeah, Hooo, Yah, Sexy가 있다.

또, 본 실시형태의 재생장치는 표시부의 표시를 제어하는 표시부 제어수단(12)과, 표시부에 표시하는 각종 화상패턴을 기억하는 화상패턴메모리(ROM)(13)와, 음악에 대응한 애니메이션표시를 하는 표시부(형광표시관 FL: Fluorescent character display tube/액정표시장치 LCD: Liquid crystal display)(14)를 가진다. 표시부의 애니메이션을 표시 가능한 범위는 예를 들면, 가로 11도트×세로 7도트이고, 각 도트의 위치에 따라 3색 중의 1색을 표시할 수 있도록 구성되어 있다.

또, 본 실시형태의 재생장치는 재생음에 대하여 중첩시키는 음을 선택하는 음원선택기(15)와, 재생음에 대하여 중첩시키는 음을 발생하는 음원발생기(16)와, 재생음에 대하여 중첩시키는 리듬을 선택하는 리듬박스선택기(17)와, 재생음에 대하여 중첩시키는 리듬을 발생하는 리듬 제너레이터(18)를 가진다.

또, 본 실시형태의 재생장치는 아날로그오디오신호에 대하여 CPU(6)로부터 공급되는 컨트롤신호에 따라 음장의 제어를 행하는 음원용 DSP(Digital signal processor)(19)와 재생음에 대하여 중첩시키는 음 또는 리듬을 합성처리하는 음성합성기(20)와, CPU(6)로부터 공급되는 컨트롤신호에 따라 음원발생기(16)로부터의 음 또는 리듬 제너레이터(18)로부터의 리듬을 선택적으로 전환하여 음성합성기(20)에 공급하는 스위치(21(SW1))와, CPU(6)로부터 공급되는 컨트롤신호에 따라 음원용 DSP(19)로부터의 음장제어출력과 음성합성기(20)로부터의 음 또는 리듬합성출력을 선택적으로 전환하여 출력하는 스위치(22(SW2))와, 전기신호를 음으로 변환하여 음악을 재생하는 스피커(23)를 가진다.

2. 본 발명의 제1 내지 제4 실시형태의 동작 설명.

제1 내지 제4 실시형태와 같이 구성된 재생장치의 동작은 도 2의 블록도를 참조하여 설명한다.

도 2에 있어서, 재생수단(1)은 CD나 MD에 기록된 오디오신호의 재생을 행하여 아날로그오디오신호를 출력한다. 재생수단(1)으로부터 출력되는 아날로그오디오신호는 밴드패스필터 BPF(2-1(125Hz), 2-2(500Hz), 2-3(2kHz), 2-4(8kHz))에 공급된다. 밴드패스필터(2-1(125Hz), 2-2(500Hz), 2-3(2kHz), 2-4(8kHz))는 아날로그오디오신호를 4밴드의 대역으로 나눈다. 여기에서, 밴드패스필터(2-1(125Hz), 2-2(500Hz), 2-3(2kHz), 2-4(8kHz))의 4밴드의 각 주파수는 그 대역의 중심 주파수이다. 4밴드의 대역통과동작은 공진공동형(共振空洞形)으로 공진의 예민함을 나타내는 Q의 값은 1이다.

4밴드의 대역으로 나누어진 아날로그오디오신호는 엔벨로프검파회로(3-1, 3-2, 3-3, 3-4)에 공급된다. 엔벨로프검파회로(3-1, 3-2, 3-3, 3-4)는 각 대역신호의 엔벨로프치를 검파한다. 이 엔벨로프검파된 아날로그오디오신호의 엔벨로프치는 A/D변환회로(4-1, 4-2, 4-3, 4-4)에 공급된다. A/D변환회로(4-1, 4-2, 4-3, 4-4)는 이 엔벨로프치를 디지털치로 변환한다. 이 디지털치는 연산회로(5-1, 5-2, 5-3, 5-4)에 공급된다. 연산회로(5-1, 5-2, 5-3, 5-4)는 이 디지털치로부터 전회의 샘플링치와 금회의 샘플링치와의 차분치를 연산한다.

구체적으로는 연산회로(5-1)는 다음의 동작을 한다. 레지스터(5-1-3)는 전회의 샘플링치를 격납한다. 레지스터(5-1-2)는 금회의 샘플링치를 격납한다. 차분연산회로(5-1-1)는 레지스터(5-1-3)에 격납된 전회의 샘플링치와 레지스터(5-1-2)에 격납된 금회의 샘플링치와의 차분을 연산한다. 그리고, 도시는 하지 않지만, 연산회로(5-2,5-3,5-4)도 연산회로(5-1)와 동일한 동작, 즉 n=2∼4인 때, 레지스터(5-n-3)에 의해 전회의 샘플링치를 격납하고, 레지스터(5-n-2)에 의해 금회의 샘플링치를 격납하여, 차분연산회로(5-n-1)에 의해 레지스터(5-n-3)에 격납된 전회의 샘플링치와 레지스터(5-n-2)에 격납된 금회의 샘플링치와의 차분을 연산한다.

이와 같이 하여 오디오신호의 각 엔벨로프치의 차분치가 구해진다. 이와 같이 각 샘플링치의 차분치를 구함으로써, 엔벨로프치의 변화의 정도인 미분치를 구할 수 있다. 즉, 차분치의 특정 패턴을 검출함으로써, 오디오신호 중에 반복되는 일정한 패턴을 구할 수 있다.

또, 각 샘플링치의 차분치를 구함으로써, 엔벨로프치의 변화의 정도인 미분 치를 구할 수 있다. 즉, 차분치의 소정 패턴을 검출함으로써, 오디오신호 중에 반복되는 일정한 패턴을 구할 수 있다. 또, 차분치의 소정 순회패턴을 검출함으로써, 오디오신호 중에 반복되는 일정한 순회패턴을 구할 수 있다.

또, CPU(6)는 밴드패스필터 BPF(2-1(125Hz), 2-2(500Hz), 2-3(2kHz), 2-4(8kHz))로부터 엔벨로프검파회로(3-1, 3-2, 3-3, 3-4), A/D변환회로(4-1, 4-2, 4-3, 4-4), 연산회로(5-1, 5-2, 5-3, 5-4)까지의, 샘플링동작의 제어 및 연산동작의 제어와 후단회로의 제어를 행하는 동시에, 특히 제1 실시형태에 있어서 차분치로부터 음악의 템포를 계측하고 템포에 따라 음원발생기(16)로부터 발생되는 음원을 음성합성기(20)로 재생오디오신호에 중첩하도록 제어한다. 이하 제어방법을 도 3의 흐름도를 참조하여 후술한다.

또, 제2 실시형태에 있어서, CPU(6)는 특히 상기 계측된 차분치로부터 음악의 템포를 계측하고 템포에 따라 표시부(14)에 애니메이션표시의 제어를 한다. 이하 제어방법을 도 5의 흐름도를 참조하여 후술한다.

또, 제3 실시형태에 있어서, CPU(6)는 특히 차분치로부터 음악의 템포를 계측하고 템포에 따라 리듬 제너레이터(18)로부터 발생되는 리듬을 음성합성기(20)로 재생오디오신호에 동기하여 중첩하도록 제어한다. 이하 제어방법을 도 7의 흐름도를 참조하여 후술한다.

또, 제4 실시형태에 있어서, CPU(6)는 특히 상기 계측된 차분치로부터 음악의 템포 및 순회성을 계측하고 템포 및 순회성에 따라 음악의 종류를 인식하고, 음원용 DSP(19)에 대하여 재생오디오신호에 음악에 따른 음장을 부가하도록 제어한 다. 이하 제어방법을 도 8의 흐름도를 참조하여 후술한다.

템포계측키(10)는 연산회로(5-1, 5-2, 5-3, 5-4)에 의한 차분치의 계측에 의해, CPU(6)에 대한 재생음의 템포 계측을 가능하게 한다. 구체적으로는, 유저가 이 템포계측키(10)를 누름으로써, 예를 들면 키의 표면에 설치된 오렌지색의 발광다이오드가 점멸하여, CPU(6)가 재생되고 있는 음악의 템포를 계측 개시하고, 소정 샘플링시간 예를 들면, 전술한 20msec를 경과한 후에, 계측 완료하면 녹색의 발광다이오드가 점등되고, 표시부(14)에 음악에 대응하여 음원발생기(16)로부터 발생되는 음원을 음성합성기(20)로 재생오디오신호에 중첩할 수 있다. 따라서, 유저에 있어서는 템포계측키(10)를 누르는 동시에 음악의 템포가 계측되고 이에 따른 음원이 재생오디오신호에 중첩되는 것을 청각으로 인식할 수 있다.

또, 전술한 템포 계측으로 음악의 종류를 식별하고, 음악 종류의 인식에 의해 재생오디오신호에 중첩되는 음원을 바꾸도록 해도 된다.

또, 표시부제어수단(12)은 CPU(6)로부터의 컨트롤신호에 따라 표시부(14)의 표시동작을 제어한다. 화상패턴메모리(ROM)(13)는 표시부(14)에 표시하는 각종 화상패턴을 기억한다.

본 발명의 제2 실시형태에 따라서 도 6에 화상패턴의 예를 나타냈다. 도 6에 있어서, 패턴(30)은 쏘아 올려진 불꽃의 작은 상태를 나타내고, 패턴(31)은 쏘아 올려진 불꽃의 큰 상태를 나타내고, 패턴(32)은 쏘아 올려진 불꽃의 흩어지는 상태를 나타내는 것이다.

이 패턴(30∼32)을 미리 화상패턴메모리(13)에 기억시키고, 차례로 음악의 템포에 맞춰 표시부(14)에 공급하여 표시시킴으로써, 음악에 대응한 애니메이션을 표시시킬 수 있다.

여기에서, 각 패턴(30∼32)은 전술한 표시부의 애니메이션을 표시 가능한 범위인 가로 11도트×세로 7도트에 대응하는 데이터로 구성되어 있고, 각 도트의 위치에 따라 적, 등(橙), 청 3색 중의 1색을 표시한다.

그리고, 이 패턴은 일 예이고, 다른 애니메이션을 사용해도 되는 것은 물론이다.

스펙트럼 애널라이저/애니메이션 선택키(7)는 표시부(14)에 스펙트럼 애널라이저 표시 또는 음악에 대응한 애니메이션 표시를 하는가의 선택을 가능하게 한다. 통상은 초기설정상태가 애니메이션 선택상태이고, 유저가 스펙트럼 애널라이저/애니메이션 선택키(7)를 누르면, 스펙트럼 애널라이저 표시로 전환되고, 다시 스펙트럼 애널라이저/애니메이션 선택키(7)를 누르면, 애니메이션 선택상태로 전환되도록 되어 있다.

전술한 바와 같이, 음색선택키(8)는 재생음의 음색 선택을 가능하게 한다. 유저가 음색선택키(8)를 누르면, CPU(6)로부터의 컨트롤신호에 따라 음원선택기(15)는 재생음에 대하여 중첩시키는 음을 선택한다. 음원발생기(16)는 재생음에 대하여 중첩시키는 선택된 음을 발생한다.

리듬중첩 스타트키(11)는 음원 또는 리듬박스에 의한 재생음에 대한 음의 중첩을 스타트시킨다. 유저가 리듬중첩 스타트키(11)를 누르면, CPU(6)로부터의 컨트롤신호에 따라 리듬박스선택기(17)는 재생음에 대하여 중첩시키는 리듬을 선택한 다. 리듬 제너레이터(18)는 재생음에 대하여 중첩시키는 리듬을 발생한다.

전술한 바와 같이, 랜덤선택키(9)는 음원 또는 리듬박스에 의한 재생음에 대하여 중첩되는 음을 랜덤선택하는 것을 가능하게 한다. 유저가 랜덤선택키(9)를 누르면, CPU(6)로부터의 컨트롤신호에 따라 음원선택기(15) 또는 리듬박스선택기(17)는 재생음에 대하여 중첩시키는 음원 또는 리듬을 선택한다.

음원용 DSP(19)는 아날로그오디오신호에 대하여 CPU(6)로부터 공급되는 컨트롤신호에 따라 음장의 제어를 행한다. 음장의 제어가 실시된 아날로그오디오신호는 음성합성기(20)에 공급된다.

스위치(21(SW1))는 CPU(6)로부터 공급되는 컨트롤신호에 따라 음원발생기(16)로부터의 음 또는 리듬 제너레이터(18)로부터의 리듬을 선택적으로 전환하여 음성합성기(20)에 공급한다. 음성합성기(20)는 재생음에 대하여 중첩시키는 음 또는 리듬을 합성처리한다.

스위치(22(SW2))는 CPU(6)로부터 공급되는 컨트롤신호에 따라 음원용 DSP(19)로부터의 음장제어출력과 음성합성기(20)로부터의 음 또는 리듬합성출력을 선택적으로 전환하여 출력한다. 스피커(23)는 전기신호를 음으로 변환하여 음악을 재생한다.

3. 본 발명의 제1 실시형태에 따른 처리절차의 설명.

제1 실시형태에 관한 상기 CPU(6)의 동작을 도 3의 흐름도를 참조하여 설명한다.

도 3에 있어서, 개시하여, 스텝 S1에서 샘플링을 행한다. 구체적으로는, A/D 변환회로(4-1, 4-2, 4-3, 4-4)에 있어서의 A/D변환을 행하기 위한 엔벨로프치의 샘플링을 행한다. 이 샘플링에 요하는 시간은 1밴드당 5msec, 4밴드에서 20msec 걸린다. 스텝 S2에서 A/D치를 읽는다. 구체적으로는 A/D변환회로(4-1, 4-2, 4-3, 4-4)에서 A/D변환된 디지털의 엔벨로프치를 읽는다. 스텝 S3에서 전회와의 차분을 읽는다. 구체적으로는 연산회로(5-1, 5-2, 5-3, 5-4)에서 연산된 차분치를 읽는다.

스텝 S4에서 전회로부터의 마스크 설정시간이 경과했는가 여부를 판단한다. 구체적으로는, 음원발생기(16)로부터 발생되는 음원을 음성합성기(20)로 재생오디오신호에 중첩할 때, 중첩되는 음원의 시간 간격 중 유저가 감지할 수 없을 정도의 미소한 시간 간격을 불감(不感)(마스크) 설정시간으로서 설정해 둔다. 그리고, 마스크 설정시간이 경과하지 않은 때는 종료하고, 마스크 설정시간이 경과했을 때 다음의 스텝 S5∼S10의 각 처리를 행한다.

스텝 S4에서 마스크 설정시간이 경과했을 때, 스텝 S5로 진행하여, 차분치가 상당히 큰 값인가 여부를 판단한다. 구체적으로는, 차분치가 예를 들면 10dB 이상인가 여부를 판단한다. 스텝 S5에서 차분치가 상당히 큰 값인 때에는 스텝 S6으로 진행하여, 제1 마스크시간 설정을 행한다. 구체적으로는, 스텝 S4에 있어서의 마스크 설정시간을 비교적 길게 예를 들면 500msec로 설정한다.

그리고, 스텝 S9로 진행하여, 음원의 발생이 난수에 의해 선택되도록 설정되어 있는가 여부를 판단한다. 구체적으로는, 유저가 랜덤선택키(9)를 눌렀을 때 음원의 발생이 난수에 의해 선택되도록 설정되어 있다고 판단하여, 음원선택기(15)에 CPU(6)로부터 난수에 의해 음원이 선택되는 컨트롤신호가 공급되고, 이 난수에 의 해 음원을 선택하는 컨트롤신호에 의거하여 음원발생기(16)는 난수에 따라 음원을 발생시킨다. 이 난수는 예를 들면, CPU(6)의 러닝타이머를 사용한다. CPU(6)는 랜덤선택키(9)가 눌려졌을 때의 이 러닝타이머의 타이머시간 T를 29로 나눈 나머지 값에 따라 할당된 음원을 선택시키도록 컨트롤신호를 생성한다.

스텝 S9에서 음원의 발생이 난수에 의해 선택되도록 설정되어 있을 때는, 스텝 S10으로 진행하여, 난수에 따라 음원의 발생을 하도록 설정한다. 구체적으로는, CPU(6)는 음원을 선택시키는 컨트롤신호를 음원선택기(15)에 공급하고, 이 난수에 의해 음원을 선택하는 컨트롤신호에 따라 음원발생기(16)는 난수에 따라 음원을 발생시킨다.

스텝 S9에서 음원의 발생이 난수에 의해 선택되도록 설정되어 있지 않을 때, 및 스텝 S10에서 난수에 따라 음원의 발생을 하도록 설정되었을 때는, 스텝 S11로 진행한다. 그리고, 스텝 S11에서 타악기음을 낸다.

구체적으로는, 각 샘플링마다 음원발생기(16)로부터 발생되는 난수에 따라 발생된 음원을 음성합성기(20)는 재생오디오신호에 중첩한다. 이로써, 스피커(23)로부터 재생된 음악에 맞춰 예를 들면 타악기음이 중첩되어 출력된다.

또, 스텝 S5에서 차분치가 상당히 큰 값이 아닌 때는 스텝 S7로 진행하여, 차분치가 약간 큰 값인가 여부를 판단한다. 구체적으로는, 차분치가 예를 들면 6dB 이상인가 여부를 판단한다. 스텝 S7에서 차분치가 약간 큰 값인 때는 스텝 S8로 진행하여, 제2 마스크시간 설정을 행한다. 구체적으로는, 스텝 S4에 있어서의 마스크 설정시간을 비교적 짧게 예를 들면 250msec로 설정한다. 그리고, 스텝 S9로 진행하 여, 전술과 동일한 스텝 S9∼스텝 S11의 판단 및 처리를 행한다.

스텝 S7에서 차분치가 약간 큰 값이 아닌 때, 및 스텝 S11에서 타악기음을 낸 후에는, 스텝 S12로 진행하여 현재의 A/D치를 스토어 한다. 구체적으로는, 스토어된 디지털의 엔벨로프치를 다음 번 샘플링 시의 차분에 사용하도록 처리하여 종료한다.

이와 같이 하여, 유저가 오디오신호를 재생하여 음악을 들을 때, 구해진 차분치로부터 음악의 템포를 계측하고, 음악의 템포에 맞춰 예를 들면, 엔벨로프치의 상승 시 등을 트리거로 하고, 음원발생수단에서 발생되는 음원을 전환하도록 하여, 재생되는 음악에 맞춰 자동적으로 음을 중첩시킬 수 있으므로, 유저에 대하여 귀에 익은 음악을 다른 음악으로 바꾸도록 하여 재생할 수 있다. 또, 재생된 음악의 리듬에 맞춰 음을 중첩하므로, 어느 음악이라도 리듬을 강조할 수 있어, 댄스뮤직과 같이 하여 재생할 수 있다.

4. 본 발명의 제2 실시형태에 따른 처리절차의 설명.

제2 실시형태에 따른 상기 CPU(6)의 동작을 도 5의 흐름도를 참조하여 설명한다. 도 3과 도 5를 비교하면, 제1 실시형태인 도 3의 단계 S1, S2, S3, S4, S5, S7, S12는 제2 실시형태인 도 5의 단계 S21, S22, S23, S24, S25, S27, S30에 대응하기 때문에, 도 5의 상세한 설명은 생략한다.

스텝 S25에서 차분치가 상당히 큰 값인 때에는, 스텝 S26으로 진행하여, 제1 마스크 시간설정을 행한다. 구체적으로는, 스텝 S24에 있어서의 마스크 설정시간을 비교적 길게 예를 들면 500msec에 설정한다.

그리고, 스텝 S29로 진행하여, 표시부(14)에 표시되는 애니메이션의 그림을 1장 움직이게 한다. 구체적으로는, 각 샘플링마다 표시부(14)에 표시되는 애니메이션의 그림을, 차례로 예를 들면 170장 순번으로 보내도록 한다.

또, 스텝 S25에서 차분치가 상당히 큰 값이 아닌 때에는, 스텝 S27로 진행하여, 차분치가 약간 큰 값인가 여부를 판단한다. 구체적으로는, 차분치가 예를 들면 6dB 이상인가 여부를 판단한다. 스텝 S27에서 차분치가 약간 큰 값인 때에는 스텝 S28로 진행하여, 제2 마스크시간 설정을 행한다. 구체적으로는, 스텝 S24에 있어서의 마스크 설정시간을 비교적 짧게 예를 들면 250msec에 설정한다. 그리고, 스텝 S29로 진행하여, 표시부(14)에 표시되는 애니메이션의 그림을 1장 움직이게 한다.

스텝 S27에서 차분치가 약간 큰 값이 아닌 때, 및 스텝 S29의 그림을 1장 움직이게 한 후에는, 스텝 S30으로 진행하여 현재의 A/D치를 스토어 한다.

이와 같이 하여, 유저가 오디오신호를 재생하여 음악을 들을 때, 구해진 차분치로부터 음악의 템포를 계측하여, 음악의 템포를 맞추고, 예를 들면 엔벨로프치의 상승시 등을 트리거로 하고, 표시부(14)에 애니메이션의 그림을 차례로 움직이게 하여 표시할 수 있으므로, 유저에 대하여 시각적으로 음악의 약동감을 호소할 수 있다.

5. 본 발명의 제3 실시형태에 따른 처리절차의 설명.

본 발명의 제3 실시형태에 따른 상기 CPU(6)의 동작을 도 7을 참조하여 설명한다.

도 3과 도 7을 비교하면, 제1 실시형태인 도 3의 단계 S1, S2, S3, S4, S5, S12는 제3 실시형태인 도 7의 단계 S31, S32, S33, S34, S35, S38에 대응하기 때문에, 도 7의 상세한 설명은 생략한다.

스텝 S35에서 차분치가 전회보다 큰 값인 때에는, 스텝 S36으로 진행하여, 마스크 시간설정을 행한다. 구체적으로는, 100msec 의 마스크시간을 설정한다.

그리고, 스텝 S37로 진행하여, 전회와의 간격을 스토어 한다. 구체적으로는, 유저가 템포계측키(10)를 눌렀을 때, CPU(6)는 전회와 금회와의 음의 간격을 각 샘플링 시에 계측하여 메모리에 차례로 스토어 하여 집계한다. 이로써, CPU(6)는 음의 간격으로부터 음악의 템포를 계측하여, 유저가 리듬중첩키(11)를 눌렀을 때, 이 템포에 맞춰 리듬 제너레이터(18)로부터 리듬을 발생하는 컨트롤신호를 생성한다.

스텝 S37에서 전회와의 간격을 스토어 하면, 계측된 템포에 맞춰 리듬 제너레이터(18)는 리듬을 발생한다. 구체적으로는, 각 샘플링마다 리듬 제너레이터(18)로부터 재생음에 동기하여 발생되는 리듬을 음성합성기(20)는 재생오디오신호에 동기하여 중첩한다. 이로써, 스피커(23)로부터 재생된 음악에 맞춰 예를 들면 리듬박스선택기(17)로 선택된 드럼의 리듬이 중첩되어 출력된다.

스텝 S37에서 전회와의 간격을 스토어 했을 때, 및 스텝 S35에서 차분치가 전회보다 크지 않을 때에는, 스텝 S38로 진행하여, 현재의 A/D치를 스토어 한다. 구체적으로는, 스토어된 디지털의 엔벨로프치를 다음 번의 샘플링 시의 차분에 사용하도록 처리하여 종료한다.

이와 같이 하여, 유저가 오디오신호를 재생하여 음악을 들을 때, 구해진 차분치로부터 음악의 템포를 계측하여, 음악의 템포를 맞추고, 예를 들면 엔벨로프치 의 상승 시 등을 트리거로 하여, 리듬 제너레이터(18)에서 리듬이 발생되도록 하고, 재생되는 음악의 한 박자째에 맞춰 자동적으로 리듬을 중첩시킬 수 있으므로, 재생된 음악에 맞춰 리듬을 자동적으로 중첩함으로써, 어느 음악이라도 리듬을 강조할 수 있어, 댄스뮤직과 같이 하여 재생할 수 있다.

6. 본 발명의 제4 실시형태에 따른 처리절차의 설명.

본 발명의 제4 실시형태에 따른 상기 CPU(6)의 동작을 도 8을 참조하여 설명한다.

도 7과 도 8을 비교하면, 제3 실시형태인 도 7의 단계 S31, S32, S33, S34, S35, S38은 제4 실시형태인 도 8의 단계 S41, S42, S43, S44, S45, S48에 대응하기 때문에, 도 8의 상세한 설명은 생략한다.

스텝 S45에서 차분치가 전회보다 큰 값인 때에는 스텝 S46으로 진행하여, 마스크시간 설정을 행한다. 구체적으로는, 100msec의 마스크시간을 설정한다.

그리고, 스텝 S47로 진행하여, 전회와의 간격을 스토어 한다. 구체적으로는, 유저가 템포계측키(10)를 눌렀을 때 CPU(6)는 전회와 금회와의 음의 간격을 각 샘플링 시에 계측하여 메모리에 차례로 스토어 하여 집계한다. 이로써, CPU(6)는 음의 간격으로부터 음악의 템포를 계측하여, 유저가 도시하지 않은 음장설정키를 눌렀을 때, CPU(6)는 음의 간격으로부터 음악의 순회성을 검출하고, 이 템포 및 순회성으로부터 음악의 종류를 판별하여, 음악의 종류에 맞춰 음원용 DSP(19)에 있어서의 음장의 부가를 제어하는 컨트롤신호를 생성한다.

스텝 S47에서 전회와의 간격을 스토어 하면, 계측된 템포 및 순회성에 따른 음악의 종류에 맞춰 음원용 DSP(19)에 있어서의 음장의 부가를 제어한다. 구체적으로는, 각 샘플링마다 CPU(6)는 음의 간격으로부터 음악의 템포 및 순회성을 검출하고, 이 템포 및 순회성으로부터 음악의 종류를 판별한다. 그리고, CPU(6)는 음악의 종류에 맞춰 음원용 DSP(19)에 있어서의 음장의 부가를 제어하는 컨트롤신호를 음원용 DSP(19)에 공급한다.

본 실시형태에서는, 음원용 DSP(19)는 그래픽 이퀄라이저(GEQ: Graphic Equalizer)로 구성되고, 그래픽 이퀄라이저는 재생오디오신호의 가청주파수대역을 몇 개로 분할하고, 각 대역마다 독립하여 레벨을 조정하도록 컨트롤신호에 따라 프리셋치를 변화함으로써, 음악의 종류에 맞춰 음장의 부가를 행한다. 또, 본 실시형태에서는, 음원용 DSP(19)는 서라운드에 의해 레벨을 조정하도록 컨트롤신호에 따라 프리셋치를 변화함으로써, 음장 효과를 부가해도 되고, 또 컨트롤신호에 따라 필터의 프리셋치를 변화함으로써, 음향 효과가 좋은 유명한 콘서트홀이나 극장의 음장 효과를 부가하도록 해도 된다.

스텝 S47에서 전회와의 간격을 스토어 했을 때, 및 스텝 S45에서 차분치가 전회보다 크지 않을 때에는 스텝 S48로 진행하여, 현재의 A/D치를 스토어 한다. 구체적으로는 스토어된 디지털의 엔벨로프치를 다음 번의 샘플링 시의 차분에 사용하도록 처리하여 종료한다.

이와 같이 하여, 유저가 오디오신호를 재생하여 음악을 들을 때, 구해진 차분치로부터 음악의 템포 및 순회성을 계측하고, 템포 및 순회성으로부터 음악의 종류를 인식하여 음악에 맞추고, 예를 들면 엔벨로프치의 상승시 등을 트리거로 하 고, 음악용 DSP(19)에 있어서 재생음의 음장이 제어되도록 하여, 재생되는 음악의 한 박자째에 맞춰 자동적으로 음장을 부가시킬 수 있으므로, 재생된 음악에 맞춰 음장을 부가함으로써, 어느 음악이라도 최적의 음장을 부가하여 재생할 수 있다.

7. 본 발명의 제3 및 제4 실시형태에 따른 리듬 동기절차.

다음에, CPU(6)의 템포 및 순회성 검출의 근본이 되는 리듬 동기의 동작을 도 9의 플로차트를 사용하여 설명한다.

도 9에서 개시하여, 스텝 S51에서 간격=초기치, 최대적합회수=0으로 둔다. 구체적으로는 음의 간격을 초기치인 100∼200msec, 음의 간격이 허용오차범위에 있는 회수의 최대를 나타내는 최대적합회수를 0으로 한다. 음은 16분 음부(音符)를 기준으로 하여 이를 정수배(整數倍)(×n)한 값 BPM(Beet Per Minute)을 구하고, 이 정수배가 몇 개 있는가를 구하도록 한다. 16분 음부에서는 BPM=100∼160에서 99% 적합하고, 이 때의 음의 간격은 100∼200msec이다.

스텝 S52에서 간격을 스토어 하는 간격버퍼의 수 i=0, 적합회수=0으로 둔다. 구체적으로는 음의 간격을 32개까지 스토어할 수 있는 간격버퍼의 값을 클리어하여, 적합회수를 리셋한다.

스텝 S53에서 간격버퍼 [i]의 값이 간격×n±오차 이내인가 여부를 판단한다. 구체적으로는, 음의 간격이 16분 음부의 정수배(×n)의 허용오차범위에 있는가 여부를 판단한다. 스텝 S53에서 간격버퍼 [i]의 값이 간격×n±오차 이내인 때에는, 스텝 S54로 진행하여 적합회수에 1을 가산한다. 구체적으로는 적합회수를 증가시킨다. 그리고, 스텝 S55로 진행하여 i+1로 한다. 구체적으로는 32개의 간격버퍼 의 수 [i]를 증가시킨다.

스텝 S56에서 i＜버퍼수(數)인가 여부를 판단한다. 스텝 S56에서 i＜버퍼수인 때에는 스텝 S57로 진행하고, 스텝 S56에서 i＜버퍼수가 아닌 때에는 스텝 S53으로 되돌아간다. 구체적으로는, 예를 들면 간격버퍼의 수 i가 32까지, 스텝 S53∼스텝 S56까지의 판단 및 처리를 반복한다. 스텝 S56에서 i＜버퍼수인 때에는 스텝 S57로 진행하여, 적합회수는 과거 최대인가 여부를 판단한다.

스텝 S57에서 적합회수가 과거 최대인 때에는, 스텝 S58에서 최대적합회수=적합회수, 최적간격=간격으로 한다. 구체적으로는, 음의 간격이 허용오차범위에 있는 회수의 최대를 나타내는 최대적합회수의 값에 적합회수의 값을 넣는다. 이 때 음은 16분 음부의 정배수(×n)한 값 BPM=100∼160에서 99% 적합하다. 이 때의 음의 간격은 100∼200msec이다.

스텝 S59에서 간격에 1을 가산한다. 구체적으로는, 간격을 1만큼 증가시키고 다음의 간격으로 이행한다. 스텝 S60에서 간격＜최대치인가 여부를 판단한다. 스텝 S60에서 간격＜최대치인 때에는 종료하고, 스텝 S60에서 간격＜최대치가 아닌 때에는 스텝 S52로 되돌아간다. 구체적으로는, 계측하는 간격의 수가 계측의 종료수(數)에 달할 때까지, 스텝 S52로부터 스텝 S60까지의 판단 및 처리를 반복하여, 계측의 종료수에 달하면 종료한다.

이와 같이 하여, 재생된 음의 간격을 계측함으로써, 템포 및 순회성을 계측하고, 이 템포 및 순회성에 따른 음악의 종류를 인식하여, 음악에 맞춰 재생음에 음장을 부가시킬 수 있다. 또한 계측된 템포에 맞는 리듬을 발생시켜 재생음에 중 첩시킬 수 있다.

8. 본 발명에 따른 리듬동기 동작의 설명.

다음에, 전술한 도 9의 플로차트에 의해 실행되는 리듬 동기(同期)의 동작에 대하여 도 10(A), 10(B)를 사용하여 설명한다.

먼저, 도 10(A)에 있어서, 재생음이 예측보다 빨리 온 경우의 리듬 동기에 대하여 설명한다. CPU(6)는 재생음 b의 예측 a를 행한다. 예측 a에는 허용오차(40)가 포함된다. 이 예측 a에 대하여 재생음 b에 시간적으로 빠른 어긋남(41)이 발생했을 때, 어긋남 발생(41)의 예측 a시점에서, CPU(6)는 어긋남을 인식하여 보정을 행하고, 어긋남 발생(41)의 예측 a시점에서 어긋남에 대응하여 시간적으로 빨리 보정된 적정한 리듬 d가 발생된다.

다음에, 도 10(B)에 있어서, 재생음이 예측보다 늦게 온 경우의 리듬 동기에 대하여 설명한다. CPU(6)는 재생음 b의 예측 a를 행한다. 예측 a에는 허용오차(42)가 포함된다. 이 예측 a에 대하여 재생음 b에 시간적으로 늦은 어긋남(43)이 발생했을 때, 어긋남 발생(43)의 예측 a시점에서는 리듬 d는 예측 a에 대응하여 먼저 발생하므로 재생음 b가 어긋나지만, 이 기간에서 CPU(6)는 어긋남을 인식하여 보정을 행하고, 어긋남 발생(43)의 예측 a시점에서 어긋남에 대응하여 시간적으로 늦게 보정된 적정한 리듬 d가 발생된다.

이와 같이 하여, 재생된 음의 간격이 어긋났다고 해도, 리듬 동기에 의해 어긋남을 보정하고, 이 보정된 템포에 맞는 리듬을 발생시켜, 리듬을 재생음에 동기하여 중첩시킬 수 있다.

9. 본 발명에 따른 순회패턴검출 동작의 설명.

다음에, 전술한 도 9의 플로차트에 의해 실행되는 순회패턴의 검출 동작에 대하여 도 11을 사용하여 설명한다.

먼저, 도 11에서, 전회(44)의 샘플링 시에 있어서 재생음의 간격을 사선으로 나타내도록 검출된다. 공백은 음이 없는 것을 나타낸다.

다음에, 도 11에서, 금회(45)의 샘플링 시에 있어서, 재생음의 간격을 사선으로 나타내도록 검출되지만, 금회(45)의 샘플링 시의 재생음의 간격을 어긋나게 하면서 전회(44)의 샘플링 시의 재생음의 간격과 비교해 가면, 전회(44)의 샘플링 시와 동일한 재생음 간격의 반복기준으로 되는 부분이 존재하는 것을 알 수 있다. 이 부분이 순회패턴(46)으로 되는 부분이다. 이 순회패턴(46)의 음의 수나 음의 연속 유무, 순회패턴(46)의 간격이나 길이 등으로부터, 재즈, 록, 라틴, 퓨젼, 클래식, 댄스음악, 발라드, 16비트(beat) 등의 음악 종류나 곡조를 판별할 수 있다.

이와 같이 하여, 음의 순회성뿐만 아니라, 템포와 맞춰 음악의 종류를 판별하고, 비트가 강한 음악이나 기준순회패턴이 빠르게 순회하는 음악에서는 격렬하게 음장을 제어할 수 있고, 반대로 흐름이 완만한 음악이나 기준순회패턴이 느리게 순회되는 음악에서는 부드럽게 음장을 제어할 수 있다.

상술한 바와 같이, 상기 제1 실시형태에 따라서, 재생된 음악의 엔벨로프치의 차분치로부터 음악의 특징(장르)을 인식할 수 있고, 인식된 음악에 따라 효과음을 중첩시켜, 음악의 변화를 중첩된 효과음의 리듬으로 표시할 수 있어, 음악의 약 동감을 유저에게 강하게 호소할 수 있다.

이로써, 점두(店頭)에서의 데몬스트레이션의 효과를 향상시킬 수 있다. 또, 하드웨어의 구성은 종래대로이고, 소프트웨어의 개량으로 실현할 수 있으므로, 코스트업이 없다고 하는 이점이 있다. 이와 같이 하여, 본 실시형태의 재생장치의 부가가치를 향상시킬 수 있다.

또, 본 실시형태의 재생장치는 전술한 바와 같이, 차분치로부터 특정의 템포를 검출하고, 특정 템포에 따라 음원발생수단에서 발생되는 음원을 전환하도록 했으므로, 비트가 강한 음악에서는 격렬한 효과음을 중첩할 수 있고, 반대로 흐름이 완만한 음악에서는 부드러운 효과음을 중첩할 수 있다.

또, 본 제1 실시형태의 재생장치는 전술한 바와 같이, 음원발생수단에서 발생되는 음원은 동일 음색으로 저음과 고음을 가지도록 했으므로, 동일 음색으로 저음과 고음에 의해 폭 넓은 효과음을 중첩시킬 수 있다.

또, 본 제1 실시형태의 재생장치는 전술한 바와 같이, 차분치가 소정치보다 큰가 작은가에 따라 전회와 금회와의 사이에 마스크 설정시간을 설정했으므로, 차분치가 클 때 마스크 설정시간을 비교적 길게 설정함으로써, 마치 스톱모션과 같은 임팩트가 큰 다이내믹한 효과음의 중첩을 할 수 있고, 반대로 차분치가 작을 때 마스크 설정시간을 비교적 짧게 설정함으로써, 온화하고 순조로운 효과음의 중첩을 할 수 있다.

또, 본 제2 실시형태의 재생장치는 전술한 바와 같이, 음원발생수단에서 발생되는 음원의 음색을 난수를 사용하여 랜덤으로 선택하도록 했으므로, 특정의 음 색을 중첩했을 때와 비교하여 예측성이 없는 효과음의 중첩을 할 수 있다.

제2 실시형태에 있어서, 엔벨로프치의 차분치로부터 음악의 특징을 인식할 수 있고, 인식된 음악에 따라 그림을 움직이게 함으로써 음악의 변화를 애니메이션으로 표시할 수 있어, 음악의 약동감을 유저에게 강하게 호소할 수 있다.

이로써, 점두(店頭)에서의 데몬스트레이션의 효과를 향상시킬 수 있다. 또, 하드웨어의 구성은 종래대로이고, 소프트웨어의 개량으로 실현할 수 있으므로, 코스트 업이 없다고 하는 이점이 있다. 이와 같이 하여, 본 실시형태의 표시장치에 적용되는 재생장치의 부가가치를 향상시킬 수 있다.

또, 본 제2 실시형태의 표시장치는 전술한 바와 같이, 차분치로부터 특정의 템포를 검출하고, 특정의 템포에 따라 표시수단으로서의 표시부(14)에서 표시되는 패턴을 전환하도록 했으므로, 비트가 강한 음악에서는 격렬한 움직임의 애니메이션을 표시할 수 있고, 반대로 흐름이 완만한 음악에서는 부드러운 움직임의 애니메이션을 표시할 수 있다.

또, 본 제2 실시형태의 표시장치는 전술한 바와 같이, 표시수단으로서의 표시부(14)에서 표시되는 패턴은 소정 주기로 반복하여 표시되도록 했으므로, 음악에 연속해서 나타나는 템포의 주기에 의해 표시되는 애니메이션의 패턴을 반복함으로써 음악의 특징을 애니메이션의 반복으로 표시할 수 있다.

또, 본 제2 실시형태의 표시장치는 전술한 바와 같이, 차분치가 소정치보다 큰가 작은가에 따라 전회와 금회와의 사이에 마스크 설정시간을 설정하므로, 차분치가 큰 때 마스크 설정시간을 비교적 길게 설정함으로써, 마치 스톱모션과 같은 임팩트가 큰 다이내믹한 애니메이션의 움직임을 나타낼 수 있고, 반대로 차분치가 작은 때 마스크 설정시간을 비교적 짧게 설정함으로써, 온화하고 순조로운 애니메이션의 움직임을 나타낼 수 있다.

또, 본 제2 실시형태의 표시장치는 전술한 바와 같이, 표시수단으로서의 표시부(14)에서 패턴을 표시시키는 경우와 음역에 따라 스펙트럼을 표시시키는 경우를 선택할 수 있도록 했으므로, 애니메이션 표시뿐만 아니라 선택적으로 종래의 스펙트럼 애널라이저 표시도 할 수 있다.

또한, 제3 실시형태에 있어서, 엔벨로프치의 차분치로부터 음악의 특징(장르)을 인식할 수 있고, 인식된 음악에 따라 리듬을 중첩시켜, 음악의 변화가 중첩된 리듬으로 나타낼 수 있어, 음악의 약동감을 유저에게 강하게 호소할 수 있다.

이로써, 점두(店頭)에서의 데몬스트레이션의 효과를 향상시킬 수 있다. 또, 하드웨어의 구성은 종래대로이고, 소프트웨어의 개량으로 실현할 수 있으므로, 코스트 업이 없다고 하는 이점이 있다. 이와 같이 하여, 본 실시형태의 재생장치의 부가가치를 향상시킬 수 있다.

또, 본 제3 실시형태의 재생장치는 전술한 바와 같이, 템포측정수단으로서의 CPU(6)는 차분치로부터 전회와 금회와의 간격을 구하고, 간격에 따라 템포를 측정하도록 했으므로, 기준간격의 정배수의 음의 간격을 집계하고, 이로부터 템포를 측정할 수 있으며, 이로써 동일 종류의 템포를 구할 수 있다.

또, 본 제3 실시형태의 재생장치는 전술한 바와 같이, 간격에 따라 측정된 템포에서 리듬음원 발생수단으로서의 리듬 제너레이터(18)로부터 리듬패턴을 발생 하므로, 비트가 강한 음악에서는 격렬한 리듬을 중첩할 수 있고, 반대로 흐름이 완만한 음악에서는 부드러운 리듬을 중첩할 수 있다.

또, 본 제3 실시형태의 재생장치는 전술한 바와 같이, 차분치가 소정치보다 클 때 전회와 본회와의 사이에 마스크 설정시간을 설정하므로, 차분치가 클 때 마스크 설정시간을 설정함으로써, 마치 스톱모션과 같이 임팩트가 큰 다이내믹한 리듬의 중첩을 할 수 있고, 반대로 차분치가 작은 때 마스크 설정시간을 설정하지 않음으로써, 온화하고 순조로운 리듬의 중첩을 할 수 있다.

또, 본 제3 실시형태의 재생장치는 전술한 바와 같이, 리듬음원 발생수단으로서의 리듬 제너레이터(18)에 있어서의 리듬패턴 발생의 템포에 대한 시간적 어긋남을 보정하도록 했으므로, 재생된 음의 간격이 어긋났다고 해도, 리듬 동기에 의해 어긋남을 보정하고, 이 보정된 템포에 맞는 리듬을 발생시키고, 리듬을 재생음에 동기하여 중첩시킬 수 있다.

본 발명의 제4 실시형태에 있어서, 엔벨로프치의 차분치로부터 음악의 특징을 인식할 수 있고, 인식된 음악에 따라 음악의 음장을 제어하여, 음악의 변화를 음장의 제어로 나타낼 수 있어, 음악의 약동감을 유저에게 강하게 호소할 수 있다.

또, 본 제4 실시형태의 재생장치는 전술한 바와 같이, 템포측정수단으로서의 CPU(6)는 차분치로부터 전회와 금회와의 간격을 구하고, 간격에 따라 템포를 측정하도록 했으므로, 기준간격의 정수배의 음의 간격을 집계하고, 이것으로부터 템포를 측정할 수 있고, 이에 따라 동일 종류의 템포를 구함으로써 재생되는 음악의 음장을 제어할 수 있다.

또, 본 제4 실시형태의 재생장치는 전술한 바와 같이, 순회성 검출수단으로서의 CPU(6)는 차분치로부터 전회와 금회와의 간격을 구하고, 간격에 따라 순회성을 검출하도록 했으므로, 기준으로 되는 순회패턴을 검출하고, 이 기준순회패턴과 동일 패턴을 검출함으로써 음악의 순회성을 구할 수 있어, 검출된 순회성의 상이(相異)로부터 재생되는 음악의 음장을 제어할 수 있다.

또, 본 제4 실시형태의 재생장치는 전술한 바와 같이, 템포측정수단으로서의 CPU(6)로부터의 템포정보 및 순회성 검출수단으로서의 CPU(6)로부터의 순회성 정보에 따라 오디오신호의 음악 종류를 판별하는 음악판별수단으로서의 CPU(6)를 설치하고, 음악판별수단에 의해 판별된 음악의 종류에 따라 음장제어수단으로서의 음원용 DSP(19)에 있어서의 오디오신호에 대한 음장의 제어를 바꾸도록 했으므로, 비트가 강한 음악이나 기준순회패턴이 빠르게 순회하는 음악에서는 격렬하게 음장을 제어할 수 있고, 반대로 흐름이 완만한 음악이나 기준순회패턴이 느리게 순회되는 음악에서는 부드럽게 음장을 제어할 수 있다.

또, 본 제4 실시형태의 재생장치는 전술한 바와 같이, 음장제어수단으로서의 음원용 DSP(19)는 그래픽 이퀄라이저이고, 음악판별수단에 의해 판별된 음악의 종류에 따라, 그래픽 이퀄라이저에 있어서의 오디오신호에 대한 음장의 제어를 행하 도록 했으므로, 음악의 종류나 곡조에 따라 그래픽 이퀄라이저에 의해 주파수 특성을 가변으로 하고 각종 패턴을 사용하여 음악의 음장을 제어할 수 있다. 또, 음장제어수단은 서라운드에 의해 음장 효과를 부가해도 되고, 또 음향 효과가 좋은 유명한 콘서트홀이나 극장의 음장 효과를 부가하도록 해도 된다.

본 발명은 제1 내지 제4 실시형태의 모든 구성을 포함하는 재생장치 또는 이러한 구성의 다양한 조합을 갖는 재생장치를 제공할 수 있다.

도면을 참조하여 본 발명의 바람직한 실시형태에 대하여 설명하였지만, 본 발명은 이러한 실시형태에 한정되지 않으며, 첨부된 청구항에 정의되는 본 발명의 사상 또는 범위를 일탈하지 않고 당해 분야 통상을 지식을 가진 자이면 변경 내지 개량이 가능하다.

Claims

입력되는 오디오신호를 복수의 대역(帶域)으로 분할하는 대역분할수단과,

상기 대역분할수단에 의해 분할된 각 대역에 있어서의 엔벨로프치를 검파하는 엔벨로프검파수단과,

상기 엔벨로프검파수단에 의해 검파한 엔벨로프치를 각 대역마다 유지하는 제1 기억수단과,

상기 제1 기억수단에 기억되어 있는 엔벨로프치를 시계열적(時系列的)으로 시프트하여 유지하는 제2 기억수단과,

상기 제2 기억수단에 유지되고 있는 시계열적으로 시프트되는 전회의 엔벨로프치와 상기 제1 기억수단에 유지되고 있는 금회의 엔벨로프치의 차분치(差分値)를 연산하는 연산수단과,

복수의 효과음을 발생하는 음원(音源)발생수단과,

상기 연산수단에 의해 연산된 차분치에 따라 상기 음원발생수단으로부터 발생하는 음원을 전환하는 음원발생제어수단과

를 구비하여 이루어지는 것을 특징으로 하는 재생장치.
제1항에 있어서, 상기 재생장치는 상기 연산수단으로부터의 차분치에 따라 특정 템포를 측정하는 템포측정수단을 더 포함하며, 상기 음원발생제어수단은 상기 템포측정수단에 의하여 측정된 특정 템포에 따라 상기 음원발생수단으로부터 발생 된 음원을 전환하도록 하는 것을 특징으로 하는 재생장치.
제1항에 있어서, 상기 음원발생제어수단은 상기 차분치가 소정치보다 큰가 여부를 비교하는 비교수단과 상기 차분치가 소정치보다 크다는 것이 상기 비교수단에 의하여 판정되면 제1 마스크시간을 설정하고, 상기 차분치가 소정치보다 작다는 것이 상기 비교수단에 의하여 판정되면 상기 제1 마스크시간보다 짧은 제2 마스크시간을 설정하는 마스크시간 설정수단을 포함하고, 상기 마스크시간 설정수단에 의하여 설정된 마스크주기(period)는 상기 음원을 전환하지 않도록 제어되는 것을 특징으로 하는 재생장치.
제1항에 있어서, 상기 음원발생수단에 있어서 발생되는 음원의 음색을 난수(亂數)를 사용하여 랜덤으로 선택하도록 한 것을 특징으로 하는 재생장치.
입력되는 오디오신호를 복수의 대역으로 분할하는 대역분할수단과,

상기 대역분할수단에 의해 분할된 각 대역에 있어서의 엔벨로프치를 검파하는 엔벨로프검파수단과,

상기 엔벨로프검파수단으로 검파한 엔벨로프치를 각 대역마다 유지하는 제1 기억수단과,

상기 제1 기억수단에 기억되어 있는 엔벨로프치를 시계열적으로 시프트하여 유지하는 제2 기억수단과,

상기 제2 기억수단에 유지되고 있는 시계열적으로 시프트되는 전회의 엔벨로프치와 상기 제1 기억수단에 유지되고 있는 금회의 엔벨로프치의 차분치를 연산하는 연산수단과,

복수의 표시패턴을 기억하고 있는 화상메모리와,

상기 화상메모리로부터 독출된 표시패턴을 표시하는 표시수단과,

상기 연산수단에 의해 연산된 차분치에 따라 상기 화상메모리로부터 발생되는 표시패턴을 변화시키는 화상메모리 제어수단과

를 구비하여 이루어지는 것을 특징으로 하는 표시장치.
제5항에 있어서, 상기 재생장치는 상기 연산수단으로부터의 차분치에 따라 특정 템포를 측정하는 템포측정수단을 더 포함하며, 상기 화상메모리제어수단은 상기 템포측정수단에 의하여 측정된 특정 템포에 따라 상기 화상메모리로부터 발생된 표시패턴을 전환하도록 하는 것을 특징으로 하는 재생장치.
제5항에 있어서, 상기 화상메모리제어수단은 상기 차분치가 소정치보다 큰가 여부를 비교하는 비교수단과 상기 차분치가 소정치보다 크다는 것이 상기 비교수단에 의하여 판정되면 제1 마스크시간을 설정하고, 상기 차분치가 소정치보다 작다는 것이 상기 비교수단에 의하여 판정되면 상기 제1 마스크시간보다 짧은 제2 마스크시간을 설정하는 마스크시간 설정수단을 포함하고, 상기 마스크시간 설정수단에 의하여 설정된 마스크주기는 표시패턴을 전환하지 않도록 제어되는 것을 특징으로 하 는 재생장치.
제5항에 있어서, 상기 연산수단으로부터의 차분치에 따라 상기 표시수단에 패턴을 표시시키는 제1 표시모드와 음역에 따라 스펙트럼을 표시시키는 제2 표시모드를 전환하는 모드전환수단(mode switching mean)을 더 포함하는 것을 특징으로 하는 재생장치.
입력되는 오디오신호를 복수의 대역으로 분할하는 대역분할수단과,

상기 대역분할수단에 의해 분할된 각 대역에 있어서의 엔벨로프치를 검파하는 엔벨로프검파수단과,

상기 엔벨로프검파수단으로 검파한 엔벨로프치를 각 대역마다 유지하는 제1 기억수단과,

상기 제1 기억수단에 기억되어 있는 엔벨로프치를 시계열적으로 시프트하여 유지하는 제2 기억수단과,

상기 제2 기억수단에 유지되고 있는 시계열적으로 시프트되는 전회의 엔벨로프치와 상기 제1 기억수단에 유지되고 있는 금회의 엔벨로프치의 차분치를 연산하는 연산수단과,

상기 연산수단으로부터의 차분치에 따라 입력된 오디오신호의 템포를 측정하는 템포측정수단과,

복수 종류의 리듬패턴을 발생하는 리듬음원 발생수단과,

상기 입력된 오디오신호와 상기 리듬음원 발생수단으로부터 발생된 리듬패턴을 중첩하는 중첩수단과,

상기 템포측정수단으로부터의 템포정보에 따라 상기 리듬음원 발생수단으로부터 발생되는 리듬음원을 상기 입력된 오디오신호에 동기시키는 리듬음원발생 제어수단과

를 구비하여 이루어지는 것을 특징으로 하는 재생장치.
제9항에 있어서, 상기 템포측정수단은 상기 차분치로부터 전회와 금회와의 간격을 구하고, 상기 간격에 따라 상기 템포를 측정하도록 한 것을 특징으로 하는 재생장치.
제10항에 있어서, 상기 재생장치는 상기 연산수단으로부터의 차분치가 소정치보다 큰가 여부를 비교하는 비교수단를 더 포함하며, 상기 비교수단에 의하여 상기 차분치가 상기 소정치보다 크다는 것이 판정되면, 마스크시간이 설정되고 상기 금회 차분치와 전회 차분치의 간격이 기억되는 것을 특징으로 하는 재생장치.
제9항에 있어서, 상기 리듬음원발생제어수단은 상기 템포측정수단에 의하여 측정된 템포에 따라 리듬패턴발생의 타이밍을 보정하는 것을 특징으로 하는 재생장치.
입력되는 오디오신호를 복수의 대역으로 분할하는 대역분할수단과,

상기 대역분할수단에 의해 분할된 각 대역에 있어서의 엔벨로프치를 검파하는 엔벨로프검파수단과,

상기 엔벨로프검파수단으로 검파한 엔벨로프치를 각 대역마다 유지하는 제1 기억수단과,

상기 제1 기억수단에 기억되어 있는 엔벨로프치를 시계열적으로 시프트하여 유지하는 제2 기억수단과,

상기 제2 기억수단에 유지되고 있는 시계열적으로 시프트되는 전회의 엔벨로프치와 상기 제1 기억수단에 유지되고 있는 금회의 엔벨로프치의 차분치를 연산하는 연산수단과,

상기 연산수단으로부터의 차분치에 따라 입력된 오디오신호의 템포를 측정하는 템포측정수단과,

상기 연산수단으로부터의 차분치에 따라 입력된 오디오신호의 순회성(巡回性)을 검출하는 순회성 검출수단과,

상기 템포측정수단으로부터의 템포정보 및 상기 순회성 검출수단으로부터의 순회성 정보에 따라 상기 오디오신호의 음악의 종류를 판별하는 음악판별수단과

를 구비하여 이루어지는 것을 특징으로 하는 재생장치.
제13항에 있어서, 상기 재생장치는 음장(sound field)을 설정하는 음장설정수단과 상기 음악판별수단에 의해 판별된 음악의 종류에 따라 상기 음장설정수단에 의하여 설정된 음장을 전환하는 음장제어수단(sound field setting control mean)을 더 포함하는 것을 특징으로 하는 재생장치.
제13항에 있어서, 상기 템포측정수단은 상기 차분치로부터 전회와 금회와의 간격을 구하고, 상기 간격에 따라 상기 템포를 측정하도록 한 것을 특징으로 하는 재생장치.
제13항에 있어서, 상기 순회성 검출수단은 상기 차분치로부터 전회와 금회와의 간격을 구하고, 상기 간격에 따라 순회성을 검출하도록 한 것을 특징으로 하는 재생장치.
제13항에 있어서, 상기 재생장치는 상기 연산수단으로부터의 차분치가 소정치보다 큰가 여부를 비교하는 비교수단를 더 포함하며, 상기 비교수단에 의하여 상기 차분치가 상기 소정치보다 크다는 것이 판정되면, 마스크시간이 설정되고 금회 차분치와 전회 차분치의 간격이 기억되는 것을 특징으로 하는 재생장치.
제14항에 있어서, 상기 음장설정수단은 상기 음악판별수단에 의하여 판별된 음악에 따라 그래픽 이퀄라이저의 특성을 변경하는 것을 특징으로 하는 재생장치.