KR0149251B1 - 악기음 발생 방법 및 시스템과 악기음 발생 제어 시스템 - Google Patents

악기음 발생 방법 및 시스템과 악기음 발생 제어 시스템 Download PDF

Info

Publication number
KR0149251B1
KR0149251B1 KR1019950018362A KR19950018362A KR0149251B1 KR 0149251 B1 KR0149251 B1 KR 0149251B1 KR 1019950018362 A KR1019950018362 A KR 1019950018362A KR 19950018362 A KR19950018362 A KR 19950018362A KR 0149251 B1 KR0149251 B1 KR 0149251B1
Authority
KR
South Korea
Prior art keywords
digital
instrument
audio
instruments
digital audio
Prior art date
Application number
KR1019950018362A
Other languages
English (en)
Other versions
KR960003278A (ko
Inventor
윌리엄 파레트 피터
조셉 무어 다니엘
Original Assignee
윌리암 티. 엘리스
인터내셔널 비지네스 머신즈 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 윌리암 티. 엘리스, 인터내셔널 비지네스 머신즈 코포레이션 filed Critical 윌리암 티. 엘리스
Publication of KR960003278A publication Critical patent/KR960003278A/ko
Application granted granted Critical
Publication of KR0149251B1 publication Critical patent/KR0149251B1/ko

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/02—Means for controlling the tone frequencies, e.g. attack or decay; Means for producing special musical effects, e.g. vibratos or glissandos
    • G10H1/06—Circuits for establishing the harmonic content of tones, or other arrangements for changing the tone colour
    • G10H1/08—Circuits for establishing the harmonic content of tones, or other arrangements for changing the tone colour by combining tones
    • G10H1/10—Circuits for establishing the harmonic content of tones, or other arrangements for changing the tone colour by combining tones for obtaining chorus, celeste or ensemble effects
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H7/00—Instruments in which the tones are synthesised from a data store, e.g. computer organs
    • G10H7/02—Instruments in which the tones are synthesised from a data store, e.g. computer organs in which amplitudes at successive sample points of a tone waveform are stored in one or more memories
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/155—Musical effects
    • G10H2210/245—Ensemble, i.e. adding one or more voices, also instrumental voices
    • G10H2210/251—Chorus, i.e. automatic generation of two or more extra voices added to the melody, e.g. by a chorus effect processor or multiple voice harmonizer, to produce a chorus or unison effect, wherein individual sounds from multiple sources with roughly the same timbre converge and are perceived as one

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

단일의 선택된 악기의 디지털 오디오 샘플로부터 다수의 선택된 악기의 음을 만들어 내는 기법이 개시된다. 단일의 선택된 악기의 디지털 오디오 샘플은 메모리에 저장된다. 다음으로, 다수의 선택된 악기의 수에 해당하는 디지털 프로세서에 병렬로 디지털 오디오 샘플의 복사본이 미세조작된다. 각각의 디지털 프로세서는 디지털 오디오 샘플을 조금씩 다른 시변 방식으로 처리하여 다수의 악기의 효과를 나타낸다. 처리된 디지털 오디오 샘플은 하나의 디지털 샘플로 합산된다. 합산된 디지털 오디오 샘플은 아날로그 신호로 변환되어 스피커에 보내져 다수의 선택된 악기의 음으로 발생된다.

Description

악기 음 발생 방법, 시스템 및 악기음 발생 제어 시스템
제1도는 본 발명의 원리에 의한 샘플링 오디오 신시사이저 과정을 도시한 도면.
제2도는 기록된 오디오 파형을 디지털 샘플 신호로 변환하는 과정을 도시한 도면.
제3도는 디지탈 처리 과정을 보다 상세히 도시한 도면.
제4도는 디지털 처리 과정에 의해 생성된 디지털 샘플 신호를 도시한 도면.
제5도는 본 발명을 구현한 멀티미디어 퍼스널 컴퓨터를 도시한 도면.
제6도는 본 발명이 제 5도에서의 퍼스널 컴퓨터와 함께 구현된 오디오 카드의 블록도.
제7도는 본 발명 과정을 제어하는 사용자 인터페이스를 도시한 도면.
제8도는 본 발명이 구현된 음악 신시사이저의 블록도.
* 도면의 주요부분에 대한 부호의 설명
10 : 오디오 샘플 저장 단계 11 : 오디오 샘플 선택 단계
15 : 오디오 샘플의 디지털 처리 단계 23 : 아날로그 오디오 증폭 단계
21 : 디지털 - 아날로그 변환 단계 25 : 오디오 신호 생성 단계
40 : 8 대의 바이올린 오디오 샘플값으로부터 얻어진 아날로그 파형
45 : 첫 번째 바이올린 샘플에 의해 저장된 데이터의 예
54 : 바이올린 샘플 세트 100 : 컴퓨터
111 : 시스템 유닛 124 : RAM
128 : 키보드 컨트롤러 133 : 오디오 컨트롤러
140 : I/O 컨트롤러 150 : 운영 체제
202 : 디지털 서브시스템 204 : 아날로그 서브시스템
212 : 디지털 신호 프로세서 213 : 아날로그/디지탈 코덱
220 : 양방향 버퍼 290 : 그래피칼 유저 인터페이스
310 : 원래의 입력 파형 데이터 320 : 출력 데이터 그래프
400 : 전용 신시사이저 402 : MDI 코덱
413 : 스테레오 오디오 믹서
본 발명은 일반적으로 오디오 샘플 신호(audio samples)의 디지털적인 처리(digital manipulation)에 관한 것으로, 특히 단일 악기의 디지털적인 샘플링된 오디오 기록(digitally sampled audio recording of a single instrument)을 처리하여 다수개의 그 악기의 음(sound of a plurality)을 만들어 내는 개선된 기법에 관한 것이다.
파형 샘플링 기술을 사용하는 MIDI 제어 신시사이저(MIDI-controlled music synthesizer)는 어쿠어스틱 악기 음(sound of accoustical music instruments)에 매우 근접하는 근사음을 만들어 낼 수 있는 능력을 가지고 있으므로 음악 및 멀티미디어 분야에서 광범위하게 사용되고 있다. MIDI 란 International MIDI Association 에 의해 제정된 Music Instrument Digital Interface 기준을 따르도록 음악을 인코딩하는 절차(music encoding processed)를 말한다. MIDI 데이터는 특정 조(specific musical note), 예로서, 중간 C(middle C)음조의 발생과 같은 음악사상(music events)을 나타낸다. 상기 특정 음조는 피아노, 호른 및 드럼 등의 특정음으로 실현된다. 신시사이저를 이러한 MIDI 데이터에 응답하도록 함으로써 아날로그 오디오를 구현할 수 있다.
현재 사용되고 있는 MIDI 신시사이저의 가장 큰 한계는 메모리의 한계로 인해 광범위한 어쿠스틱 악기 음의 전체 샘플을 저장할 수 없다는 점이다. 이같이 각종 음을 저장할 수 없다는 것은 신시사이저가 바이올린 1 대의 음에 대해 별도의 샘플 신호를 필요로 하며 바이올린의 4대의 음에 대해서 또 다른 샘플 신호를 필요로 하고 바이올린 12대 또는 그 이상의 음에 대해서도 마찬가지로 별도의 샘플 신호를 필요로 함을 의미한다. 각각의 샘플 신호는 매우 큰 양의 메모리를 필요로 하므로 시중에서 구입할 수 있는 대부분의 신시사이저는 다양하지 못하여 선택에 있어 제한적이다.
본 발명은 신시사이저 사용자로 하여금 한 악기의 샘플 신호만을 저장할 수 있도록 허용함으로써, 다수의 샘플을 저장하는데 필요한 부가적인 메모리의 사용을 회피하여 원하는 대수의 악기(예를 들면 20대의 바이올린)를 부가적인 메모리 없이도 사용할 수 있게 한다.
따라서, 본 발명의 목적은 샘플링 오디오 신시사이저의 저장요건(storage requirements)을 줄이는 데 있다.
본 발명의 또다른 목적은 특정한 한 악기의 샘플링된 신호로부터 어떠한 대수의 악기 소리를 만들어 내는 데 있다.
본 발명의 또다른 목적은 샘플링 오디오 신시사이저로부터 보다 관심있는 음(more interesting sound)을 만들어 내는 데 있다.
이들 및 기타 다른 목적은 단일의 선택된 악기의 디지털 오디오 샘플을 미세조작하여(micro manipulating)다수대의 상기 선택된 악기의 음을 생성하는 기법에 의해 달성된다. 단일의 선택된 악기의 디지털 오디오 샘플 신호는 메모리에 저장한다. 다음, 다수개의 악기에 대해서, 디지털 오디오 샘플 신호는 그 선택된 악기의 원하는 대수에 해당하는 디지털 프로세서들 의해 처리한다. 각각의 디지털 프로세서는 디지털 오디오 샘플 신호를 조금씩 다른 방식 즉, 시간에 따라 변하는 방식으로 처리하여 다수개의 악기가 동시에 연주되는 효과를 나타낸다. 마지막으로, 다수의 디지털 오디오 샘플 신호를 합쳐서 아날로그 신호로 변환하고, 오디오 증폭기와 스피커로 보내어 다수대의 상기 선택된 악기의 음을 만들어 낸다.
본 발명은 단일 악기에 해당하는 저장 용량만을 가지고 어떠한 대수의 악기의 음도 만들어 낸다.
단일 악기의 음은 그 악기 수대의 음과 다르다. 따라서, 종래의 오디오 샘플링 신시사이저에서 이와 같은 변이(variation)를 만들어 내기 위해서는 별개의 오디오 샘플들을 동시에 하나의 음악 신시사이저내에 포함시켜야 하므로 각각의 악기 세트에 대한 메모리 저장 요건이 증대된다. 본 발명은 하나의 악기에 해당하는 오디오 샘플 데이터를 저장하고 이것을 특별한 방법으로 조작하여 원하는 변이를 모사케 함으로써 저장 메모리 문제를 크게 감소시켰다.
제1도는 본 발명의 원리에 따른 오디오 신시사이저 프로세스를 나타낸다. 이 샘플링 오디오 합성 프로세스는 전용 음악 신시사이저에 의해 수행될 수도 있으며 또한 범용 컴퓨터에서 소프트웨어/하드웨어의 조합을 통해 구현될 수도 있다.
샘플링 음악 신시사이저에 포함되어 있는 오디오 샘플 신호는 어쿠스틱 악기의 음을 디지털적으로 나타낸 것이다. 오디오 샘플 신호는 악기에 따라 5내지 10 초 혹은 그 이상 계속 될 수 있으나 음악 신시사이저 내에는 그 샘플의 작은 부분만이 저장된다. 한 대 악기, 가령 바이올린의 오디오 샘플은 신시사이저 내에 저장되지만 다수대의 악기의 음, 가령 열두대의 바이올린의 음이 필요한 경우가 있다. 본 발명은 바이올린 1대의 오디오 샘플을 조작하여 열두대의 음을 모사하기 위한 것으로, 단일 바이올린 샘플의 다수개 복사본(multiple copies)을 조작하여, 예로서, 각각 다른 임의의 시변값(a different random time variant value)을 각각의 샘플 복사본의 진폭에 더하여 다수의 악기 연주자들간의 시간 기반 변이(time based variation)를 모사한다. 그리고 난 후, 조작된 다수의 오디오 샘플을 합하여 다수의 악기를 모사하는 단일의 오디오 신호를 생성한다. 이 합산된 오디오 신호는 아날로그 신호로 변환되고 증폭되어 12대 바이올린의 음을 생성한다. 본 예는 메모리에 저장된 단일 바이올린의 원음(original sound)으로부터 어떠한 대수의 바이올린의 음을 생성하거나 혹은 메모리에 저장된 다른 오디오 샘플등 중의 어떠한 것을 생성하는데에도 사용될 수 있다.
플루우트와 같은 다른 악기의 음은 메모리 내의 다른 샘플에 의해 생성될 수 있으며 사용되는 실제의 샘플은 합성중의 악기 음에 따라 변한다. 선택된 악기의 연주자들 간의 자연적인 변이를 모사하는 데에는 임의의 진폭 변이가 사용된다.
단계(10)에서 몇 개의 음악 샘플을 오디오 샘플 메모리에 저장함으로써 프로세스를 시작한다. 오디오 샘플 메모리는 음을 변경시킬 수 없는 판독 전용 메모리(ROM)이거나 음을 변경시킬 수 있는 랜덤 액세스 메모리(RAM)이다. IBM 사에 의해 제조된 AUDIOVATION(등록상표) 사운드 카드는 컴퓨터의 하드 디스크에 오디오 샘플 신호를 저장하므로 위에서 설명한 음의 변경이 가능한 타입에 해당한다. EMU 사에 의해 제조된 Proteus(등록 상표)시리즈와 같은 신시사이저는 4-16MB의 ROM에 오디오 샘플 신호를 저장하고 있으므로 음의 변경이 불가능한 타입에 해당한다.
다음 단계(11)에서 사용자나 애플리케이션은 이후의 프로세스를 수행하기 위해 오디오 샘플 신호중 하나를 선택한다. 도면에서, 오디오 샘플 신호 선택 입력(13)은 바이올린에 대한 것이다. 바이올린의 디지털 샘플은 디지털 처리 단계(15)로 전달되며 이 단계에서, 악기의 대수(17), 즉, 본 예의 경우 바이올린의 대수(12) 및 변이도(variation degree)(19)가 수신된다. 사용자의 취향 및 연주되는 음악의 스타일 등에 따라 모사된 12대 바이올린 간의 변이도를 조정한다. 디지털 처리 단계에서, 오디오 샘플은 원하는 악기의 대수에 해당하는 다수의 프로세서에 복사된다. 이들 각각의 프로세서는 각각의 샘플을 조금씩 다른 시변(time variant)방식을 사용하여 조작한다. 이와 같이 조작된 결과는 모두 합쳐져서 원하는 악기의 디지털 오디오 샘플을 형성한다. 제3도를 참조하면 디지털 처리 단계(15)를 아래에 보다 상세히 설명한다.
단계(21)에서 12대의 바이올린의 디지털 음 표현은 아날로그 오디오 신호로 변환되며, 단계(23)에서 아날로그 신호가 증폭된다. 마지막으로 단계(25)에서, 스피커 혹은 오디오 헤드폰에 부착된 증폭기를 통해 열두대 바이올린의 실제의 음이 발생하게 된다.
바람직한 실시예에서는, 오디오 샘플 저장 단계(10), 오디오 샘플 선택 단계(11) 및 디지털 처리 단계(15)가 컴퓨터 소프트 프로그램에 의해 수행된다. 이 경우 컴퓨터는 사운드 카드나 내장(built-in)사운드 소프트웨어를 장착한 독립형 범용 컴퓨터일 수도 있으며 전용 음악 신시사이저 내에 포함된 컴퓨터 칩일 수도 있다. 컴퓨터와 오디오 카드에 대하여 제5도 및 제6도를 참조하여 상세히 설명한다.
컴퓨터에 대한 샘플 사용자 인터페이스를 제 7도에 나타낸다. 디지털 - 아날로그 변환 단계(21)는 일반적으로 이것을 위해 할당된 하드웨어에 의해 실행된다. 이와 같은 하드웨어로서는 코덱(codec)을 들 수 있는데 코덱은 특정한 시간 간격에서 디지털 데이터 값에 해당하는 아날로그 전압값을 발생시킨다. 예를 들어, 44K 디지털 오디오 데이터가 매 1/44,000초마다 코덱에 주어지며 코덱의 아날로그 출력은 각각의 입력 디지탈 데이터 값을 나타낸다. 코덱은 컴퓨터로 들어오는 아날로그 신호를 디지털 신호로 바꾸는 데도 사용된다. 멀티미디어 기능을 가진 컴퓨터를 비롯한 모든 신시사이저는 아날로그 오디오 신호를 발생시키기 위해 디지털 - 아날로그 변환기를 갖는다. 적당한 디지털 - 아날로그 변화기의 예로서 Crystal Semiconductor 사의 코덱 칩인 CS 4231을 들 수 있다. 아날로그 오디오 증폭 단계(23)는 아날로그 증폭기에 의해 수행된다. 단계(25)에서는, 증폭된 신호를 스피커나 오디오 헤드폰에 연결함으로써 실제로 음을 발생시킨다. 증폭기와 스피커/헤드폰은 보통 별개의 하드웨어로 되어 있다. 신시사이저나 멀티미디어 컴퓨터의 본체 안에 이 들을 함께 둘 수도 있으나 일반적으로 이들은 통상 서로 구별되는 유니트이다.
본 발명의 주요한 장점 중의 하나는 음악 신시사이저의 가장 비싼 요소중의 하나인 오디오 샘플 메모리 내의 오디오 샘플의 개수를 제한하는 것이다. 본 발명의 또다른 장점은, 신시사이저를 통해 보다 관심있는 사운드를 발생시킬 수 있다는 점이다. 일반적으로, 신시사이저에서, 오디오 샘플에서 마지막 몇 개의 샘플은 계속적으로 반복되며 진폭 엔벨로프(amplitude envelope)와 결합하여 자연적인 음량 감소, 즉, 어쿠어스틱 악기 음의 감소를 모사케 한다. 따라서, 반복이 시작되는 음의 부분은 음량이 감소하는 부분에서의 계속적으로 반복되는 음과 같다. 동일한 오디오 샘플 세트가 사용되므로 이 음은 매우 규칙적이며 따라서 덜 자연스러운 느낌을 준다. 실제 어쿠어스틱 악기의 음은 전 시간에 걸쳐 미세한 면에서 조금씩 차이가 있으나 이와 같이 반복되는 특성을 나타내지는 않는다. 본 발명은 디지탈 프로세서에서 각각의 오디오 샘플의 진폭 엔벌로프 전체를 통해 시간에 따라 변화시키는 방식으로 변형시켜 보다 자연스러운 음을 제공한다.
오디오 디지탈 샘플링 프로세스는 마이크로폰에 의해 발생하여 저장 매체(recording medium)에 저장되는 오디오 파형을 특정 시간 간격으로 샘플링하여 행한다. 각 시점에서의 샘플의 크기는 메모리에 디지털적으로 저장된다. 컴퓨터 시스템에서, 샘플은 주어진 시점에서 측정된 아날로그 오디오 신호 진폭의 이진 표현을 나타낸다. 충분히 높은 주파수에서 아날로그 신호를 되풀이하여 측정함으로써, 이것을 메모리에 일련의 이진 표현으로 저장할 수 있으며, 이 일련의 이진 표현을 사용하여 주어진 시간 간격동안 메모리에 저장된 값을 가지는 아날로그 전압을 만들어 냄으로써 원래의 아날로그 신호를 충실히 재생시킬 수 있다.
오디오 데이터의 크기는 오디오 신호의 크고 작은 정도를 나타낸다. 소리가 크면 데이터의 크기도 크다. 오디오 데이터가 변하는 비율은 오디오 신호의 주파수를 나타낸다. 높은 주파수를 갖는 음은 한 데이터 샘플로부터 다른 데이터 샘플로의 크기 변화가 큰 것을 의미한다.
제2도에서는 바이올린 샘플 세트(43)가 일련의 16비트 데이터 값으로서 메모리에 저장되어 있다. 원하는 오디오 신호의 음질에 따라 8 비트, 12비트등의 다른 길이를 갖는 저장 단위도 가능하다. 우측의 박스(45)는 제 1의 8개 바이올린 샘플로 저장된 데이터의 예를 나타낸다. 샘플링 간격으로 박스(45)에 저장된 데이터 값들에 대응하는 아날로그 전압 레벨을 발생시킴으로써 아날로그 오디오 신호를 얻는다. 하단부의 그래프는 디지털 - 아날로그 변환 후 이들 제 1 의 8 개 바이올린 오디오 샘플값으로부터 얻어진 아날로그 파형(40)을 나타내는데, 이 그래프의 테이타 점(41)은 샘플 시간 #2에서의 박스(45)의 데이터 값의 예를 나타낸다.
아날로그 신호의 이진 표현은 각 샘플당 비트수로서 측정되는데, 비트수가 많아질수록 보다 정확하게 아날로그 신호를 표현할 수 있다. 예를 들어 8 비트의 샘플폭의 경우에는 아날로그 신호의 측정치가 28개로 나누어지고 아날로그 신호는 1로부터 최대 256 단위의 측정값을 가질 수 있다. 8 비트 샘플폭의 경우에는 식별 가능한 정도의 오차와 잡음이 발생하게 된다. 16 비트의 샘플폭의 경우에는 아날로그 측정치가 216개로 나누어져 오차가 64K에 대해 1미만이므로 훨씬 더 정확한 표현이다.
초당 샘플의 개수는 주파수를 결정하며 샘플수가 많아질수록 주파수가 증가된다. 주파수 상한(upper frequency limit)은 대략 샘플링 주파수의 1/2이다. 따라서, 초당 44K 샘플의 경우에는 주파수 상한이 가청 주파수 한계에 해당하는 약 20 KHz이다. 초당 22 K의 샘플링 주파수의 경우에는 10 KHz의 주파수 상한이 주어지고 이보다 높은 주파수는 소실되며 음이 불분명하게 된다. 결과적의 오디오 신호는, 샘플폭의 한계와 샘플 주파수의 한계가 주어지는 경우, 아날로그 신호의 동작을 좀더 충실히 따를 수 있게 되고 매우 정확하게 샘플링된 악기의 음을 재생할 수 있다. 그러나, 정확도가 높아질수록 많은 데이터 저장 영역을 필요로 한다. 즉, 초당 44K 샘플 및 16 비트로 저장되는 한 개의 바이올린의 샘플이 4초간 지속되는 경우 (4초)×(스테레오에 대한 2 오디오 채널)×(44,100샘플/초), 즉 약 700KB의 메모리 공간을 필요로 하게된다. 바이올린의 전체 피지 범위(entire pitch range)를 커버하기 위해서는 다섯 혹은 그 이상의 바이올린 샘플이 필요하므로 하나의 악기에 대해 3500 KB의 메모리가 요구된다. 네 대의 바이올린에 해당하는 샘플에 대한 메모리 영역은 새로운 3500 KB만큼을 필요로 하며 열 두 대의 바이올린에 해당하는 샘플에 대해서도 마찬가지이다. 오케스트라의 모든 악기에 대한 변이를 전부 커버하기 위해서는 상당히 큰 양의 저장 영역이 필요하다. 따라서 독자들은 현재의 오디오 신시사이저에서 저장 영역의 확보가 얼마나 큰 문제인지를 알았을 것이다.
본 발명은 단일 바이올린의 저장 영역만을 필요로 한다. 본 발명은 위에서 논의되었으며 또한 앞으로 설명하는 바와 같이 디지털 처리를 통해 단일 바이올린 샘플을 조작하여 다수의 바이올린 음을 모사(emulate)하게 된다.
본 발명의 또다른 장점으로서는, 정확한 수의 악기의 음이 재생된다는 것을 들 수 있다. 현재 상용중인 신시사이저는 한 대의 바이올린에 대한 샘플과 삼십대 바이올린에 대한 샘플을 별개로 제공할 수 있으나, 이들 사이 대수의 바이올린에 대한 샘플은 앞에서 언급한 메모리 한계로 인해 제공하지 못한다. 본 발명의 경우, 사용자는 어떠한 특정수의 악기, 이를테면 열대의 바이올린 악기에 해당하는 음을 선택할 수 있고 신시사이저는 적당한 음을 만들어 낼 수 있다. 본 발명에서는 최종 결과 음에서 변이를 만들어내기 위해 샘플에 작은 변이를 도입한다. 샘플링 기법을 사용하는 경우에는, 샘플 신호를 재생해도 실제의 음을 정확히 재생하지 못하는 경우가 있다. 즉, 재생된 음 자체는 악기의 음을 정확히 나타내지만 음이 재생될 때마다 변이가 불충분하여 음이 덜 흥미롭게 될 수도 있다.
만일 사용자가 단일 악기의 음을 원하는 경우에는 디지털 처리를 생략할 수 있다. 그럼에도 불구하고, 사용자는 본 발명의 부가적인 장점으로서 신호를 디지털적으로 처리하여 작은 변이를 도입함으로써 종래의 샘플링 기술보다 신호를 보다 흥비롭게 만들기를 원할 것이다.
오디오 샘플을 미세조작(micromanipulate)함으로써, 발명자는 원래의 오디오 샘플과 디지털 프로세서에 의해 생성된 조작된 오디오 샘플 간에 작은 변이를 부가시키려 한다. 미세조작은 두가지 다른 프로세서에 의해 생성된 샘플 세트들간의 차가 식별 가능한 정도로 충분해야 한다. 한편 조작은 조작된 샘플이 원래 샘플링된 악기의 음으로서 인식 될 수 없을 정도로 과도해서도 안된다. 발명의 이면에 내포된 사상은 동일한 여러 악기의 음을 만들어 내고자 하는 것으로, 새롭거나 다른 여러 악기의 음을 만들어내고자 하는 것은 아니다.
위에서 언급한 바와 같이, 난수 발생기(random number generator)가 본 발명에서 사용된다. 난수는 디지털 프로세서에 대한 시드(seed)로서 사용되는 것이 바람직하다. 변이도(degree of variation)가 큰 경우, 각 샘플에 대해 완전한 랜덤 프로세스를 수행하면 음감이 떨어져서 아름답지 못한 음이 만들어 질 수도 있다. 난수의 시드로부터, 프로세서는 미세조작을 시작할 조건을 결정할 수 있으며, 결과적인 오디오 샘플 및 이득 조정등은 선택된 엔벨로프 내에서 초기 시작 조건에 의해 결정된다.
제3 도는 디지털 처리 과정을 보다 자세히 나타낸다. 프로세스의 수 혹은 음조 발생기(tone generator)(50-53)는 사용자 혹은 애플리케이션에 의해 선택된 악기의 수에 따라 셋업되거나 호출된다. 바이올린 샘플의 세트(54)로부터 이에 대응하는 개수의 개개의 바이올린 샘플(55-58)이 프로세스(50-53)로 공급되며, 병렬로 개별 처리된다. 결과적으로 조작된 디지털 샘플 (60-63)이 디지털적으로 합해져(64) 이 시점에서 다수 바이올린의 음에 해당하는 복합 디지털 샘플(65)을 형성한다.
특정, 바이올린의 작은 진폭 혹은 피치의 변화를 모사(simulate)하기 위해서는 시 변이 (time variation)방법이 이용된다.난수 발생기를 사용하여 시드를 얻거나 허용된 앤벨로프 내에서 작은 무작위 변이(random variation)을 일으키기 위해 시변이를 변화시킬 수도 있다. 앤벌로프 차원은 입력 변이도에 기초한다. 디지털 처리는 이득, 음조, 시변이를 결정하는 요소들을 포함한다. 이 프로세스는 전 시간 영역에 걸쳐 계속적으로 반복되면서 다수의 바이올린의 복합음을 형성한다.
제3도에서, 사용자는 단일 바이올린의 샘플로부터 4대의 바이올린의 음을 발생시키기 위한 요건을 입력한다. 프로세스 #1-4는 시변이 이득 및 필터 함수를 사용하여 네 개의 샘플 각각을 조작한다. 입력 혹은 변이도 변수값은 이들 함수가 변하는 데이터 영역을 제어한다.
아래의 식에 나타낸 바와 같이, 각각의 프로세스는 샘플의 이득, 즉 샘플의 진폭 및 음조를 디지털 필터링을 통해 변경시킬 수 있다.
시간 t1에서
Vsum1= Sample1 G1(t1)F1(t1) + Sample11 G2(t1)F2(t1) + Sample18 G3(t1)F3(t1) + Sample22 G4(t1)F4(t1)
이 경우 Vsum1은 조작된 신호들이 합을 나타내며 Sample1, Sample11, Sample18 및 Sample22은 특정 순간에서의 오디오 샘플 세트로부터의 진폭들을 나타내고: G1(t1), G2(t1), G3(t1), G4(t1)은 각 프로세서에 대한 시변 이득 함수를 나타내며: F1(t1), F2(t1), F3(t1), F4(t1)은 시간 t1에서의 시변 필터 함수를 나타낸다.
시간 t1에서의이득 함수는 각각의 프로세서 내에서 G1 = 1.00, G2 = 0.95, G3 = 1.11, G4 = 0.93 이며, 따라서 이득이 1.0보다 큰 샘플 #18이 강조되고 이득이 1.0보다 작은 샘플 #11, #22는 강조되지 않게 된다. 시간 t2에서의 이득 함수는 G1 = 1.02, G2 = 0.92, G3 = 1.03, G4 = 0.99로 될 수 있는데, 이는 t = t1 의 경우와 비슷하지만 느린 변이를 나타낸다. 강조되거나 강조되지 않는 샘플들이 네 대의 바이올린이 동시에 연주될 때 처럼 시간에 따라 변하도록 이러한 미세조작은 계속된다. 비슷한 변이가 시간에 따른 필터링 함수에서도 이루어진다. 이 과정을 통해 결과적으로 네 악기의 상위 주파수 및 음고(pitch)를 변화시켜 동시에 연주되는 네 바이올린의 미세한 음조 변화를 모사하게 된다. 이러한 방법 이외에도 샘플을 처리하는 과정에서의 변화를 위해 다른 프로세스들을 포함시킬 수 있다. 네 대의 바이올린 연주자들은 똑같이 동시에 연주하지 않는다는 사실을 반영하기 위해 시간 변이를 포함시킬 수도 있다. 미세조작은 서로에 대해 시변적이어서, 프로세스들이 서로와의 록크 스텝(lock step)에서는 시간에 따라 진행하지 않게 된다. 바람직하지 않은 방법이지만 프로세스 중 하나는 초기의 오디오 샘플에 대해 아무런 변화가 없이 그대로 이용할 수도 있다.
변이도는 사용자에 의해 결정되지만, 변이의 분포(distribution of variance)는 디지털 처리 과정에 의해 결정된다. 하나의 예로서 평균(norm) 주위에 통계적인 벨(bell) 커브로서 변이도를 분포시키는 것을 들 수 있는데, 이 방법은 극히 소수의 연주자는 분포의 외측한계들에 접근하는 상태들에서 연주하며 대부분의 연주자는 공칭 상태(nominal condition)근처에서 연주한다는 사실을 잘 반영한다. 개개의 모사된 악기들간의 변이의 양은 악기 자체의 특징과 사용자의 취향에 의해 달라진다. 다수의 현(string)을 가진 악기의 음의 변이는 다수의 클라리넷의 음이 가지는 변이보다 큰 변이, 즉 보다 넓은 벨 커브를 나타낼 것인데, 이는 클라리넷의 음은 다른 악기에 비해 보다 선명한 특징을 지니고 있어 음조가 쉽게 흐트러지는 경향이 있기 때문이다. 여러 가지 형태의 변이 분포를 사용할 수 있으나 본 발명의 실시예에서는 벨커브 분포의 사용으로 한정하였는데, 이 분포의 3-시그마 통계학적 변이는 진폭에 있어서는 약 15%이며, 피치에 있어서는 30센트(cent)(1하프 스텝(half step)은 100센트)이며 시간에 있어서는 30 msec이다.
제4도는 1대의 바이올린의 샘플들에 의해 표현되는 오디오 파형으로부터 4대 바이올린의 음에 해당하는 오디오 파형을 추출해내는 조작과정을 나타낸다. 1 대 바이올린에 대한 원래의 오디오 파형(70)은 메모리에 저장된 샘플들로서 표현된다. 4 대의 바이올린에 해당하는 음을 얻기 위해 네 개의 프로세스(71-74)가 디지털 처리 과정에서 개시된다. 각각의 프로세스는 단일 바이올린 음을 나타내는 디지털 데이터를 변형시켜 도시하는 바와 같이 4 대의 변형된 오디오 파형(75-78)을 생성한다. 도면에서 나타낸 이들 4개의 변형된 오디오 파형은 네 개의 모사된 개별 바이올린의 개별(indivisual) 음을 나타낸다. 그리고 난후, 네 개의 변형된 오디오 파형에 대한 디지털 데이터는 합쳐져서(79) 4 대의 바이올린에 대한 오디오 파형(80)으로 나타낸 바와 같이 4 대 바이올린 그룹에 대한 디지털 데이터를 생성시킨다.
앞에서 언급한 바와 같이, 본 발명은 사운드 카드 혹은 사운드 회로 및 적당한 소프트웨어를 갖춘 범용 컴퓨터나 전용 오디오 신시사이저 상에서 실해 가능하다. 예를 들어, 일정 수준 이상의 사운드 카드를 장착한 IBM PS/2, RS 6000혹은 Power PC 계열의 컴퓨터를 사용할 수 있을 것이다.
제5도에 시스템 유닛(111), 키보드(112), 마우스(113) 및 디스플레이(114)를 포함한 컴퓨터(100)을 나타내었다. 시스템 유닛(111)은 다양한 구성 요소들이 결합된 시스템 버스 혹은 다수의 시스템 버스를 포함하며 이 버스를 통해 구성 요소와의 커뮤티케이션이 이루어진다. 마이크로프로세서(122)는 시스템 버스(121)에 연결되어 있으며, 시스템 버스에 또한 연결된 판독 전용 메모리(ROM)(123)와 랜덤 액세스 메모리(RAM)(124)에 의해 지원된다. IBM멀티미디어 PS/2 계열의 컴퓨터에서 사용되는 마이크로프로세서는 386, 486 혹은 펜티엄을 포함한 인텔 계열의 마이크로프로세서 중 하나이다. 그러나, 68000. 68020 혹은 68030등의 모토롤라 계열의 마이크로프로세서를 사용할 수도 있으며, IBM 사의 Power PC 또는 Power 2(칩 세트와 같은 RISC(Reduced instruction set computer)나 Hewlett packard, Sun, Intel, Motorola 등에서 생산된 다른 프로세서를 모두 사용할 수 있다.
ROM 123은 디스크 드라이브 및 키보드와의 상호 작용 등 기본적인 하드웨어 입출력 동작을 제어하는 BIOS(BASIC Input Output System)을 다른 코드와 함께 포함한다. RAM(24)는 운영 체제와 애플리케이션 프로그램이 로드되는 메인 메모리이다. 메모리 칩 (125)은 시스템버스(121)에 연결되어 있으며, RAM(24)과 하드디스크 드라이브(126) 및 플로피 디스크 드라이브(127) 간의 데이터 전달 등의 DMA(Direct Memory Access)동작을 제어한다. CD ROM(132)도 또한 시스템 버스(121)에 연결되어 있으며, 멀티미디어 프로그램 혹은 프리젠테이션(presentation)등의 대 용량 데이터를 저장하기 위해 사용된다.
시스템버스(121)에는 다양한 종류의 I/O 컨트롤러가 또한 연결되어 있는데, 이들은 키보드 컨트롤러(128), 마우스 컨트롤러(129), 비디오 컨트롤러(130) 및 오디오 컨트롤러(131)등이다. 키보드 컨트롤러(128)는 키보드를 위한 하드웨어 인터페이스를 제공하며, 마우스 컨트롤러(129)는 마우스(113)를 위한 하드웨어 인터페이스를 제공하고, 비디오 컨트롤러(130)는 디스플레이(114)를 위한 인터페이스를 제공하며, 프린터 컨트롤러(131)은 프린터(132)를 제어하기 위하여 사용된다. 오디오 컨트롤러(133)는 증폭기 및 오디오 신호를 사용자에게 전달하는 스피커를 위한 하드웨어 인터페이스이다. 토큰 링 어댑터(Token Ring Adapter)와 같은 I/O 컨트롤러(140)은 네트워크(146)를 통한 다른 유사 구성의 데이터 처리 시스템과의 커뮤니케이션이 가능하도록 한다.
본 발명을 사용하는 오디오 카드가 제6도와 함께 아래에 설명되어 있다. 다음에서 설명하는 오디오 카드는 단지 예시적으로 설명한 것이 지나지 않는다.
오디오 제어 카드(133)는 IBM 컴퓨터 혹은 이와 호환 기종의 컴퓨터에 기본적인 오디오 기능을 제공하는 오디오 서브시스템(subsystem)이다. 이 서브시스템은 다른 모든 기능중에서도, 사용자에게 오디오 신호를 기록하고 재생시킬수 있는 능력을 제공한다. 어댑터 카드는 DSP 서브 시스템(202)과 아날로그 서브시스템(204)의 두 부분으로 나눌 수 있다. DSP 서브 시스템(202)은 카드(200)의 디지털 섹션(208)을 구성한다. 구성 요소들의 나머지는 아날로그 세션(210)을 구성한다. 어댑터 카드(200)에는 디지털 신호 프로세서 (DSP)(212)와 아날로그의 디지털 간의 데이터 변환을 담당하는 아날로그 코딩/디코딩 코덱(CODEC)칩(213)이 장착되어 있다.
카드의 DSP 서브 시스템(202)은 호스트 컴퓨터와의 모든 커뮤니케이션을 전담한다. 모든 버스 접속은 DSP(212)내부에서 처리된다. DSP(212)는 로컬 RAM(214)와 로컬ROM(215)을 저장 공간으로서 사용하며 클럭원으로서 두 개의 발진기(216,218)를 사용한다. DSP(212)는 또한 외부 버퍼 세트(220)를 사용하여, 호스트 컴퓨터 버스의 구동에 충분한 전류를 공급한다. 양방향 버퍼(220)는 호스트 컴퓨터 버스와의 커뮤니케이션에 사용된 신호를 재구동시킨다. DSP(202)는 시리얼 커뮤니케이션 링크(224)를 경유하여 코덱(213)을 제어한다. 링크(224)는 Serial Data, Serial Clock, CODEC Clock 및 FRAME Synchronization Clock의 네 라인으로 구성되어 있다. 이들은 카드의 아날로크 섹션(204)으로 들어가는 디지털 신호들이다.
아날로그 서브시스템(204)은 코덱(214)과 전치 증폭기(226)로 구성되어 있다. 코덱(213)은 DSP(212)와의 커뮤니케이션을 통해 호스트컴퓨터와 데이터를 주고 받기 위한 모든 아날로그-디지탈(A/D) 및 디지털-아날로그(D/A) 변환을 처리한다. DSP(212)는 데이터를 호스트로 넘겨 주기 전에 이를 변경시킬 수도 있다. 아날로그 신호는 라인 입력(228)과 마이크로폰 입력(230) 잭을 통하여 외부 세계로부터 들어온다. 이 신호는 한 개의 연산 증폭기(OP AMP)로 이루어진 전치 증폭기(226)로 공급된다. 증폭기(226)는 입력 신호가 코덱(213)에 전달되기 전에 입력 신호 레벨을 조절한다. 미래에는 오디오 카드에서 보인 구성 요소중 많은 부분이 멀티미디어 컴퓨터의 마더 보드 상에 위치하게 된다. 제5도 및 제6도에서 각각 나타낸 컴퓨터와 오디오 카드에 의해 수행된 프로세스는 이외에도 여러 가지 방법으로 구현할 수 있다. 오디오 샘플의 저장 및 미세조작 처리는 메인 컴퓨터에서 소프트웨어로서도 구현이 가능하다. 오디오 샘플(154)과 디지탈 처리 프로그램(156)은 하드디스크의 영구 기록 매체나 플로피 디스크 드라이브(127)내에 위치된 제거 가능한 플로피 디스크에 저장되어 RAM(124)으로 읽혀진다. 프로세서(123)는 디지털 처리 프로그램의 명령어들을 수행하여 복수의 악기에 대한 새로운 디지털 샘플을 만들어낸다. 샘플은 오디오 카드(133)로 보내어지며 이곳에서 아날로그 신호로 변환되고 이 변환된 신호는 증폭기와 스피커(135)로 보내어져서 사용자의 귀에 도달하는 실제 음을 만들어 내게 된다. 사용자는 그래피칼 유저 인터페이스를 사용하여 디지털 처리 프로그램(156)과 직접 상호작용해서 악기의 종류, 변이도 및 악기의 개수를 선택한다. 또다른 방법으로, 사용자는 필요한 파라미터로 디지털 처리 프로그램(156)을 실제 호출하는 오디오 프로그램(158)의 사용자 인터페이스와 상호작용할 수도 있다.
또다른 방법으로, 오디오 카드(133)상의 DSP(212)에 의해 디지털 처리가 이루어질 수도 있다. 이 실시예에서는 컴퓨터의 영구 기록 매체로부터 DSP(212)나 로컬 RAM(214)으로 디지털 처리 프로그램이 로드된다. 오디오 샘플은 컴퓨터의 영구 기록 매체나 로컬 ROM(215)에 저장될 수 있다. 디지털 처리는 DSP(212)에 의해 수행되며 DSP(212)는 디지털 샘플을 코덱(213)으로 보내어 아날로그 신호로 처리할 수있게 한다. 디지털 처리 프로그램의 일 부분은 디지털 서비스를 요구하는 그래피칼 유저 인터페이스나 오디오 애플리케이션에 대한 인터페이스를 제공하기 위해 컴퓨터에서 여전히 필요로 한다.
본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 범용 컴퓨터를 사용하는 범위내에서 이와 다른 형태의 구성이 가능하다는 것을 깨닫았을 것이다.
제7도는 참조하여 그래피칼 유저 인터페이스(GUI)(290)를 다음과 같이 기술한다. GUI 실행바(location bar)(295)는 각각 파일 I/O(300), 오디오 정보(302), MIDI 정보(303)의 세가지 서브 섹션으로 구분된다. 파일 I/O 옵션(300)을 선택할 경우, (305)영역이 파형 데이터의 표시에 할당된다., 풀다운 메뉴 상의 다양한 옵션을 통해 각각 다른 파형을 나타낼 수 있다. 예를 들어, 풀다운 메뉴상의 입력 욥션(311)을 선택한 경우 입력 파형 데이터(310) 즉, 원래의 변형되지 않은 오디오 데이터가 화면에 나타나게 된다. 입력 파형 그래프(310)는 스펙트럼도의 도해적 화면 표시로서 파형 데이터를 나타낸다. 데이터 변경이 있는 후, 풀다운 메뉴상의 출력 옵션의 선택시 스펙트럼도의 도해적 화면 표시가 출력 데이터 그래프(320)에서 이용가능하다. 이 오디오 데이터는 미세조작된 샘플 데이터를 나타낸다. 파일 I/O 풀다운 메뉴에 악기 선택 옵션을 추가시킬 수도 있다.
사용자는 오디오(301)와 MIDI(303) 섹션을 선택함으로써 오디오 샘플의 변경을 요구할 수도 있다. 오디오 정보는 제어 박스(330)를 통해 선택되며, 제어 박스(330)은 특정한 값에 설정된 다이얼 따위의 몇 개의 제어 단자(331-333)를 포함한다. 다이얼은 변이도, 가변 샘플링 주파수(Fs) 및 엔벨로프 진폭에 대한 스케일링 계수등을 조정 할수 있다. MIDI옵션(303)을 선택하는 경우에는, MIDI 제어 단자(340,350)이 팝업(pop up)되며 이들은 다시 음량치, MIDI 포트 및 악기 선택 등 다른 제어단자를 포함한다. 사용자가 오디오 및 MIDI 단자 박스(340, 350)를 조정하면서 실험한 바에 따르면, 오디오 파형 데이터(320)의 도해적 화면표시가 원래의 오디오 입력 샘플(310)에 대해 동적으로 변한다. 본 발명의 프로세스를 제어하기 위해 다른 여러 GUI가 사용 가능하다. 예를 들어, 악기의 타입, 악기의 수 및 변이도에 대한 입력 필드를 포함하는 단순한 형태의 다이얼로그 박스도 사용 가능하다.
제8도에서는 다수 악기의 화음을 모사하는 오디오 전용 신시사이저(400)를 나타내었다. MIDI데이터는 MIDI-IN 커넥터(401)를 통해 신시사이저로 들어가며 MIDI 디코드 회로(402)에 의해 디코드된다. MIDI 데이터는 크게 MIDI 제어 데이터(420)와 MIDI음조 데이터(403)로 구성된다. MIDI 제어 블록(404)은 MIDI 제어 데이터(402)에 의해 신시사이저 음성 블록(406)의 각각에 대한 메모리(405)로부터 샘플링된 파형을 선택한다. 본 예에서는, 음성 #1블럭은 바이올린 샘플 음성 #2 블록은 플루트 샘플, 또한, 기타 블록은 다른 블록을 가져오게 된다.
설명의 간단화를 위해 먼저 바이올린 샘플에 대한 처리만을 살펴보며 다른 음성에 대해서도 마찬가지로 생각할수 있을 것이다. MIDI 음조 데이터 403으로부터 MIDI음조 데이터 블록(407)은 MIDI 음조 명령의 키 번호로부터 음조의 기본 주파수(fundamental frequency)를 결정하며, MIDI 음조 명령의 속도(velocity)로부터 음량을 결정한다. 이 데이터는 파형 변경(Modify Waveform) 블록(408)에 의해 변형된 음성 블록(406)으로부터의 샘플 파형과 결합된다. 본 예에서의 결과(409)는 이것의 주파수와 음량이 MIDI 노트 데이터에 의해 결정되며 시작 및 종료 시간이 대응 MIDI 음조-온(NOTE-ON) 명령과 음조 오프(NOTE-OFF) 명령에 의해 결정되는 바이올린 샘플이다.
변형된 바이올린 샘플(409)은 마이크로 파형 제어 블록(Micro Waveform Control)블럭(410)에 의해 변형되며, 마이크로 파형 제어 블록은 제3도를 참조하여 설명한 디지털 처리 과정에 의해 다수의 바이올린의 음을 생성한다. 결과로서 얻어진 오디오 샘플들은 MIDI 제어 블록(411)의 제어하에 Create Stereo Sample 블록(412)에 의해 분리된 스테레오 신호로서 좌측 채널 샘플과 우측 채널 샘플로 변환된다.
파형 음성 블록(416)으로부터의 다른 음성에 대해서도 음성 #1 바이올린에 대해 위해서 설명한 방법과 마찬가지로 처리된다. 모든 음성 스테레오 샘플들은 스테레오 오디오 믹서(413)에 의해 합쳐져서 하나의 스테레오 오디오 샘플 세트(416)로 된다. 이 샘플들은 코덱 디지털-아날로그 변환 회로(414)에 의해 스테레오 아날로그 신호(415)로 변환되어 외부 오디오 증폭기나 스피커(도면에 나타내지 않음)로 보내어져서 소리로 변환된다.
다음의 의사(pseudo) 코드는 본 발명에 의한 MIDI 조작을 위한 알고리듬 기법의 일부로서 한가지 가능한 실시 예를 나타낸다.
Ai (n) = Ari (n) ; 이 경우 Ai (n)은 시변 진폭 컨트롤러이며, i는 샘플값을 나타내고 r은 랜덤 팩터를 나타내며 Fs는 샘플링 주파수를 나타낸다. (파형 진폭 범위의 디지털 저장 공간은 +/-32767 유닛이며 파형 진폭을 포함하는 룩업 테이블이 사용되는 것으로 가정한다.).
본 발명의 특정한 실시예를 도시하고 설명하였으나, 본 발명이 속하는 기술 분야에서 통상의 지식을 가지는 자라면 본 발명의 사상 및 범주를 벗어나지 않는 범위내에서 형태 및 세부 사항의 상기 및 기타 변경이 가능함을 알수 있을 것이다.

Claims (13)

  1. 다수의 선택된 악기의 음(a sound of a plurality of a selected instrument)을 단일의 상기 선택된 악기의 디지털 오디오 샘플(a digitized audio sample)로부터 발생하는 방법에 있어서; 상기 단일의 상기 선택된 악기의 상기 디지털 오디오 샘플을 메모리에 저장하는 단계와; 상기 다수의 상기 선택된 악기에 숫적으로(in number) 대응하는 다수의 디지털 프로세서(a plurality of digital processors)에서 병렬로(in pararrel) 상기 디지털 오디오 샘플의 복사본(copies of the digitized audio sample)을 미세조작(micromanipulating)하는 단계로서, 상기 디지털 프로세서의 각각은 상기디지탈 오디오 샘플을 약간 상이한 시변 방식(a slightly different time variant manner)으로 처리하는 것인, 상기 미세조작 단계와; 상기 처리된 디지털 오디오 샘플들을 합산하는 단계와; 상기 합산된 디지털 오디오 샘플을 아날로그 신호로 변환하여 스피커(a speaker)로 전송하므로써 상기 다수의 상기 선택된 악기의 상기 음을 생성하는 단계를 포함하는 악기 음 발생 방법.
  2. 제1항에 있어서, 상기 다수의 상기 선택된 악기의 수를 선택하는 것(a selection of the number of the plurality of the selected instrument)에 응답하여 상기 다수의 디지털 프로세서를 호출하는 단계를 더 포함하는 악기 음 발생 방법.
  3. 제1항에 있어서, 변이도 파라미터(a degree of variation parameter)에 응답하여 상기 다수의 디지털 프로세서의 처리를 변경하는 단계를 더 포함하는 악기 음 발생 방법.
  4. 제1항에 있어서, 각각의 디지털 프로세서에 있어서의 미세조작이 적어도 부분적으로 난수 발생기(a random number generator)에 의해 수행되는 악기 음 발생 방법.
  5. 다수의 선택된 악기의 음을 단일 상기 선택된 악기의 디지털 오디오 샘플로부터 발생하는 시스템에 있어서; 상기 단일의 상기 선택된 악기의 상기 디지털 오디오 샘플을 메모리에 저장하는 메모리와; 상기 다수의 상기 선택된 악기에 숫적으로 대응하는 다수의 디지털 프로세서에서 병렬로 상기 디지털 오디오 샘플의 복사본을 미세조작하는 단계로서, 상기 디지털 프로세서의 각각은 상기 디지탈 오디오 샘플을 약간 상이한 시변 방식으로 처리하는 것인, 디지털 프로세서와; 상기 처리된 디지털 오디오 샘플들을 합산하는 수단과; 상기 합산된 디지털 오디오 샘플을 아날로그 신호로 변환하여 스피커로 전송하므로써 상기 다수의 상기 선택된 악기의 상기 음을 생성하는 디지털-아날로그 변화기를 포함하는 악기 음 발생 시스템.
  6. 제5항에 있어서, 상기 다수의 상기 선택된 악기의 수를 선택하는 것에 응답하여 상기 다수의 디지털 프로세서를 호출하는 수단을 더 포함하는 악기 음 발생 시스템.
  7. 제5항에 있어서, 변이도 파라미터에 응답하여 상기 다수의 디지털 프로세서의 미세조작을 변경하는 수단을 더 포함하는 악기 음 발생 시스템.
  8. 제5항에 있어서, 각각의 디지털 프로세서에 있어서의 미세조작을 적어도 부분적으로 수행하는 난수 발생기를 더 포함하는 악기 음 발생 시스템.
  9. 제5항에 있어서, 상기 메모리에 연결되어 상기 시스템 내의 구성 요서(components) 사이에서 데이터(data) 및 인스트럭션(instruction)을 전달하는 시스템 버스(a system bus)와; 상기 시스템 버스에 연결되어 상기 시스템의 제어를 위한 사용자 인터페이스(a user interface)를 제공해서, 사용자가 상기 다수의 상기 선택된 악기의 수 및 변이도 파라미터를 입력할수 있게 하는 디스플레이를 더 포함하는 악기 음 발생 시스템.
  10. 제5항에 있어서, 상기 디지털-아날로그 변환기가 위치한 오디오 카드(an auido card)를 더 포함하는 악기 음 발생 시스템.
  11. 제7항에 있어서, 미세조작의 한계가 되는 앤벨로프(an envolope)가 변이도 파라미터에 의해 선택되는 악기 음 발생 시스템.
  12. 제11항에 있어서, 상기 앤벨로프는 또한 상기 선택된 악기에 따라 선택되는 악기 음 발생 시스템.
  13. 선택된 악기의 디지털 오디오 샘플로부터 다수의 상기 선택된 악기의 음 발생을 제어하는 시스템에 있어서, 메모리로부터 상기 디지털 오디오 샘플을 선택하는 수단과; 상기 다수의 상기 선택된 악기의 수를 선택하는 수단과; 상기 다수의 상기 선택된 악기의 수에 따라 이 수에 대응하는 상기 디지털 오디오 샘플의 복사본을 병렬로 미세조작하는 수단과; 상기 미세조작된 디지털 오디오 샘플의 복사본을 상기 다수의 상기 선택된 악기의 아날로그 신호로 변환하는 수단과; 상기 다수의 상기 선택된 악기의 음을 발생하는 스피커를 포함하는 악기 음 발생 제어 시스템.
KR1019950018362A 1994-06-30 1995-06-29 악기음 발생 방법 및 시스템과 악기음 발생 제어 시스템 KR0149251B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US08/269,870 US5541354A (en) 1994-06-30 1994-06-30 Micromanipulation of waveforms in a sampling music synthesizer
US08/269,870 1994-06-30
US8/269,870 1994-06-30

Publications (2)

Publication Number Publication Date
KR960003278A KR960003278A (ko) 1996-01-26
KR0149251B1 true KR0149251B1 (ko) 1998-12-15

Family

ID=23028994

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019950018362A KR0149251B1 (ko) 1994-06-30 1995-06-29 악기음 발생 방법 및 시스템과 악기음 발생 제어 시스템

Country Status (6)

Country Link
US (1) US5541354A (ko)
EP (1) EP0690434B1 (ko)
JP (1) JPH0816169A (ko)
KR (1) KR0149251B1 (ko)
CN (1) CN1091916C (ko)
DE (1) DE69515742T2 (ko)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6362409B1 (en) 1998-12-02 2002-03-26 Imms, Inc. Customizable software-based digital wavetable synthesizer
US5768126A (en) * 1995-05-19 1998-06-16 Xerox Corporation Kernel-based digital audio mixer
GB2306043A (en) * 1995-10-03 1997-04-23 Ibm Audio synthesizer
AU3407497A (en) * 1996-06-24 1998-01-14 Van Koevering Company Musical instrument system
CN1084904C (zh) * 1997-07-11 2002-05-15 刘兆容 音频斜率临界值取样录放音方法及装置
US6556560B1 (en) * 1997-12-04 2003-04-29 At&T Corp. Low-latency audio interface for packet telephony
GB2335781A (en) * 1998-03-24 1999-09-29 Soho Soundhouse Limited Method of selection of audio samples
US6093880A (en) * 1998-05-26 2000-07-25 Oz Interactive, Inc. System for prioritizing audio for a virtual environment
US6945784B2 (en) * 2000-03-22 2005-09-20 Namco Holding Corporation Generating a musical part from an electronic music file
US7213048B1 (en) * 2000-04-05 2007-05-01 Microsoft Corporation Context aware computing devices and methods
US6944679B2 (en) * 2000-12-22 2005-09-13 Microsoft Corp. Context-aware systems and methods, location-aware systems and methods, context-aware vehicles and methods of operating the same, and location-aware vehicles and methods of operating the same
US7072908B2 (en) * 2001-03-26 2006-07-04 Microsoft Corporation Methods and systems for synchronizing visualizations with audio streams
WO2002077585A1 (en) * 2001-03-26 2002-10-03 Sonic Network, Inc. System and method for music creation and rearrangement
US7010290B2 (en) * 2001-08-17 2006-03-07 Ericsson, Inc. System and method of determining short range distance between RF equipped devices
AU2002350211A1 (en) * 2001-11-21 2003-06-10 Line 6, Inc. Multimedia presentation that assists a user in the playing of a musical instrument
DE10157454B4 (de) * 2001-11-23 2005-07-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Verfahren und Vorrichtung zum Erzeugen einer Kennung für ein Audiosignal, Verfahren und Vorrichtung zum Aufbauen einer Instrumentendatenbank und Verfahren und Vorrichtung zum Bestimmen der Art eines Instruments
US7279631B2 (en) * 2002-07-16 2007-10-09 Line 6, Inc. Stringed instrument with embedded DSP modeling for modeling acoustic stringed instruments
US6787690B1 (en) * 2002-07-16 2004-09-07 Line 6 Stringed instrument with embedded DSP modeling
US7799986B2 (en) 2002-07-16 2010-09-21 Line 6, Inc. Stringed instrument for connection to a computer to implement DSP modeling
US6806413B1 (en) 2002-07-31 2004-10-19 Young Chang Akki Co., Ltd. Oscillator providing waveform having dynamically continuously variable waveshape
US6946595B2 (en) * 2002-08-08 2005-09-20 Yamaha Corporation Performance data processing and tone signal synthesizing methods and apparatus
US7110940B2 (en) * 2002-10-30 2006-09-19 Microsoft Corporation Recursive multistage audio processing
DE102004028866B4 (de) * 2004-06-15 2015-12-24 Nxp B.V. Einrichtung und Verfahren für ein Mobilgerät, insbesondere für ein Mobiltelefon, zur Geräuschsignalerzeugung
US7470849B2 (en) * 2005-10-04 2008-12-30 Via Telecom Co., Ltd. Waveform generation for FM synthesis
DE102006035188B4 (de) * 2006-07-29 2009-12-17 Christoph Kemper Musikinstrument mit Schallwandler
US7663051B2 (en) * 2007-03-22 2010-02-16 Qualcomm Incorporated Audio processing hardware elements
US7678986B2 (en) * 2007-03-22 2010-03-16 Qualcomm Incorporated Musical instrument digital interface hardware instructions
TW201543351A (zh) * 2014-04-24 2015-11-16 Hon Hai Prec Ind Co Ltd 音效處理系統
US10635384B2 (en) * 2015-09-24 2020-04-28 Casio Computer Co., Ltd. Electronic device, musical sound control method, and storage medium
US10303423B1 (en) * 2015-09-25 2019-05-28 Second Sound, LLC Synchronous sampling of analog signals
US10957297B2 (en) * 2017-07-25 2021-03-23 Louis Yoelin Self-produced music apparatus and method

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3809786A (en) * 1972-02-14 1974-05-07 Deutsch Res Lab Computor organ
US3913442A (en) * 1974-05-16 1975-10-21 Nippon Musical Instruments Mfg Voicing for a computor organ
JPS52121313A (en) * 1976-04-06 1977-10-12 Nippon Gakki Seizo Kk Electronic musical instrument
US4373416A (en) * 1976-12-29 1983-02-15 Nippon Gakki Seizo Kabushiki Kaisha Wave generator for electronic musical instrument
US4194427A (en) * 1978-03-27 1980-03-25 Kawai Musical Instrument Mfg. Co. Ltd. Generation of noise-like tones in an electronic musical instrument
US4205580A (en) * 1978-06-22 1980-06-03 Kawai Musical Instrument Mfg. Co. Ltd. Ensemble effect in an electronic musical instrument
US4280388A (en) * 1979-05-29 1981-07-28 White J Paul Apparatus and method for generating chorus and celeste tones
US4369336A (en) * 1979-11-26 1983-01-18 Eventide Clockworks, Inc. Method and apparatus for producing two complementary pitch signals without glitch
US4440058A (en) * 1982-04-19 1984-04-03 Kimball International, Inc. Digital tone generation system with slot weighting of fixed width window functions
US4649783A (en) * 1983-02-02 1987-03-17 The Board Of Trustees Of The Leland Stanford Junior University Wavetable-modification instrument and method for generating musical sound
US4763257A (en) * 1983-11-15 1988-08-09 Manfred Clynes Computerized system for imparting an expressive microstructure to successive notes in a musical score
US4999773A (en) * 1983-11-15 1991-03-12 Manfred Clynes Technique for contouring amplitude of musical notes based on their relationship to the succeeding note
JPS60254097A (ja) * 1984-05-30 1985-12-14 カシオ計算機株式会社 歪波形発生装置
US4622877A (en) * 1985-06-11 1986-11-18 The Board Of Trustees Of The Leland Stanford Junior University Independently controlled wavetable-modification instrument and method for generating musical sound
JP2778645B2 (ja) * 1987-10-07 1998-07-23 カシオ計算機株式会社 電子弦楽器
US5027689A (en) * 1988-09-02 1991-07-02 Yamaha Corporation Musical tone generating apparatus
JPH02173698A (ja) * 1988-12-26 1990-07-05 Yamaha Corp 電子楽器
US5033352A (en) * 1989-01-19 1991-07-23 Yamaha Corporation Electronic musical instrument with frequency modulation
JPH04119394A (ja) * 1990-09-10 1992-04-20 Matsushita Electric Ind Co Ltd 電子楽器効果装置
JPH04119395A (ja) * 1990-09-10 1992-04-20 Matsushita Electric Ind Co Ltd 電子楽器効果装置
JPH04251898A (ja) * 1991-01-29 1992-09-08 Matsushita Electric Ind Co Ltd 消音装置
US5262586A (en) * 1991-02-21 1993-11-16 Yamaha Corporation Sound controller incorporated in acoustic musical instrument for controlling qualities of sound
US5451924A (en) * 1993-01-14 1995-09-19 Massachusetts Institute Of Technology Apparatus for providing sensory substitution of force feedback

Also Published As

Publication number Publication date
EP0690434B1 (en) 2000-03-22
JPH0816169A (ja) 1996-01-19
DE69515742D1 (de) 2000-04-27
US5541354A (en) 1996-07-30
DE69515742T2 (de) 2000-09-28
EP0690434A3 (en) 1996-02-28
KR960003278A (ko) 1996-01-26
CN1127400A (zh) 1996-07-24
EP0690434A2 (en) 1996-01-03
CN1091916C (zh) 2002-10-02

Similar Documents

Publication Publication Date Title
KR0149251B1 (ko) 악기음 발생 방법 및 시스템과 악기음 발생 제어 시스템
US6191349B1 (en) Musical instrument digital interface with speech capability
US5890115A (en) Speech synthesizer utilizing wavetable synthesis
JP3161561B2 (ja) マルチメディア・システム
Rothstein MIDI: A comprehensive introduction
US5915237A (en) Representing speech using MIDI
US5834670A (en) Karaoke apparatus, speech reproducing apparatus, and recorded medium used therefor
US6525256B2 (en) Method of compressing a midi file
US7030312B2 (en) System and methods for changing a musical performance
JP2006084774A (ja) 奏法自動判定装置及びプログラム
JP4407473B2 (ja) 奏法決定装置及びプログラム
CN100533551C (zh) 在嵌入式器件中产生敲打声
JP3812510B2 (ja) 演奏データ処理方法および楽音信号合成方法
JP3518716B2 (ja) 楽音合成装置
EP0311225B1 (en) Method and apparatus for deriving and replicating complex musical tones
Strawn Orchestral Instruments: Analysis of performed transitions
US4984496A (en) Apparatus for deriving and replicating complex musical tones
JP3719129B2 (ja) 楽音信号合成方法、楽音信号合成装置および記録媒体
JP3812509B2 (ja) 演奏データ処理方法および楽音信号合成方法
JP2008058796A (ja) 奏法決定装置及びプログラム
EP1017039B1 (en) Musical instrument digital interface with speech capability
JPH10171475A (ja) カラオケ装置
JPH02192259A (ja) デジタル音楽情報の出力装置
KR100598208B1 (ko) Ｍｉｄｉ 재생 장치 및 방법
Rossing Resource Letter MA‐2: Musical acoustics

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20010503

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee