KR20100089526A - 생체 신호를 이용한 음악 생성 장치 및 그 방법 - Google Patents
생체 신호를 이용한 음악 생성 장치 및 그 방법 Download PDFInfo
- Publication number
- KR20100089526A KR20100089526A KR1020090008819A KR20090008819A KR20100089526A KR 20100089526 A KR20100089526 A KR 20100089526A KR 1020090008819 A KR1020090008819 A KR 1020090008819A KR 20090008819 A KR20090008819 A KR 20090008819A KR 20100089526 A KR20100089526 A KR 20100089526A
- Authority
- KR
- South Korea
- Prior art keywords
- music
- configuration information
- heart rate
- biosignal
- file
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 26
- 239000000203 mixture Substances 0.000 claims description 22
- 230000001186 cumulative effect Effects 0.000 claims description 8
- 230000008569 process Effects 0.000 claims description 7
- 230000003287 optical effect Effects 0.000 claims 2
- 238000010276 construction Methods 0.000 claims 1
- 239000000284 extract Substances 0.000 abstract description 4
- 230000036541 health Effects 0.000 abstract description 4
- 230000008859 change Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 238000009825 accumulation Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 238000013186 photoplethysmography Methods 0.000 description 2
- 230000003796 beauty Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/0008—Associated control or indicating means
- G10H1/0025—Automatic or semi-automatic music composition, e.g. producing random music, applying rules from music theory or modifying a musical piece
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K15/00—Acoustics not otherwise provided for
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
- G10H2210/101—Music Composition or musical creation; Tools or processes therefor
- G10H2210/111—Automatic composing, i.e. using predefined musical rules
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
- G10H2220/155—User input interfaces for electrophonic musical instruments
- G10H2220/371—Vital parameter control, i.e. musical instrument control based on body signals, e.g. brainwaves, pulsation, temperature or perspiration; Biometric information
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2240/00—Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
- G10H2240/011—Files or data streams containing coded musical information, e.g. for transmission
- G10H2240/046—File format, i.e. specific or non-standard musical file format used in or adapted for electrophonic musical instruments, e.g. in wavetables
- G10H2240/056—MIDI or other note-oriented file format
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Electrophonic Musical Instruments (AREA)
- Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
Abstract
본 발명은 생체 신호를 이용한 음악 생성 장치 및 그 방법에 관한 것이다.
이를 위해 본 발명은 사용자의 생체 신호를 측정하고, 측정된 생체 신호로부터 생체 신호 구성 정보를 추출한 후 추출된 생체 신호 구성 정보를 음악 파일을 구성하는 음악 구성 정보와 매칭시키고, 매칭된 생체 신호 구성 정보를 상기 음악 구성 정보로 설정하여 음악을 구성하며, 설정된 음악 구성 정보를 포함하는 곡조를 구성한 후 구성된 곡조를 포함하는 음악 파일을 생성함으로써 사용자의 생체 신호를 기반으로 하는 음악 파일을 생성할 수 있게 된다.
생체 신호, 심전도, MIDI, HRV, 음악 파일 생성
Description
본 발명은 음악 생성 장치 및 그 방법에 관한 것으로, 특히 심전도(Electrocardiogram, ECG) 또는 광전용적맥파(Photoplethysmography, PPG)와 같은 생체 신호를 이용하여 미디(Music Instrument Digital Interface, MIDI) 파일과 같은 음악 파일을 생성하기 위한 장치 및 그 방법에 관한 것이다.
종래의 음원 재생 장치는 생체 신호를 이용하여 특정 음악의 박자, 템포와 같은 특징 정보를 변화시키는 기술이 대부분이다. 이러한 종래의 음원 재생 장치는 사용자의 기분이나 기호, 주변 환경 등을 실시간으로 음원에 반영하여 음원 자체를 재구성한다. 즉, 종래의 음원 재생 장치는 사용자의 맥박이나 주변 환경 정보를 센서로부터 입력받고 입력된 정보를 바탕으로 음원을 리믹스한다.
또한 생체 신호로부터 직접 음악을 생성하는 음악 재생 장치도 개발되었는데, 이러한 음원 재생 장치는 심전도 신호 자체의 진폭을 피아노의 88개 건반과 매칭시키고 각각의 심전도 샘플 사이에 공백 간격(Silent Interval)을 삽입하여 주요 음을 만들고 심전도를 특정 대역통과 필터를 통과시켰을 때 출력되는 특 징들을 이용하여 하모나이징(Harmonizing)한다.
이와 같이 종래에 생체 신호를 이용하여 음악의 악곡을 변환시키는 음악 재생 장치는 기존에 개발된 어플리케이션을 이용하여 악곡을 변환하기 때문에 생체 신호보다는 사용자의 기호가 많이 반영된 음원으로 변환된다는 문제점이 있다.
이와 같은 음악 재생 장치는 생체 신호를 단순히 악곡을 변환시키기 위한 하나의 도구로 사용하므로 생체 신호를 통해서 확인할 수 있는 사용자의 건강 상태와 같은 중요 정보를 반영하기 어렵다는 문제점이 있다.
또한 종래에 심전도 신호의 진폭 값을 이용한 음악 재생 장치는 심전도의 원본 데이터에 의존하는 방식이기 때문에 잡음에 민감하고 각 샘플 사이에 특정 공백 구간을 설정해야 하는 번거로움이 있다.
따라서, 본 발명은 생체 신호를 이용하여 음악 구성 정보를 설정하고, 설정된 음악 구성 정보를 포함하는 음악을 생성하기 위한 장치 및 그 방법을 제공한다.
상술한 바를 달성하기 위한 본 발명은 사용자의 생체 신호를 측정하는 생체 신호 측정부와, 상기 측정된 생체 신호로부터 생체 신호 구성 정보를 추출하는 생체 신호 구성 정보 추출부와, 상기 추출된 생체 신호 구성 정보를 음악 파일을 구성하는 음악 구성 정보와 매칭시키고, 상기 매칭된 생체 신호 구성 정보를 상기 음악 구성 정보로 설정하는 음악 구성 정보 설정부와, 상기 설정된 음악 구성 정보를 포함하는 곡조를 구성하는 곡조 구성부와, 상기 구성된 곡조를 포함하는 음악 파일 을 생성하는 음악 파일 생성부를 포함하는 것을 특징으로 한다.
또한, 사용자의 생체 신호를 측정하는 과정과, 상기 측정된 생체 신호로부터 생체 신호 구성 정보를 추출하는 과정과, 상기 추출된 생체 신호 구성 정보를 음악 파일을 구성하는 음악 구성 정보와 매칭시키고, 상기 매칭된 생체 신호 구성 정보를 상기 음악 구성 정보로 설정하는 과정과, 상기 설정된 음악 구성 정보를 포함하는 곡조를 구성하는 과정과, 상기 구성된 곡조를 포함하는 음악 파일을 생성하는 과정을 포함함을 특징으로 한다.
본 발명은 사용자의 심전도, 광전용적맥파와 같은 생체 신호를 기반으로 하는 음악을 생성할 수 있다는 이점이 있다.
또한 본 발명은 사용자의 건강 상태를 예측할 수 있는 심전도 변화율을 이용하여 음악을 생성하므로 사용자가 생성된 음악을 듣고 자신의 건강 상태를 파악할 수 있다는 이점이 있다.
뿐만 아니라 본 발명은 짧은 시간동안 측정된 생체 신호를 이용하여 작은 용량의 음악을 생성할 수 있기 때문에 무선 통신 장치에서 벨소리와 같은 컨텐츠로 이용할 수 있다는 이점이 있다.
이하 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 하기 설명 및 첨부 도면에서 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.
도 1은 본 발명의 실시 예에 따른 음악 검색 장치의 구성도를 나타내는 도면이다. 본 발명의 실시 예에서 구성하는 음악 파일을 미디 파일로 가정하여 설명한다. 일반적으로 미디는 미디를 지원하는 디지털 악기들 간의 신호 체계이고, 소리 자체가 아닌 연주자의 행위 또는 제어 동작을 기록하는 파일을 의미한다.
본 발명의 실시 예에 따른 음악 생성 장치는 생체 신호 구성 정보 추출부(20), 음악 구성 정보 설정부(30), 화음 설정부(40), 곡조 구성부(50), 음악 파일 생성부(60), 파일 변환부(70)를 포함한다.
생체 신호 측정부(10)는 사용자로부터 음악 파일을 생성하기 위한 요청이 있으면 심전도 또는 광전용적맥파와 같은 생체 신호를 측정한다.
생체 신호 구성 정보 추출부(20)는 측정된 생체 신호로부터 심박수 변화율(Heart Rate Variability, HRV)을 산출하고, 산출된 심박수 변화율로부터 생체 신호 구성 정보들을 추출한다. 추출된 생체 신호 구성 정보들은 심박수값, 심전도 파형 중 R파의 피크값(QRS R peak Amplitude), 현재 심박수와 다음 심박수의 차이값, 평균 심박수, R파의 피크값 간의 간격인 심박주기(RR interval)에 대한 누적값을 포함한다.
음악 구성 정보 설정부(30)는 추출된 생체 신호 구성 정보들 각각을 미디 파일을 구성하는 미디 음악 구성 정보들과 매칭시키고, 매칭된 생체 신호 구성 정보들을 미디 음악 구성 정보들로 설정한다. 이러한 미디 음악 구성 정보들은 음계(Note Number), 소리 강도 값, 소리 지속 시간, 시간 기준(Time base) 및 박자, 마디 수를 포함한다.
구체적으로 생체 신호 구성 정보들은 하기의 <표 1>과 같은 미디 음악 구성 정보들과 매칭될 수 있다.
미디 음악 구성 정보 | 생체 신호 구성 정보 |
음계(Note Number) | 심박수 값 |
소리 강도 값 | R파의 피크값(QRS R peak Amplitude) |
소리 지속 시간 | 현재 심박수와 다음 심박수의 차이값(abs) |
시간 기준(Time base) 및 박자 | 평균 심박수 |
마디 수 | 심박주기(RR interval) 누적값 |
음악 구성 정보 설정부(30)는 심박수 변화율을 1회 측정할 시 생성되는 각각의 심박수 값을 음계로 설정한다. 여기서 음계는 일반적으로 하기의 <표 2>와 같이 0~127 사이의 범위를 가지는데, 심박수 값은 0~127 bpm(Beat Per Minute) 각각이 하기의 0~127 사이의 음계로 설정된다.
만약 사용자가 운동을 할 경우 상기의 <표 2>와 같이 정의된 범위를 초과하게 되면 음악 구성 정보 설정부(30)는 평균 심박수를 기준으로 상기의 <표 1>과 같이 정의된 범위를 가지도록 심박수 변화율을 조정할 수 있다.
음악 구성 정보 설정부(30)는 심박수 변화율을 1회 측정할 시 생성되는 심전도 파형 중 R파의 피크값을 소리 강도 값으로 설정한다. 여기서 소리 강도 값은 음악에서 포르테(forte)나 피아노(piano)와 같이 음의 강약을 의미하는데, 일반적으로 0~127 범위를 가진다.
음악 구성 정보 설정부(30)는 현재 심박수와 다음 심박수 사이의 차이값을 소리 지속 시간으로 설정한다. 여기서 소리 지속 시간은 일반적으로 스텝 시간과 게이트 시간으로 구성된다. 이때 스텝 시간은 실제 음표가 가지는 길이만큼의 시간을 의미하고, 게이트 시간은 스타카토와 같이 실제 음 길이보다 짧게 연주하는 시간을 의미한다. 이와 같이 설정된 소리 지속 시간은 기준 음표를 어떤 음표로 사용할 것인지를 나타내는 시간 기준(Time base)을 결정하는 기준이 된다.
음악 구성 정보 설정부(30)는 평균 심박수를 기준으로 시간 기준 및 박자를 설정한다.
음악 구성 정보 설정부(30)는 심박주기(RR interval) 누적값을 마디로 나누어서 설정할 수 있는데, 상기에서 설정된 시간 기준, 박자와 함께 심박수 파형의 샘플링 율을 이용하여 마디 수를 산출한다.
곡조 구성부(40)는 상기와 같이 설정된 음악 구성 정보를 이용하여 곡조를 구성한다.
화음 생성부(40)는 구성된 곡조에 일반적인 화성 이론을 기반으로 하여 화음을 생성한다.
음악 파일 생성부(50)는 화음이 설정된 곡조를 포함하는 미디 파일을 생성한다.
파일 변환부(60)는 음악 파일 생성부(50)를 통해서 생성된 미디 파일을 MP3 또는 WAV 파일로 변환한다.
상기와 같이 구성되는 음악 생성 장치가 음악 파일을 생성하는 과정에 대해서 도 2를 참조하여 하기에서 구체적으로 살펴보도록 한다.
도 2는 본 발명의 실시 예에 따라 음악 생성 장치가 생체 신호를 이용하여 음악 파일을 생성하기 위한 과정을 나타내는 흐름도이다. 본 발명의 실시 예에서는 음악 파일을 미디 파일로 가정하여 설명하도록 한다.
200단계에서 생체 신호 측정부(10)는 음악 제작을 위한 요청이 있는지 확인하여 요청이 있으면 301단계를 진행하고, 그렇지 않으면 300단계에서 음악 제작을 위한 요청이 있는지 계속적으로 확인한다.
201단계에서 생체 신호 측정부(10)는 심전도 또는 광전용적맥파와 같은 생체 신호를 측정한다.
202단계에서 생체 신호 구성 정보 추출부(20)는 측정된 생체 신호로부터 심박수 변화율을 산출한다. 이와 같이 산출된 심박수 변화율을 심박주기에 따라 그래프로 나타내면 도 3과 같이 도시될 수 있다. 도 3을 참조하면 300은 R파의 피크 값을 나타내고, 301은 현재 심박수와 다음 심박수의 차이값을 나타낸다. 302는 평균 심박수를 나타내고, 303은 심박주기 누적값을 나타낸다.
203단계에서 생체 신호 구성 정보 추출부(20)는 산출된 심박수 변화율로부터 생체 신호 구성 정보를 추출한다. 즉, 추출된 생체 신호 구성 정보는 상기 도 3에 도시된 바와 같이 심박수 값, R파의 피크 값, 현재 심박수와 다음 심박수의 차이값, 평균 심박수, 심박주기 누적값이 된다.
204단계에서 음악 구성 정보 추출부(30)는 추출된 생체 신호 구성 정보 각각을 미디 음악 구성 정보와 매칭시키고, 매칭된 생체 신호 구성 정보를 미디 음악 구성 정보로 설정한다. 도 3을 참조하면 음악 구성 정보 추출부(30)는 R파의 피크 값(300)을 소리 강도값으로 설정하고, 현재 심박수와 다음 심박수의 차이값(301)을 소리 지속 시간으로 설정한다. 그리고 평균 심박수(302)를 이용하여 시간 기준과 박자를 설정하고, 심박주기 누적값(303)을 마디 수로 설정한다.
204단계에서 음악 구성 정보 추출부(30)가 생체 신호 구성 정보를 미디 음악 구성 정보로 설정하는 과정에 대해서 도 3을 참조하여 구체적으로 살펴보면 하기와 같다.
도 3은 음악 구성 정보 추출부(30)가 생체 신호 구성 정보를 이용하여 음악 구성 정보를 설정하는 과정을 나타내는 흐름도이다.
300단계에서 음악 구성 정보 추출부(30)는 평균 심박수를 기준으로 시간 기준, 기준 음표, 기준 박자를 설정한다. 시간 기준은 4분 음표가 가지는 시간적인 수치로서 4분 음표의 길이를 결정하는 값을 의미하고, 박자는 4분 음표가 1마디 안에 몇 개가 포함되는지를 나타내는 값을 의미한다. 구체적으로 음악 구성 정보 설정부(30)는 1을 4분 음표로 설정하는 것으로 시간 기준을 설정할 수 있다. 또한 음악 구성 정보 설정부(30)는 박자를 설정할 시 평균 심박수를 기준으로 하여 평균 심박수 이하는 4분의 4박자, 평균 심박수 이상은 4분의 2박자로 설정할 수 있다.
301단계에서 음악 구성 정보 추출부(30)는 설정된 시간 기준, 기준 박자를 이용하여 마디 수를 산출한다. 이때 마디 수는 하기와 같은 <수학식 1>을 이용하여 산출된다.
예를 들어 시간 기준이 48, 4분의 4박자인 350Hz의 심전도 파형을 이용하여 마디 수를 산출할 경우 1마디를 구성하는 인덱스 값은 1박의 분해능을 240으로 가정하면 (350Hz/240)* 4 x 350 Hz = 2041 인덱스가 된다. 즉, 약 2041 인덱스 내에 존재하는 음계, 소리 강도 값, 소리 지속 시간, 시간 기준 및 박자들은 1마디를 구성하는 마디 구성 요소가 된다.
302단계에서 음악 구성 정보 추출부(30)는 생체 신호 구성 정보 중 심박 주기를 이용하여 마디 구성 요소들을 설정한다. 이때 마디 구성 요소들은 음계, 음표, 쉼표를 포함한다. 이에 대해서 구체적으로 하기의 <표 3>을 이용하여 음악 구성 정보 추출부(30)가 마디 구성 요소들을 설정하는 과정에 대해서 설명하도록 한다.
심박주기 | 심박주기 누적값 | 심박수값 (bpm) |
심박수 근사값 | 마디 | 음계 | 조정된 음계 | 음계명 | 심박수 차이값 |
235 | 1967 | 89.362 | 89 | F7 | F5 | 파 | 18 | |
358 | 2325 | 58.659 | 59 | B4 | B2 | 시 | 30 | |
304 | 2629 | 69.079 | 69 | A5 | A5 | 라 | 10 | |
292 | 2921 | 71.918 | 72 | C6 | C4 | 도 | 3 | |
284 | 3205 | 73.944 | 74 | D6 | D4 | 레 | 2 | |
278 | 3483 | 75.54 | 76 | E6 | E4 | 미 | 2 | |
302 | 3785 | 69.536 | 70 | 2 마디 | A#5 | A3 | 파 | 6 |
예를 들어 심박 주기가 235이고, 이러한 심박 주기의 누적값이 1967일 때 심박수 값은 89.362 BPM (350Hz/235 X 60)이 산출된다. 여기서 음악 구성 정보 추출부(30)는 심박수 값에 음계를 대응시키기 위해 소수점 아래를 제외한 심박수 근사값을 산출한다.
음악 구성 정보 추출부(30)는 <표 2>의 음계표를 참조하여 0~127 사이의 음계 중 산출된 심박수 근사값과 대응되는 음계를 산출한다. 이때 산출된 음계는 F7이 된다. 그런데 산출된 음계 F7는 너무 높은 옥타브를 가지기 때문에 음악 구성 정보 추출부(30)는 임의로 음계를 조정할 수 있다.
또한 음악 구성 정보 추출부(30)는 생체 신호 구성 정보 중 시간 기준, 기준 박자, 기준 음표 및 심박수 차이값을 이용하여 음표 또는 쉼표를 산출한다.
예를 들어 4분의 4박자의 두 번째 마디가 하기의 <표 3>과 같이 구성된다고 가정한다. 이와 같이 구성된 마디에 포함된 음표들은 하기의 <수학식 2>를 통해서 산출된다.
여기서 기준 박자는 4가 되고, 심박수 차이값의 총합은 18+30+10+3+2+2+6=71 이 된다.
만약 설정된 기준 음표가 8분 음표(0.5박)라면 <표 3>의 음계들 각각에 따른 음표는 하기의 <표 4>와 같이 산출된다.
다시 도 2를 참조하여 살펴보면 205단계에서 곡조 구성부(40)는 상기와 같이 설정된 음악 구성 정보들을 포함하는 곡조를 구성한다. 이와 같이 구성된 곡조는 도 5와 같이 나타낼 수 있다.
206단계에서 화음 구성부(50)는 구성된 곡조에 일반적인 화성 이론을 기반으로 하여 화음을 생성한다. 예를 들어 곡조에 포함된 음계들 중 ‘미’에 화음을 생성할 시 화음 생성부(50)는 ‘도미솔’이라는 화음을 기반으로 하여 ‘미’에 ‘도’와 ‘솔’을 포함시킨 화음을 생성할 수 있다.
207단계에서 음악 파일 생성부(60)는 구성된 곡조를 포함하는 음악 파일을 생성한다. 이때 생성된 음악 파일이 미디 파일이라면 이러한 미디 파일은 도 6과 같이 구성될 수 있다. 도 6를 참조하면 90h는 건반의 키를 누르는 것을 의미하고, 0은 출력 채널을 의미한다. 여기서 출력 채널 0은 1번 채널을 의미한다. 41은 음계를 나타내며, 십진법으로 65 즉, 5옥타브의 F(파)음을 의미한다. 54는 소리 강도 값을 나타내고 0~127 사이의 값을 가지는데, 이를 십진법으로 나타내면 84이다. 06은 소리의 지속 시간을 나타낸다. 즉, 90h 41 54 06이 하나의 음을 나타내는 구성 요소가 된다.
208단계에서 파일 타입 변환부(70)는 음악 파일 타입 변환 요청이 있는지 확인하여 요청이 있으면 209단계를 진행하고, 그렇지 않으면 208단계에서 음악 파일 타입을 변환하기 위한 요청이 있는지 계속적으로 진행한다.
209단계에서 파일 타입 변환부(70)는 생성된 음악 파일을 사용자에 의해서 선택된 파일 타입으로 변환한다. 예를 들어 파일 타입 변환부(70)는 미디 파일을 MP3 또는 WAV 파일로 변환한다.
210단계에서 음악 제작 완료되지 않으면 201단계로 진행하여 생체 신호 측정부(10)는 생체 신호를 측정하고 202~210단계를 수행한다.
이와 같이 본 발명은 사용자의 사용자의 심전도, 광전용적맥파와 같은 생체 신호를 측정하고, 측정된 생체 신호에 대한 생체 신호 구성 정보를 추출하여 음악 구성 정보를 설정한 후 설정된 음악 구성 정보를 이용하여 음악을 생성함으로써 사용자의 생체 신호를 기반으로 하는 음악을 생성할 수 있다는 이점이 있다.
도 1은 본 발명의 실시 예에 따른 음악 생성 장치의 구성도,
도 2는 본 발명의 실시 예에 따라 음악 생성 장치가 생체 신호를 이용하여 음악을 생성하기 위한 과정을 나타내는 흐름도,
도 3은 본 발명의 실시 예에 따라 음악 구성 정보 설정부가 음악 구성 정보를 설정하는 과정을 나타내는 흐름도,
도 4는 본 발명의 실시 예에 따라 추출된 생체 신호 구성 정보를 그래프로 나타낸 도면,
도 5는 본 발명의 실시 예에 따라 구성된 곡조를 설명하기 위한 예시도,
도 6은 본 발명의 실시 예에 따라 생성된 음악 파일을 설명하기 위한 예시도.
Claims (14)
- 사용자의 생체 신호를 측정하는 생체 신호 측정부와,상기 측정된 생체 신호로부터 생체 신호 구성 정보를 추출하는 생체 신호 구성 정보 추출부와,상기 추출된 생체 신호 구성 정보를 음악 파일을 구성하는 음악 구성 정보와 매칭시키고, 상기 매칭된 생체 신호 구성 정보를 상기 음악 구성 정보로 설정하는 음악 구성 정보 설정부와,상기 설정된 음악 구성 정보를 포함하는 곡조를 구성하는 곡조 구성부와,상기 구성된 곡조를 포함하는 음악 파일을 생성하는 음악 파일 생성부를 포함하는 것을 특징으로 하는 음악 생성 장치.
- 제1항에 있어서,상기 생체 신호는 심전도 또는 광전용적맥파 중 적어도 하나인 것을 특징으로 음악 생성 장치.
- 제1항에 있어서,상기 생체 신호 구성 정보는 심박수 값, R파의 피크값(QRS R peak Amplitude), 현재 심박수와 다음 심박수의 차이값, 현재 심박수와 다음 심박수의 차이값(abs), 평균 심박수, 심박주기(RR interval) 누적값 중 적어도 하나를 포함 하는 것을 특징으로 하는 음악 생성 장치.
- 제3항에 있어서,상기 음악 구성 정보는 음계(Note Number), 소리 강도 값, 소리 지속 시간, 시간 기준(Time base) 및 박자, 마디 수 중 적어도 하나를 포함하는 것을 특징으로 하는 음악 생성 장치.
- 제1항에 있어서,상기 곡조를 구성하는 음계 각각에 화음을 설정하는 화음 설정부를 더 포함하는 것을 특징으로 음악 생성 장치.
- 제1항에 있어서,사용자 요청에 따라 상기 생성된 음악 파일을 사용자에 의해서 선택된 음악 파일 타입으로 변환하는 파일 타입 변환부를 더 포함하는 것을 특징으로 음악 생성 장치.
- 제1항에 있어서,상기 음악 파일은 미디(MIDI) 파일인 것을 특징으로 하는 음악 생성 장치.
- 사용자의 생체 신호를 측정하는 과정과,상기 측정된 생체 신호로부터 생체 신호 구성 정보를 추출하는 과정과,상기 추출된 생체 신호 구성 정보를 음악 파일을 구성하는 음악 구성 정보와 매칭시키고, 상기 매칭된 생체 신호 구성 정보를 상기 음악 구성 정보로 설정하는 과정과,상기 설정된 음악 구성 정보를 포함하는 곡조를 구성하는 과정과,상기 구성된 곡조를 포함하는 음악 파일을 생성하는 과정을 포함함을 특징으로 하는 음악 생성 방법.
- 제8항에 있어서,상기 생체 신호는 심전도 또는 광전용적맥파 중 적어도 하나인 것을 특징으로 음악 생성 방법.
- 제8항에 있어서,상기 생체 신호 구성 정보는 심박수 값, R파의 피크값(QRS R peak Amplitude), 현재 심박수와 다음 심박수의 차이값, 현재 심박수와 다음 심박수의 차이값(abs), 평균 심박수, 심박주기(RR interval) 누적값 중 적어도 하나를 포함하는 것을 특징으로 하는 음악 생성 방법.
- 제10항에 있어서,상기 음악 구성 정보는 음계(Note Number), 소리 강도 값, 소리 지속 시간, 시간 기준(Time base) 및 박자, 마디 수 중 적어도 하나를 포함하는 것을 특징으로 하는 음악 생성 방법.
- 제8항에 있어서,상기 곡조 구성 과정 이후에 상기 곡조를 구성하는 음계 각각에 화음을 설정하는 과정을 더 포함함을 특징으로 음악 생성 방법.
- 제8항에 있어서,상기 음악 파일 생성 과정 이후에 사용자의 요청에 따라 상기 생성된 음악 파일을 사용자에 의해서 선택된 음악 파일 타입으로 변환하는 과정을 더 포함함을 특징으로 음악 생성 방법.
- 제8항에 있어서,상기 음악 파일은 미디(MIDI) 파일인 것을 특징으로 하는 음악 생성 방법.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090008819A KR20100089526A (ko) | 2009-02-04 | 2009-02-04 | 생체 신호를 이용한 음악 생성 장치 및 그 방법 |
US12/700,145 US8134062B2 (en) | 2009-02-04 | 2010-02-04 | Apparatus and method for generating music using bio-signal |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090008819A KR20100089526A (ko) | 2009-02-04 | 2009-02-04 | 생체 신호를 이용한 음악 생성 장치 및 그 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20100089526A true KR20100089526A (ko) | 2010-08-12 |
Family
ID=42396627
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020090008819A KR20100089526A (ko) | 2009-02-04 | 2009-02-04 | 생체 신호를 이용한 음악 생성 장치 및 그 방법 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8134062B2 (ko) |
KR (1) | KR20100089526A (ko) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7872188B2 (en) * | 2009-03-20 | 2011-01-18 | Mariann Martin Willis | Method and apparatus for personal exercise trainer |
US8750857B2 (en) * | 2010-06-04 | 2014-06-10 | Qualcomm Incorporated | Method and apparatus for wireless distributed computing |
US10713341B2 (en) * | 2011-07-13 | 2020-07-14 | Scott F. McNulty | System, method and apparatus for generating acoustic signals based on biometric information |
US9029677B2 (en) | 2012-12-10 | 2015-05-12 | Peter Frenkel | Method for generating music |
CN103617362A (zh) * | 2013-12-04 | 2014-03-05 | 北京怡成生物电子技术有限公司 | 一种心电数据处理方法及系统 |
US9880805B1 (en) | 2016-12-22 | 2018-01-30 | Brian Howard Guralnick | Workout music playback machine |
AT525615A1 (de) * | 2021-11-04 | 2023-05-15 | Peter Graber Oliver | Vorrichtung und verfahren zur ausgabe eines akustischen signals basierend auf physiologischen daten |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08328555A (ja) | 1995-05-31 | 1996-12-13 | Ekushingu:Kk | 演奏制御装置 |
US20010035087A1 (en) * | 2000-04-18 | 2001-11-01 | Morton Subotnick | Interactive music playback system utilizing gestures |
JP2002268635A (ja) | 2001-03-06 | 2002-09-20 | Mitsubishi Chemicals Corp | 光学的情報記録媒体の記録再生装置および光学的情報記録媒体並びに光学的情報記録媒体の再生方法 |
JP2005034391A (ja) | 2003-07-15 | 2005-02-10 | Takuya Shinkawa | 音出力装置および音出力方法 |
KR20050066701A (ko) | 2003-12-27 | 2005-06-30 | 전자부품연구원 | 감정인식 컴퓨팅을 이용한 게임 방법 및 그 장치 |
JP2006084749A (ja) * | 2004-09-16 | 2006-03-30 | Sony Corp | コンテンツ生成装置およびコンテンツ生成方法 |
JP2006171133A (ja) | 2004-12-14 | 2006-06-29 | Sony Corp | 楽曲データ再構成装置、楽曲データ再構成方法、音楽コンテンツ再生装置および音楽コンテンツ再生方法 |
JP4306754B2 (ja) * | 2007-03-27 | 2009-08-05 | ヤマハ株式会社 | 楽曲データ自動生成装置及び音楽再生制御装置 |
KR101142679B1 (ko) * | 2009-01-23 | 2012-05-03 | 삼성전자주식회사 | 생체 신호를 이용한 음악 검색 장치 및 그 방법 |
-
2009
- 2009-02-04 KR KR1020090008819A patent/KR20100089526A/ko active Search and Examination
-
2010
- 2010-02-04 US US12/700,145 patent/US8134062B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20100192754A1 (en) | 2010-08-05 |
US8134062B2 (en) | 2012-03-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Benson | Music: a mathematical offering | |
KR20100089526A (ko) | 생체 신호를 이용한 음악 생성 장치 및 그 방법 | |
Larrouy-Maestri et al. | The mistuning perception test: A new measurement instrument | |
Brockmeier et al. | The MuSIC perception test: a novel battery for testing music perception of cochlear implant users | |
Tirovolas et al. | Music perception and cognition research from 1983 to 2010: A categorical and bibliometric analysis of empirical articles in Music Perception | |
Trainor et al. | Explaining the high voice superiority effect in polyphonic music: Evidence from cortical evoked potentials and peripheral auditory models | |
Lange et al. | Challenges and opportunities of predicting musical emotions with perceptual and automatized features | |
Plazak et al. | The first three seconds: Listener knowledge gained from brief musical excerpts | |
Streeter et al. | Computer aided music therapy evaluation: Testing the Music Therapy Logbook prototype 1 system | |
CN104688222B (zh) | 基于脑电信号的音色合成装置 | |
Butte et al. | Perturbation and nonlinear dynamic analysis of different singing styles | |
Beier et al. | Do you chill when I chill? A cross-cultural study of strong emotional responses to music. | |
Chew | Notating disfluencies and temporal deviations in music and arrhythmia | |
Chau et al. | The Effects of Early-Release on Emotion Characteristics and Timbre in Non-Sustaining Musical Instrument Tones | |
EP1886297B1 (en) | Apparatus for frequency spectrum conversion to natural harmonic frequencies | |
JP7191269B1 (ja) | 発声健康法促進装置、発声健康法促進方法、及び発声健康法促進プログラム | |
Sapozhnikova et al. | Improvement of traceability of widely-defined measurements in the field of humanities | |
Fernandes et al. | Brain's night symphony (BraiNSy): A methodology for EEG sonification | |
Nestorova et al. | Vocal vibrato characteristics in historical and contemporary opera, operetta, and Schlager | |
Tulilaulu et al. | Sleep musicalization: Automatic music composition from sleep measurements | |
Cutchin et al. | Data collection methods for the voice range profile: a systematic review | |
US7968785B2 (en) | Frequency spectrum conversion to natural harmonic frequencies process | |
Lamarche et al. | Not just sound: Supplementing the voice range profile with the singer's own perceptions of vocal challenges | |
Daffern et al. | The impact of vibrato usage on the perception of pitch in early music compared to grand opera | |
JP7179209B1 (ja) | 音声診断装置、音声診断方法、及び音声診断プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
AMND | Amendment | ||
J201 | Request for trial against refusal decision | ||
B601 | Maintenance of original decision after re-examination before a trial | ||
J301 | Trial decision |
Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20111027 Effective date: 20120615 |