KR102122195B1 - 인공지능 합주 시스템 및 인공지능 합주 방법 - Google Patents

인공지능 합주 시스템 및 인공지능 합주 방법 Download PDF

Info

Publication number
KR102122195B1
KR102122195B1 KR1020180026357A KR20180026357A KR102122195B1 KR 102122195 B1 KR102122195 B1 KR 102122195B1 KR 1020180026357 A KR1020180026357 A KR 1020180026357A KR 20180026357 A KR20180026357 A KR 20180026357A KR 102122195 B1 KR102122195 B1 KR 102122195B1
Authority
KR
South Korea
Prior art keywords
musical instrument
sound
performance
accompaniment
player terminal
Prior art date
Application number
KR1020180026357A
Other languages
English (en)
Other versions
KR20190105805A (ko
Inventor
엄문회
Original Assignee
주식회사 웨이테크
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 웨이테크 filed Critical 주식회사 웨이테크
Priority to KR1020180026357A priority Critical patent/KR102122195B1/ko
Publication of KR20190105805A publication Critical patent/KR20190105805A/ko
Application granted granted Critical
Publication of KR102122195B1 publication Critical patent/KR102122195B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/36—Accompaniment arrangements
    • G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
    • G10H1/365—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems the accompaniment information being stored on a host computer and transmitted to a reproducing terminal by means of a network, e.g. public telephone lines
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0033—Recording/reproducing or transmission of music for electrophonic musical instruments
    • G10H1/0083—Recording/reproducing or transmission of music for electrophonic musical instruments using wireless transmission, e.g. radio, light, infrared
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H7/00—Instruments in which the tones are synthesised from a data store, e.g. computer organs
    • G10H7/02—Instruments in which the tones are synthesised from a data store, e.g. computer organs in which amplitudes at successive sample points of a tone waveform are stored in one or more memories
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/005—Musical accompaniment, i.e. complete instrumental rhythm synthesis added to a performed melody, e.g. as output by drum machines

Abstract

본 발명은, 인공지능서버를 사용하여, 연주자의 연주 패턴의 변화에 따라, 최적의 반주음을 찾아낼 뿐만 아니라, 최적화된 반주음을 스스로 만들어낸다. 따라서, 종래 정형화된 반주음을 제공하는 방식과는 차원이 다른 반주음을 제공할 수 있다.
따라서, 본 발명을 사용하면, 항상 정해진 반주음이 아닌, 연주자의 연주 패턴의 변화에 따라, 최적의 반주음을 제공받을 수 있어, 합주에 대한 흥미를 지속적으로 가질 수 있다.

Description

인공지능 합주 시스템 및 인공지능 합주 방법{ARTIFICIAL INTELLIGENT ENSEMBLE SYSTEM AND METHOD FOR PLAYING MUSIC USING THE SAME}
본 발명은 인공지능 합주 시스템 및 인공지능 합주 방법에 관한 것이다.
기타, 건반, 드럼, 베이스 등 악기의 종류는 다양하다.
다양한 종류의 악기 중, 자신이 좋아하는 악기를 능숙하게 다루기 위해서, 학원을 다니거나 독학을 한다. 어느 정도 악기를 능숙하게 다루게 되면, 자기가 다루지 못하는 다른 악기와 합주를 하고 싶어진다.
그러나, 합주를 하기 위해서는, 다른 악기를 다루는 사람을 구해야 하고, 합주를 위한 장소를 물색해야 하고, 합주 시간을 맞추는 등 많은 노력이 필요하다.
이로 인해, 대부분의 연주자들은, 다른 악기가 녹음된 반주를 틀어놓고, 자신의 악기를 연주해 보는 정도로 만족하게 된다.
그러나, 이렇게 정형화된 반주에 따라 합주를 하는 경우, 연주자의 연주 패턴의 변화에 따라, 합주가 잘 이루어지지 않을 수 있다. 다시 말해, 연주자의 연주 패턴 변화를 고려하지 않고, 항상 정해진 반주에 맞춰 합주하는 방식은, 합주에 대한 흥미를 급속하게 떨어뜨릴 수밖에 없다.
등록특허(10-0920552)
본 발명의 목적은, 연주자의 연주 패턴 변화를 고려하여, 최적화된 반주음을 제공하는 인공지능 합주 시스템 및 인공지능 합주 방법을 제공하는 데 있다.
상기 목적을 달성하기 위한 인공지능 합주 시스템은,
연주자 단말기들; 및
상기 연주자 단말기들과 유무선상으로 연결된 통신부와,
상기 통신부를 통해 전송된 상기 연주자 단말기들의 개별 악기 연주음들을 악기의 종류별로 저장하는 제1저장부와,
상기 통신부를 통해 전송된 상기 연주자 단말기들의 개별 악기 연주음들과 어울리는 다른 악기의 연주음들을 인터넷 상에서 찾아 악기의 종류별로 저장하거나, 상기 연주자 단말기가 저장하고 있는 개별 악기 연주음이나 상기 연주자 단말기가 연주음 제작 프로그램으로 제작한 개별 악기 연주음이 상기 연주자 단말기에 의해 상기 통신부를 통해 악기의 종류별로 직접 저장되는 제2저장부와,
상기 연주자 단말기의 개별 악기 연주음에 대한 반주음 요청시, 상기 제1저장부와 상기 제2저장부에 저장된 다른 악기의 연주음에서, 상기 개별 악기 연주음과 어울리는 다른 악기의 연주음을 찾아내, 상기 연주자 단말기에 반주음으로 제공하는 제1생성부와,
상기 연주자 단말기의 개별 악기 연주음에 대한 반주음 요청시, 상기 제1저장부, 상기 제2저장부에 저장된 다른 악기의 연주음에서, 상기 개별 악기 연주음과 어울리는 다른 연주음을 찾지 못할 경우, 상기 개별 악기 연주음과 어울리는 다른 악기 연주음을 생성하여, 상기 연주자 단말기에 반주음으로 제공하는 제2생성부로 구성된 인공지능서버를 포함하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 인공지능 합주 방법은,
인공지능서버가 연주자 단말기들의 개별 악기 연주음들을 악기의 종류별로 제1저장부에 저장해 놓거나, 상기 인공지능서버가 연주자 단말기들의 개별 악기 연주음들과 어울리는 다른 악기의 연주음을 인터넷 상에서 찾아 악기의 종류별로 제2저장부에 저장하거나, 연주자 단말기가 자신이 저장하고 있는 개별 악기 연주음이나 연주음 제작 프로그램을 통해 제작한 개별 악기 연주음을 악기의 종류별로 상기 제2저장부에 직접 저장해 놓는 제1단계;
연주자 단말기의 반주음 요청시, 상기 반주음을 요청한 연주자 단말기의 개별 악기 연주음과 어울리는 다른 악기의 연주음을, 제1생성부가 상기 제1저장부 또는 상기 제2저장부에 저장된 다른 악기의 연주음에서 찾아내, 상기 연주자 단말기에 반주음으로 제공하거나,
연주자 단말기의 반주음 요청시, 상기 제1생성부가 상기 제1저장부 또는 상기 제2저장부에 저장된 다른 악기의 연주음에서, 상기 반주음을 요청한 연주자 단말기의 개별 악기 연주음과 어울리는 다른 악기의 연주음을 찾지 못한 경우, 제2생성부가 상기 반주음을 요청한 연주자 단말기의 개별 악기 연주음과 어울리는 다른 악기의 연주음을 생성하여, 상기 연주자 단말기에 반주음으로 제공하는 제2단계; 및
연주자 단말기가 상기 제1생성부 또는 상기 제2생성부로부터 제공받은 반주음을, 상기 개별 악기 연주음과 함께 재생하거나, 상기 개별 악기 연주음과 함께 저장하는 제3단계를 포함하는 것을 특징으로 한다.
본 발명은, 인공지능서버를 사용하여, 연주자의 연주 패턴의 변화에 따라, 최적의 반주음을 찾아낼 뿐만 아니라, 최적화된 반주음을 스스로 만들어낸다. 따라서, 종래 정형화된 반주음을 제공하는 방식과는 차원이 다른 반주음을 제공할 수 있다.
따라서, 본 발명을 사용하면, 항상 정해진 반주음이 아닌, 연주자의 연주 패턴의 변화에 따라, 최적의 반주음을 제공받을 수 있어, 합주에 대한 흥미를 지속적으로 가질 수 있다.
도 1은 본 발명의 일 실시예에 따른 인공지능 합주 시스템을 나타낸 도면이다.
도 2는 도 1에 도시된 인공지능서버의 구성을 나타낸 도면이다.
도 3은 본 발명의 일 실시예에 따른 인공지능 합주 방법을 나타낸 순서도다.
도 4는 도 3에 도시된 제1단계를 설명하기 위한 도면이다.
도 5는 도 3에 도시된 제2단계를 설명하기 위한 도면이다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 인공지능 합주 시스템(1)은, 연주자 단말기(10), 인공지능서버(20)로 구성된다.
연주자 단말기(10)는 복수 개(수개~수백만개)로 구성된다. 연주자 단말기(10)의 종류는 스마트폰, 컴퓨터, 스마트폰, 테블릿, 악기 자체(전자기타, 전자건반, 전자드럼, ...) 등 다양할 수 있다.
연주자 단말기(10)는 인공지능서버(20)에 유선 또는 무선으로 연결된다.
연주자 단말기(10)에는 다양한 종류의 악기(기타, 베이스, 드럼, 건반 등)가 직접 연결되어, 연주음이 연주자 단말기(10)로 실시간으로 입력될 수 있다. 이를 위해서, 연주음을 디지털 신호로 바꾸어 주는 컨버터가 악기에 설치된다. 연주자 단말기(10)는 실시간으로 입력된 연주음을 인공지능서버(20)에 실시간으로 전송한다.
한편, 연주자 단말기(10)에 악기를 연결하지 않고, 연주자 단말기의 녹음기능을 사용하여, 실시간으로 연주음을 녹음한 다음, 인공지능서버(20)로 연주음을 전송할 수도 있다.
한편, 연주자 단말기(10)에 악기를 연결하거나, 연주자 단말기(10)가 연주음을 녹음하지 않고, 이미 녹음된 연주음을 다운로드 받은 다음, 인공지능서버(20)로 전송할 수도 있다.
연주자 단말기(10)가 인공지능서버(20)로 연주음을 쉽게 전송할 수 있도록, 연주자 단말기(10)에는 연주음전송앱이 설치될 수 있다. 연주음전송앱은 인공지능서버(20), 구글플레이, 앱스토어에서 다운로드 받을 수 있다.
연주자 단말기(10)는 인공지능서버(20)로부터 제공받은 반주음을 개별 악기 연주시 재생한다.
또는, 연주자 단말기(10)는 인공지능서버(20)로부터 제공받은 반주음을, 개별 악기 연주음과 함께 저장할 수 있다.
도 2에 도시된 바와 같이, 인공지능서버(20)는 통신부(21), 제1저장부(221), 제2저장부(222), 제1생성부(231), 제2생성부(232), 전원부(24)로 구성된다.
통신부(21)는 3G, 4G, 5G 통신, 와이파이(WI-FI), 블루투스 등 다양한 통신방법을 제공하여, 연주자 단말기(10)와 인공지능서버(20)가 서로 통신할 수 있게 해준다. 통신부(21)는 공지된 기술로 구현 가능하므로, 자세한 설명을 생략한다.
제1저장부(221)는 통신부(21)를 통해 전송된 연주자 단말기(10)들의 개별 악기 연주음들을 악기의 종류별로 저장한다. 이를 위해, 개별 악기 연주음의 계이름, 코드, 멜로디를 구성하는 음 하나하나를 주파수로 변환하여 수치화하여, 악기의 종류를 구별해 낸다.
제2저장부(222)는 통신부(21)를 통해 전송된 연주자 단말기(10)들의 개별 악기 연주음들과 어울리는 다른 악기의 연주음들을 인터넷 상에서 찾아 악기의 종류별로 저장한다.
제2저장부(222)가 연주자 단말기(10)들의 개별 악기 연주음들과 어울리는 다른 악기의 연주음을 인터넷 상에서 찾는 방식은, 개별 악기 연주음의 계이름, 코드, 멜로디를 분석하여, 이와 어울리는 화음을 가진 다른 악기 연주음을 찾는 방식이 사용된다.
이를 위해, 개별 악기 연주음의 계이름, 코드, 멜로디를 구성하는 음 하나하나를 주파수로 변환하여 수치화 한 다음에, 다른 악기 연주음의 주파수와 비교하여, 화음 오차범위를 벗어나지 않는 주파수 대역을 가진 다른 악기 연주음을 찾아내는 방식이 사용된다. 여기서, 화음 오차범위란 화음이 깨지는 않을 정도의 주파수 범위로 정의된다.
개별 악기 연주음의 계이름, 코드, 멜로디를 구성하는 음 하나하나를 주파수로 변환하는 기술은 표준 API (application programming interface)로 제공되고 있다.
한편, 제2저장부(222)에는, 연주자 단말기(10)가 저장하고 있는 개별 악기 연주음이, 연주자 단말기(10)에 의해, 통신부(21)를 통해, 악기의 종류별로 직접 저장될 수도 있다.
한편, 제2저장부(222)에는, 연주자 단말기(10)가 연주음 제작 프로그램으로 제작한 개별 악기 연주음이, 연주자 단말기(10)에 의해, 통신부(21)를 통해, 악기의 종류별로 직접 저장될 수도 있다.
제1생성부(231)는 연주자 단말기(10)의 개별 악기 연주음에 대한 반주음 요청시, 제1저장부(221)와 제2저장부(222)에 저장된 다른 악기의 연주음에서, 개별 악기 연주음과 어울리는 다른 악기의 연주음을 찾아내, 연주자 단말기(10)에 반주음으로 제공한다. 제1생성부(231)가 개별 악기 연주음과 어울리는 다른 악기 연주음을 찾는 방식은, 개별 악기 연주음의 계이름, 코드, 멜로디를 분석하여, 이와 가장 어울리는 화음을 가진 다른 악기 연주음을 찾는 방식이 사용된다.
이를 위해, 개별 악기 연주음의 계이름, 코드, 멜로디를 구성하는 음 하나하나를 주파수로 변환하여 수치화 한 다음에, 다른 악기 연주음의 주파수와 비교하여, 화음 오차범위를 벗어나지 않는 주파수 대역을 가진 다른 악기 연주음을 찾아내는 방식이 사용된다. 개별 악기 연주음의 계이름, 코드, 멜로디를 구성하는 음 하나하나를 주파수로 변환하는 기술은 표준 API (application programming interface)로 제공되고 있다.
제2생성부(232)는 제1생성부(231)가 연주자 단말기(10)의 개별 악기 연주음에 대한 반주음 요청시, 제1저장부(221), 제2저장부(222)에 저장된 다른 악기의 연주음에서, 개별 악기 연주음과 어울리는 다른 연주음을 찾지 못할 경우, 개별 악기 연주음과 어울리는 다른 악기 연주음을 생성하여, 연주자 단말기(10)에 반주음으로 제공한다.
제2생성부(232)가 개별 악기 연주음과 어울리는 다른 악기 연주음을 생성하는 방식은, 개별 악기 연주음의 계이름, 코드, 멜로디를 분석하여, 이와 가장 어울리는 화음을 가진 다른 악기 연주음을 생성하는 방식이 사용된다.
이를 위해, 개별 악기 연주음의 계이름, 코드, 멜로디를 구성하는 음 하나하나를 주파수로 변환하여 수치화 한 다음에, 다른 악기 연주음의 주파수와 비교하여, 화음 오차범위를 벗어나지 않는 주파수 대역을 가진 다른 악기 연주음을 생성하는 방식이 사용된다. 개별 악기 연주음의 계이름, 코드, 멜로디를 구성하는 음 하나하나를 주파수로 변환하는 기술은 표준 API (application programming interface)로 제공되고 있다.
전원부(24)는 통신부(21), 제1저장부(221), 제2저장부(222), 제1생성부(231), 제2생성부(232)에 전원을 공급한다.
이하, 상술한 구성을 가진 인공지능 합주 시스템(10)으로 합주하는 방법을 설명한다. 도 1 및 도 2는 기본적으로 참조한다.
도 3에 도시된 본 발명의 일 실시예에 따른 인공지능 합주 방법은,
인공지능서버가 연주자 단말기들의 개별 악기 연주음들을 악기의 종류별로 제1저장부에 저장해 놓거나, 상기 인공지능서버가 연주자 단말기들의 개별 악기 연주음들과 어울리는 다른 악기의 연주음을 인터넷 상에서 찾아 악기의 종류별로 제2저장부에 저장하거나, 연주자 단말기가 자신이 저장하고 있는 개별 악기 연주음이나 연주음 제작 프로그램을 통해 제작한 개별 악기 연주음을 악기의 종류별로 상기 제2저장부에 직접 저장해 놓는 제1단계(S11);
연주자 단말기의 반주음 요청시, 상기 반주음을 요청한 연주자 단말기의 개별 악기 연주음과 어울리는 다른 악기의 연주음을, 제1생성부가 상기 제1저장부, 상기 제2저장부에 저장된 다른 악기의 연주음에서 찾아내 상기 연주자 단말기에 반주음으로 제공하거나,
연주자 단말기의 반주음 요청시, 상기 제1생성부가 상기 제1저장부, 상기 제2저장부에 저장된 다른 악기의 연주음에서, 상기 반주음을 요청한 연주자 단말기의 개별 악기 연주음과 어울리는 다른 악기의 연주음을 찾지 못한 경우, 제2생성부가 상기 반주음을 요청한 연주자 단말기의 개별 악기 연주음과 어울리는 다른 악기의 연주음을 생성하여, 상기 연주자 단말기에 반주음으로 제공하는 제2단계(S12);
연주자 단말기가 상기 제1생성부 또는 상기 제2생성부로부터 제공받은 반주음을 받아, 상기 개별 악기 연주음과 함께 재생하거나, 상기 개별 악기 연주음과 함께 저장하는 제3단계(S13)로 구성된다.
이하, 제1단계(S11)를 설명한다.
제1단계(S11)는 인공지능서버(20)가 반주음을 미리 저장해 놓는 단계이다.
연주자 단말기(10)는 기타, 베이스, 드럼, 건반 등으로 연주한 개별 악기 연주음을 제1저장부(221)에 제공한다. 연주자 단말기(10)가 연주음을 제공하면, 연주자 단말기(10)는 인공지능서버(20)로부터 반주음을 제공받을 수 있는 포인트를 제공받는다.
도 4를 참조하면, 인공지능서버(20)는 동일한 곡에 대한 다양한 연주음을 제1저장부(221)에 악기의 종류별로 저장해 놓는다. 예를 들어, “제1곡”을 어느 연주자 단말기(10)는 기타로 연주한 음을 제공하고, 어느 연주자 단말기(10)는 드럼으로 연주한 음을 제공하고, 어느 연주자 단말기(10)는 베이스로 연주한 음을 제공하고, 어느 연주자 단말기(10)는 건반으로 연주하여 연주한 음을 제공하였다면, “제1곡”에 대한 폴더(F1)가 생성되고, 폴더(F1) 아래에는, 제1곡을 연주한 기타, 드럼, 베이스, 건반에 대한 연주음이 각각 저장된 하위폴더들(A1,A2,A3,A4)이 생성된다. 물론, 악기의 종류에 따라 더 많은 하위폴더들이 생성될 수 있다.
한편, 연주자 단말기(10)는 제1저장부(221)에 직접 접근하여, 연주음들(A1,A2,A3,A4)을 편집할 수 있다. 이 경우, 하위폴더(A1,A2,A3,A4)들 아래에, 편집된 연주음들(A11,A12,A21,A22)들이 저장된 하위폴더들(A11,A12,A21,A22,...,Ann)이 생성된다.
이러한 작업이 반복될수록, 제1저장부(221)에는 수많은 연주곡에 대한 폴더(F1,F2,F3,...,Fn)들이 생성되고, 다시 연주곡 마다 악기의 종류별로 연주음이 저장된 하위폴더들(A1,A2,A3,A4,...,An)이 생성되고, 다시 하위폴더(A1,A2,A3,A4,...,An)들 아래에는 편집된 연주음들(A11,A12,...,A21,A22,...,Ann...)들이 저장된 폴더들이 생성된다. 이로 인해, 방대한 연주 데이터가 축적된다.
여기에 더하여, 인공지능서버(20)는 연주자 단말기(10)들의 개별 악기 연주음들과 어울리는 다른 악기의 연주음을 인터넷에서 검색하여 악기의 종류별로 제2저장부(222)에 저장해 놓는다.
인공지능서버(20)가 연주자 단말기(10)들의 개별 악기 연주음들과 어울리는 다른 악기의 연주음을 인터넷에서 찾는 방식은, 개별 악기 연주음의 계이름, 코드, 멜로디를 분석하여, 이와 가장 어울리는 화음을 가진 다른 악기 연주음을 찾는 방식이 사용된다. 이러한 방식은 전술한 바와 같다.
한편, 연주자 단말기(10)는 자신이 저장하고 있는 개별 악기 연주음을, 통신부(21)를 통해, 악기의 종류별로 제2저장부(222)에 직접 저장할 수도 있다.
한편, 연주자 단말기(10)는 연주음 제작 프로그램으로 제작한 개별 악기 연주음을, 통신부(21)를 통해, 악기의 종류별로 제2저장부(222)에 직접 저장할 수도 있다.
이하, 제2단계(S12)를 설명한다.
제2단계(S12)는 연주자 단말기(10)가 개별 악기 연주음에 대한 반주음을 인공지능서버(20)에 요청시, 인공지능서버(20)가 개별 악기 연주음에 어울리는 반주음을 생성하는 단계이다.
도 5에 도시된 바와 같이, 연주자 단말기(10)가 개별 악기 연주음에 대한 반주음을 인공지능서버(20)에 요청하면, 제1생성부(231)는 개별 악기 연주음의 계이름, 코드, 멜로디를 분석하여, 이와 어울리는 화음을 가진 다른 악기 연주음을 제1저장부(221), 제2저장부(222)에서 찾는다.
예를 들어, 연주자 단말기(10)의 개별 악기가 기타이면, 기타와 합주하면 좋을 다른 악기를, 연주곡의 종류, 계이름, 코드, 멜로디를 기준으로 찾아낸다. 이렇게 찾아낸 다른 악기가 드럼이라면, 제1생성부(231)는 같은 곡에 대해 드럼으로 연주된 연주음들을 제1저장부(221), 제2저장부(222)에서 찾아낸다. 그리고, 드럼으로 연주된 연주음들 중에서, 개별 악기 연주음의 계이름, 코드, 멜로디를 기준으로 최적의 드럼 연주음을 찾아낸다.
예를 들어, 기타로 연주된 개별 악기 연주음의 계이름이 “솔솔라라 솔솔 미” 이면, 제1생성부(231)는 기타 연주음과 어울리는 “솔솔라라 솔솔 미”, “솔솔라라 파파 도”, “솔솔시시 라라 레”로 연주된 드럼의 연주음을 찾아내, 이들 중 어느 하나를 반주음으로 연주자 단말기(10)에 제공하거나, 모두를 연주자 단말기(10)에 반주음으로 제공한다.
연주자 단말기(10)는 제공된 반주음으로 합주한 결과를, 이에 대한 평가를 인공지능서버(20)에 점수로 제공한다. 인공지능서버(20)는 평가점수를 받는 대가로 포인트를 제공한다. 평가점수가 높은 반주음에 대해서는, 이와 동일하거나 비슷한 개별 악기 연주음으로 반주음 요청이 왔을 때, 우선적으로 제공할 반주음으로 정해준다. 또한, 제공빈도가 높았던 반주음에 대해서도, 동일하거나 비슷한 개별 악기 연주음에 대한 반주음 요청이 왔을 때, 우선적으로 제공할 반주음으로 정해둔다. 이로 인해, 인공지능서버(20)가 연주자 단말기(10)에 반주음을 신속하게 제공할 수 있다.
한편, 제1생성부(231)는, “솔솔라라 파파 도”라는 계이름을 개별 연주 연주음과 화음을 이루는 “도도파파 라라 미”로 임의로 바꾸어 제공할 수도 있다. 이에 대한 평가 역시 연주자 단말기(10)로부터 제공받을 수 있다. 이때 말하는 화음은 일반적으로 “도 미 솔”과 같이 하나의 코드로 이루어진 음을 말한다. 예를 들어 C코드는 “도 미 솔”로 이루어진 코드이며, 이 코드에 속한 음(도. 미, 솔)은 서로 화음을 이룬다.
또한, 제1생성부(231)는, 동일한 곡에 대한 다른 악기 연주음들 각각에서, 마디별, 계이름, 코드별로 음을 분리해 낸 다음에, 이를 취합하여 새로운 반주음을 만들어낼 수도 있다. 예를 들어, 동일한 곡에 대한 제1드럼 연주음에서는 첫마디를, 동일한 곡에 대한 제2드럼 연주음에서는 두 번째 마디를 골라내어 결합시켜 반주음을 만들어내는 방식이다. 물론, 드럼 외 다른 악기에서도 동일한 방식으로 새로운 반주음을 만들어낼 수 있다.
상술한 방식들로, 인공지능서버(20)는 개별 악기 연주음을 자체적으로 분석하여 최적화된 반주음을 스스로 만들어낼 수 있다.
한편, 연주자 단말기(10)의 개별 악기 연주음에 대한 반주음을 인공지능서버(20)에 요청하면, 인공지능서버(20)는 연주자 단말기(10)에 개별 악기 연주음을 여러 번(3~4번) 요청할 수도 있다. 그 이유는, 같은 곡이라도 연주자의 연주패턴에 따라 연주음이 매번 달라질 수 있어, 동일한 곡에 대한 여러 번의 연주음으로, 연주패턴의 변화를 평균적으로 살펴본 후, 최적화된 반주음을 제공하기 위해서다.
제2생성부(232)는, 연주자 단말기(10)가 개별 악기 연주음에 대한 반주음을 요청했는데, 제1생성부(231)가 제1저장부(221), 제2저장부(222)에 저장된 연주음에서 개별 악기 연주음과 어울리는 반주음을 찾지 못했을 경우, 개별 악기 연주음에 어울리는 반주음을 직접 생성한다.
예를 들어, 연주자 단말기(10)의 개별 악기가 기타이면, 기타와 합주하면 좋을 다른 악기의 연주음을, 연주곡의 종류, 계이름, 코드, 멜로디를 기준으로 만들어낸다. 만약, 기타와 합주하면 좋을 악기가 드럼이라면, 제2생성부(232)는 기타가 연주한 곡에 대해 드럼으로 연주음을 만들어낸다.
예를 들어, 기타로 연주된 개별 악기 연주음의 계이름이 “솔솔라라 솔솔 미” 이면, 인공지능서버(20)는 이와 화음을 이루는 “솔솔라라 솔솔 미”, “솔솔라라 파파 도”, “솔솔시시 라라 레”로 드럼의 연주음을 만들어내, 이들 중 어느 하나를 반주음으로 연주자 단말기(10)에 제공하거나, 모두를 연주자 단말기(10)에 반주음으로 제공한다.
연주자 단말기(10)는 제공된 반주음으로 합주를 한 후, 이에 대한 평가를 인공지능서버(20)에 점수로 제공한다. 평가점수가 높은 반주음에 대해서는, 이와 동일하거나 비슷한 개별 악기 연주음으로 반주음 요청이 왔을 때, 우선적으로 제공할 반주음으로 정해준다. 또한, 제공빈도가 높았던 반주음에 대해서도, 동일하거나 비슷한 개별 악기 연주음에 대한 반주음 요청이 왔을 때, 우선적으로 제공할 반주음으로 정해둔다. 이로 인해, 인공지능서버(20)가 연주자 단말기(10)에 반주음을 신속하게 제공할 수 있다.
연주자 단말기(10)는, 인공지능서버(20)로부터 개별 악기 연주음에 대한 반주음을 제공받는 대가로, 인공지능서버(20)에 포인트를 지불하거나, 인공지능서버(20)가 제공하는 광고를 보거나, 현금 또는 신용카드로 결제할 수 있다. 이 밖에, 연주자 단말기(10)가 인공지능서버(20)에 대가를 지불하는 방식은 다양할 수 있다.
이하, 제3단계(S13)를 설명한다.
연주자 단말기(10)는 제1생성부(231) 또는 제2생성부(232)로부터 제공받은 반주음을, 개별 악기 연주시, 재생할 수 있다. 이 경우, 개별 악기 연주자는 반주음을 들으며 합주할 수 있다.
또는, 연주자 단말기(10)는 제1생성부(231) 또는 제2생성부(232)로부터 제공받은 반주음을, 개별 악기 연주음과 함께 저장한다. 이 경우, 개별 악기 연주자는, 개별 악기 연주음이 포함된 합주곡을 필요할 때마다 꺼내 들을 수 있다.

Claims (5)

  1. 삭제
  2. 삭제
  3. 삭제
  4. 삭제
  5. 인공지능서버가 연주자 단말기들의 개별 악기 연주음들을 악기의 종류별로 제1저장부에 저장해 놓거나, 상기 인공지능서버가 연주자 단말기들의 개별 악기 연주음들과 어울리는 다른 악기의 연주음을 인터넷에서 찾아 악기의 종류별로 제2저장부에 저장하는 제1단계와,
    연주자 단말기의 반주음 요청시, 상기 반주음을 요청한 연주자 단말기의 개별 악기 연주음과 어울리는 다른 악기의 연주음을, 제1생성부가 상기 제1저장부 또는 상기 제2저장부에 저장된 다른 악기의 연주음에서 찾아내, 상기 연주자 단말기에 반주음으로 제공하거나, 연주자 단말기의 반주음 요청시, 상기 제1생성부가 상기 제1저장부 또는 상기 제2저장부에 저장된 다른 악기의 연주음에서, 상기 반주음을 요청한 연주자 단말기의 개별 악기 연주음과 어울리는 다른 악기의 연주음을 찾지 못한 경우, 제2생성부가 상기 반주음을 요청한 연주자 단말기의 개별 악기 연주음과 어울리는 다른 악기의 연주음을 생성하여, 상기 연주자 단말기에 반주음으로 제공하는 제2단계와,
    연주자 단말기가 상기 제1생성부 또는 상기 제2생성부로부터 제공받은 반주음을, 상기 개별 악기 연주음과 함께 재생하거나, 상기 개별 악기 연주음과 함께 저장하는 제3단계를 포함하는 인공지능 합주 방법에 있어서,
    상기 연주자 단말기는 상기 제1저장부에 직접 접근하여, 연주음들을 직접 편집하여, 연주음이 저장된 상기 제1저장부의 하위폴더들 아래에, 편집된 연주음들이 저장되는 새로운 하위폴더들을 생성하며,
    상기 연주자 단말기는 제공된 반주음에 대한 평가를 상기 인공지능서버에 점수로 제공하고, 상기 인공지능서버는 평가점수를 받는 대가로 상기 연주자 단말기에 포인트를 제공하고, 평가점수가 높은 반주음에 대해서는, 상기 인공지능서버가, 이와 동일하거나 비슷한 개별 악기 연주음으로 반주음 요청이 왔을 때, 상기 평가점수가 높은 반주음을 우선적으로 제공하고,
    상기 연주자 단말기가 개별 악기 연주음에 대한 반주음을 상기 인공지능서버에 요청하면, 상기 인공지능서버는 상기 연주자 단말기에게 개별 악기 연주음을 반복적으로 요청하고 그 개별 악기 연주음을 여러번 제공 받은 후에야 비로소 개별 악기 연주 연주음에 대한 반주음을 제공하는 것을 특징으로 하는 인공지능 합주방법.
KR1020180026357A 2018-03-06 2018-03-06 인공지능 합주 시스템 및 인공지능 합주 방법 KR102122195B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180026357A KR102122195B1 (ko) 2018-03-06 2018-03-06 인공지능 합주 시스템 및 인공지능 합주 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180026357A KR102122195B1 (ko) 2018-03-06 2018-03-06 인공지능 합주 시스템 및 인공지능 합주 방법

Publications (2)

Publication Number Publication Date
KR20190105805A KR20190105805A (ko) 2019-09-18
KR102122195B1 true KR102122195B1 (ko) 2020-06-12

Family

ID=68070317

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180026357A KR102122195B1 (ko) 2018-03-06 2018-03-06 인공지능 합주 시스템 및 인공지능 합주 방법

Country Status (1)

Country Link
KR (1) KR102122195B1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012018282A (ja) * 2010-07-07 2012-01-26 Cellius Inc 演奏ファイル管理装置、演奏ファイル再生装置および演奏ファイル再生方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101203904A (zh) * 2005-04-18 2008-06-18 Lg电子株式会社 音乐谱写设备的操作方法
JP4752425B2 (ja) 2005-09-28 2011-08-17 ヤマハ株式会社 合奏システム
KR101041622B1 (ko) * 2009-10-27 2011-06-15 (주)파인아크코리아 사용자 입력에 따른 반주 기능을 갖는 음원 재생 장치 및 그 방법
JP2014219558A (ja) * 2013-05-08 2014-11-20 ヤマハ株式会社 音楽セッション管理装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012018282A (ja) * 2010-07-07 2012-01-26 Cellius Inc 演奏ファイル管理装置、演奏ファイル再生装置および演奏ファイル再生方法

Also Published As

Publication number Publication date
KR20190105805A (ko) 2019-09-18

Similar Documents

Publication Publication Date Title
US9177540B2 (en) System and method for conforming an audio input to a musical key
US9310959B2 (en) System and method for enhancing audio
US9251776B2 (en) System and method creating harmonizing tracks for an audio input
CN103959372B (zh) 用于使用呈现高速缓存针对所请求的音符提供音频的系统和方法
US8779268B2 (en) System and method for producing a more harmonious musical accompaniment
US7102067B2 (en) Using a system for prediction of musical preferences for the distribution of musical content over cellular networks
CA2929213C (en) System and method for enhancing audio, conforming an audio input to a musical key, and creating harmonizing tracks for an audio input
US6307139B1 (en) Search index for a music file
US20020038597A1 (en) Method and a system for recognizing a melody
MX2011012749A (es) Sistema y metodo para recibir, analizar y editar audio para crear composiciones musicales.
CA2843437A1 (en) System and method for producing a more harmonious musical accompaniment and for applying a chain of effects to a musical composition
CN104380371B (zh) 用于生成输入音乐数据的伴奏的装置、系统和方法
KR100634572B1 (ko) 오디오 데이터 자동 생성 방법 및 이를 이용한 사용자단말기 및 기록매체
CN1770258B (zh) 表演风格确定设备和方法
CA2843438A1 (en) System and method for providing audio for a requested note using a render cache
JP5034599B2 (ja) 楽曲紹介文生成装置、ナレーション付加装置およびプログラム
JP6288197B2 (ja) 評価装置及びプログラム
JP6102076B2 (ja) 評価装置
KR102122195B1 (ko) 인공지능 합주 시스템 및 인공지능 합주 방법
WO2022153875A1 (ja) 情報処理システム、電子楽器、情報処理方法およびプログラム
KR20090023912A (ko) 음악 데이터 처리 시스템
JP5552968B2 (ja) 楽曲検索装置および楽曲検索方法
KR20140054810A (ko) 반주음악 제작 서비스 시스템 및 그 방법, 그리고 이에 적용되는 장치
KR100967125B1 (ko) 네트워크 휴대용 장치에서의 특징 추출
JP6611633B2 (ja) カラオケシステム用サーバ

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant