KR20200023754A - 악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체 - Google Patents

악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체 Download PDF

Info

Publication number
KR20200023754A
KR20200023754A KR1020180100099A KR20180100099A KR20200023754A KR 20200023754 A KR20200023754 A KR 20200023754A KR 1020180100099 A KR1020180100099 A KR 1020180100099A KR 20180100099 A KR20180100099 A KR 20180100099A KR 20200023754 A KR20200023754 A KR 20200023754A
Authority
KR
South Korea
Prior art keywords
music
sound
information
page
providing
Prior art date
Application number
KR1020180100099A
Other languages
English (en)
Inventor
이태후
Original Assignee
이태후
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이태후 filed Critical 이태후
Priority to KR1020180100099A priority Critical patent/KR20200023754A/ko
Publication of KR20200023754A publication Critical patent/KR20200023754A/ko

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10GREPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
    • G10G1/00Means for the representation of music
    • G10G1/02Chord or note indicators, fixed or adjustable, for keyboard of fingerboards
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0033Recording/reproducing or transmission of music for electrophonic musical instruments
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal

Abstract

악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체가 개시된다. 본 악보 제공 장치는, 사운드를 입력받는 사운드 수신부 및 상기 사운드를 기반으로 악보가 출력되도록 하는 제어부를 포함한다. 이에 의해, 연주자로 하여금 연주에 보다 집중하도록 함으로써 연주자의 연주 실력이 보다 효과적으로 성장할 수 있도록 보조하고, 청취자로 하여금 연주 감상에 방해 요소가 되는 행위들이 배제된 채로의 보다 매끄럽고 품격있는 감상이 가능해지도록 하며, 연주자나 연주교사가 연주를 위해 종이 책자 형태의 악보을 소지하고 다녀야 하는 번거로움이 없어지도록 할 수 있게 된다.

Description

악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체{Apparatus, method and system for providing music sheet and computer readable recording medium applying the same}
본 발명은 악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체에 관한 것으로, 보다 상세하게는 디바이스에 악보를 디스플레이하여 연주자에게 제공할 수 있도록 하기 위한 악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체에 관한 것이다.
문화/예술에 대한 관심이 증가하면서, 음악에 대한 감상을 넘어 직접 악기를 연주하고자 하는 사람들이 많아지고 있다. 악기에 대한 연주는 고령화사회에서 치매예방이라는 거창한 명목을 거론하지 않더라도 노인을 비롯한 일반인들의 건전한 취미/여가생활에 충분히 기여하고 있고, 학생들에게도 마찬가지로 진학이나 취업 뿐만 아니라 성취감 향상을 통한 건전하고 긍정적인 자아 형성 및 삶의 질 향상에 기여를 하고 있다.
그러나, 악기에 대한 연주를 배우기 위해서는, 아직까지 직접 학원에 등원하여 수업을 받는 경우가 많기 때문에 사이즈가 큰 악기와 악보 등을 일일이 챙기고 다니는 것이 쉽지 않은 실정이다.
또한, 악기를 연주하기 위해서는 악보책에서 원하는 곡의 악보를 일일이 찾아야 하고 번거롭게 페이지를 직접 넘겨가며 연주를 해야 하기 때문에, 연주자의 입장에서 연주를 준비하기까지 수고스러움이 있고 연주 중에도 연주에 집중하기가 쉽지 않게 된다. 뿐만 아니라, 악기 교습 학원에서는 하나의 곡만 연주하기 보다는 여러 곡을 번갈아가며 연습시키는 경우가 많기 때문에, 곡이 변경될 때마다 악보를 일일이 찾는 시간적인 손해도 많은 상황이다.
따라서, 연주자에게 악보가 자동으로 제공되도록 하여 연주자로 하여금 연주에 보다 집중하도록 함으로써 연주자의 연주 실력이 보다 효과적으로 성장할 수 있도록 보조하고, 청취자로 하여금 연주 감상에 방해 요소가 되는 행위들이 배제된 채로의 보다 매끄럽고 품격있는 감상이 가능해지도록 하며, 연주자나 연주교사가 연주를 위해 종이 책자 형태의 악보을 소지하고 다녀야 하는 번거로움이 없어지도록 하기 위한 방안의 모색이 요청된다.
공개특허공보 제10-2013-0057293호
본 발명은 상기와 같은 문제를 해결하기 위한 안출된 것으로서, 본 발명의 목적은 연주자나 연주교사 등 사람이 일일이 악보를 펼치거나 페이지를 넘기는 행위들을 생략하고 연주에 집중할 수 있도록 하기 위한 악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체를 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 악보 제공 장치는, 사운드를 입력받는 사운드 수신부; 및 상기 사운드를 기반으로 악보가 출력되도록 하는 제어부;를 포함한다.
여기서, 상기 사운드는, 연주자의 연주에 의해 발생되는 악기의 사운드일 수 있다.
또한, 상기 사운드는, 연주자의 연주 시작을 알리는 것으로 기설정되어 있는 상기 연주자의 보이스일 수 있다.
그리고, 본 실시예에 따른 악보 제공 장치는, 각각의 악보가 적어도 하나의 페이지로 구성되는 적어도 하나의 악보를 저장하는 제1 저장부;를 더 포함하고, 상기 제어부는, 상기 제1 저장부에서 상기 사운드에 관련된 곡의 악보를 추출하여, 상기 추출된 악보 중 상기 사운드와 일치하는 연주 파트가 속한 페이지가 출력되도록 할 수 있다.
또한, 상기 제어부는, 상기 입력된 사운드와 일치하는 연주 파트가 속한 페이지가 복수로 존재하는 것으로 판단되는 경우, 상기 복수의 페이지들이 선택가능한 상태로 출력되도록 하거나, 연주자의 추가적인 연주에 의해 발생된 사운드가 추가적으로 입력된 후에 상기 추가적으로 입력된 사운드와 일치하는 연주 파트가 속한 페이지가 출력되도록 할 수 있다.
그리고, 본 실시예에 따른 악보 제공 장치는, 각각의 악보가 적어도 하나의 페이지로 구성되는 적어도 하나의 악보를 저장하는 제1 저장부;를 더 포함하고, 상기 제어부는, 상기 제1 저장부에서 상기 사운드에 관련된 곡의 악보를 추출하여,상기 추출된 악보 내에서 상기 사운드와 일치하는 연주 파트가 제1 페이지의 말미에 위치하는 경우, 상기 제1 페이지가 먼저 출력되도록 한 후 기설정된 타이밍에 상기 제1 페이지의 다음 페이지에 해당하는 제2 페이지가 상기 제1 페이지에서 전환되어 출력되도록 할 수 있다.
또한, 상기 사운드는, 연주자의 연주에 의해 발생되는 악기의 사운드이고, 상기 제어부는, 상기 연주의 속도를 기반으로 상기 기설정된 타이밍을 계산하여 상기 제2 페이지가 출력되도록 할 수 있다.
그리고, 상기 기설정된 타이밍은, 상기 제1 페이지에 대한 연주가 종료되는 타이밍일 수 있다.
또한, 상기 사운드는, 연주자의 연주에 의해 발생되는 악기의 사운드이고, 상기 제어부는, 상기 사운드가 기설정된 세기 또는 기설정된 멜로디를 가지는 것으로 판단되지 않을 경우 상기 악보 제공 장치가 저전력 모드 또는 스탠바이 모드로 동작되도록 하고, 상기 제어부는, 상기 사운드가 기설정된 세기 또는 기설정된 멜로디를 가지는 경우, 상기 악보 제공 장치의 상기 저전력 모드 또는 상기 스탠바이 모드가 자동으로 해제되도록 한 후 상기 사운드와 일치하는 악보가 출력되도록 할 수 있다.
그리고, 상기 제어부는, 상기 악보 제공 장치의 디스플레이 크기 정보 또는 디스플레이 해상도 정보를 기반으로, 상기 악보 제공 장치 별로 상기 악보의 제1 페이지의 일부분이 확대되거나 상기 제1 페이지가 축소되어 출력될 수 있도록 제어할 수 있다.
또한, 상기 제어부는, 상기 제1 페이지의 일부분이 확대되어 출력되는 경우, 상기 제1 페이지 중 상기 사운드와 일치하는 연주 파트가 연주 속도를 기반으로 변경되어 가며 확대되어 출력되도록 제어하며, 상기 제1 페이지가 축소되어 출력되는 경우, 상기 제1 페이지의 다음 페이지인 제2 페이지의 적어도 일부가 상기 제1 페이지와 함께 출력되도록 제어할 수 있다.
그리고, 본 실시예에 따른 악보 제공 장치는, 상기 악보의 음악 정보를 저장하는 제1 저장부; 및 상기 음악 정보가 상기 제1 저장부에 저장되도록 외부 서버로부터 수신하는 통신부;를 더 포함하고, 상기 제어부는, 상기 통신부로부터 수신된 음악 정보와 상기 사운드로부터 분석된 음악 정보가 일치하는지 여부를 기초로 상기 사운드에 대응되는 악보가 출력되도록 할 수 있다.
그리고, 본 실시예에 따른 악보 제공 장치는, 상기 악보에 대응되는 전자 파일을 저장하는 제2 저장부; 및 상기 전자 파일에서 상기 악보의 음악 정보를 추출하는 전자 파일 해독부;를 더 포함하고, 상기 제어부는, 상기 전자 파일 해독부에서 추출된 음악 정보와 상기 사운드로부터 분석된 음악 정보가 일치하는지 여부를 기초로 상기 사운드에 대응되는 악보가 출력되도록 할 수 있다.
또한, 상기 전자 파일은, 책 형태의 악보가 적어도 하나의 페이지별로 촬영되거나 스캔되어 전자 문서 형태로 기록되어 있는 전자 파일일 수 있다.
그리고, 상기 제어부는, 상기 사운드의 리듬 정보, 멜로디 정보, 계이름 정보 및 박자 정보 중 적어도 하나를 음악 정보로 사용하여, 상기 음악 정보와 일치하는 악보가 출력되도록 할 수 있다.
또한, 상기 사운드는, 연주자의 연주에 의해 발생되는 악기의 사운드이고, 상기 제어부는, 상기 연주자의 연주 시간 정보, 연주 횟수 정보, 연주 상태 정보, 연주된 곡에 대한 전체 사운드 정보 중 적어도 하나가 내부에 저장되거나 외부에 전송되도록 할 수 있다.
그리고, 본 실시예에 따른 악보 제공 장치는, 상기 연주자 또는 상기 연주되는 악기를 촬영하기 위한 촬영부;를 더 포함하고, 상기 제어부는, 상기 촬영부에 상기 연주자가 상기 악기를 연주하는 모습이 촬영된 정보가 내부에 저장되거나 외부에 전송되도록 할 수 있다.
또한, 상기 사운드는, 연주자의 연주에 의해 발생되는 악기의 사운드이고, 상기 제어부는, 상기 악기의 사운드가 복수의 악기들에 대한 복수의 사운드라고 판단되는 경우, 가장 큰 크기를 가지는 사운드에 해당하는 악기 또는 상기 연주자에 의해 지정된 악기에 해당하는 악보가 출력되도록 할 수 있다.
그리고, 상기 제어부는, 상기 연주자에 의해 연주되는 곡이 완주되지 않았다고 판단되거나 상기 연주자로부터 지정된 악기에 대한 지정 해제 명령이 수신되지 않았다고 판단되는 경우, 상기 악기의 사운드가 일시적으로 수신되지 않더라도 상기 악보의 출력이 유지되도록 할 수 있다.
한편, 상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 악보 제공 시스템은, 악기별 음악 정보를 제공하는 음악 제공 서버; 및 입력된 사운드를 기반으로 상기 사운드의 음악 정보를 추출하여 상기 음악 제공 서버에서 수신되는 음악 정보와 비교함으로써, 악보를 출력하는 악보 제공 장치;를 포함한다.
한편, 상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 디바이스의 화면에 악보를 출력하여 제공하는 악보 제공 방법은, 사운드를 입력받는 단계; 및 상기 사운드를 기반으로 악보를 출력하는 단계;를 포함한다.
여기서, 상기 사운드는, 연주자의 연주에 의해 발생되는 악기의 사운드일 수 있다.
또한, 상기 사운드는, 연주자의 연주 시작을 알리는 것으로 기설정되어 있는 상기 연주자의 보이스일 수 있다.
그리고, 본 실시예에 따른 악보 제공 방법은, 각각의 악보가 적어도 하나의 페이지로 구성되는 적어도 하나의 악보를 저장하는 단계;를 더 포함하고, 상기 악보 출력 단계는, 상기 적어도 하나의 악보에서 상기 사운드에 관련된 곡의 악보를 추출하여, 상기 추출된 악보 중 상기 사운드와 일치하는 연주 파트가 속한 페이지가 출력되도록 할 수 있다.
또한, 상기 악보 출력 단계는, 상기 입력된 사운드와 일치하는 연주 파트가 속한 페이지가 복수로 존재하는 것으로 판단되는 경우, 상기 복수의 페이지들이 선택가능한 상태로 출력되도록 하거나, 연주자의 추가적인 연주에 의해 발생된 사운드가 추가적으로 입력된 후에 상기 추가적으로 입력된 사운드와 일치하는 연주 파트가 속한 페이지가 출력되도록 할 수 있다.
그리고, 본 실시예에 따른 악보 제공 방법은, 각각의 악보가 적어도 하나의 페이지로 구성되는 적어도 하나의 악보를 저장하는 단계;를 더 포함하고, 상기 악보 출력 단계는, 상기 적어도 하나의 악보에서 상기 사운드에 관련된 곡의 악보를 추출하여, 상기 추출된 악보 내에서 상기 사운드와 일치하는 연주 파트가 제1 페이지의 말미에 위치하는 경우, 상기 제1 페이지가 먼저 출력되도록 한 후 기설정된 타이밍에 상기 제1 페이지의 다음 페이지에 해당하는 제2 페이지가 상기 제1 페이지에서 전환되어 출력되도록 할 수 있다.
또한, 상기 사운드는, 연주자의 연주에 의해 발생되는 악기의 사운드이고, 상기 악보 출력 단계는, 상기 연주의 속도를 기반으로 상기 기설정된 타이밍을 계산하여 상기 제2 페이지가 출력되도록 할 수 있다.
그리고, 상기 기설정된 타이밍은, 상기 제1 페이지에 대한 연주가 종료되는 타이밍일 수 있다.
또한, 상기 사운드는, 연주자의 연주에 의해 발생되는 악기의 사운드이고, 본 실시예에 따른 악보 제공 방법은, 상기 사운드가 기설정된 세기 또는 기설정된 멜로디를 가지는 것으로 판단되지 않을 경우 상기 디바이스가 저전력 모드 또는 스탠바이 모드로 동작되도록 하는 단계;를 더 포함하고, 상기 악보 출력 단계는, 상기 사운드가 기설정된 세기 또는 기설정된 멜로디를 가지는 경우, 상기 디바이스의 상기 저전력 모드 또는 상기 스탠바이 모드가 자동으로 해제되도록 한 후 상기 사운드와 일치하는 악보가 출력되도록 할 수 있다.
그리고, 상기 악보 출력 단계는, 상기 디바이스의 디스플레이 크기 정보 또는 디스플레이 해상도 정보를 기반으로, 상기 디바이스 별로 상기 악보의 제1 페이지의 일부분이 확대되거나 상기 제1 페이지가 축소되어 출력되도록 할 수 있다.
또한, 상기 악보 출력 단계는, 상기 제1 페이지의 일부분이 확대되어 출력되는 경우, 상기 제1 페이지 중 상기 사운드와 일치하는 연주 파트가 연주 속도를 기반으로 변경되어 가며 확대되어 출력되도록 하며, 상기 제1 페이지가 축소되어 출력되는 경우, 상기 제1 페이지의 다음 페이지인 제2 페이지의 적어도 일부가 상기 제1 페이지와 함께 출력되도록 할 수 있다.
그리고, 본 실시예에 따른 악보 제공 방법은, 상기 악보의 음악 정보를 저장하는 단계; 및 상기 음악 정보가 저장되도록 외부 서버로부터 수신하는 단계;를 더 포함하고, 상기 악보 출력 단계는, 상기 외부 서버로부터 수신된 음악 정보와 상기 사운드로부터 분석된 음악 정보가 일치하는지 여부를 기초로 상기 사운드에 대응되는 악보가 출력되도록 할 수 있다.
그리고, 본 실시예에 따른 악보 제공 방법은, 상기 악보에 대응되는 전자 파일을 저장하는 단계; 및 상기 전자 파일에서 상기 악보의 음악 정보를 추출하는 단계;를 더 포함하고, 상기 악보 출력 단계는, 상기 전자 파일 해독부에서 추출된 음악 정보와 상기 사운드로부터 분석된 음악 정보가 일치하는지 여부를 기초로 상기 사운드에 대응되는 악보가 출력되도록 할 수 있다.
또한, 상기 전자 파일은, 책 형태의 악보가 적어도 하나의 페이지별로 촬영되거나 스캔되어 전자 문서 형태로 기록되어 있는 전자 파일일 수 있다.
그리고, 상기 악보 출력 단계는, 상기 사운드의 리듬 정보, 멜로디 정보, 계이름 정보 및 박자 정보 중 적어도 하나를 음악 정보로 사용하여, 상기 음악 정보와 일치하는 악보가 출력되도록 할 수 있다.
또한, 상기 사운드는, 연주자의 연주에 의해 발생되는 악기의 사운드이고, 본 실시예에 따른 악보 제공 방법은, 상기 연주자의 연주 시간 정보, 연주 횟수 정보, 연주 상태 정보, 연주된 곡에 대한 전체 사운드 정보 중 적어도 하나가 내부에 저장되거나 외부에 전송되도록 하는 단계;를 더 포함할 수 있다.
그리고, 본 실시예에 따른 악보 제공 방법은, 상기 연주자 또는 상기 연주되는 악기를 촬영하는 단계; 및 상기 연주자가 상기 악기를 연주하는 모습이 촬영된 정보가 내부에 저장되거나 외부에 전송되도록 하는 단계;를 더 포함할 수 있다.
또한, 상기 사운드는, 연주자의 연주에 의해 발생되는 악기의 사운드이고, 상기 악보 출력 단계는, 상기 악기의 사운드가 복수의 악기들에 대한 복수의 사운드라고 판단되는 경우, 가장 큰 크기를 가지는 사운드에 해당하는 악기 또는 상기 연주자에 의해 지정된 악기에 해당하는 악보가 출력되도록 할 수 있다.
그리고, 상기 악보 출력 단계는, 상기 연주자에 의해 연주되는 곡이 완주되지 않았다고 판단되거나 상기 연주자로부터 지정된 악기에 대한 지정 해제 명령이 수신되지 않았다고 판단되는 경우, 상기 악기의 사운드가 일시적으로 수신되지 않더라도 상기 악보의 출력이 유지되도록 할 수 있다.
한편, 상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 컴퓨터 프로그램이 수록된 컴퓨터로 읽을 수 있는 기록매체는 디바이스의 화면에 악보를 출력하여 제공하는 악보 제공 방법을 수행할 수 있다.
이에 의해, 연주자로 하여금 연주에 보다 집중하도록 함으로써 연주자의 연주 실력이 보다 효과적으로 성장할 수 있도록 보조하고, 청취자로 하여금 연주 감상에 방해 요소가 되는 행위들이 배제된 채로의 보다 매끄럽고 품격있는 감상이 가능해지도록 하며, 연주자나 연주교사가 연주를 위해 종이 책자 형태의 악보을 소지하고 다녀야 하는 번거로움이 없어지도록 할 수 있게 된다.
도 1은 본 발명의 일 실시예에 따른 악보 제공 시스템을 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 악보 제공 장치를 도시한 블럭도이다.
도 3은 악보 제공 방법의 일 실시예에 따라 악보를 출력하여 제공하는 모습을 도시한 도면이다.
도 4는 악보 제공 방법의 일 실시예에 따라 악보를 출력하여 제공하는 모습을 도시한 도면이다.
도 5는 악보 제공 방법의 다른 실시예에 따라 악보를 출력하여 제공하는 모습을 도시한 도면이다.
도 6은 악보 제공 방법의 다른 실시예에 따라 악보를 출력하여 제공하는 모습을 도시한 도면이다.
도 7은 악보 제공 방법의 또 다른 실시예에 따라 악보를 출력하여 제공하는 모습을 도시한 도면이다.
도 8은 악보 제공 장치의 다른 유형에 따라 악보를 달리 출력하여 제공하는 모습을 도시한 도면이다.
도 9는 악보 제공 장치의 또 다른 유형에 따라 악보를 달리 출력하여 제공하는 모습을 도시한 도면이다.
도 10은 음악 정보 형태의 일 예를 도시한 도면이다.
도 11은 본 발명의 추가적인 실시예들에 따른 화면의 표시 상태를 도시한 도면이다.
도 12는 본 발명의 일 실시예에 따른 악보 제공 방법을 도시한 흐름도이다.
이하에서는 도면을 참조하여 본 발명에 대해 보다 상세히 설명하기로 한다. 특히, 도 1과 도 2에서는 악보 제공 장치와 음악 제공 서버의 상호 연동 동작 및 내부 구성에 대해 설명하기로 하고, 도 3 내지 도 7에서는 각 실시예에 따른 악보 제공 방법에 대해 설명하기로 하며, 도 8과 도 9에서는 장치의 유형이나 특색에 따라 악보가 달리 제공되는 모습에 대해 설명하기로 한다. 또한, 도 10에서는 음악 정보의 형태의 일 예에 대해 설명하기로 하고, 도 11에서는 화면의 표시 상태의 또 다른 예들에 대해 설명하기로 하며, 도 12에서는 악보 제공 방법이 수행되는 플로우에 대해 설명하기로 한다.
<연동 동작 및 내부 구성>
도 1은 본 발명의 일 실시예에 따른 악보 제공 시스템을 도시한 도면이다.
본 실시예에 따른 악보 제공 시스템은 악보 제공 장치(100)와 음악 제공 서버(200)로 구성되며, 악보 제공 장치(100)와 음악 제공 서버(200) 간의 통신을 통해 악보 제공 장치(100)가 악기(10)를 연주하는 연주자(Musician)에게 악보를 제공할 수 있도록 하게 된다.
물론 도시된 예에서는 악보 제공 장치(100)와 음악 제공 서버(200)가 무선 통신을 통해 상호 통신할 수 있는 것으로 상정하였으나, 이는 일 예에 불과한 것으로 상호 간의 유선 통신을 통해서 또는 유무선을 병행하여도 악보가 제공되도록 할 수도 있을 것이다.
또한, 도시된 예에서는 악보 제공 장치(100)가 음악 제공 서버(200)와 통신하여 악보를 제공하는 것으로 상정하였으나, 이 역시 일 예에 불과한 것으로서 음악 제공 서버(200)는 악보를 제공하기 이전에 미리 악보 제공 장치(100)로 악보를 제공하고 악보 제공 장치(100)가 제공받아 미리 저장한 악보를 연주자(Musician)에게 제공하도록 구현할 수도 있을 것이며, 때로는 음악 제공 서버(200)와의 통신 없이 악보 제공 장치(100)가 악보를 저장한 채로 양산되도록 구현될 수도 있을 것이다.
도 2는 본 발명의 일 실시예에 따른 악보 제공 장치(100)를 도시한 블럭도이다. 본 실시예에 따른 악보 제공 장치(100)는 악기(10)의 사운드를 수신하여 수신된 사운드로부터 연주되고 있는 곡의 정보를 추출하고, 곡의 정보를 기반으로 악보를 추출하여 연주자(Musician)에게 악보를 제공할 수 있게 된다.
이를 위한 본 실시예에 따른 악보 제공 장치(100)는 사운드 수신부(110), 제1 저장부(120), 제2 저장부(130), 통신부(140), 제어부(150), 전자 파일 해독부(160) 및 촬영부(170)로 구성된다.
사운드 수신부(110)는 연주자(Musician)가 연주하는 악기(10)에 대한 연주 사운드를 수신하게 된다. 또한, 사운드 수신부(110)는 연주자(Musician)의 육성이나 악기(10)와 관련없는 기타 다른 사운드도 수신할 수 있도록 구현될 수 있다. 사운드 수신부(110)에서 수신된 사운드는 제어부(150)로 전달되며, 제어부(150)는 수신된 사운드를 기반으로 악보가 출력되도록 한다.
제1 저장부(120)는 디지털 악보와 해당 악보에 대한 음악 정보를 저장하는 역할을 하게 된다. 전술한 바와 같이 악보 제공 장치(100)는 음악 제공 서버(200)와의 통신을 통해 외부에서 디지털 파일 형태의 악보를 전달받아 저장되도록 하거나 제조 과정에서 디지털 파일 형태의 악보가 미리 저장되도록 할 수 있다. 이러한 악보는 제1 저장부(120)에 저장되며 필요한 경우에 제1 저장부(120)에서 추출되어 연주자(Musician)에게 제공되게 된다.
한편, 음악 정보라 함은, 연주되는 곡에서 추출되거나, 악보로부터 추출된 리듬 정보, 멜로디 정보, 계이름 정보 또는 박자 정보 등 연주자(Musician)가 연주를 하기 위해 필요한 음악적인 요소들에 대한 정보를 총칭하는 개념이라고 할 수 있다.
이러한 제1 저장부(120)에 저장되는 음악 정보는 연주자(Musician)가 연주하는 곡에 대한 분석이 가능할 수 있도록 제1 저장부(120)에 저장되는 악보와 매칭된 상태로 마련되게 된다. 즉, 사운드 수신부(110)로부터 연주자(Musician)가 연주하는 사운드가 입력되면, 악보 제공 장치(100)는 수신되는 사운드와 일치하는 곡을 판별할 필요가 있게 되는데, 이러한 판별은 결국 음악 정보를 기반으로 이루어지게 된다.
이러한 제1 저장부(120)에 저장되는 악보는 후술할 제2 저장부(130)에 저장되는 촬영/스캔된 전자 문서 파일 형태의 악보와 구분되는 디지털 악보를 의미한다. 즉, 디지털 악보는 악보가 화면상에서 출력될 수 있도록 악보를 구성하는 데이터들이 디지털화되어 제공되는 악보를 의미하고, 이와 대비되는 전자 문서 파일 형태의 악보는 종이 등의 인쇄물이 스캔되거나 촬영된 상태의 jpg, pdf 등의 형식으로 된 악보를 의미한다.
한편, 제1 저장부(120)에 저장되는 악보는 하나의 곡에 대한 악보만을 의미하는 것은 아니며, 여러 곡에 대한 복수의 악보들을 의미할 수 있다. 또한, 복수의 악보들 각각은 하나의 페이지로 구성되는 것이 아니라 여러 페이지로 구성되어 저장될 수 있다. 예를 들어, 'frozen'이라는 애니메이션의 주제가인 'let it go'라는 곡은 피아노 연주를 위한 악보가 두 페이지 이상의 복수로 구성되어 있으며, 이러한 복수의 페이지들은 하나의 곡에 대한 악보로서 저장되게 되고, 이와 마찬가지의 논리로 또 다른 곡에 대한 악보는 또 다른 복수의 페이지들로 구성된 채로 저장될 수 있게 된다.
따라서, 이하에서 설명되는 악보를 제공한다고 함은, 한 페이지로 구성되는 악보의 해당 페이지를 제공하는 것은 물론이거니와, 두 페이지 이상으로 구성되는 악보에서 (1)특정 페이지 또는 (2)특정 페이지의 일 부분 또는 (3)특정 페이지와 그 다음 페이지가 함께 제공되는 개념 등을 모두 포함하는 것이라고 할 것이다.
제1 저장부(120)에 저장된 디지털 악보나 이러한 악보의 음악 정보는 제어부(150)로 전달되며, 이로 인해 제어부(150)로 하여금 음악 정보에 대한 판단 등이 가능하도록 하고, 이에 근거하여 악보가 화면상으로 출력되어 연주자(Musician)에게 제공되게 된다.
제2 저장부(130)는 전자 문서 파일 형태의 악보와 해당 악보에 대한 음악 정보를 저장하는 역할을 하게 된다.
전술한 바와 같이, 전자 문서 파일 형태의 악보라 함은 책 형태의 악보가 적어도 하나의 페이지별로 촬영되거나 스캔되는 등 pdf, jpg 등의 전자 문서 형태로 기록되어 있는 악보를 의미하는데, 이와 같이 악보에 대한 전자 문서 파일이 저장되게 되는 이유는, 연주자(Musician)에게 악보를 제공할 때 반드시 자체 제작되거나 내부에서 생성된 디지털 악보를 제공하는 것이 아니라 이미 기성화되어 제작된 악보의 형태로도 연주자(Musician)에게 제공될 수 있도록 하기 위함이다.
예를 들어, 시중에는 악보를 구매하면 온라인으로 화면 상에서 볼 수 있도록 하거나 프린트로 출력하여 볼 수 있도록 하는 시스템들이 이미 구축되어 있다. 이 경우, 악보 제공 장치(100)는 온라인 화면 상에서 볼 수 있도록 제공되는 전자 문서 파일을 그대로 제공받아 연주자(Musician)에게 제공할 수 있도록 구현될 수도 있을 것이며, 프린트로 출력하여 볼 수 있는 책 형태의 악보가 스캔된 전자 문서 파일을 제공받아 연주자(Musician)에게 제공할 수 있도록 구현될 수도 있을 것이다. 또한, 오프라인 매장에서 종이 형태의 악보를 구매한 뒤, 자체적으로 스캔하여 악보 제공 장치(100)에 저장시켜 놓으면, 이 역시 전자 문서 파일의 형태로 악보 제공 장치(100)를 통해 연주자(Musician)에게 제공될 수 있을 것이다.
즉, 악보 제공 장치(100)는 반드시 디지털 악보의 형태가 아닌 기성화된 물리적 인쇄물로 된 악보나 자체적인 포맷이나 형식을 따르지 않는 다른 악보 제공자의 악보를 연주자(Musician)에게 제공할 필요성에 대한 해결도 가능하도록 하며, 이를 위해 이러한 악보에 대한 전자 문서 파일은 제2 저장부(130)에 저장되게 된다.
한편, 이와 같이 외부 악보 제작자로부터 악보를 전자 문서 파일 형태로 제공 받는 경우 이러한 외부 악보 제작자도 전술한 음악 제공 서버(200)의 역할을 할 수 있음은 물론이다.
제2 저장부(130)에 저장된 악보의 음악 정보나 악보의 전자 문서 파일은 제어부(150)로 전달되며, 이로 인해 제어부(150)로 하여금 음악 정보에 대한 판단 및 전자 파일 해독에 의한 타이밍 계산 등이 가능하도록 하고, 이에 근거하여 악보가 화면상으로 출력되어 연주자(Musician)에게 제공되게 된다.
한편, 이상에서는 제1 저장부(120)와 제2 저장부(130)가 별도로 구현되는 것으로 상정하였으나, 이는 저장되는 개념들을 설명하기 위한 목적으로 편의상 구분시켜 놓은 것에 불과하며, 제1 저장부(120)와 제2 저장부(130)가 HDD, SSD, 메모리카드, USB 등 물리적인 매체로 반드시 구분되도록 마련되어야 하는 것을 의미하는 것은 아니다.
따라서, 실제로는 제1 저장부(120)와 제2 저장부(130)가 같은 물리 매체에 저장되도록 구현하는 경우에도 본 발명의 기술적 사상이 그대로 적용되어야 할 것이고, 또한 이상에서 설명한 개념들 이외의 정보나 데이터들도 제1 저장부(120) 또는 제2 저장부(130)에 함께 저장될 수 있음은 물론이다.
통신부(140)는 전술한 바와 같이 음악 제공 서버(200)와의 통신을 위해 마련되며, 유선 통신 또는 무선 통신 등 필요한 방식에 따라 구현될 수 있다.
제어부(150)는 악보 제공 장치(100)가 연주자(Musician)에게 음악별, 상황별, 악기별 악보를 제공할 수 있도록 사운드를 해독하고, 악보를 추출하며, 음악 정보를 판단하고 화면이 출력되도록 처리하는 역할을 하게 된다. 또한, 악보의 페이지를 넘기는 타이밍을 계산하거나 악보 제공 장치(100)의 스탠바이 모드 여부를 결정하는 역할을 하게 된다.
이를 위해 제어부(150)는 사운드 해독부(151), 악보 추출부(152), 타이밍 계산부(153), 스탠바이 모드 판단부(154), 음악 정보 판단부(155) 및 화면 처리부(156)로 구성된다.
사운드 해독부(151)는 연주자(Musician)의 연주에 의해 발생되는 악기(10)의 사운드를 해독하는 역할을 한다.
연주자(Musician)의 연주에 의해 발생되는 악기(10)의 사운드가 사운드 수신부(110)로 입력되면, 사운드 해독부(151)는 연주에 의해 발생되는 악기(10)의 사운드를 음악 정보의 형태로 해독하게 된다.
전술한 바와 같이 음악 정보는 리듬 정보, 멜로디 정보, 계이름 정보 또는 박자 정보 등 음악적인 요소들에 대한 정보를 총칭하는 개념이라고 할 수 있다. 따라서, 사운드 해독부(151)는 연주에 의해 발생되는 악기(10)의 사운드를 기반으로 해당 사운드의 리듬 정보, 멜로디 정보, 계이름 정보 또는 박자 정보 등이 추출되도록 해독하게 된다.
또한, 사운드 해독부(151)는 연주자(Musician)의 연주 시작을 알리는 것으로 기설정되어 있는 연주자(Musician)의 보이스를 해독하도록 구현될 수 있다.
악보 제공 장치(100)는 특정한 이벤트가 발생되는 경우에 악보가 제공되도록 구현될 수도 있는데, 그 중에서도 연주자(Musician)의 연주 시작을 알리는 특정한 보이스에 반응하여 악보가 제공되도록 구현될 수 있으며, 이 경우 사운드 해독부(151)는 수신된 보이스가 이러한 연주 시작을 알리는 보이스인지 여부를 판단할 수 있고 판단결과에 따라 악보 제공 장치(100)가 악보를 제공할 것인지 결정할 수 있게 된다.
악보 추출부(152)는 사운드 해독부(151)에서 해독된 결과에 따라 제1 저장부(120)에 저장된 디지털 악보 또는 제2 저장부(130)에 저장된 전자 문서 파일 형태의 악보를 추출하는 역할을 한다.
우선, 악보 추출부(152)는 사운드 해독부(151)에서 추출된 음악 정보를 기반으로 해당 음악 정보와 일치하는 음악 정보를 제1 저장부(120)에서 확인하여, 확인된 음악 정보와 매칭된 디지털 악보를 제1 저장부(120)에서 추출할 수 있다.
물론, 악보 추출부(152)는 악보를 제1 저장부(120)에서 추출하는 역할만 하고, 음악 정보를 비교하는 역할은 후술할 음악 정보 판단부(155)에 의해 수행되도록 구현할 수도 있을 것이다.
만약, 사운드 해독부(151)에서 추출된 음악 정보를 기반으로 해당 음악 정보와 일치하는 음악 정보가 제1 저장부(120)에서 확인되지 않는다고 판단되는 경우, 악보 추출부(152)는 사운드 해독부(151)에서 추출된 음악 정보를 기반으로 해당 음악 정보와 일치하는 음악 정보를 제2 저장부(120)에서 확인하여, 확인된 음악 정보와 매칭된 전자 문서 파일 형태의 악보를 제2 저장부(120)에서 추출할 수 있다.
이 경우에도 악보 추출부(152)는 악보를 제2 저장부(130)에서 추출하는 역할만 하고, 음악 정보를 비교하는 역할은 후술할 음악 정보 판단부(155)에 의해 수행되도록 할 수도 있을 것이다.
즉, 이상에서는 악보 제공 장치(100)가 디지털 악보를 미리 구비하지 않은 경우까지 상정하여 설명하였으나, 외부에서 pdf나 jpg 등의 전자 문서 형태의 전자 파일을 악보로서 수신하고 나면, 연주자(Musician)의 연주가 진행될 때 즉각적인 악보 제공이 가능하도록, 전자 파일 해독부(160)와 음악 정보 판단부(155)가 이를 디지털 파일 형태의 음악 정보로 구성된 디지털 악보로 변환하여 제1 저장부(120)에 미리 저장되어 있도록 하고, 전자 파일 해독부(160)에서 해독되어 생성된 음악 정보가 해당 디지털 악보와 매칭된 상태로 제1 저장부(120)에 미리 저장되어 있도록 할 수 있을 것이다.
타이밍 계산부(153)는, 악보가 출력될 타이밍을 계산하기 위한 목적을 마련된다.
본 악보 제공 장치(100)의 주요 기술적 사상들 중 하나는 연주자(Musician)가 일일이 악보를 넘기지 않더라도 연주 상황이나 연주되는 파트에 따라 악보가 자동으로 넘어가게 구현되도록 하는 것이다.
이를 위해, 타이밍 계산부(153)는, 악보의 특정 페이지에서 다음 페이지로 넘어가는 타이밍을 계산하여, 연주자(Musician)의 특정 페이지에 대한 연주가 완료되는 시점에 연주자(Musician)가 일일이 악보를 넘기지 않더라도 다음 페이지에 대한 제공이 가능하도록, 페이지를 넘기는 타이밍을 계산하게 된다.
이러한 타이밍은, 연주자(Musician)의 연주 속도를 기반으로 계산될 수 있으며, 특히, 특정 페이지에 대한 연주가 종료되고 다음 페이지에 대한 연주가 시작되는 것으로 예측되는 타이밍일 수 있다.
스탠바이 모드 판단부(154)는, 현재 연주자(Musician)가 연주를 하고 있는지 여부에 따라 악보 제공 장치(100)가 저전력 모드 또는 스탠바이 모드로 동작할 수 있도록 연주 여부를 판단하는 역할을 하게 된다.
본 악보 제공 장치(100)의 주요 기술적 사상들 중 다른 하나는 연주자(Musician)가 도입부에 대한 연주를 시작하면 평소에 스탠바이 모드로 동작하고 있던 악보 제공 장치(100)가 연주를 듣고 알아서 연주자(Musician) 악보를 제공하게 함에 있다.
일반적으로 능숙한 연주자(Musician)들은 연주할 곡의 악보를 모두 외우고 있는 경우가 많지만, 악기를 배우는 중이거나 해당 곡을 배우는 중인 연주자(Musician)들 연주할 곡의 악보를 모두 외우고 있지 못한 경우가 많다.
그러나, 배우고 있는 중의 연주자(Musician)라도 대부분 도입부는 숙지하고 있을 것이며, 능숙한 연주자(Musician)라도 간간히 참고하기 위한 목적으로 악보가 출력되기를 바라게 된다.
이를 위해, 스탠바이 모드 판단부(154)는 평소에는 저전력 상태를 유지하다가도, 연주가 시작되면 해당 곡에 대한 악보를 제공할 수 있도록 스탠바이 모드 여부를 판단하는 역할을 하게 된다.
이는 전술한 도입부 뿐만 아니라 곡의 중간 부분인 경우에도 적용될 수 있다. 예를 들어, 연주자(Musician)가 연습 중인 구간이라던가 하이라이트 부분을 연주하게 되면, 스탠바이 모드 판단부(154)는 평소에는 저전력 상태를 유지하다가도, 연주가 진행되는 해당 페이지에 대한 악보를 제공할 수 있도록 스탠바이 모드를 해제시킬 수 있다.
이러한 스탠바이 모드 판단부(154)는 연주자(Musician)의 연주에서 발생되는 사운드의 크기나 세기를 기반으로 스탠바이 모드 여부를 판단하도록 할 수 있고, 제1 저장부(120) 또는 제2 저장부(130)에 저장된 음악 정보와 일치하는지 여부를 기반으로 스탠바이 모드 여부를 판단하도록 할 수 있다.
즉, 스탠바이 모드 판단부(154)는 특정 데시벨 이상의 연주가 진행되어야만 악보가 제공되도록 하거나, 연주되고 있는 곡에 대한 악보가 준비된 경우에만 악보가 제공되도록 할 수 있는 것이다.
음악 정보 판단부(155)는 전술한 바와 같이 사운드 해독부(151)에서 해독된 음악 정보와 제1 저장부(120) 또는 제2 저장부(130)에 저장된 음악 정보를 비교하여, 악보 추출부(152)가 제1 저장부(120) 또는 제2 저장부(130)에서 악보를 추출할 수 있도록 하는 역할을 한다.
즉, 음악 정보 판단부(155)는 양 음악 정보 중 리듬 정보, 멜로디 정보, 계이름 정보, 박자 정보 등이 일치하는지 여부를 기초로, 연주되는 음악에 대응되는 악보가 추출되도록 한다.
한편, 악기의 사운드가 복수의 악기들에 대한 복수의 사운드라고 판단되는 경우, 음악 정보 판단부(155)는 음악 정보에 대한 비교 이외에도, 가장 큰 크기를 가지는 사운드를 제공하는 악기에 대한 음악 정보를 판단하는 역할을 할 수 있다.
일 예로 협주곡 등 여러 악기가 함께 연주를 진행하는 경우가 있을 수 있다. 이 경우, 악보 제공 장치(100)는 가장 큰 소리를 내는 악기가 가장 가까운 악기이기 때문에 현재 연주자(Musician)가 연주하는 악기인 것으로 인식할 수 있도록 하기 위해, 음악 정보 판단부(155)는 이러한 악기를 선별하고 해당 악기에 대해서만 음악 정보를 판단하여, 해당 악기에 대한 악보가 제공되도록 할 수 있다.
물론, 음악 정보 판단부(155)의 오판에 대한 방지를 위해 연주자(Musician)가 악보 제공 장치(100)를 통해 제공받고자 하는 악기의 악보를 직접 지정하여 악보를 제공받도록 구현할 수도 있을 것이다.
또한, 음악 정보 판단부(155)는, 연주자(Musician)에 의해 연주되는 곡이 완주되지 않았다고 판단되거나 연주자(Musician)로부터 지정된 악기에 대한 지정 해제 명령이 수신되지 않았다고 판단되는 경우, 악기의 사운드가 일시적으로 수신되지 않더라도 악보의 출력이 유지되도록 할 수 있다.
일 예로, 연주를 배우고 있는 상태의 연주자(Musician)들은 하나의 곡을 처음부터 끝까지 완주하는 것이 용이치 않을 수 있다. 이러한 경우, 음악 정보 판단부(155)는 수신되는 사운드의 음악 정보들이 제1 저장부(120) 또는 제2 저장부(130)에 저장되어 있는 실제 원곡 상태에서의 음악 정보들과 얼마나 차이가 나는지 여부를 기초로 하여, 틀리게 연주되는 부분이나 빈도가 많으면 다른 곡을 연주하는 것이 아니라 해당 곡에 대한 연습이 부족한 것으로 판단하여 해당 악보가 계속 출력되도록 할 수 있다.
화면 처리부(156)는, 악보 추출부(152)에서 추출된 악보, 악보 제공 장치(100)의 전반을 조작하기 위한 조작 화면, 기타 연주와 관련된 안내 화면 등 다양한 화면이 연주자(Musician)에게 제공될 수 있도록 처리하는 역할을 한다.
전자 파일 해독부(160)는 제2 저장부(130)에 저장된 전자 문서 파일을 해독하는 역할을 한다. 전자 파일 해독부(160)는 jpg, pdf 등의 형식으로 된 전자 문서 파일을 해독하여 해당 전자 문서 파일로부터 음악 정보를 생성하며, 생성된 음악 정보를 제어부(150)로 전달하게 된다.
도시된 예에서는 전자 파일 해독부(160)가 제어부(150)의 다른 구성 요소들과 달리 제어부(150)의 외부에 별도로 마련되는 것으로 상정하였으나, 이는 구현을 위한 일 예에 불과한 것으로서, 전자 파일 해독부(160)가 다른 구성 요소들과 마찬가지로 제어부(150)의 일 요소로 구성되는 경우나 제어부(150)의 다른 구성 요소들이 전자 파일 해독부(160)처럼 별도의 요소로 구성되는 경우도 본 발명의 기술적 사상이 그대로 적용될 수 있을 것이다.
촬영부(170)는 연주자(Musician)가 연주하는 사운드 또는 연주자(Musician)의 연주 모습 등을 촬영한다. 이와 같이 촬영된 사운드나 영상은 원격 연주 교습 등의 목적으로 활용되거나 데이터데이스 구축을 위해 사용될 수 있을 것이다. 특히, 근래에는 교육, 지도, 강의 등이 단방향으로 제공되는 것보다 쌍방향으로 피드백과 함께 제공될 때 보다 큰 효과를 발휘하는 경우가 잦기 때문에, 이와 같이 연주자(Musician)가 연주하는 사운드 또는 연주자(Musician)의 연주 모습 등이 피드백되도록 구현함으로써, 연주 교사가 직접 옆에서 교육하지 않는 경우에도 이와 유사한 효과적인 교육 효과를 거둘 수 있게 된다.
<악보 제공 방법의 예>
도 3 및 도 4는 악보 제공 방법의 일 실시예에 따라 악보를 출력하여 제공하는 모습을 도시한 도면이다.
연주자(Musician)가 악기(10)를 통해 연주를 시작하게 되면, 악보 제공 장치(100)는 연주되는 사운드를 수신하여 스탠바이 모드를 해제하고 해당 사운드의 음악 정보로부터 어떠한 곡이 연주되고 있는지 여부를 판단한다.
도시된 예와 같이 'frozen'이라는 애니메이션의 주제가인 'let it go'라는 곡이 연주되는 것으로 판단되고, 연주되는 부분이 해당 곡에 대한 악보의 첫 페이지인 것으로 판단되면, 악보 제공 장치(100)는 악보의 첫 페이지를 화면 상에 출력하여 연주자(Musician)에게 제공하게 된다.
또한, 도시된 예와 같이, 현재 연주되고 있는 부분을 연주자(Musician)가 알 수 있도록, 화면 처리부(156)의 동작을 통해, 점선 등의 하이라이트 처리가 가능하도록 할 수 있다.
이로 인해, 연주자(Musician)가 별도의 악보 출력을 위한 명령을 입력하지 않은 상태에서도 연주를 시작하면 평소에 스탠바이 모드로 동작하고 있던 악보 제공 장치(100)가 연주를 듣고 알아서 연주자(Musician) 악보를 자동으로 제공할 수 있게 된다.
도 5 및 도 6은 악보 제공 방법의 다른 실시예에 따라 악보를 출력하여 제공하는 모습을 도시한 도면이다.
연주자(Musician)가 악기(10)를 통해 연주를 하는 중, 제공되고 있는 페이지의 말미 부분에 대한 연주가 진행되고 있다고 판단되면, 악보 제공 장치(100)는 악보의 다음 페이지로 전환되어 화면 상에 출력되도록 연주자(Musician)에게 제공하게 된다.
특히, 이러한 다음 페이지로의 전환은, 연주자(Musician)의 설정에 따라 전환 타이밍이 조절되도록 할 수도 있을 것이며, 전술한 타이밍 계산부(153)에 의해 연주자(Musician)의 연주 속도를 기반으로 연주자(Musician)가 연주하는 부분이 page 1에서 page 2로 넘어갈 것으로 예측되는 타이밍에 기반하여 전환될 수 있다.
이로 인해, 연주자(Musician)가 일일이 악보를 넘기지 않더라도 연주 상황이나 연주되는 파트에 따라 악보의 페이지가 자동으로 넘어가게 구현될 수 있게 된다.
도 7은 악보 제공 방법의 또 다른 실시예에 따라 악보를 출력하여 제공하는 모습을 도시한 도면이다.
본 악보 제공 장치(100)의 주요 기술적 사상들 중 또 다른 하나는 피아노 등의 악기를 배우는 과정에서 일일이 학원에 등원하지 않고서도 악기 교습을 받을 수 있되, 단방향 교습이 아닌 쌍방향 교육을 통해 교육과 평가 등의 쌍방향 커뮤니케이션이 가능하도록 함에 있다.
이를 위해, 전술한 바와 같이, 연주자(Musician)가 연주하는 사운드 또는 연주자(Musician)의 연주 모습 등이 원격으로 피드백되도록 구현할 수 있을 뿐 아니라, 도시된 예와 같이 연주가 완료된 상태에서의 연주 상태나 연주 완성도 등의 결과값 등도 교사나 학부모 등에 제공되도록 할 수 있게 됨으로써 보다 효과적인 교습이 가능하도록 하게 된다.
<장치의 유형에 따른 악보 제공 예>
도 8은 악보 제공 장치의 다른 유형에 따라 악보를 달리 출력하여 제공하는 모습을 도시한 도면이며, 도 9는 악보 제공 장치의 또 다른 유형에 따라 악보를 달리 출력하여 제공하는 모습을 도시한 도면이다.
이러한 악보 제공 방법은, 악보 제공 장치(100) 내에 디폴트로 저장된 프로그램에 따라 동작하도록 구현될 수도 있으나 스마트폰, 태블릿PC, 스마트TV 등에 저장되도록 어플리케이션 서버에서 제공하는 앱의 형태로 설치되어 실행되도록 구현할 수도 있을 것이다. 이 경우에는 앱이 설치되는 단말의 유형이나 스펙에 따라, 보다 가시성이 높거나 연주 효율성이 높은 형태로 제공될 수 있다.
일 예로 도 8에서는 일반적인 경우보다 작은 화면 크기를 가지는 소형 디스플레이 장치(500)를 통해 악보를 제공하는 경우를 상정하고 있으며, 이 경우에는 한 페이지의 악보가 한꺼번에 제공되는 것이 아니라 일 부분씩 나누어 확대된 채로 제공되도록 구현할 수 있다.
물론, 이 경우에는 연주자(Musician)가 연주하는 사운드와 일치하는 연주 파트가 연주 속도를 기반으로 변경되어 가며 확대되어 출력되도록 할 것이다.
다른 예로, 도 9에서는 일반적인 경우보다 큰 화면 크기를 가지는 대형 디스플레이 장치(1000)를 통해 악보를 제공하는 경우를 상정하고 있으며, 이 경우에는 복수 페이지의 악보가 하나의 화면에 한꺼번에 제공되도록 구현할 수 있다.
물론, 이 경우에는 반드시 복수 페이지의 악보가 한꺼번에 제공되지 않더라도 연주되고 있는 페이지의 다음 페이지의 적어도 일부가 제공되도록 구현할 수도 있을 것이다.
<음악 정보 형태의 일 예>
도 10은 음악 정보 형태의 일 예를 도시한 도면이다.
도시된 바와 같이 음악 정보는, 박자정보 데이터(310), 계이름 데이터(320), 음길이 데이터(330) 및 기타 데이터(340)를 포함하도록 구성될 수 있다.
전술한 바와 같이 음악 정보는, 연주자(Musician)의 연주 사운드를 기반으로 사운드 해독부(151)에서 해독되어 생성되기도 하고, 제1 저장부(120) 또는 제2 저장부(130)에 저장된 상태로 존재하기도 한다.
이로 인해, 사운드 해독부(151)에서 해독되어 생성된 제1 음악 정보와 제1 저장부(120) 또는 제2 저장부(130)에 저장된 제2 음악 정보를 상호 비교함으로써, 악보 제공 장치(100)가 일치하는 음악 정보에 매칭되어 있는 악보를 제공할 수 있게 되는 것이다.
박자정보 데이터(310) 필드에는, 연주되는 곡의 박자에 대한 정보가 데이터화되어 저장된다. 제1 저장부(120)와 제2 저장부(130)에 저장된 음악 정보는 박자정보를 가지고 있지만 사운드 해독부(151)에서 해독되어 생성된 음악 정보로부터는 박자정보를 취득하기 어려울 수 있을 것이다. 후자의 경우 박자정보 데이터(310) 필드는 0값 또는 비어있는 채로 구현될 수 있다.
계이름 데이터(320) 필드에는, 연주되는 곡 중 해당 음의 계이름 정보가 데이터화되어 저장된다. 특히, 계이름 데이터(320) 필드에는 음표인 경우에 계이름 정보가 데이터화되어 저장되며, 쉼표인 경우에는 0값 또는 비어있는 채로 구현될 수 있다.
음길이 데이터(330) 필드에는, 연주되는 곡 중 해당 음의 길이 정보가 데이터화되어 저장된다. 특히, 음길이 데이터(330) 필드에는 음표인 경우일 뿐만 아니라 쉼표인 경우에도 길이 정보가 데이터화되어 저장되게 된다.
기타 데이터(340) 필드에는, 전술한 박자정보, 계이름, 음길이 등을 제외한 연주나 곡 판별에 필요한 정보들이 데이터화되어 저장된다. 특히, 전술한 본 발명의 주요 기술적 사상들이 구현되도록 하기 위해, 기타 데이터(340) 필드에는 악보에서 현재 음표 또는 현재 쉼표의 페이지 내에서의 위치 등에 대한 정보가 데이터화되어 저장될 수 있다.
이러한 박자정보 데이터(310), 계이름 데이터(320), 음길이 데이터(330) 및 기타 데이터(340)는 하나의 데이터 패킷을 구성할 수 있고, 복수 개의 데이터 패킷들이 결과적으로 음악 정보를 구성하게 되며, 음악 정보 간의 비교를 통해 동일한 음악 정보와 매칭되어 있는 악보를 추출하여 연주자(Musician)에게 악보를 제공할 수 있게 된다.
이상에서 설명한 음악 정보의 예는 설명의 편의를 위한 예시적 사항에 불과하며, MIDI(Musical Instrument Digital Interface)파일의 형식에 따라 구현하는 등 이와 다른 방법이나 형태를 가지도록 구현하는 경우라도 사운드에 대한 곡을 판별할 수 있는 경우라면 본 발명의 기술적 사상이 그대로 적용될 수 있을 것이다.
<악보 이외의 화면에 대한 표시>
도 11은 본 발명의 추가적인 실시예들에 따른 화면의 표시 상태를 도시한 도면이다.
전술한 바와 같이, 본 발명의 주요 기술적 사상들 중 하나는 연주자(Musician)의 개입없이 자동으로 악보를 제공하거나 악보의 페이지가 이동되도록 하는 것이다.
그러나, 경우에 따라서는 연주할 곡을 연주자(Musician)로부터 직접 선택받아야 하거나, 연주할 악기를 연주자(Musician)로부터 직접 선택받아야 하거나, 연주 데이터에 대한 처리 방법을 연주자(Musician)로부터 직접 선택받아야 할 수 있다.
일 예로, 전술한 바와 같이 합주를 하게 되면, 여러 개의 사운드가 겹치거나 도중에 연주를 중단하는 악기가 있을 수 있다. 이러한 경우를 대비하여, 악보 제공 장치(100)는 디폴트로 설정된 방식에 따라 악보를 제공하지 않고 연주자(Musician)의 직접 입력에 따른 명령에 기반하여 악보를 제공할 수 있을 것이다.
<악보 제공 플로우>
도 12는 본 발명의 일 실시예에 따른 악보 제공 방법을 도시한 흐름도이다.
악보 제공 장치(100)가 악보를 수신하면(S410), 수신된 악보를 내부에 저장하게 된다(S420).
이후 악보 제공 장치(100)는 악기를 연주하는 사운드나 악보를 제공해달라는 사운드를 입력받기 전까지 스탠바이 모드(S430)로 동작하게 되며, 해당 사운드가 입력되게 되면(S440-Y), 이러한 사운드를 기반으로 악보를 자동으로 출력하여 제공하게 된다(S450).
이와 같이 악보를 자동으로 제공할 수 있게 됨으로써, 연주자로 하여금 연주에 보다 집중하도록 함으로써 연주자의 연주 실력이 보다 효과적으로 성장할 수 있도록 보조하고, 청취자로 하여금 연주 감상에 방해 요소가 되는 행위들이 배제된 채로의 보다 매끄럽고 품격있는 감상이 가능해지도록 하며, 연주자나 연주교사가 연주를 위해 종이 책자 형태의 악보을 소지하고 다녀야 하는 번거로움이 없어지도록 할 수 있게 된다.
10 : 악기 100 : 악보 제공 장치
110 : 사운드 수신부 120 : 제1 저장부
130 : 제2 저장부 140 : 통신부
150 : 제어부 151 : 사운드 해독부
152 : 악보 추출부 153 : 타이밍 계산부
154 : 스탠바이모드 판단부 155 : 음악정보 판단부
156 : 화면 처리부 160 : 전자 파일 해독부
170 : 촬영부 200 : 음악 제공 서버
310 : 박자정보 데이터 320 : 계이름 데이터
330 : 음길이 데이터 340 : 기타 데이터
500 : 소형 디스플레이 장치 1000 : 대형 디스플레이 장치

Claims (23)

  1. 사운드를 입력받는 사운드 수신부; 및
    상기 사운드를 기반으로 악보가 출력되도록 하는 제어부;를 포함하는 악보 제공 장치.
  2. 제 1항에 있어서,
    상기 사운드는,
    연주자의 연주에 의해 발생되는 악기의 사운드인 것을 특징으로 하는 악보 제공 장치.
  3. 제 1항에 있어서,
    상기 사운드는,
    연주자의 연주 시작을 알리는 것으로 기설정되어 있는 상기 연주자의 보이스인 것을 특징으로 하는 악보 제공 장치.
  4. 제 1항에 있어서,
    각각의 악보가 적어도 하나의 페이지로 구성되는 적어도 하나의 악보를 저장하는 제1 저장부;를 더 포함하고,
    상기 제어부는,
    상기 제1 저장부에서 상기 사운드에 관련된 곡의 악보를 추출하여, 상기 추출된 악보 중 상기 사운드와 일치하는 연주 파트가 속한 페이지가 출력되도록 하는 것을 특징으로 하는 악보 제공 장치.
  5. 제 4항에 있어서,
    상기 제어부는,
    상기 입력된 사운드와 일치하는 연주 파트가 속한 페이지가 복수로 존재하는 것으로 판단되는 경우, 상기 복수의 페이지들이 선택가능한 상태로 출력되도록 하거나, 연주자의 추가적인 연주에 의해 발생된 사운드가 추가적으로 입력된 후에 상기 추가적으로 입력된 사운드와 일치하는 연주 파트가 속한 페이지가 출력되도록 하는 것을 특징으로 하는 악보 제공 장치.
  6. 제 1항에 있어서,
    각각의 악보가 적어도 하나의 페이지로 구성되는 적어도 하나의 악보를 저장하는 제1 저장부;를 더 포함하고,
    상기 제어부는,
    상기 제1 저장부에서 상기 사운드에 관련된 곡의 악보를 추출하여,상기 추출된 악보 내에서 상기 사운드와 일치하는 연주 파트가 제1 페이지의 말미에 위치하는 경우, 상기 제1 페이지가 먼저 출력되도록 한 후 기설정된 타이밍에 상기 제1 페이지의 다음 페이지에 해당하는 제2 페이지가 상기 제1 페이지에서 전환되어 출력되도록 하는 것을 특징으로 하는 악보 제공 장치.
  7. 제 6항에 있어서,
    상기 사운드는,
    연주자의 연주에 의해 발생되는 악기의 사운드이고,
    상기 제어부는,
    상기 연주의 속도를 기반으로 상기 기설정된 타이밍을 계산하여 상기 제2 페이지가 출력되도록 하는 것을 특징으로 하는 악보 제공 장치.
  8. 제 7항에 있어서,
    상기 기설정된 타이밍은,
    상기 제1 페이지에 대한 연주가 종료되는 타이밍인 것을 특징으로 하는 악보 제공 장치.
  9. 제 1항에 있어서,
    상기 사운드는,
    연주자의 연주에 의해 발생되는 악기의 사운드이고,
    상기 제어부는,
    상기 사운드가 기설정된 세기 또는 기설정된 멜로디를 가지는 것으로 판단되지 않을 경우 상기 악보 제공 장치가 저전력 모드 또는 스탠바이 모드로 동작되도록 하고,
    상기 제어부는,
    상기 사운드가 기설정된 세기 또는 기설정된 멜로디를 가지는 경우, 상기 악보 제공 장치의 상기 저전력 모드 또는 상기 스탠바이 모드가 자동으로 해제되도록 한 후 상기 사운드와 일치하는 악보가 출력되도록 하는 것을 특징으로 하는 악보 제공 장치.
  10. 제 1항에 있어서,
    상기 제어부는,
    상기 악보 제공 장치의 디스플레이 크기 정보 또는 디스플레이 해상도 정보를 기반으로, 상기 악보 제공 장치 별로 상기 악보의 제1 페이지의 일부분이 확대되거나 상기 제1 페이지가 축소되어 출력될 수 있도록 제어하는 것을 특징으로 하는 악보 제공 장치.
  11. 제 10항에 있어서,
    상기 제어부는,
    상기 제1 페이지의 일부분이 확대되어 출력되는 경우, 상기 제1 페이지 중 상기 사운드와 일치하는 연주 파트가 연주 속도를 기반으로 변경되어 가며 확대되어 출력되도록 제어하며,
    상기 제1 페이지가 축소되어 출력되는 경우, 상기 제1 페이지의 다음 페이지인 제2 페이지의 적어도 일부가 상기 제1 페이지와 함께 출력되도록 제어하는 것을 특징으로 하는 악보 제공 장치.
  12. 제 1항에 있어서,
    상기 악보의 음악 정보를 저장하는 제1 저장부; 및
    상기 음악 정보가 상기 제1 저장부에 저장되도록 외부 서버로부터 수신하는 통신부;를 더 포함하고,
    상기 제어부는,
    상기 통신부로부터 수신된 음악 정보와 상기 사운드로부터 분석된 음악 정보가 일치하는지 여부를 기초로 상기 사운드에 대응되는 악보가 출력되도록 하는 것을 특징으로 하는 악보 제공 장치.
  13. 제 1항에 있어서,
    상기 악보에 대응되는 전자 파일을 저장하는 제2 저장부; 및
    상기 전자 파일에서 상기 악보의 음악 정보를 추출하는 전자 파일 해독부;를 더 포함하고,
    상기 제어부는,
    상기 전자 파일 해독부에서 추출된 음악 정보와 상기 사운드로부터 분석된 음악 정보가 일치하는지 여부를 기초로 상기 사운드에 대응되는 악보가 출력되도록 하는 것을 특징으로 하는 악보 제공 장치.
  14. 제 13항에 있어서,
    상기 전자 파일은,
    책 형태의 악보가 적어도 하나의 페이지별로 촬영되거나 스캔되어 전자 문서 형태로 기록되어 있는 전자 파일인 것을 특징으로 하는 악보 제공 장치.
  15. 제 1항에 있어서,
    상기 제어부는,
    상기 사운드의 리듬 정보, 멜로디 정보, 계이름 정보 및 박자 정보 중 적어도 하나를 음악 정보로 사용하여, 상기 음악 정보와 일치하는 악보가 출력되도록 하는 것을 특징으로 하는 악보 제공 장치.
  16. 제 1항에 있어서,
    상기 사운드는,
    연주자의 연주에 의해 발생되는 악기의 사운드이고,
    상기 제어부는,
    상기 연주자의 연주 시간 정보, 연주 횟수 정보, 연주 상태 정보, 연주된 곡에 대한 전체 사운드 정보 중 적어도 하나가 내부에 저장되거나 외부에 전송되도록 하는 것을 특징으로 하는 악보 제공 장치.
  17. 제 16항에 있어서,
    상기 연주자 또는 상기 연주되는 악기를 촬영하기 위한 촬영부;를 더 포함하고,
    상기 제어부는,
    상기 촬영부에 상기 연주자가 상기 악기를 연주하는 모습이 촬영된 정보가 내부에 저장되거나 외부에 전송되도록 하는 것을 특징으로 하는 악보 제공 장치.
  18. 제 1항에 있어서,
    상기 사운드는,
    연주자의 연주에 의해 발생되는 악기의 사운드이고,
    상기 제어부는,
    상기 악기의 사운드가 복수의 악기들에 대한 복수의 사운드라고 판단되는 경우, 가장 큰 크기를 가지는 사운드에 해당하는 악기 또는 상기 연주자에 의해 지정된 악기에 해당하는 악보가 출력되도록 하는 것을 특징으로 하는 악보 제공 장치.
  19. 제 18항에 있어서,
    상기 제어부는,
    상기 연주자에 의해 연주되는 곡이 완주되지 않았다고 판단되거나 상기 연주자로부터 지정된 악기에 대한 지정 해제 명령이 수신되지 않았다고 판단되는 경우, 상기 악기의 사운드가 일시적으로 수신되지 않더라도 상기 악보의 출력이 유지되도록 하는 것을 특징으로 하는 악보 제공 장치.
  20. 악기별 음악 정보를 제공하는 음악 제공 서버; 및
    입력된 사운드를 기반으로 상기 사운드의 음악 정보를 추출하여 상기 음악 제공 서버에서 수신되는 음악 정보와 비교함으로써, 악보를 출력하는 악보 제공 장치;를 포함하는 악보 제공 시스템.
  21. 디바이스의 화면에 악보를 출력하여 제공하는 악보 제공 방법에 있어서,
    사운드를 입력받는 단계; 및
    상기 사운드를 기반으로 악보를 출력하는 단계;를 포함하는 악보 제공 방법.
  22. 제 21항에 있어서,
    각각의 악보가 적어도 하나의 페이지로 구성되는 적어도 하나의 악보를 저장하는 단계;를 더 포함하고,
    상기 악보 출력 단계는,
    상기 적어도 하나의 악보에서 상기 사운드에 관련된 곡의 악보를 추출하여, 상기 추출된 악보 중 상기 사운드와 일치하는 연주 파트가 속한 페이지가 출력되도록 하는 것을 특징으로 하는 악보 제공 방법.
  23. 제21항 및 제22항 중 어느 한 항에 기재된 악보 제공 방법을 수행하기 위한 컴퓨터 프로그램이 수록된 컴퓨터로 읽을 수 있는 기록매체.
KR1020180100099A 2018-08-27 2018-08-27 악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체 KR20200023754A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180100099A KR20200023754A (ko) 2018-08-27 2018-08-27 악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180100099A KR20200023754A (ko) 2018-08-27 2018-08-27 악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체

Publications (1)

Publication Number Publication Date
KR20200023754A true KR20200023754A (ko) 2020-03-06

Family

ID=69802769

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180100099A KR20200023754A (ko) 2018-08-27 2018-08-27 악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체

Country Status (1)

Country Link
KR (1) KR20200023754A (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130057293A (ko) 2011-11-23 2013-05-31 주식회사 지에스엘앤씨 디지털 음악파일을 이용한 전자악보제공장치 및 전자악보 제공방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130057293A (ko) 2011-11-23 2013-05-31 주식회사 지에스엘앤씨 디지털 음악파일을 이용한 전자악보제공장치 및 전자악보 제공방법

Similar Documents

Publication Publication Date Title
KR20160111335A (ko) 외국어 학습 시스템 및 외국어 학습 방법
US20060150803A1 (en) System and method for music score capture and synthesized audio performance with synchronized presentation
US9601029B2 (en) Method of presenting a piece of music to a user of an electronic device
JP2008170947A (ja) 自律型読譜および音楽演奏ロボット、およびその方法
CN101657816A (zh) 用于分布式音频文件编辑的门户网站
US20200027367A1 (en) Remote control of lesson software by teacher
JP4563440B2 (ja) 電子絵本システム及び電子絵本システム制御装置
KR20200023754A (ko) 악보 제공 장치, 방법, 시스템 및 이를 적용한 컴퓨터로 읽을 수 있는 기록매체
JP2017032693A (ja) 映像記録再生装置
US9697851B2 (en) Note-taking assistance system, information delivery device, terminal, note-taking assistance method, and computer-readable recording medium
KR20170097419A (ko) 한국어 학습 시스템 및 이를 이용한 한국어 학습 방법
JP6155102B2 (ja) 学習支援装置
Olmos et al. A high-fidelity orchestra simulator for individual musicians’ practice
JP2003058148A (ja) 書面表示装置
CN110362675A (zh) 一种外语教学内容展示方法及系统
JP2009122498A (ja) 電子絵本システム及び電子絵本システム制御装置
JP2008032788A (ja) 語学教材データ作成用プログラム
Anderson et al. Using desktop video to enhance music instruction
JP2007193150A (ja) カラオケ装置およびカラオケ情報処理のプログラム
JP4716192B2 (ja) 語学学習システム及び語学学習用プログラム
JP6957069B1 (ja) 学習支援システム
KR102025903B1 (ko) 언어 학습을 위한 장치 및 그 제어방법
JP2016206591A (ja) 語学学習用コンテンツ配信システム、語学学習用コンテンツ生成装置、および、語学学習用コンテンツ再生プログラム
KR101790998B1 (ko) 악보전환방법 및 악보전환장치
JP6772782B2 (ja) 情報処理装置、情報処理システム、および情報処理プログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E601 Decision to refuse application
E601 Decision to refuse application