KR102030833B1 - 악기 학습용 장치 및 이를 이용한 악기 학습 서비스 제공 방법 - Google Patents

Abstract

본 발명은 적어도 하나 이상의 프로세서를 구비한 컴퓨팅 디바이스에 의해 실행되는 악기 학습용 장치에 관한 것으로서, 상기 악기 학습용 장치는 기록매체에 실행 가능한 형태로 저장되어 상기 프로세서에 의해 실행되며, 상기 기록매체에는 악기 학습곡에 대한 박자 정보, 각기 다른 소제목이 매칭된 복수의 부분 악보로 구성된 악보 정보, 악기 학습곡의 재생에 따라 악기 상의 조작 위치가 변경되는 영상, 소제목별 스토리 이미지 및 스토리 영상으로 구성된 스토리텔링 데이터가 저장되며, 상기 악기 학습곡의 재생에 따라 상기 스토리텔링 데이터를 이용하여 악보 정보, 박자 정보, 상기 악기 상의 조작 위치가 변경되는 영상, 소제목별 스토리 이미지 및 영상이 표시되는 상기 연습용 인터페이스 화면을 구성한 후 이를 상기 컴퓨팅 디바이스의 디스플레이에 표시하는 악기 학습용 장치를 제공할 수 있다.

Description

악기 학습용 장치 및 이를 이용한 악기 학습 서비스 제공 방법{APPARATUS FOR EDUCATION OF MUSICAL AND METHOD FOR SERVICING EDUCATION OF MUSICAL USING THE SAME}

본 발명은 악기 학습의 효과를 극대화시킬 수 있는 악기 학습용 장치 및 이를 이용한 악기 학습 서비스 제공 방법에 관한 것이다.

최근, 과외 활동의 중요성 및 악기를 다루는 것이 보편화되면서 취미나 여가 생활의 하나로 악기를 배우는 사람들이 늘어나고 있다.

일반적으로 악기를 배우는 과정에서 필수적으로 그에 해당하는 교재가 이용되고 있다. 예를 들어, 피아노의 경우 바이엘과 체르니 등의 교재를 들 수 있는데, 이들은 단지 원곡을 잘라 배치하거나 악보의 제목에 국한된 그림을 삽입하여 학습자의 흥미를 끌지 못할 뿐만 아니라 레벨에 맞지 않는 편곡 방식으로 출판되고 있다.

최근, 정보 통신 기술의 발전에 악기의 학습 효율을 극대화시키기 위한 기술들이 개발되고 있으나,

먼저, 악보 교본의 형태를 이용하는 방법은 연주자가 조작하는 건반에 의해서 입력되는 소리를 디지털 음원 데이터로 변환한 뒤 스피커로 출력하는 형태로서, 구체적으로 멜로디, 리듬, 템포를 포함한 음악적 요소를 동일하게 하고, 공토의 곡을 다른 여러 악기로 각각 연주한 연주 음원을 함께 수록하며, 연주 음원의 재생이 가능한 음원 교재를 이용하는 것이다.

다른 예의 방법은 표준적인 연주 데이터와 학습자의 상이한 부분을 비교하여 오류를 파악하고, 교정할 수 있는 시스템을 들 수 있다.

또 다른 예의 경우 음성 코멘트를 이용한 시스템은 디지털 피아노에 내장된 교본의 곡을 음성 코멘트 지시에 따라 선택할 수 있도록 하는 것으로, 참조 데이터에 대한 테스트 데이터를 참조하여 분석함으로써, 학습자에게 출력하고 응답이 전달될 수 있도록 하는 구성을 갖는다.

상술한 바와 같은 종래의 악기 교습과 관련된 기술들은 학습자의 편의성에만 집중되어 있을 뿐 학습자의 흥미 유발을 통해 학습 효과를 극대화시키기에 역부족이다.

대한민국 등록특허 제10-1937099호(2019.0.03. 등록)

본 발명은 악보에 대한 내용을 기반으로 스토리 이미지 및 영상을 제공함으로써, 학습자의 흥미를 유발시켜 학습 효과를 극대화시킬 수 있는 악기 학습용 장치 및 이를 이용한 악기 학습 서비스 제공 방법을 제공한다.

또한, 본 발명은 현재 재생 중인 악보 상의 음계 위치 및 박자 정보뿐만 아니라 악기 상의 조작 위치를 포함한 영상을 제공함으로써, 사용자의 학습 효율을 높일 수 있는 악기 학습용 장치 및 이를 이용한 악기 학습 서비스 제공 방법을 제공한다.

본 발명이 해결하고자 하는 과제는 상기에서 언급한 것으로 제한되지 않으며, 언급되지 않은 또 다른 해결하고자 하는 과제는 아래의 기재들로부터 본 발명이 속하는 통상의 지식을 가진 자에 의해 명확하게 이해될 수 있을 것이다.

상술한 해결하고자 하는 과제를 해결하기 위해서 본 발명의 실시예에 따른 악기 학습용 장치는 기록매체에 실행 가능한 형태로 저장되어 상기 프로세서에 의해 실행되며, 상기 기록매체에는 악기 학습곡에 대한 박자 정보, 각기 다른 소제목이 매칭된 복수의 부분 악보로 구성된 악보 정보, 악기 학습곡의 재생에 따라 악기 상의 조작 위치가 변경되는 영상, 소제목별 스토리 이미지 및 스토리 영상으로 구성된 스토리텔링 데이터가 저장되며, 상기 악기 학습곡의 재생에 따라 상기 스토리텔링 데이터를 이용하여 악보 정보, 박자 정보, 상기 악기 상의 조작 위치가 변경되는 영상, 소제목별 스토리 이미지 및 영상이 표시되는 상기 연습용 인터페이스 화면을 구성한 후 이를 상기 컴퓨팅 디바이스의 디스플레이에 표시할 수 있다.

본 발명의 실시예에 따르면, 상기 연습용 인터페이스 화면은 상기 악기 학습곡에서 재생되는 부분에 대응되는 상기 부분 악보를 표시하되, 상기 재생되는 부분에 대응되는 음계에 음계 지시선이 표시되고, 상기 재생에 따라 상기 음계 지시선이 변경되는 상기 부분 악보를 표시하는 제 1 영역; 상기 재생되는 부분의 박자 정보가 표시되는 제 2 영역; 상기 음계 지시선이 지시한 음계에 대해 악기에서 조작될 부분 및 조작 위치가 표시된 영상을 표시하는 제 3 영역; 상기 부분 악보의 설정된 소제목에 매칭된 스토리 이미지 및 영상을 표시하는 제 4 영역 및 제 5 영역을 포함할 수 있다.

본 발명의 실시예에 따르면, 상기 악기 학습용 장치는 유선 또는 무선 인터페이스를 통해 컴퓨팅 디바이스에 연결되고, 마스터 키보드를 통해 사용자의 악기 학습곡에 대한 입력을 수신할 수 있다.

상술한 해결하고자 하는 과제를 해결하기 위해서 본 발명의 실시예에 따른 악기 학습용 장치를 이용한 악기 교육 서비스 제공 방법은 적어도 하나 이상의 프로세서를 구비한 컴퓨팅 디바이스에 의해 실행되고, 악기 학습곡에 대한 박자 정보, 각기 다른 소제목이 매칭된 복수의 부분 악보로 구성된 악보 정보, 악기 학습곡의 재생에 따라 악기 상의 조작 위치가 변경되는 영상, 소제목별 스토리 이미지 및 스토리 영상으로 구성된 스토리텔링 데이터가 저장된 기록매체를 구비한 악기 학습용 장치를 이용한 악기 교육 서비스 제공 방법으로서, 상기 악기 학습곡에 대한 재생 요청에 따라 상기 스토리텔링 데이터를 이용하여 재생되는 부분 악보에 대한 악보 정보, 박자 정보, 상기 악기 상의 조작 위치가 변경되는 영상, 소제목별 스토리 이미지 및 영상이 표시되는 상기 연습용 인터페이스 화면을 구성한 후 이를 상기 컴퓨팅 디바이스의 디스플레이에 표시하는 단계; 상기 악보 정보가 변경되면, 상기 변경된 악보 정보에 매칭된 소제목을 이용하여 스토리 이미지를 검색하는 단계; 및 상기 검색한 스토리 이미지를 이용하여 상기 연습용 인터페이스 화면을 업데이트시키는 단계를 포함할 수 있다.

본 발명의 실시예에 따르면, 상기 악기 학습용 장치는 유선 또는 무선 인터페이스를 통해 컴퓨팅 디바이스에 연결되고, 마스터 키보드를 통해 사용자의 악기 학습곡에 대한 입력을 수신하며, 상기 악기 교육 서비스 제공 방법은 상기 마스터 키보드의 조작에 따른 사용자 입력과 상기 음계 지시선이 가리키는 음계 및 박자 정보를 비교하여 일치하는지를 판단하는 단계; 상기 일치하는 경우 점수를 카운팅하는 단계; 및 상기 악기 학습곡의 재생이 종료될 때까지 판단하는 단계 및 카운팅하는 단계를 반복적으로 수행하여 점수를 카운팅하며, 재생이 종료되면 카운팅한 점수를 상기 컴퓨팅 디바이스의 디스플레이 상에 표시하는 단계를 더 포함할 수 있다.

전술한 본 발명의 과제 해결 수단에 따르면, 악보에 대한 내용을 기반으로 스토리 이미지 및 영상을 제공함으로써, 학습자의 흥미를 유발시켜 학습 효과를 극대화시킬 수 있다.

또한, 전술한 본 발명의 과제 해결 수단에 따르면, 현재 재생 중인 악보 상의 음계 위치 및 박자 정보뿐만 아니라 악기 상의 조작 위치를 포함한 영상을 제공함으로써, 사용자의 학습 효율을 높일 수 있다.

도 1은 본 발명의 실시예에 따른 스토리텔링 기반의 악기 학습용 장치의 세부 구성을 도시한 블록도이다.
도 2는 본 발명의 실시예에 따른 악기 학습용 장치 내 기록매체에 저장된 스토리텔링 데이터의 구조를 도시한 도면이다.
도 3은 본 발명의 실시예에 따른 악기 학습용 장치에서 제공되는 인터페이스 화면의 예시도이다.
도 4는 본 발명의 실시예에 따른 악기 학습용 장치가 컴퓨팅 디바이스에 연결되어 악기 학습 서비스를 제공하는 시스템을 도시한 도면이다.
도 5는 본 발명의 실시예에 따른 악기 학습용 장치가 컴퓨팅 디바이스와 연결되어 악기 교육 서비스를 제공하는 과정을 도시한 흐름도이다.
도 6은 본 발명의 실시예에 따른 악기 학습용 장치가 사용자 입력에 따라 평가 정보를 제공하는 과정을 도시한 흐름도이다.

이하, 도면을 참조하여 본 발명의 구체적인 실시형태를 설명하기로 한다. 이하의 상세한 설명은 본 명세서에서 기술된 방법, 장치 및/또는 시스템에 대한 포괄적인 이해를 돕기 위해 제공된다. 그러나 이는 예시에 불과하며 본 발명은 이에 제한되지 않는다.

본 발명의 실시예들을 설명함에 있어서, 본 발명과 관련된 공지기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 그리고, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 상세한 설명에서 사용되는 용어는 단지 본 발명의 실시예들을 기술하기 위한 것이며, 결코 제한적이어서는 안 된다. 명확하게 달리 사용되지 않는 한, 단수 형태의 표현은 복수 형태의 의미를 포함한다. 본 설명에서, "포함" 또는 "구비"와 같은 표현은 어떤 특성들, 숫자들, 단계들, 동작들, 요소들, 이들의 일부 또는 조합을 가리키기 위한 것이며, 기술된 것 이외에 하나 또는 그 이상의 다른 특성, 숫자, 단계, 동작, 요소, 이들의 일부 또는 조합의 존재 또는 가능성을 배제하도록 해석되어서는 안 된다.

이하, 첨부된 도면을 참조하여 스토리텔링 기반의 악기 학습용 장치 및 방법에 대해 설명하기로 한다.

도 1은 본 발명의 실시예에 따른 스토리텔링 기반의 악기 학습용 장치(100)의 세부 구성을 도시한 블록도이다.

도 1에 도시된 바와 같이, 악기 학습용 장치(100)는 악기 학습을 위한 멀티미디어 데이터가 저장된 교재의 일종으로서, 악기 학습용 프로그램(110)을 구비한 기록매체(120) 형태로 구현될 수 있다.

본 발명의 실시예에서, 기록매체(120)는 비일시적(nontransitory) 기계 판독가능 저장장치로서, 예를 들어, 본 명세서에서 설명된 다양한 작업들을 실행하기 위한 악기 학습용 프로그램(110)을 구현한 명령어들, 상태 정보, 악기 학습용 프로그램(110)의 동작에 필요한 다양한 데이터(또는 정보) 등을 저장하도록 구성되거나 설계될 수 있다. 그러한 비일시적 기계 판독가능 기록매체(120)의 예들은 하드 디스크들, 플로피 디스크들, 및 마그네틱 테이프와 같은 마그네틱 매체; CD-ROM 디스크들과 같은 광학 매체; 플롭티컬 디스크(floptical disk)들과 같은 마그네토-광학 매체, 및 프로그램 명령어들을 저장하고 실행하도록 특별히 구성된 판독전용 메모리 디바이스들(ROM), 플래시 메모리, 멤리스터(memristor) 메모리, 랜덤 액세스 메모리(RAM) 등과 같은 하드웨어 디바이스들을 포함하지만, 이에 한정되는 것은 아니다. 프로그램 명령어들의 예들은 컴파일러에 의해 생성된 것과 같은 기계 코드(machine code), 및 해석기를 사용하는 컴퓨터에 의해 실행될 수 있는 더 높은 레벨의 코드를 포함하는 파일들 양쪽을 포함한다.

이러한 기록매체(120)에는 복수의 악기 학습곡, 예컨대 피아노 학습곡 각각에 대한 스토리텔링 데이터(130)가 저장되어 있다. 여기에서, 스토리텔링 데이터(130)는 악기 학습곡, 예컨대 피아노 학습곡에 대한 박자 정보, 악보 정보, 스토리 이미지 및 스토리 영상 등을 포함할 수 있다.

구체적으로, 스토리텔링 데이터(130)는 피아노 학습곡에 대한 박자 정보, 각기 다른 소제목이 매칭된 복수의 부분 악보로 구성된 악보 정보, 피아노 학습곡의 재생에 따라 피아노의 형상(건반) 내 손가락의 위치가 변화하는 영상, 소제목별 스토리 이미지 및 스토리 영상으로 구성될 수 있다. 이를 위하여, 피아노 학습곡의 전체 악보를 복수의 악보로 나눠서 관리하며, 복수의 악보 각각에는 소제목이 매칭될 수 있다. 구체적으로, 스토리텔링 데이터(130)는, 도 2에 도시된 바와 같이, 피아노 학습곡의 각 부분에 해당하는 악보 정보에 소제목을 매칭시키고, 소제목에 스토리 이미지 및 영상을 매칭된 구조를 가질 수 있다. 이러한 구조를 통해 악기 학습용 프로그램(110)은 피아노 학습곡의 재생 지점에 해당되는 소제목 부분의 악보 정보 및 박자 정보를 표시하고, 악보 정보에 대응되는 소제목 및 이에 매칭된 스토리 이미지 및 영상을 기록매체(120)에서 추출하여 컴퓨팅 디바이스(도 4의 300)의 디스플레이(도 4의 304)에 표시할 수 있다.

한편, 본 발명의 실시예에서 기록매체(120)에 저장된 악기 학습용 프로그램(110)은 컴퓨팅 디바이스(300)와 연결되어 컴퓨팅 디바이스(300) 내 적어도 하나 이상의 프로세서(도 4의 302)에 의해 실행될 수 있으며, 사용자 입력에 따라 동작될 수 있다.

이러한 악기 학습용 프로그램(110)은, 도 3에 도시된 바와 같이, 사용자에 의해 어느 하나의 악기 학습곡을 선택함에 따라 선택된 악기 학습곡에 대한 스토리텔링 데이터(130)를 기록매체(120)에서 검색한 후 이를 기반으로 연습용 인터페이스 화면(200)을 생성하여 컴퓨팅 디바이스(300) 내 디스플레이(304)에 표시할 수 있을 뿐만 아니라 악기 학습곡의 재생에 따라 연습용 인터페이스 화면(200) 상에 표시되는 정보를 변경시킬 수 있다.

본 발명의 실시예에 따른 연습용 인터페이스 화면(200)은, 도 3에 도시된 바와 같이, 악기 학습곡에서 재생되는 부분에 대응되는 부분 악보를 표시하되, 재생되는 부분에 대응되는 음계에 음계 지시선(212)이 표시되고, 재생에 따라 음계 지시선(212)이 변경되는 부분 악보를 표시하는 제 1 영역(210), 재생되는 부분의 박자 정보가 표시되는 제 2 영역(220), 음계 지시선(212)이 지시한 음계에 대응되는 악기에서 조작될 부분 및 조작 위치(예컨대 악기 상의 손가락 위치)를 포함한 영상을 표시하는 제 3 영역(230), 부분 악보의 설정된 소제목에 매칭된 스토리 이미지를 표시하는 제 4 영역(240) 및 스토리 영상을 표시하는 제 5 영역(250)을 포함할 수 있다.

연습용 인터페이스 화면(200)의 제 2 영역(220)에 표시된 음계 지시선(212)은 재생 중인 음계의 위치를 의미할 수 있는데, 즉 악기 학습곡의 재생되는 지점의 악보 정보 상 음계에 표시될 수 있다.

한편, 제 2 영역(220)에 표시된 악보 정보는 악기 학습곡의 전체 악보를 악기 학습곡의 스토리에 따라 나눈 일부분에 해당되며, 악보의 각 부분은 스토리에 대응되는 소제목(예컨대 스토리에 맞는 제목)이 설정되어 있다. 이에 따라, 제 2 영역(220)에는 악보 정보와 더불어 이에 매칭된 소제목이 표시될 수 있으며, 제 4 영역(240)에는 소제목에 대응되는 스토리 이미지가 표시될 수 있다.

제 5 영역(250)에는 악기 학습곡의 스토리에 맞는 스토리 영상의 일부분, 즉 소제목에 대응되는 일부 영상 또는 스토리 영상의 전체가 악기 학습곡의 재생에 맞춰서 재생될 수 있다.

한편, 악기 학습곡에 대한 스토리의 예에 대해 설명하면 아래의 표 1과 같다.

제목	스토리
곰돌이는 내친구	유진왕자가 히야 공주님을 구하기 위해 친구를 모으는 과정
기차 여행	유진왕자는 제일 먼저 친구인 거인 나라의 바탐 왕자를 만나러 가기 위해 기차를 탔습니다.
꼬마 친구	그런데 바탐 왕자는 이미 기차 안에 있었습니다. 바탐 왕자 역시 난쟁이가 되는 마녀의 마법에 걸려 뽀로롱 마녀를 찾아가고 있었던 것이죠

한편, 악기 학습용 프로그램(110)은 사용자의 입력에 따라 악기 학습곡의 재생을 제어할 수 있다. 여기에서, 사용자 입력은 미리 듣기, 구간 재생 등을 들 수 있다.

먼저, 사용자 입력이 미리 듣기인 경우 악기 학습용 프로그램(110)은 악기 학습곡피아노 연주곡에 대한 스토리텔링 데이터(130)를 기반으로 연습용 인터페이스 화면(200) 상에 표시된 각 영역(210, 220, 230, 240, 250)의 정보를 변경시킬 수 있다.

다음으로, 사용자 입력이 일부 구간 재생인 경우 악기 학습용 프로그램(110)은 악기 학습곡에 대한 전체 정보 중 사용자가 선택한 구간에 해당되는 부분을 스토리텔링 데이터(130)에서 추출한 후 이를 이용하여 연습용 인터페이스 화면(200) 상에 표시된 각 영역(210, 220, 230, 240, 250)의 정보를 변경시킬 수 있다.

한편, 본 발명의 실시예에 따른 악기 학습용 프로그램(110)은 평가 기능을 제공할 수 있다. 구체적으로, 악기 학습용 프로그램(110)은 악기 학습곡의 재생에 따라 피아노 연주곡에 해당되는 스토리텔링 데이터(130)를 기반으로 연습용 인터페이스 화면(200)에 표시되는 악기 학습곡에 대한 박자, 악보, 스토리 이미지 및 영상을 표시함과 더불어 사용자 입력, 예컨대 사용자의 마스터 키보드(도 4의 320)의 조작에 따라 입력되는 연주 정보와 연습용 인터페이스 화면(200) 상에 표시되는 정보간의 비교를 통해 정확도 여부를 컴퓨팅 디바이스(300)의 디스플레이(304) 상에 표시할 수 있다.

또한, 본 발명의 실시예에 따른 악기 학습곡은 배우는 단계별, 예컨대 악기 학습곡이 피아노 연주곡인 경우 바이엘과 체르니 단계를 색깔로 나눠서 세부적으로 관리될 수 있다. 이를 위하여, 본 발명의 실시예에서 기록매체(120)에는 피아노 연주곡별로 다른 색깔이 매칭되어 표시되어 있으며, 악기 학습용 프로그램(110)은 사용자의 색깔 선택에 따라 선택된 색깔이 매칭된 피아노 학습용 연주곡을 제공할 수 있다. 예를 들어, 빨간색은 바이엘과 관련된 피아노 학습용 연주곡이고, 주황색은 체르니 100과 관련된 피아노 연주곡인 경우 기록매체(120)에는 바이엘과 관련된 파아노 학습용 연주곡을 빨간색 정보와 매칭시켜 저장되며, 체르니 100과 관련된 피아노 연주곡을 주황색 정보와 매칭시켜 저장될 수 있다. 이에 따라, 사용자가 주황색을 선택한 경우 악기 학습용 프로그램(110)은 주황색 정보가 매칭된 체르니 100의 피아노 연주곡을 표시할 수 있다.

상술한 바와 같은 악기 학습용 장치(100)에 의해 제공되는 연습용 인터페이스 화면(200)은 악기가 피아노인 경우를 예로 들어 제 3 영역(230)에 건반 모양, 즉 피아노의 건반 모양으로 예를 들어 설명하였지만, 다양한 악기에도 이용될 수도 있다. 예를 들어, 콘트라베이스, 바이올린, 클라리넷, 첼로, 트렘펫 등의 악기 학습용에 적용될 경우 악기 학습용 장치(100)는 제 3 영역(230)에 해당 악기의 형상과 악기 학습곡의 재생에 따라 변화되는 악기 상의 조작 위치를 포함한 영상을 표시할 수 있다.

한편, 상술한 바와 같은 악기 학습용 장치(100)는 컴퓨팅 디바이스(300)에 유선 또는 무선 인터페이스를 통해 연결되어 동작할 수 있다. 이에 대해 도 4를 참조하여 설명하기로 한다.

도 4는 본 발명의 실시예에 따른 악기 학습용 장치(100)가 컴퓨팅 디바이스(300)에 연결되어 악기 학습 서비스를 제공하는 시스템을 도시한 도면으로서, 악기 학습용 장치(100)가 연결된 컴퓨팅 디바이스(300), 믹서(310) 및 마스터 키보드(320) 등을 포함할 수 있다.

먼저, 컴퓨팅 디바이스(300)는 악기 학습용 장치(100)가 인식됨에 따라, 예컨대 악기 학습용 장치(100)가 유선 또는 무선, 예컨대 USB, 근거리 무선 통신을 통해 연결됨에 따라 악기 학습용 장치(100)의 기록매체(120)에 저장된 악기 학습용 프로그램(110)을 실행시키며, 사용자의 학습곡 선택에 따라 도 3의 연습용 인터페이스 화면(200)을 제공한다.

이를 위하여, 컴퓨팅 디바이스(300)는 악기 학습용 장치(100)의 연결을 인식한 후 이를 기반으로 기록매체(120)에 저장된 악기 학습용 프로그램(110)을 실행시키거나 악기 학습용 프로그램(110)을 인출하여 컴퓨팅 디바이스(300)에 설치할 수 있는 적어도 하나 이상의 프로세서(302), 악기 학습용 프로그램(110)의 실행에 따라 연습용 인터페이스 화면(200)을 표시하는 디스플레이(304) 및 사용자의 입력을 수신함과 더불어 다양한 형태의 데이터를 출력하는 입력/출력 회로(306) 등을 포함하여 구성될 수 있다.

디스플레이(304)는 컴퓨팅 디바이스(300)에 포함되는 스크린(예컨대 LCD 스크린)을 포함할 수 있다. 다른 예로서, 디스플레이(304)는 컴퓨팅 디바이스(300)로부터 떨어진 표면 상에 콘텐츠의 디스플레이를 제공하기 위한 이동 가능 디스플레이 또는 프로젝팅 시스템(예컨대 비디오 프로젝터)을 포함할 수 있다. 일부 실시예들에서, 디스플레이(304)는 디지털 매체 데이터를 아날로그 신호들로 변환하기 위한 코더/디코더(코덱)를 포함할 수 있다. 예컨대, 디스플레이(또는 컴퓨팅 디바이스(300) 내의 다른 적합한 회로)는 비디오 코덱들, 오디오 코덱들, 또는 임의의 다른 적합한 종류의 코덱을 포함할 수 있다.

또한, 디스플레이(304)는 디스플레이 드라이버 회로, 디스플레이 드라이버들을 구동하기 위한 회로, 또는 이들 모두를 포함할 수 있다. 디스플레이(304)는 프로세서(302)의 지시 하에 콘텐츠(예컨대 매체 재생 정보, 전자장치 상에서 구현되는 애플리케이션들을 위한 애플리케이션 스크린들, 진행 중인 통신 동작들에 관한 정보, 들어오는 통신 요청들에 관한 정보, 또는 장치 동작 스크린들)를 디스플레이하도록 동작할 수 있다.

입력/출력 회로(306)는 아날로그 신호들 및 다른 신호들을 디지털 데이터로 변환(및 필요한 경우 인코딩/디코딩)하도록 동작할 수 있다. 일부 실시예들에서, 입력/출력 회로는 또한 디지털 데이터를 임의의 다른 종류의 신호로 변환할 수 있고, 그 역도 가능하다. 예컨대, 입력/출력 회로(306)는 물리적인 접촉 입력들(예컨대 멀티 터치 스크린으로부터), 물리적인 움직임들(예컨대 마우스 또는 센서로부터), 아날로그 오디오 신호들(예컨대 마이크로부터), 또는 임의의 다른 입력을 수신 및 변환할 수 있다. 디지털 데이터는 프로세서(302), 저장장치(미도시됨), 메모리(미도시됨), 또는 컴퓨팅 디바이스(300)의 임의의 다른 컴포넌트에 제공되고 그로부터 수신될 수 있다. 입력/출력 회로(306)는 전자 장치(100)의 단일 컴포넌트로서 도 4에 도시되어 있으나, 입력/출력회로의 몇몇 인스턴스들이 컴퓨팅 디바이스(300)에 포함될 수 있다.

마스터 키보드(320)는 피아노 건반 모양의 입력도구로서, 유무선 케이블을 통해 외부기기, 예컨대 믹서(310)에 사용자의 조작(연주)에 따른 미디 신호를 출력할 수 있을 뿐만 아니라 미디 키보드 컨트롤러를 포함할 수 있다. 구체적으로, 마스터 키보드(320)는 악기 학습곡 중 피아노 학습곡을 연주하기 위한 입력 디바이스로서, 피아노 건반 모양에서 사용자가 조작한 건반, 즉 사용자의 연주에 따라 미디 신호를 믹서(310)를 통해 출력할 수 있다.

본 발명의 실시예에서는 마스터 키보드(320)가 믹서(310)와 연결되어 사용자의 연주에 따른 미디 신호를 출력하는 것으로 예를 들어 설명하였지만, 마스터 키보드(320)를 통해 연주에 따른 연주 정보, 즉 피아노 건반 상의 특정 건반의 조작에 따른 연주 정보를 컴퓨팅 디바이스(300)에 제공할 수 있을 뿐만 아니라 컴퓨팅 디바이스(300)의 입력/출력 회로(306), 예컨대 스피커와 같은 출력 회로를 통해 출력될 수도 있다.

믹서(310)는 컴퓨팅 디바이스(300)의 출력, 예컨대 피아노 학습곡의 재생에 따른 오디오 출력을 조절하여 출력할 수 있을 뿐만 아니라 마스터 키보드(320)의 입력을 조절하여 출력할 수 있다.

본 발명의 실시예에 따르면, 악기 학습용 장치(100)가 피아노 연습에 이용되는 예로서, 피아노 건반을 갖는 마스터 키보드(320)가 연결되는 것으로 예를 들어 설명하였지만, 콘트라베이스, 바이올린, 클라리넷, 첼로, 트렘펫 등의 악기들도 적용될 수 있다.

상술한 바와 같은 구성을 갖는 멀티미디어 학습 서비스 제공 시스템을 통해 악기 학습을 하는 과정에 대해 도 5를 참조하여 설명한다.

도 5는 본 발명의 실시예에 따른 악기 학습용 장치(100)가 컴퓨팅 디바이스(300)와 연결되어 악기 교육 서비스를 제공하는 과정을 도시한 흐름도이다.

먼저, 도 5에 도시된 바와 같이, 악기 학습용 장치(100)가 컴퓨팅 디바이스(300)에 연결됨에 따라 컴퓨팅 디바이스(300)의 프로세서(302)가 이를 인식한 후 기록매체(120)에 저장된 악기 학습용 프로그램(110)을 실행시킨다(S400).

이에 따라, 악기 학습용 프로그램(110)은 기록매체(120)에 저장된 복수의 악기 학습곡에 대한 정보를 컴퓨팅 디바이스(300)의 디스플레이(304) 상에 표시한다(S402).

이후, 사용자가 어느 하나의 악기 학습곡을 선택하면(S404), 악기 학습용 프로그램(110)은 선택한 악기 학습곡에 대한 스토리텔링 데이터(130)를 기록매체(120)에서 추출(S406)한 후 이를 기반으로 연습용 인터페이스 화면(200)을 디스플레이(304) 상에 표시한다(S408).

그런 다음, 악기 학습곡에 대한 재생 요청이 있으면, 악기 학습용 프로그램(110)은 악기 연습곡의 재생에 따라 스토리텔링 데이터(130)를 이용하여 연습용 인터페이스 화면(200) 상의 각 영역(210, 220, 230, 240, 250)을 제어한다(S408). 구체적으로, 악기 학습용 프로그램(110)은 악기 학습곡의 재생에 따라 제 1 영역(210) 상에 표시되는 악보 정보 내 음계 지시선(212)이 가리키는 음계를 변경시킴과 더불어 제 2 영역(220) 상에 표시되는 음계에 대한 박자 정보를 변경시키고, 제 3 영역(230)에 악보 정보의 재생에 따른 영상, 예컨대 건반 상에 해당 음계에 대한 조작 위치를 포함한 영상을 표시한다(S410). 이러한 영상 내 조작 위치는 재생되는 음계에 따라 변경될 수 있다. 이와 더불어, 악기 학습용 프로그램(110)은 현재 제 1 영역(210) 상에 표시되는 악보 정보에 매칭된 소제목에 해당되는 스토리 이미지를 제 4 영역(240) 상에 표시함과 더불어 스토리 영상을 제 5 영역(250)에 재생시킨다(S412).

한편, 악보 정보가 변경되면(즉, 제 1 영역(210) 상에 표시된 악보에 대한 재생이 끝나면)(S414), 악기 학습용 프로그램(110)은 S410과 같이 변경된 악보 정보, 박자 정보 및 조작 위치가 포함된 영상을 표시함과 더불어 변경된 악보 정보의 소제목에 해당하는 스토리 이미지 및 스토리 영상을 추출(S416)한 후 스토리 이미지를 제 4 영역(240)에 표시함과 더불어 스토리 영상을 제 5 영역(250) 상에서 재생시킨다(S418).

상술한 바와 같은 악기 학습용 장치(100)가 사용자의 평가 정보를 제공하는 과정에 대해 도 6을 참조하여 설명한다.

도 6은 본 발명의 실시예에 따른 악기 학습용 장치(100)가 사용자 입력에 따라 평가 정보를 제공하는 과정을 도시한 흐름도이다.

도 6에 도시된 바와 같이, 사용자가 어느 하나의 악기 학습곡을 선택(S500)하면, 악기 학습용 프로그램(110)은 도 4의 각 단계들을 수행하여 선택한 악기 학습곡을 재생시킨다(S502).

악기 학습곡 재생 시 악기 학습용 프로그램(110)은 사용자 입력, 즉 마스터 키보드(320) 상에서 특정 건반에 대한 조작에 따른 사용자 입력을 인지하며(S504), 인지한 사용자 입력과 음계 지시선(212)이 가리키는 음계 및 박자 정보를 비교(S506)하여 일치하는지를 판단한다(S508).

S508의 판단 결과, 일치하는 경우, 악기 학습용 프로그램(110)은 점수를 카운팅하고(S510), 악기 학습곡의 재생이 종료되었는지를 판단한다(S512). 이때, 악기 학습용 프로그램(110)은 점수를 카운팅함과 더불어 소정의 메시지, 예컨대 "perfect" 메시지를 디스플레이(304) 상에 표시할 수도 있다.

S508의 판단 결과, 재생이 종료되지 않은 경우 악기 학습용 프로그램(110)은 S504로 진행하여 이후 단계를 수행한다.

한편, S508의 판단 결과, 재생이 종료된 경우, 악기 학습용 프로그램(110)은 현재까지 카운팅된 점수, 즉 평가 점수를 디스플레이(304) 상에 표시한다(S514).

한편, 첨부된 블록도의 각 블록과 흐름도의 각 단계의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수도 있다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 블록도의 각 블록에서 설명된 기능들을 수행하는 수단을 생성하게 된다.

이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 기록매체(또는 메모리) 등에 저장되는 것도 가능하므로, 그 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 기록매체(또는 메모리)에 저장된 인스트럭션들은 블록도의 각 블록에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다.

그리고, 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 블록도의 각 블록에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.

또한, 각 블록은 특정된 논리적 기능(들)을 실행하기 위한 적어도 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실시 예들에서는 블록들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.

100 : 악기 학습용 장치
110 : 기록매체
120 : 악기 학습용 프로그램
130 : 스토리텔링 데이터
200 : 연습용 인터페이스 화면
210, 220, 230, 240, 250 : 제 1, 2, 3, 4, 5 영역
300 : 컴퓨팅 디바이스
310 : 믹서
320 : 마스터 키보드

Claims (5)

1. 적어도 하나 이상의 프로세서를 구비한 컴퓨팅 디바이스에 의해 실행되는 악기 학습용 장치로서,
   상기 악기 학습용 장치는 기록매체에 실행 가능한 형태로 저장되어 상기 프로세서에 의해 실행되며-상기 기록매체는 비일시적(nontransitory) 기계 판독가능 기록매체로서, 악기 학습용 프로그램을 구현한 명령어들, 상태 정보, 상기 악기 학습용 프로그램의 동작에 필요한 데이터를 저장하도록 구성되거나 설계되고, 상기 비일시적 기계 판독가능 기록매체는 마그네틱 매체, 광학 매체, 마그네토-광학 매체, 판독전용 메모리 디바이스들(ROM), 플래시 메모리, 멤리스터(memristor) 메모리 및 랜덤 액세스 메모리(RAM)를 포함함-,
   상기 기록매체에는 악기 학습곡에 대한 박자 정보, 각기 다른 소제목이 매칭된 복수의 부분 악보로 구성된 악보 정보, 악기 학습곡의 재생에 따라 악기 상의 조작 위치가 변경되는 영상, 소제목별 스토리 이미지 및 스토리 영상으로 구성된 스토리텔링 데이터가 저장되며,
   상기 악기 학습곡의 재생에 따라 상기 스토리텔링 데이터를 이용하여 악보 정보, 박자 정보, 상기 악기 상의 조작 위치가 변경되는 영상, 소제목별 스토리 이미지 및 영상이 표시되는 연습용 인터페이스 화면을 구성한 후 이를 상기 컴퓨팅 디바이스의 디스플레이에 표시하고-상기 기록매체에는 피아노 연주곡별로 다른 색깔이 매칭되어 표시되며, 상기 악기 학습용 프로그램은 사용자의 색깔 선택에 따라 선택된 색깔이 매칭된 피아노 학습용 연주곡을 제공하고, 상기 악기 학습곡은 피아노 학습곡이며, 상기 악기 상의 조작 위치가 변경되는 영상은 상기 피아노 학습곡의 재생에 따라 피아노의 건반 내 손가락의 위치가 변화하는 영상임-,
   상기 연습용 인터페이스 화면은,
   상기 악기 학습곡에서 재생되는 부분에 대응되는 상기 부분 악보를 표시하되, 상기 재생되는 부분에 대응되는 음계에 음계 지시선이 표시되고, 상기 재생에 따라 상기 음계 지시선이 변경되는 상기 부분 악보를 표시하는 제 1 영역;
   상기 재생되는 부분의 박자 정보가 표시되는 제 2 영역;
   상기 음계 지시선이 지시한 음계에 대해 악기에서 조작될 부분 및 조작 위치가 표시된 영상을 표시하는 제 3 영역;
   상기 부분 악보의 설정된 소제목에 매칭된 스토리 이미지 및 영상을 표시하는 제 4 영역 및 제 5 영역을 포함하고-상기 제 5 영역에는 상기 악기 학습곡의 스토리에 맞는 스토리 영상의 소제목에 대응되는 일부 영상 또는 스토리 영상의 전체가 상기 악기 학습곡의 재생에 맞춰서 재생됨-,
   상기 악기 학습용 장치는, 유선 또는 무선 인터페이스를 통해 컴퓨팅 디바이스에 연결되고, 마스터 키보드를 통해 사용자의 악기 학습곡에 대한 입력을 수신하며,
   상기 마스터 키보드는 피아노 건반 모양의 입력도구로서, 유무선 케이블을 통해 사용자의 조작에 따른 미디 신호를 믹서로 출력하며, 미디 키보드 컨트롤러를 포함하되, 상기 마스터 키보드는 악기 학습곡 중 피아노 학습곡을 연주하기 위한 입력 디바이스로서, 피아노 건반 모양에서 사용자의 연주에 따른 미디 신호를 상기 믹서를 통해 출력하는
   악기 학습용 장치.
   
2. 삭제
3. 삭제
4. 적어도 하나 이상의 프로세서를 구비한 컴퓨팅 디바이스에 의해 실행되고, 악기 학습곡에 대한 박자 정보, 각기 다른 소제목이 매칭된 복수의 부분 악보로 구성된 악보 정보, 악기 학습곡의 재생에 따라 악기 상의 조작 위치가 변경되는 영상, 소제목별 스토리 이미지 및 스토리 영상으로 구성된 스토리텔링 데이터가 저장된 기록매체를 구비한 악기 학습용 장치를 이용한 악기 학습 서비스 제공 방법으로서-상기 기록매체는 비일시적(nontransitory) 기계 판독가능 기록매체로서, 악기 학습용 프로그램을 구현한 명령어들, 상태 정보, 상기 악기 학습용 프로그램의 동작에 필요한 데이터를 저장하도록 구성되거나 설계되고, 상기 비일시적 기계 판독가능 기록매체는 마그네틱 매체, 광학 매체, 마그네토-광학 매체, 판독전용 메모리 디바이스들(ROM), 플래시 메모리, 멤리스터(memristor) 메모리 및 랜덤 액세스 메모리(RAM)를 포함함-,
   상기 악기 학습곡에 대한 재생 요청에 따라 상기 스토리텔링 데이터를 이용하여 재생되는 부분 악보에 대한 악보 정보, 박자 정보, 상기 악기 상의 조작 위치가 변경되는 영상, 소제목별 스토리 이미지 및 영상이 표시되는 연습용 인터페이스 화면을 구성한 후 이를 상기 컴퓨팅 디바이스의 디스플레이에 표시하는 단계-상기 기록매체에는 피아노 연주곡별로 다른 색깔이 매칭되어 표시되고, 상기 악기 학습용 프로그램은 사용자의 색깔 선택에 따라 선택된 색깔이 매칭된 피아노 학습용 연주곡을 제공하고, 상기 악기 학습곡은 피아노 학습곡이며, 상기 악기 상의 조작 위치가 변경되는 영상은 상기 피아노 학습곡의 재생에 따라 피아노의 건반 내 손가락의 위치가 변화하는 영상임-;
   상기 악보 정보가 변경되면, 상기 변경된 악보 정보에 매칭된 소제목을 이용하여 스토리 이미지를 검색하는 단계; 및
   상기 검색한 스토리 이미지를 이용하여 상기 연습용 인터페이스 화면을 업데이트시키는 단계를 포함하되,
   상기 악기 학습용 장치는 유선 또는 무선 인터페이스를 통해 컴퓨팅 디바이스에 연결되고, 마스터 키보드를 통해 사용자의 악기 학습곡에 대한 입력을 수신하며,
   상기 마스터 키보드는 피아노 건반 모양의 입력도구로서, 유무선 케이블을 통해 사용자의 조작에 따른 미디 신호를 믹서로 출력하며, 미디 키보드 컨트롤러를 포함하되, 상기 마스터 키보드는 악기 학습곡 중 피아노 학습곡을 연주하기 위한 입력 디바이스로서, 피아노 건반 모양에서 사용자의 연주에 따른 미디 신호를 상기 믹서를 통해 출력하고,
   상기 악기 학습 서비스 제공 방법은,
   상기 마스터 키보드의 조작에 따른 사용자 입력과 음계 지시선이 가리키는 음계 및 박자 정보를 비교하여 일치하는지를 판단하는 단계;
   상기 일치하는 경우 점수를 카운팅하는 단계; 및
   상기 악기 학습곡의 재생이 종료될 때까지 판단하는 단계 및 카운팅하는 단계를 반복적으로 수행하여 점수를 카운팅하며, 재생이 종료되면 카운팅한 점수를 상기 컴퓨팅 디바이스의 디스플레이 상에 표시하는 단계를 더 포함하는
   악기 학습 서비스 제공 방법.
5. 삭제

Images