KR20170138135A - 증강 현실 기반 피아노 연주 보조 방법 및 이를 실행하는 장치 - Google Patents

증강 현실 기반 피아노 연주 보조 방법 및 이를 실행하는 장치 Download PDF

Info

Publication number
KR20170138135A
KR20170138135A KR1020160070123A KR20160070123A KR20170138135A KR 20170138135 A KR20170138135 A KR 20170138135A KR 1020160070123 A KR1020160070123 A KR 1020160070123A KR 20160070123 A KR20160070123 A KR 20160070123A KR 20170138135 A KR20170138135 A KR 20170138135A
Authority
KR
South Korea
Prior art keywords
augmented reality
performance
piano
key
piano performance
Prior art date
Application number
KR1020160070123A
Other languages
English (en)
Inventor
이준호
Original Assignee
주식회사 테일윈드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 테일윈드 filed Critical 주식회사 테일윈드
Priority to KR1020160070123A priority Critical patent/KR20170138135A/ko
Publication of KR20170138135A publication Critical patent/KR20170138135A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0008—Associated control or indicating means
    • G10H1/0016—Means for indicating which keys, frets or strings are to be actuated, e.g. using lights or leds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B15/00—Teaching music
    • G09B15/001—Boards or like means for providing an indication of chords
    • G09B15/002—Electrically operated systems
    • G09B15/003—Electrically operated systems with indication of the keys or strings to be played on instruments
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10C—PIANOS, HARPSICHORDS, SPINETS OR SIMILAR STRINGED MUSICAL INSTRUMENTS WITH ONE OR MORE KEYBOARDS
    • G10C1/00—General design of pianos, harpsichords, spinets or similar stringed musical instruments with one or more keyboards
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10G—REPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
    • G10G7/00—Other auxiliary devices or accessories, e.g. conductors' batons or separate holders for resin or strings
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/32—Constructional details

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

본 발명의 일 실시예에 따른 증강 현실 기반 피아노 연주 보조 장치에서 실행되는 증강 현실 기반 피아노 연주 보조 방법은 상기 피아노 장치의 건반에 위치하는 복수의 옥타브 인식 라벨을 인식하는 단계, 상기 복수의 옥타브 인식 라벨에 해당하는 옥타브에 대한 정보를 이용하여 건반 정보에 대한 가상 건반을 증강 현실 환경에 로딩하는 단계 및 연주가 시작되면 연주 정보 제공 서버로부터 수신된 연주 정보에 따라 상기 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보를 표시하는 단계를 포함한다.

Description

증강 현실 기반 피아노 연주 보조 방법 및 이를 실행하는 장치{METHOD OF HELPING PIANO PERFORMANCE AND BASED ON AUGEMENTED REALITY AND APPARATUS PERFORMING THE SAME}
본 발명의 실시예들은 증강 현실 기반 피아노 연주 보조 방법 및 이를 실행하는 장치에 관한 것이다.
일반적으로 증강현실은 사용자가 보고 있는 실사 영상에 컴퓨터에서 생성한 가상 영상을 정합시키는 사용자 인터페이스 기술을 말한다. 비전 기반 증강현실은 광학기반 시스템이나 영상기반 시스템을 통하여 구현될 수 있다. 광학기반 시스템의 경우, 증강현실은 반투명 스크린인 HMD(Head Mounted Display)를 이용하여 실제 환경에 가상 물체를 투영시킴으로써 구현된다.
반면, 영상기반 시스템의 경우, 증강현실은 카메라를 통하여 취득된 영상에 가상의 정보를 합성시킴으로써 구현된다. 이러한 증강현실은 사용자에게 보다 향상된 현실감과 인지도를 제공하기에 현재 의학, 산업, 오락, 군사 분야 등에서 다양하게 응용되고 있다.
한편, 피아노 연주를 배우는 과정에서 연주곡으로서 바이엘과 체르니 과정의 많은 곡들이 있다. 이 곡들은 대개 악보 교본의 형태로 이용된다. 근래에는 디지털 피아노가 널리 사용되고 있는데, 이는 연주자가 조작하는 건반에 의하여 입력되는 신호를 미리 저장되어 있는 디지털 음원 데이터로 변환한 뒤 스피커로 출력하는 형태를 가진다.
비록 본래 피아노의 음색에는 못 미치지만 가격이 저렴하고, 크기도 소형으로 제작될 수 있으며, 또한 피아노 소리뿐만 아니라 다양한 악기의 음색을 자유자재로 표현할 수 있다는 장점이 있어 널리 사용되고 있다.
피아노나 전자오르간을 연주하기 위하여는 악보를 보고 악보상의 표기를 빨리 파악하여 이에 따라 건반을 누르도록 하여야 하며 따라서 일반인은 일정기간 동안 레슨을 받지 않으면 연주에 어려움이 있었다.
일부의 발명에서는 눌러야 할 건반의 위치를 LED나 램프 등으로 표시하는 경우가 있으나 해당 음을 누르는데 있어 왼손과 오른손 중에서 사용할 손과 손가락의 번호를 지정하고 있지 않아 다양한 연주곡을 양손을 이용하여 스스로 연습하는데 한계가 있으며, 따라서 이를 지원할 수 있는 기능의 피아노 출현이 요청된다.
대한민국공개특허 제10-2012-0056679(공개일자 2012년 6월 4일)
본 발명은 사용자에 의한 피아노 연주를 보조 과정을 증강 현실로 제현하게 제공함으로써 사용자가 악보에 익숙하지 않은 사용자도 피아노 연주를 할 수 있도록 하는 증강 현실 기반 피아노 연주 보조 방법 및 이를 실행하는 장치를 제공하는 것을 목적으로 한다.
또한, 본 발명은 증강 현실에 로딩된 가상 건반 중 현재 눌러야 하는 가상 건반 상에 해당 건반을 눌러야 하는 세기에 따라 서로 다른 색상의 음표 막대를 표시하거나 눌러야 하는 시간에 따라 음표 막대의 변경함으로써 사용자가 자연스러운 연주를 할 수 있도록 하는 증강 현실 기반 피아노 연주 보조 방법 및 이를 실행하는 장치를 제공하는 것을 목적으로 한다.
본 발명이 해결하고자 하는 과제는 이상에서 언급한 과제(들)로 제한되지 않으며, 언급되지 않은 또 다른 과제(들)은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
실시예들 중에서, 증강 현실 기반 피아노 연주 보조 장치에서 실행되는 증강 현실 기반 피아노 연주 보조 방법은 상기 피아노 장치의 건반에 위치하는 복수의 옥타브 인식 라벨을 인식하는 단계, 상기 복수의 옥타브 인식 라벨에 해당하는 옥타브에 대한 정보를 이용하여 건반 정보에 대한 가상 건반을 증강 현실 환경에 로딩하는 단계 및 연주가 시작되면 연주 정보 제공 서버로부터 수신된 연주 정보에 따라 상기 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보를 표시하는 단계를 포함한다.
실시예들 중에서, 증강 현실 기반 피아노 연주 보조 장치는 피아노 장치의 건반에 위치하는 복수의 옥타브 인식 라벨을 인식하고, 상기 복수의 옥타브 인식 라벨에 해당하는 옥타브에 대한 정보를 이용하여 건반 정보에 대한 가상 건반을 증강 현실 환경에 로딩하는 가상 건반 로딩부, 연주가 시작되면 연주 정보 제공 서버로부터 수신된 연주 정보에 따라 피아노 연주 보조 정보를 생성하는 피아노 연주 보조 정보 생성부 및 상기 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보를 제공하는 피아노 연주 보조 정보 제공부를 포함한다.
기타 실시예들의 구체적인 사항들은 상세한 설명 및 첨부 도면들에 포함되어 있다.
본 발명의 이점 및/또는 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다.
본 발명에 따르면, 사용자에 의한 피아노 연주를 보조 과정을 증강 현실로 제현하게 제공함으로써 사용자가 악보에 익숙하지 않은 사용자도 피아노 연주를 할 수 있다는 장점이 있다.
또한 본 발명에 따르면, 증강 현실에 로딩된 가상 건반 중 현재 눌러야 하는 가상 건반 상에 해당 건반을 눌러야 하는 세기에 따라 서로 다른 색상의 음표 막대를 표시하거나 눌러야 하는 시간에 따라 음표 막대의 변경함으로써 사용자가 자연스러운 연주를 할 수 있다는 장점이 있다.
도 1은 본 발명의 일 실시예에 따른 증강 현실 기반 피아노 연주 보조 시스템을 설명하기 위한 네트워크 구성도이다.
도 2는 본 발명의 일 실시예에 따른 증강 현실 기반 피아노 연주 보조 장치의 내부 구조를 설명하기 위한 블록도이다.
도 3은 본 발명에 따른 증강 현실 기반 피아노 연주 보조 방법의 일 실시예를 설명하기 위한 흐름도이다.
도 4는 본 발명에 따른 증강 현실 기반 피아노 연주 보조 과정을 설명하기 위한 예시도이다.
이하에서는 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 증강 현실 기반 피아노 연주 보조 시스템을 설명하기 위한 네트워크 구성도이다.
도 1을 참조하면, 증강 현실 기반 피아노 연주 보조 시스템은 증강 현실 기반 피아노 연주 보조 장치(100) 및 피아노 장치(200)를 포함한다.
증강 현실 기반 피아노 연주 보조 장치(100)는 사용자의 신체 일부에 위치한 생태에서 증강 현실로 피아노 연주 보조 과정을 제공하는 장치이다.
먼저, 증강 현실 기반 피아노 연주 보조 장치(100)는 사용자의 눈에 부착한 상태에서 사용자가 피아노 장치(200)의 건반을 바라보면 피아노 장치(200)의 건반에 위치하는 복수의 옥타브 인식 라벨(210)을 인식한다.
여기에서, 복수의 옥타브 인식 라벨(210)은 피아노 장치(200)의 건반 중 옥타브에 대한 정보를 제공하기 위한 라벨로서, 증강 현실 기반 피아노 연주 보조 장치(100)는 복수의 옥타브 인식 라벨(210)을 인식한 후 옥타브에 대한 정보를 이용하여 건반 키의 사이 간격, 흰색 건반 및 검은 건반을 감지한다. 그런 다음, 증강 현실 기반 피아노 연주 보조 장치(100)는 건반 키의 사이 간격, 흰색 건반 및 검은 건반에 대한 가상 건반을 증강 현실 환경에 로딩한다.
증강 현실 기반 피아노 연주 보조 장치(100)는 연주가 시작되면 연주 정보 제공 서버로부터 수신된 연주 정보에 따라 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보를 표시한다.
이때, 증강 현실 기반 피아노 연주 보조 장치(100)는 피아노 장치(200)의 건반 중 특정 건반이 눌려지거나 사용자 음성이 수신되면 증강 현실 환경에 로딩된 가상 건반 상에 오버레이 방식으로 피아노 연주 보조 정보를 표시한다.
예를 들어, 증강 현실 기반 피아노 연주 보조 장치(100)는 사용자에 의해 선택된 연주 방식이 사용자가 즉흥적으로 연주할 수 있도록 하는 타건 진행 방식인 경우 가상 건반 중 첫 음에 해당하는 음표 막대를 표시하며 피아노 장치(200)의 건반 중 첫 음에 해당하는 건반이 눌려지면 가상 건반 상에 음표 막대가 사라지도록 한다.
또한, 증강 현실 기반 피아노 연주 보조 장치(100)는 사용자에 의해 선택된 연주 방식이 박자 진행 방식인 경우 박자에 맞추어 증강 현실 환경에 로딩된 가상 건반 중 눌러야 하는 건반을 표시한다. 이때, 증강 현실 기반 피아노 연주 보조 장치(100)는 박자를 맞추기 위한 소리(예를 들어, 메트로놈 소리) 또는 연주 곡의 배경 음악을 함께 제공한다. 이때, 배경 음악은 협주의 느낌을 주기 위해 기타, 드럼 등의 미리 준비된 음악일 수 있다.
일 실시예에서, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보를 기초로 증강 현실 환경에 로딩된 가상 건반 중 오른손이 눌러야 하는 건반 및 왼손이 눌러야 하는 가상 건반 상에 해당 건반을 눌러야 하는 손가락 번호를 오버레이할 수 있다.
다른 일 실시예에서, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보를 기초로 증강 현실 환경에 로딩된 가상 건반 중 오른손이 눌러야 하는 건반 및 왼손이 눌러야 하는 가상 건반 상에 서로 다른 색상의 음표 막대를 오버레이할 수 있다.
이때, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보를 기초로 오른손이 건반을 눌러야 하는 건반 세기 및 왼손이 건반을 눌러야 하는 건반 세기에 따라 증강 현실 환경에 로딩된 가상 건반 중 눌러야 하는 가상 건반 상에 명도 및 채도가 조절된 서로 다른 색상의 음표 막대를 오버레이할 수 있다.
예를 들어, 증강 현실 기반 피아노 연주 보조 장치(100)는 오른손이 건반을 눌러야 하는 건반 세기가 약한 세기이면 가상 건반 중 오른손이 눌러야 하는 가상 건반 상에 명도 및 채도가 조절된 옅은 빨강 색상의 음표 막대를 오버레이할 수 있다.
다른 예를 들어, 증강 현실 기반 피아노 연주 보조 장치(100)는 왼손이 건반을 눌러야 하는 건반 세기가 강한 세기이면 가상 건반 중 왼손이 눌러야 하는 가상 건반 상에 명도 및 채도가 조절된 짙은 파란 색상의 음표 막대를 오버레이할 수 있다.
증강 현실 기반 피아노 연주 보조 장치(100)는 연주가 진행됨에 따라 가상 건반 중 다음에 눌러야 하는 가상 건반 상에 음표 막대를 오버레이하도록 가상 건반의 위쪽에서 가상 건반으로 내려오거나 가상 건반의 아래쪽에서 건반으로 올라오도록 할 수 있다.
상기의 실시예에서, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보 중 박자에 따라 건반이 눌려져야 하는 시점에 건반과 대응되는 가상 건반 상에 음표 막대를 오버레이 한다.
즉, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보 중 박자에 따라 음표 막대가 가상 건반을 기준으로 위쪽 또는 아래쪽에서 가상 방향으로 이동하여 가상 건반 상에 정확히 겹쳐져 오버레이되도록 한다.
또한, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보 중 음길이에 해당하는 시간만큼 음표 막대의 오버레이를 유지시키고, 연주 정보 중 음길이에 해당하는 시간이 종료되면 음표 막대가 사라지도록 한다.
또한, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보 중 가사가 있는 경우 가사를 가상 건반의 상단에 표시한다.
증강 현실 기반 피아노 연주 보조 장치(100)는 가상 건반 상에 오버레이 방식으로 피아노 연주 보조 정보를 표시할 때 증강 현실 환경에 로딩된 가상 건반 상에 다양한 악상 기호를 텍스트로 표시하여 사용자가 분위기에 맞추어 연주할 수 있도록 한다.
일 실시예에서, 증강 현실 기반 피아노 연주 보조 장치(100)는 피아노 연주 보조 정보의 종류가 스타카토일 때 짧은 음표 막대로 오버레이 한다.
다른 일 실시예에서, 증강 현실 기반 피아노 연주 보조 장치(100)는 피아노 연주 보조 정보의 종류가 붙임줄일 때 붙임줄을 구분 음표 막대로 오버레이 하고, 피아노 연주 보조 정보의 종류가 이음줄일 때 이음줄을 텍스트로 구분할 수 있도록 오버레이 한다.
또 다른 일 실시예에서, 증강 현실 기반 피아노 연주 보조 장치(100)는 피아노 연주 보조 정보의 종류가 셈여림일 때 텍스트로 오버레이 한다.
또 다른 일 실시예에서, 증강 현실 기반 피아노 연주 보조 장치(100)는 피아노 연주 보조 정보의 종류가 선기호(예를 들어, 점점 크게, 점점 작게)일 때 텍스트로 오버레이 한다.
피아노 장치(200)는 사용자에 의해 건반이 눌려지면 해당 건반의 연주음을 출력하는 장치이다. 이러한 피아노 장치(200)는 디지털 피아노뿐만 아니라 아날로그로 타현하는 업라이트, 그랜드 등의 피아노로 구현될 수 있다.
도 1에 도시된 일 실시예는 한 명의 사용자가 증강 현실 기반 피아노 연주 보조 장치(100)를 이용하여 피아노 장치(200)의 건반을 눌러 연주를 하는 실시예에 관한 것이지만, 두 명의 사용자가 증강 현실 기반 피아노 연주 보조 장치(100)를 이용하여 피아노 장치(200)의 건반을 눌러 연주할 수 있다.
상기의 실시예와 같이 두 명의 사용자가 현실 기반 피아노 연주 보조 장치(100)를 이용하여 피아노 장치(200)의 건반을 눌러 연주하는 경우 제1 사용자의 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보 제공 서버로부터 수신된 연주 정보 중 제1 사용자가 연주해야 하는 연주 정보에 따라 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보를 표시하고, 제2 사용자의 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보 제공 서버로부터 수신된 연주 정보 중 제2 사용자가 연주해야 하는 연주 정보에 따라 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보를 표시할 수 있다.
도 2는 본 발명의 일 실시예에 따른 증강 현실 기반 피아노 연주 보조 장치의 내부 구조를 설명하기 위한 블록도이다.
도 2를 참조하면, 증강 현실 기반 피아노 연주 보조 장치(100)는 가상 건반 로딩부(110), 피아노 연주 보조 정보 생성부(120), 피아노 연주 보조 정보 제공부(130)를 포함한다.
가상 건반 로딩부(110)는 피아노 장치의 건반에 위치하는 복수의 옥타브 인식 라벨을 인식하고, 복수의 옥타브 인식 라벨에 해당하는 옥타브에 대한 정보를 이용하여 건반 정보에 대한 가상 건반을 증강 현실 환경에 로딩한다. 이때, 가상 건반 로딩부(110)는 미리 설정된 증강현실구현기능(예를 들어, 3D의 그래픽 모델 렌더링)을 수행하는 과정을 통해 가상 건반을 증강하여 출력하도록 한다.
여기에서, 복수의 옥타브 인식 라벨은 피아노 장치의 건반 중 옥타브에 대한 정보를 제공하기 위한 라벨로서, 가상 건반 로딩부(110)는 복수의 옥타브 인식 라벨을 인식한 후 옥타브에 대한 정보를 이용하여 건반 키의 사이 간격, 흰색 건반 및 검은 건반을 감지한다. 그런 다음, 가상 건반 로딩부(110)는 건반 키의 사이 간격, 흰색 건반 및 검은 건반에 대한 가상 건반을 증강 현실 환경에 로딩한다.
가상 건반 로딩부(110)는 증강 현실 기반 피아노 연주 보조 장치와 피아노 장치 사이의 거리에 따라 가상 건반의 크기를 변경한다.
예를 들어, 가상 건반 로딩부(110)는 증강 현실 기반 피아노 연주 보조 장치와 피아노 장치 사이의 거리가 가까워 질수록 가상 건반을 크게하여 로딩할 수 있다. 다른 예를 들어, 가상 건반 로딩부(110)는 증강 현실 기반 피아노 연주 보조 장치와 피아노 장치 사이의 거리가 멀어질수록 가상 건반을 작게하여 로딩할 수 있다.
피아노 연주 보조 정보 생성부(120)는 연주 정보 제공 서버로부터 수신된 연주 정보에 따라 피아노 연주 보조 정보를 생성한다.
일 실시예에서, 피아노 연주 보조 정보 생성부(120)는 연주 정보를 기초로 오른손이 건반을 눌러야 하는 건반 세기 및 왼손이 건반을 눌러야 하는 건반 세기에 따라 증강 현실 환경에 로딩된 가상 건반 중 눌러야 하는 가상 건반 상에 명도 및 채도가 조절된 서로 다른 색상의 음표 막대를 생성할 수 있다.
예를 들어, 피아노 연주 보조 정보 생성부(120)는 오른손이 건반을 눌러야 하는 건반 세기가 약한 세기이면 가상 건반 중 오른손이 눌러야 하는 가상 건반 상에 명도 및 채도가 조절된 옅은 빨강 색상의 음표 막대를 생성할 수 있다.
다른 예를 들어, 피아노 연주 보조 정보 생성부(120)는 왼손이 건반을 눌러야 하는 건반 세기가 강한 세기이면 가상 건반 중 왼손이 눌러야 하는 가상 건반 상에 명도 및 채도가 조절된 짙은 파란 색상의 음표 막대를 생성할 수 있다.
피아노 연주 보조 정보 제공부(130)는 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보 생성부(120)에 의해 생성된 피아노 연주 보조 정보를 제공한다.
일 실시예에서, 피아노 연주 보조 정보 제공부(130)는 연주가 진행됨에 따라 가상 건반 중 다음에 눌러야 하는 가상 건반 상에 피아노 연주 보조 정보 생성부(120)에 의해 생성된 음표 막대를 오버레이하도록 가상 건반의 위쪽에서 가상 건반으로 내려오거나 가상 건반의 아래쪽에서 건반으로 올라오도록 할 수 있다.
상기의 실시예에서, 피아노 연주 보조 정보 제공부(130)는 연주 정보 중 박자에 따라 건반이 눌려져야 하는 시점에 건반과 대응되는 가상 건반 상에 피아노 연주 보조 정보 생성부(120)에 의해 생성된 음표 막대를 오버레이 한다.
즉, 피아노 연주 보조 정보 제공부(130)는 연주 정보 중 박자에 따라 음표 막대가 가상 건반을 기준으로 위쪽 또는 아래쪽에서 가상 방향으로 이동하여 가상 건반 상에 정확히 겹쳐져 오버레이되도록 한다.
또한, 피아노 연주 보조 정보 제공부(130)는 연주 정보 중 음길이에 해당하는 시간만큼 피아노 연주 보조 정보 생성부(120)에 의해 생성된 음표 막대의 오버레이를 유지시키고, 연주 정보 중 음길이에 해당하는 시간이 종료되면 피아노 연주 보조 정보 생성부(120)에 의해 생성된 음표 막대가 사라지도록 한다.
이때, 피아노 연주 보조 정보 제공부(130)는 연주 정보 중 음길이의 시작 시점에는 가상 건반 상에 음표 막대의 오버레이를 하고, 시간의 흐름에 따라 가상 건반 상에 음표 막대의 크기를 축소하여 오버레이 한다. 이에 따라, 사용자는 연주하는 과정에서 건반을 누를 때 언제까지 건반을 누르고 있어야 하는지 알 수 있다.
또한, 피아노 연주 보조 정보 제공부(130)는 연주 정보 중 가사가 있는 경우 가사를 가상 건반의 상단에 표시한다.
피아노 연주 보조 정보 제공부(130)는 가상 건반 상에 오버레이 방식으로 피아노 연주 보조 정보를 표시할 때 증강 현실 환경에 로딩된 가상 건반 상에 다양한 악상 기호를 텍스트로 표시하여 사용자가 분위기에 맞추어 연주할 수 있도록 한다.
일 실시예에서, 피아노 연주 보조 정보 제공부(130)는 피아노 연주 보조 정보의 종류가 스타카토일 때 짧은 음표 막대로 오버레이 한다.
다른 일 실시예에서, 피아노 연주 보조 정보 제공부(130)는 피아노 연주 보조 정보의 종류가 붙임줄일 때 붙임줄을 구분 음표 막대로 오버레이 하고, 피아노 연주 보조 정보의 종류가 이음줄일 때 이음줄을 텍스트로 구분할 수 있도록 오버레이 한다.
또 다른 일 실시예에서, 피아노 연주 보조 정보 제공부(130)는 피아노 연주 보조 정보의 종류가 셈여림일 때 텍스트로 오버레이 한다.
또 다른 일 실시예에서, 피아노 연주 보조 정보 제공부(130)는 피아노 연주 보조 정보의 종류가 선기호(예를 들어, 점점 크게, 점점 작게)일 때 텍스트로 오버레이 한다.
도 3은 본 발명에 따른 증강 현실 기반 피아노 연주 보조 방법의 일 실시예를 설명하기 위한 흐름도이다.
도 3을 참조하면, 증강 현실 기반 피아노 연주 보조 장치(100)는 피아노 장치의 건반에 위치하는 복수의 옥타브 인식 라벨을 인식한다(단계 S310).
증강 현실 기반 피아노 연주 보조 장치(100)는 복수의 옥타브 인식 라벨에 해당하는 옥타브에 대한 정보를 이용하여 건반 정보에 대한 가상 건반을 증강 현실 환경에 로딩한다(단계 S320).
증강 현실 기반 피아노 연주 보조 장치(100)는 연주가 시작되면 연주 정보 제공 서버로부터 수신된 연주 정보에 따라 상기 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보를 표시한다(단계 S330).
단계 S330에 대한 일 실시예에서, 증강 현실 기반 피아노 연주 보조 장치(100)는 피아노 장치의 건반 중 특정 건반이 눌려지거나 사용자 음성이 수신되면 증강 현실 환경에 로딩된 가상 건반 상에 오버레이 방식으로 피아노 연주 보조 정보를 표시한다.
상기와 같이 증강 현실 기반 피아노 연주 보조 장치(100)가 피아노 연주 보조 정보를 표시하는 과정에서, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보를 기초로 증강 현실 환경에 로딩된 가상 건반 중 오른손이 눌러야 하는 건반 및 왼손이 눌러야 하는 가상 건반 상에 서로 다른 색상의 음표 막대를 오버레이한다.
이때, 증강 현실 기반 피아노 연주 보조 장치(100)는 증강 현실 환경에 로딩된 가상 건반 중 눌러야 하는 건반의 세기에 따라 상기 가상 건반 상에 오버레이 되는 색상의 명도 및 채도를 조절하고, 가상 건반 상에 명도 및 채도가 조절된 서로 다른 색상의 음표 막대를 오버레이한다.
도 4는 본 발명에 따른 증강 현실 기반 피아노 연주 보조 과정을 설명하기 위한 예시도이다.
도 4를 참조하면, 증강 현실 기반 피아노 연주 보조 장치(100)는 복수의 옥타브 인식 라벨(1)을 인식한 후 옥타브에 대한 정보를 이용하여 건반 키의 사이 간격, 흰색 건반 및 검은 건반을 감지한다. 그런 다음, 증강 현실 기반 피아노 연주 보조 장치(100)는 건반 키의 사이 간격, 흰색 건반 및 검은 건반에 대한 가상 건반을 증강 현실 환경에 로딩한다.
증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보를 기초로 증강 현실 환경에 로딩된 가상 건반 중 오른손이 눌러야 하는 건반 및 왼손이 눌러야 하는 가상 건반 상에 해당 건반을 눌러야 하는 손가락 번호를 오버레이할 수 있다. 예를 들어, 참조번호(2)와 같이 손이 눌러야 하는 가상 건반 상에 해당 건반을 눌러야 하는 손가락 번호 4를 오버레이할 수 있다.
증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보를 기초로 증강 현실 환경에 로딩된 가상 건반 중 오른손이 눌러야 하는 건반 및 왼손이 눌러야 하는 가상 건반 상에 서로 다른 색상의 음표 막대를 오버레이할 수 있다.
예를 들어, 증강 현실 기반 피아노 연주 보조 장치(100)는 오른손이 건반을 눌러야 하는 가상 건반 상에 빨강 색상의 음표 막대를 오버레이할 수 있고, 왼손이 눌러야 하는 가상 건반 상에 파란 색상의 음표 막대를 오버레이할 수 있다.
이때, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보를 기초로 오른손이 건반을 눌러야 하는 건반 세기 및 왼손이 건반을 눌러야 하는 건반 세기에 따라 증강 현실 환경에 로딩된 가상 건반 중 눌러야 하는 가상 건반 상에 명도 및 채도가 조절된 서로 다른 색상의 음표 막대를 오버레이할 수 있다.
예를 들어, 증강 현실 기반 피아노 연주 보조 장치(100)는 왼손 중 첫 번째 손가락이 건반을 눌러야 하는 건반 세기가 약한 세기이면 참조번호(4)와 같이 가상 건반 중 오른손이 눌러야 하는 가상 건반 상에 명도 및 채도가 조절된 옅은 빨강 색상의 음표 막대를 오버레이할 수 있다.
다른 예를 들어, 증강 현실 기반 피아노 연주 보조 장치(100)는 왼손 중 네 번째 손가락이 건반을 눌러야 하는 건반 세기가 강한 세기이면 참조번호(3)와 같이 가상 건반 중 왼손이 눌러야 하는 가상 건반 상에 명도 및 채도가 조절된 짙은 빨강 색상의 음표 막대를 오버레이할 수 있다.
증강 현실 기반 피아노 연주 보조 장치(100)는 연주가 진행됨에 따라 가상 건반 중 다음에 눌러야 하는 가상 건반 상에 음표 막대를 오버레이하도록 가상 건반의 위쪽에서 가상 건반으로 내려오거나 가상 건반의 아래쪽에서 건반으로 올라오도록 할 수 있다.
상기의 실시예에서, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보 중 박자에 따라 건반이 눌려져야 하는 시점에 건반과 대응되는 가상 건반 상에 피아노 연주 보조 정보 생성부(120)에 의해 생성된 음표 막대를 오버레이 한다.
즉, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보 중 박자에 따라 음표 막대가 가상 건반을 기준으로 위쪽 또는 아래쪽에서 가상 방향으로 이동하여 가상 건반 상에 정확히 겹쳐져 오버레이되도록 한다.
또한, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보 중 음길이에 해당하는 시간만큼 음표 막대의 오버레이를 유지시키고, 연주 정보 중 음길이에 해당하는 시간이 종료되면 음표 막대가 사라지도록 한다.
이때, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주 정보 중 음길이의 시작 시점에는 가상 건반 상에 음표 막대의 오버레이를 하고, 참조번호(6)과 같이 시간의 흐름에 따라 가상 건반 상에 음표 막대의 크기를 축소하여 오버레이 한다. 이에 따라, 사용자는 연주하는 과정에서 건반을 누를 때 언제까지 건반을 누르고 있어야 하는지 알 수 있다.
또한, 증강 현실 기반 피아노 연주 보조 장치(100)는 연주가 진행됨에 따라 가상 건반 중 다음에 눌러야 하는 가상 건반 상에 음표 막대를 오버레이하도록 참조번호(5)와 같이 가상 건반의 위쪽에서 가상 건반으로 내려오거나 도 4에는 도시하지 않았지만 가상 건반의 아래쪽에서 건반으로 올라오도록 할 수 있다.
지금까지 본 발명에 따른 구체적인 실시예에 관하여 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서는 여러 가지 변형이 가능함은 물론이다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안 되며, 후술하는 특허 청구의 범위뿐 아니라 이 특허 청구의 범위와 균등한 것들에 의해 정해져야 한다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 이는 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명 사상은 아래에 기재된 특허청구범위에 의해서만 파악되어야 하고, 이의 균등 또는 등가적 변형 모두는 본 발명 사상의 범주에 속한다고 할 것이다.
100: 증강 현실 기반 피아노 연주 보조 장치
110: 가상 건반 로딩부
120: 피아노 연주 보조 정보 생성부
130: 피아노 연주 보조 정보 제공부
200: 피아노 장치

Claims (12)

  1. 증강 현실 기반 피아노 연주 보조 장치에서 실행되는 증강 현실 기반 피아노 연주 보조 방법에 있어서,
    상기 피아노 장치의 건반에 위치하는 복수의 옥타브 인식 라벨을 인식하는 단계;
    상기 복수의 옥타브 인식 라벨에 해당하는 옥타브에 대한 정보를 이용하여 건반 정보에 대한 가상 건반을 증강 현실 환경에 로딩하는 단계; 및
    연주가 시작되면 연주 정보 제공 서버로부터 수신된 연주 정보에 따라 상기 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보를 표시하는 단계를 포함하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 방법.
  2. 제1항에 있어서,
    상기 증강 현실 환경에 로딩된 건반위로 피아노 연주 보조 정보를 표시하는 단계는
    상기 피아노 장치의 건반 중 특정 건반이 눌려지거나 사용자 음성이 수신되면 상기 증강 현실 환경에 로딩된 가상 건반 상에 오버레이 방식으로 피아노 연주 보조 정보를 표시하는 단계를 포함하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 방법.
  3. 제2항에 있어서,
    상기 증강 현실 환경에 로딩된 가상 건반 상에 오버레이 방식으로 피아노 연주 보조 정보를 표시하는 단계는
    상기 연주 정보를 기초로 상기 증강 현실 환경에 로딩된 가상 건반 중 오른손이 눌러야 하는 건반 및 왼손이 눌러야 하는 가상 건반 상에 서로 다른 색상의 음표 막대를 오버레이하는 단계를 포함하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 방법.
  4. 제3항에 있어서,
    상기 오른손이 눌러야 하는 건반 및 왼손이 눌러야 하는 가상 건반 상에 서로 다른 색상의 음표 막대를 오버레이하는 단계는
    상기 증강 현실 환경에 로딩된 가상 건반 중 눌러야 하는 건반의 세기에 따라 상기 가상 건반 상에 오버레이 되는 색상의 명도 및 채도를 조절하는 단계;
    상기 가상 건반 상에 명도 및 채도가 조절된 서로 다른 색상의 음표 막대를 오버레이하는 단계를 포함하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 방법.
  5. 제1항에 있어서,
    상기 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보를 표시하는 단계는
    상기 연주 정보 중 박자에 따라 건반이 눌려져야 하는 시점에 상기 건반과 대응되는 가상 건반 상에 음표 막대를 오버레이 하는 단계;
    상기 연주 정보 중 음길이에 해당하는 시간만큼 상기 음표 막대의 오버레이를 유지시키는 단계;
    상기 연주 정보 중 음길이에 해당하는 시간이 종료되면 상기 음표 막대가 사라지도록 하는 단계를 포함하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 방법.
  6. 제1항에 있어서,
    상기 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보를 표시하는 단계는
    상기 가상 건반 중 다음에 눌러야 하는 가상 건반의 위쪽에서 상기 가상 건반으로 내려오도록 하거나 상기 가상 건반의 아래쪽에서 상기 가상 건반으로 올라오도록 하는 단계를 포함하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 방법.
  7. 피아노 장치의 건반에 위치하는 복수의 옥타브 인식 라벨을 인식하고, 상기 복수의 옥타브 인식 라벨에 해당하는 옥타브에 대한 정보를 이용하여 건반 정보에 대한 가상 건반을 증강 현실 환경에 로딩하는 가상 건반 로딩부;
    연주가 시작되면 연주 정보 제공 서버로부터 수신된 연주 정보에 따라 피아노 연주 보조 정보를 생성하는 피아노 연주 보조 정보 생성부; 및
    상기 증강 현실 환경에 로딩된 가상 건반 상에 피아노 연주 보조 정보를 제공하는 피아노 연주 보조 정보 제공부를 포함하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 장치.
  8. 제7항에 있어서,
    상기 피아노 연주 보조 정보 제공부는
    상기 피아노 장치의 건반 중 특정 건반이 눌려지거나 사용자 음성이 수신되면 상기 증강 현실 환경에 로딩된 가상 건반 상에 오버레이 방식으로 피아노 연주 보조 정보를 표시하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 장치.
  9. 제8항에 있어서,
    상기 피아노 연주 보조 정보 제공부는
    상기 연주 정보를 기초로 상기 증강 현실 환경에 로딩된 가상 건반 중 오른손이 눌러야 하는 건반 및 왼손이 눌러야 하는 가상 건반 상에 서로 다른 색상의 음표 막대를 오버레이하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 장치.
  10. 제9항에 있어서,
    상기 피아노 연주 보조 정보 생성부는
    상기 증강 현실 환경에 로딩된 가상 건반 중 눌러야 하는 건반의 세기에 따라 색상의 명도 및 채도를 조절하여 음표 막대를 생성하고,
    상기 피아노 연주 보조 정보 제공부는
    상기 피아노 연주 보조 정보 생성부에 의해 명도 및 채도가 조절된 서로 다른 색상의 음표 막대를 오버레이하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 장치.
  11. 제7항에 있어서,
    상기 피아노 연주 보조 정보 제공부는
    상기 연주 정보 중 박자에 따라 건반이 눌려져야 하는 시점에 상기 건반과 대응되는 가상 건반 상에 음표 막대를 오버레이 하고, 상기 연주 정보 중 음길이에 해당하는 시간만큼 상기 음표 막대의 오버레이를 유지시키고, 상기 연주 정보 중 음길이에 해당하는 시간이 종료되면 상기 음표 막대가 사라지도록 하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 장치.
  12. 제7항에 있어서,
    상기 피아노 연주 보조 정보 제공부는
    상기 가상 건반 중 다음에 눌러야 하는 가상 건반의 위쪽에서 상기 가상 건반으로 내려오도록 하거나 상기 가상 건반의 아래쪽에서 상기 가상 건반으로 올라오도록 하는 것을 특징으로 하는
    증강 현실 기반 피아노 연주 보조 장치.
KR1020160070123A 2016-06-07 2016-06-07 증강 현실 기반 피아노 연주 보조 방법 및 이를 실행하는 장치 KR20170138135A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160070123A KR20170138135A (ko) 2016-06-07 2016-06-07 증강 현실 기반 피아노 연주 보조 방법 및 이를 실행하는 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160070123A KR20170138135A (ko) 2016-06-07 2016-06-07 증강 현실 기반 피아노 연주 보조 방법 및 이를 실행하는 장치

Publications (1)

Publication Number Publication Date
KR20170138135A true KR20170138135A (ko) 2017-12-15

Family

ID=60954284

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160070123A KR20170138135A (ko) 2016-06-07 2016-06-07 증강 현실 기반 피아노 연주 보조 방법 및 이를 실행하는 장치

Country Status (1)

Country Link
KR (1) KR20170138135A (ko)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109493686A (zh) * 2018-12-29 2019-03-19 深圳市掌网科技股份有限公司 一种基于混合现实的钢琴训练系统及方法
CN109559593A (zh) * 2018-12-29 2019-04-02 深圳市掌网科技股份有限公司 一种基于混合现实的钢琴训练系统及方法
KR20200060211A (ko) * 2018-11-21 2020-05-29 한국과학기술원 증강현실을 이용한 기타 운지 학습 시스템
WO2020117823A1 (en) * 2018-12-03 2020-06-11 Smule, Inc. Augmented reality filters for captured audiovisual performances
US20220122573A1 (en) * 2018-12-03 2022-04-21 Smule, Inc. Augmented Reality Filters for Captured Audiovisual Performances
US11670188B2 (en) 2020-12-02 2023-06-06 Joytunes Ltd. Method and apparatus for an adaptive and interactive teaching of playing a musical instrument
US11893898B2 (en) 2020-12-02 2024-02-06 Joytunes Ltd. Method and apparatus for an adaptive and interactive teaching of playing a musical instrument
US11900825B2 (en) 2020-12-02 2024-02-13 Joytunes Ltd. Method and apparatus for an adaptive and interactive teaching of playing a musical instrument
US11972693B2 (en) 2020-12-02 2024-04-30 Joytunes Ltd. Method, device, system and apparatus for creating and/or selecting exercises for learning playing a music instrument

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200060211A (ko) * 2018-11-21 2020-05-29 한국과학기술원 증강현실을 이용한 기타 운지 학습 시스템
WO2020117823A1 (en) * 2018-12-03 2020-06-11 Smule, Inc. Augmented reality filters for captured audiovisual performances
CN113302945A (zh) * 2018-12-03 2021-08-24 思妙公司 用于捕获的视听表演的增强现实过滤器
US20220122573A1 (en) * 2018-12-03 2022-04-21 Smule, Inc. Augmented Reality Filters for Captured Audiovisual Performances
CN109493686A (zh) * 2018-12-29 2019-03-19 深圳市掌网科技股份有限公司 一种基于混合现实的钢琴训练系统及方法
CN109559593A (zh) * 2018-12-29 2019-04-02 深圳市掌网科技股份有限公司 一种基于混合现实的钢琴训练系统及方法
CN109559593B (zh) * 2018-12-29 2021-06-04 深圳市掌网科技股份有限公司 一种基于混合现实的钢琴训练系统及方法
US11670188B2 (en) 2020-12-02 2023-06-06 Joytunes Ltd. Method and apparatus for an adaptive and interactive teaching of playing a musical instrument
US11893898B2 (en) 2020-12-02 2024-02-06 Joytunes Ltd. Method and apparatus for an adaptive and interactive teaching of playing a musical instrument
US11900825B2 (en) 2020-12-02 2024-02-13 Joytunes Ltd. Method and apparatus for an adaptive and interactive teaching of playing a musical instrument
US11972693B2 (en) 2020-12-02 2024-04-30 Joytunes Ltd. Method, device, system and apparatus for creating and/or selecting exercises for learning playing a music instrument

Similar Documents

Publication Publication Date Title
KR20170138135A (ko) 증강 현실 기반 피아노 연주 보조 방법 및 이를 실행하는 장치
US10803844B2 (en) Information processing device, information processing method, storage medium, and electronic musical instrument
CN108028040B (zh) 音乐演奏辅助装置和方法
JP6344578B2 (ja) 電子楽器を演奏する方法
JP2019124907A (ja) 学習支援システム
JP2008170947A (ja) 自律型読譜および音楽演奏ロボット、およびその方法
CN106981282A (zh) 一种钢琴演奏琴键提示方法及系统
US11302296B2 (en) Method implemented by processor, electronic device, and performance data display system
JP6205699B2 (ja) 楽譜表示装置、楽譜表示方法、および当該楽譜表示方法を実現するためのプログラム
CN107067876A (zh) 一种琴声控制分体的可拼接式彩色分组电子乐谱及装置
CN2655363Y (zh) 数字式音乐教学装置
JP7326776B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP6944366B2 (ja) カラオケ装置
KR20110121049A (ko) 이미지를 이용한 음원 생성 시스템 및 방법
JP7377415B2 (ja) 情報処理装置、電子楽器、方法及びプログラム
JP2022010066A (ja) 情報処理装置、情報処理方法、およびプログラム
US20220310046A1 (en) Methods, information processing device, performance data display system, and storage media for electronic musical instrument
JP2010122616A (ja) 楽譜表示装置、楽譜表示方法及びプログラム
JPH09274427A (ja) 楽音発生装置
JP3221331U (ja) アニメーション絵図式携帯型演奏練習装置
JP5754449B2 (ja) 楽曲コード譜生成装置
KR100659488B1 (ko) 음정인식에 의한 점수 계산방법
KR20100100330A (ko) 이미지를 이용한 음원 생성 시스템 및 방법
WO2009128028A1 (en) Musical keyboard instrument with training capabilities
JP4556915B2 (ja) 演奏装置およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application