KR20210081075A - Principle of Sheet Music Algorithm Produced by Analyzing MIDI File and How It Works with Digital Piano - Google Patents

Principle of Sheet Music Algorithm Produced by Analyzing MIDI File and How It Works with Digital Piano Download PDF

Info

Publication number
KR20210081075A
KR20210081075A KR1020190173267A KR20190173267A KR20210081075A KR 20210081075 A KR20210081075 A KR 20210081075A KR 1020190173267 A KR1020190173267 A KR 1020190173267A KR 20190173267 A KR20190173267 A KR 20190173267A KR 20210081075 A KR20210081075 A KR 20210081075A
Authority
KR
South Korea
Prior art keywords
song
electronic device
key
led
piano
Prior art date
Application number
KR1020190173267A
Other languages
Korean (ko)
Inventor
권민성
Original Assignee
(주) 사운드리더
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주) 사운드리더 filed Critical (주) 사운드리더
Priority to KR1020190173267A priority Critical patent/KR20210081075A/en
Publication of KR20210081075A publication Critical patent/KR20210081075A/en

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0008Associated control or indicating means
    • G10H1/0016Means for indicating which keys, frets or strings are to be actuated, e.g. using lights or leds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/20Education
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10GREPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
    • G10G1/00Means for the representation of music
    • G10G1/02Chord or note indicators, fixed or adjustable, for keyboard of fingerboards
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0033Recording/reproducing or transmission of music for electrophonic musical instruments
    • G10H1/0041Recording/reproducing or transmission of music for electrophonic musical instruments in coded form
    • G10H1/0058Transmission between separate instruments or between individual components of a musical system
    • G10H1/0066Transmission between separate instruments or between individual components of a musical system using a MIDI interface
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/021Indicator, i.e. non-screen output user interfacing, e.g. visual or tactile instrument status or guidance information using lights, LEDs, seven segments displays
    • G10H2220/026Indicator, i.e. non-screen output user interfacing, e.g. visual or tactile instrument status or guidance information using lights, LEDs, seven segments displays associated with a key or other user input device, e.g. key indicator lights
    • G10H2220/061LED, i.e. using a light-emitting diode as indicator

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Tourism & Hospitality (AREA)
  • Primary Health Care (AREA)
  • General Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Auxiliary Devices For Music (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

An application stored on a medium for executing a method in combination with hardware. The method includes the steps of: executing an application providing information for guiding the performance of an LED piano in an electronic device; connecting the electronic device and the LED piano to perform communication; receiving an input for selecting a first song to be played on the LED piano; and visualizing the sound information of the first song and displaying a first electronic sheet music guiding input of at least one key in the keyboard of the LED piano. It is possible to provide a user with easy mobile sheet music and a lesson function linked to the piano.

Description

MIDI파일 분석을 통해 제작되는 악보 알고리즘의 원리 및 디지털피아노와 연동되는 동작방법 {Principle of Sheet Music Algorithm Produced by Analyzing MIDI File and How It Works with Digital Piano}{Principle of Sheet Music Algorithm Produced by Analyzing MIDI File and How It Works with Digital Piano}

MIDI파일 분석을 통해 제작되는 악보 알고리즘의 원리 및 디지털피아노와 연동되는 동작방법에 관한 것이다.It relates to the principle of the music score algorithm produced through MIDI file analysis and the operation method linked to the digital piano.

음악프로그램, K-POP열풍과 콘텐츠와 미디어의 발달로 음악에 대한 관심 및 소비는 매년 증가되고 있다. 세계 음악시장은 오프라인 음악시장의 감소하고 있으나, 연평균 1.2%의 안정적인 성장세를 보이고 있다. 여가 문화를 중시하게 되면서, 악기 학습에 대한 관심이 증가되고 있다.With the development of music programs, K-POP craze, and content and media, interest in and consumption of music is increasing every year. The global music market is showing a stable growth rate of 1.2% per annum, although the offline music market is declining. As leisure culture becomes more important, interest in learning musical instruments is increasing.

사용자는 피아노를 배우기 위해서, 학원을 찾아가서 레슨을 받고 있다. 일반적으로 사용자가 학원을 찾아가서 피아노를 배우는 것은 접근성이 쉽지 않다.In order to learn the piano, the user visits a private academy and receives lessons. In general, it is not easy for a user to visit a private academy to learn the piano.

따라서, 사용자들이 보다 피아노를 보다 쉽게 배우고 연주할 수 있는 기술이 요구된다.Accordingly, there is a need for a technique that allows users to more easily learn and play the piano.

MIDI파일 분석을 통해 제작되는 악보 알고리즘의 원리 및 디지털피아노와 연동되는 동작을 통해 사용자에게 간편한 모바일 악보를 제공하고 피아노와 연동한 레슨기능을 제공하고자 한다.Through the principle of the music score algorithm produced through MIDI file analysis and the operation linked to the digital piano, it is intended to provide users with easy mobile sheet music and a lesson function linked to the piano.

일측에 따르면, 전자 장치에서 LED 피아노의 연주를 가이드 하기 위한 정보를 제공하는 애플리케이션을 실행하는 단계; 상기 전자 장치와 상기 LED 피아노 간에 통신을 수행할 수 있도록 연결하는 단계; 상기 LED 피아노에서 연주될 제1 곡을 선택하는 입력을 수신하는 단계; 및 상기 제1 곡의 음의 정보를 시각화하여, 상기 LED 피아노의 키보드 내의 적어도 하나의 키의 입력을 가이드 하는 제1 전자 악보를 표시하는 단계를 포함하는, 방법을 하드웨어와 결합되어 실행시키기 위해 매체에 저장된 애플리케이션이 제공된다.According to one side, executing an application that provides information for guiding the performance of the LED piano in the electronic device; connecting the electronic device and the LED piano to perform communication; receiving an input for selecting a first song to be played on the LED piano; and displaying a first electronic score guiding input of at least one key in the keyboard of the LED piano by visualizing the sound information of the first song. Applications stored in .

다른 일측에 따르면, 전자 장치에서 LED 피아노의 연주를 가이드 하기 위한 정보를 제공하는 애플리케이션을 실행하는 단계; 상기 전자 장치와 상기 LED 피아노 간에 통신을 수행할 수 있도록 연결하는 단계; 상기 LED 피아노에서 연주될 제1 곡을 선택하는 입력을 수신하는 단계; 및 상기 제1 곡의 음의 정보를 시각화하여, 상기 LED 피아노의 키보드 내의 적어도 하나의 키의 입력을 가이드 하는 제1 전자 악보를 표시하는 단계를 포함하는, 전자 장치의 동작 방법이 제공된다.According to another side, executing an application that provides information for guiding the performance of the LED piano in the electronic device; connecting the electronic device and the LED piano to perform communication; receiving an input for selecting a first song to be played on the LED piano; and displaying a first electronic score guiding input of at least one key in the keyboard of the LED piano by visualizing sound information of the first song.

사용자가 피아노에서 곡을 연주할 때, 곡의 음에 대응되는 키를 칠 수 있도록 전자 장치를 통해 가이드 함으로써, 사용자가 곡을 보다 쉽고 정확하게 연주할 수 있다.When the user plays the song on the piano, the user can play the song more easily and accurately by guiding the user through the electronic device to hit the key corresponding to the sound of the song.

본 발명은, 다음의 자세한 설명과 그에 수반되는 도면들의 결합으로 쉽게 이해될 수 있으며, 참조 번호(reference numerals)들은 구조적 구성요소(structural elements)를 의미한다.
도 1은 일실시예에 따라, 사용자에게 선택된 곡에 대한 피아노 연주를 가이드 하기 위한 LED 피아노와 전자 장치 간의 동작을 설명하기 위한 도면이다.
도 2는 일실시예에 따라, LED 피아노의 구성을 도시한 블록도이다.
도 3은 일실시예에 따라, LED 피아노에서 곡의 음에 대응되는 키의 LED 장치가 발광되는 과정을 설명하기 위한 도면이다.
도 4는 일실시예에 따라, 전자 장치에서 LED 피아노의 연주를 가이드 하기 위한 정보를 제공하는 애플리케이션을 동작시키는 방법을 설명하기 위한 흐름도이다.
도 5는 일실시예에 따라, 전자 악보에 표시된 음에 대응되는 키가 입력되면, 전자 장치에서 표시되는 화면을 설명하기 위한 도면이다.
도 6은 일실시예에 따라, 전자 악보에 표시된 음에 대응되지 않는 키가 입력되면, 전자 장치에서 표시되는 화면을 설명하기 위한 도면이다.
도 7은 일실시예에 따라, 선택된 곡의 연주에 따라, 전자 장치에서 표시되는 전자 악보를 설명하기 위한 도면이다.
도 8은 일실시예에 따라, 선택된 곡의 연주가 완료되면, 전자 장치에서 제공되는 피드백 정보를 설명하기 위한 도면이다.
도 9는 다른 일실시예에 따라, 선택된 곡의 연주가 완료되면, 전자 장치에서 제공되는 피드백 정보를 설명하기 위한 도면이다.
도 10은 일실시예에 따라, 전자 장치에서 제공되는 곡에 대한 인터페이스를 설명하기 위한 도면이다.
BRIEF DESCRIPTION OF THE DRAWINGS The present invention can be easily understood by the following detailed description and combination of the accompanying drawings, in which reference numerals mean structural elements.
1 is a diagram for explaining an operation between an LED piano and an electronic device for guiding a user to play a piano for a selected song, according to an embodiment.
2 is a block diagram showing the configuration of an LED piano, according to an embodiment.
FIG. 3 is a view for explaining a process in which an LED device of a key corresponding to a sound of a song in the LED piano emits light, according to an embodiment.
4 is a flowchart illustrating a method of operating an application that provides information for guiding the performance of an LED piano in an electronic device, according to an exemplary embodiment.
FIG. 5 is a diagram for explaining a screen displayed on an electronic device when a key corresponding to a sound displayed on an electronic score is input, according to an exemplary embodiment.
FIG. 6 is a diagram for describing a screen displayed on an electronic device when a key that does not correspond to a sound displayed on an electronic score is input, according to an exemplary embodiment.
FIG. 7 is a diagram for describing an electronic score displayed on an electronic device according to performance of a selected song, according to an exemplary embodiment.
8 is a diagram for describing feedback information provided by an electronic device when a performance of a selected song is completed, according to an exemplary embodiment.
9 is a diagram for describing feedback information provided by an electronic device when a performance of a selected song is completed, according to another exemplary embodiment.
10 is a diagram for explaining an interface for a song provided by an electronic device, according to an exemplary embodiment.

이하에서는 도면을 참조하여 다양한 실시예들을 상세히 설명한다. 이하에서 설명되는 실시예들은 여러 가지 상이한 형태로 변형되어 실시될 수도 있다. 실시예들의 특징을 보다 명확히 설명하기 위하여 이하의 실시예들이 속하는 기술분야에서 통상의 지식을 가진 자에게 널리 알려져 있는 사항들에 관해서 자세한 설명은 생략한다.Hereinafter, various embodiments will be described in detail with reference to the drawings. The embodiments described below may be modified and implemented in various different forms. In order to more clearly describe the characteristics of the embodiments, detailed descriptions of matters widely known to those of ordinary skill in the art to which the following embodiments belong will be omitted.

한편, 본 명세서에서 어떤 구성이 다른 구성과 "연결"되어 있다고 할 때, 이는 '직접적으로 연결'되어 있는 경우뿐 아니라, '그 중간에 다른 구성을 사이에 두고 연결'되어 있는 경우도 포함한다. 또한, 어떤 구성이 다른 구성을 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한, 그 외 다른 구성을 제외하는 것이 아니라 다른 구성들 더 포함할 수도 있다는 것을 의미한다.On the other hand, in the present specification, when a component is "connected" with another component, it includes not only a case of 'directly connected', but also a case of 'connected with another component in the middle'. In addition, when a component "includes" another component, this means that other components may be further included, rather than excluding other components, unless otherwise stated.

또한, 본 명세서에서 사용되는 '제 1' 또는 '제 2' 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용할 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. Also, terms including an ordinal number such as 'first' or 'second' used in this specification may be used to describe various elements, but the elements should not be limited by the terms. The above terms are used only for the purpose of distinguishing one component from another.

본 명세서 전체에서, "LED 피아노"는 키보드 내의 키에 LED 장치가 구비된 피아노를 의미할 수 있다. LED 피아노는 일반 피아노, 디지털 피아노 등으로 구현될 수 있고, 상기 예시에 한정되지 않는다.Throughout this specification, "LED piano" may refer to a piano in which an LED device is provided on a key in a keyboard. The LED piano may be implemented as a general piano, a digital piano, or the like, and is not limited to the above example.

본 명세서 전체에서, "전자 장치"는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), PC, 데스크 탑, 가전기기, 태블릿 PC, 전자북 단말기, 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션, MP3 플레이어, 디지털 카메라 등이 있을 수 있으나, 이에 한정되는 것은 아니다. 전자 장치는 LED 피아노와 연결되어 사용자가 LED 피아노에서 곡을 연주할 수 있도록 가이드 하는 정보를 제공할 수 있다.Throughout this specification, "electronic device" refers to a mobile phone, a smart phone, a laptop computer, a PC, a desktop, a home appliance, a tablet PC, an e-book terminal, a digital broadcasting terminal, and a personal digital assistant (PDA). ), a Portable Multimedia Player (PMP), a navigation system, an MP3 player, a digital camera, and the like, but is not limited thereto. The electronic device may be connected to the LED piano to provide information guiding the user to play a song on the LED piano.

본 명세서 전체에서, "애플리케이션(application)"은 소정의 업무를 수행하기 위해 고안된 일련의 컴퓨터 프로그램 집합을 의미할 수 있고, 응용프로그램을 의미할 수도 있다. 예를 들면, 애플리케이션은 전자 장치에서 LED 피아노의 연주를 가이드 하기 위한 정보를 제공하는 응용 프로그램일 수 있다.Throughout this specification, "application" may mean a set of computer programs designed to perform a predetermined task, or may mean an application program. For example, the application may be an application that provides information for guiding the performance of the LED piano in the electronic device.

본 명세서 전체에서, "키보드 정보"는 LED 피아노에서 곡에 대응되는 음의 출력을 위해 키보드 내의 적어도 하나의 키의 입력을 가이드 하는 정보일 수 있다. 또한, 키보드 정보는 곡의 연주에 따라 출력될 음의 순서에 대응되는 키의 순서 정보일 수 있고, 상기 예시에 제한되지 않는다.Throughout this specification, "keyboard information" may be information guiding the input of at least one key in the keyboard to output a sound corresponding to a song in the LED piano. Also, the keyboard information may be order information of keys corresponding to the order of notes to be output according to the performance of a song, and is not limited to the above example.

본 명세서 전체에서, "전자 악보"는 곡의 음의 정보를 시각화 하여, LED 피아노의 키보드 내의 적어도 하나의 키의 입력을 가이드하는 악보일 수 있다.Throughout this specification, "electronic sheet music" may be a sheet music guiding the input of at least one key in the keyboard of the LED piano by visualizing sound information of a song.

도 1은 일실시예에 따라, 사용자에게 선택된 곡에 대한 피아노 연주를 가이드 하기 위한 LED 피아노(20)와 전자 장치(10) 간의 동작을 설명하기 위한 도면이다.FIG. 1 is a diagram for explaining an operation between an LED piano 20 and an electronic device 10 for guiding a user to play a piano for a song selected by a user, according to an exemplary embodiment.

도 1의 단계 S101에서, 전자 장치(10)는 LED 피아노(20) 간에 통신을 수행할 수 있도록 연결을 수행할 수 있다. LED 피아노(20)는 전자 장치(10)와 유선 또는 무선으로 연결될 수 있다. 예를 들면, LED 피아노(20) 및 전자 장치(10)는 블루투스 통신 모듈을 구비하여, LED 피아노(20)는 블루투스를 통해 전자 장치(10)와 연결될 수 있다. LED 피아노(20)는 전자 장치(10)와 연결됨으로써, 전자 장치(10)와 데이터 및 신호를 송수신할 수 있다.In step S101 of FIG. 1 , the electronic device 10 may establish a connection to perform communication between the LED pianos 20 . The LED piano 20 may be connected to the electronic device 10 by wire or wirelessly. For example, the LED piano 20 and the electronic device 10 may include a Bluetooth communication module, and the LED piano 20 may be connected to the electronic device 10 through Bluetooth. The LED piano 20 may be connected to the electronic device 10 to transmit/receive data and signals to and from the electronic device 10 .

단계 S102에서, 서버(30)는 곡 리스트를 전자 장치(10)로 전송할 수 있다. 전자 장치(10)에서 LED 피아노(20)의 연주를 가이드 하기 위한 정보를 제공하는 애플리케이션이 실행되면, 서버(30)는 주기적으로 업데이트 된 곡 리스트를 전송할 수 있다. 또한, 서버(30)는 곡과 관련된 전자 악보, 곡의 정보를 전자 장치(10)로 전송할 수 있다.In operation S102 , the server 30 may transmit the song list to the electronic device 10 . When an application providing information for guiding the performance of the LED piano 20 is executed in the electronic device 10 , the server 30 may periodically transmit an updated song list. Also, the server 30 may transmit electronic sheet music related to the song and information on the song to the electronic device 10 .

단계 S103에서, 전자 장치(10)는 LED 피아노(20)에서 연주될 제1 곡을 선택하는 입력을 수신할 수 있다. 예를 들면, 전자 장치(10)는 곡 리스트를 표시하거나, 사용자가 연주하고자 하는 곡을 검색할 수 있도록 하는 인터페이스를 제공할 수 있다. 전자 장치(10)는 곡 리스트에서 제1 곡을 선택하는 입력을 수신할 수 있다.In step S103 , the electronic device 10 may receive an input for selecting a first song to be played on the LED piano 20 . For example, the electronic device 10 may display a song list or provide an interface that allows a user to search for a song to be played. The electronic device 10 may receive an input for selecting a first song from the song list.

단계 S104에서, 서버(30)는 제1 곡의 제1 키보드 정보 및 제1 전자 악보를 전자 장치(10)로 전송할 수 있다. 여기서, 제1 키보드 정보는 LED 피아노(20)에서 제1 곡에 대응되는 음의 출력을 위해 키보드 내의 적어도 하나의 키의 입력을 가이드 하는 정보일 수 있다. 제1 전자 악보는 제1 곡의 음의 정보를 시각화 하여, LED 피아노(20)의 키보드 내의 적어도 하나의 키의 입력을 가이드하는 악보일 수 있다.In operation S104 , the server 30 may transmit the first keyboard information and the first electronic score of the first song to the electronic device 10 . Here, the first keyboard information may be information guiding input of at least one key in the keyboard to output a sound corresponding to the first song in the LED piano 20 . The first electronic score may be a score guiding input of at least one key in the keyboard of the LED piano 20 by visualizing sound information of the first song.

단계 S105에서, 전자 장치(10)는 제1 곡에 대응되는 제1 키보드 정보를 LED 피아노(20)로 전송할 수 있다.In operation S105 , the electronic device 10 may transmit the first keyboard information corresponding to the first song to the LED piano 20 .

단계 S106에서, 전자 장치(10)는 제1 곡의 음의 정보를 시각화 하여 키보드의 입력을 가이드 하는 제1 전자 악보를 표시할 수 있다. 전자 장치(10)에서 제1 전자 악보가 표시되는 과정은 도 5 내지 도 7에서 설명한다.In step S106 , the electronic device 10 may visualize the sound information of the first song to display the first electronic score for guiding the input of the keyboard. A process of displaying the first electronic score in the electronic device 10 will be described with reference to FIGS. 5 to 7 .

단계 S107에서, LED 피아노(20)는 제1 키보드 정보에 기초하여, LED 장치를 발광할 수 있다. LED 피아노(20)에서 LED 장치를 발광하는 과정은 도 3에서 설명한다.In step S107, the LED piano 20 may light the LED device based on the first keyboard information. The process of emitting the LED device in the LED piano 20 will be described with reference to FIG. 3 .

단계 S108에서, LED 피아노(20)는 키보드에 입력되는 입력 정보를 센싱할 수 있다. 단계 S109에서, LED 피아노(20)는 키보드에 입력 정보를 전자 장치(10)로 전송할 수 있다.In step S108, the LED piano 20 may sense input information input to the keyboard. In step S109 , the LED piano 20 may transmit input information on the keyboard to the electronic device 10 .

단계 S110에서, 전자 장치(10)는 제1 곡의 연주에 대한 피드백 정보를 제공할 수 있다. 전자 장치(10)에서 피드백 정보를 제공하는 과정은 도 8 및 도 9에서 설명한다.In operation S110, the electronic device 10 may provide feedback information on the performance of the first song. A process of providing feedback information in the electronic device 10 will be described with reference to FIGS. 8 and 9 .

단계 S111에서, 전자 장치(10)는 입력 정보와 제1 곡의 음의 정보 간의 매칭 결과를 서버(30)로 전송할 수 있다.In operation S111 , the electronic device 10 may transmit a matching result between the input information and the sound information of the first song to the server 30 .

도 2는 일실시예에 따라, LED 피아노(20)의 구성을 도시한 블록도이다.2 is a block diagram showing the configuration of the LED piano 20, according to an embodiment.

도 2를 참고하면, LED 피아노(20)는 전원 공급 장치(210), 통신 장치(220), 키보드(230), LED 장치(240), 제어부(250)를 포함할 수 있다. 도시된 구성 요소 모두가 모두 필수 구성 요소인 것은 아니다. 도시된 구성 요소보다 많은 구성 요소에 의해 LED 피아노(20)가 구현될 수 있고, 그보다 적은 구성 요소에 의해서도 LED 피아노(20)가 구현될 수 있다. 이하, 상기 구성 요소들에 대해 살펴본다.Referring to FIG. 2 , the LED piano 20 may include a power supply device 210 , a communication device 220 , a keyboard 230 , an LED device 240 , and a control unit 250 . Not all illustrated components are essential components. The LED piano 20 may be implemented by more components than the illustrated components, and the LED piano 20 may be implemented by fewer components than that. Hereinafter, the components will be described.

전원 공급 장치(210)는 LED 피아노(20) 장치 내에서 전원 공급이 필요한 구성으로 전원을 공급할 수 있다. 예를 들면, 전원 공급 장치(210)는 통신 장치(220), LED 발광 장치, 및 제어부(250)로 전원을 공급할 수 있다.The power supply 210 may supply power in a configuration that requires power supply in the LED piano 20 device. For example, the power supply device 210 may supply power to the communication device 220 , the LED light emitting device, and the controller 250 .

통신 장치(220)는 LED 피아노(20)와 전자 장치(10) 간에 통신을 수행할 수 있도록 연결을 수행할 수 있다.The communication device 220 may establish a connection to perform communication between the LED piano 20 and the electronic device 10 .

키보드(230)는 음계의 순서대로 복수의 키가 나열되어 구성될 수 있다. 키보드(230) 내의 복수의 키에는 LED 장치(240)가 부착될 수 있다. 제어부(250)는 LED 피아노(20)에서 연주될 곡에 기반하여, LED 장치(240)의 동작을 제어할 수 있다.The keyboard 230 may be configured by arranging a plurality of keys in the order of a musical scale. An LED device 240 may be attached to a plurality of keys in the keyboard 230 . The controller 250 may control the operation of the LED device 240 based on a song to be played on the LED piano 20 .

제어부(250)는 제1 곡에 대응되는 제1 키보드(230) 정보를 통신 장치(220)를 통해 수신할 수 있다. 예를 들면, 제1 키보드(230) 정보는 제1 곡에 대응되는 음의 출력을 위해 키보드(230) 내의 적어도 하나의 키의 입력을 가이드 하는 정보일 수 있다. 예를 들면, 제1 키보드(230) 정보는 제1 곡의 연주에 따라 출력될 음의 순서에 대응되는 키의 순서 정보일 수 있다.The controller 250 may receive the first keyboard 230 information corresponding to the first song through the communication device 220 . For example, the first keyboard 230 information may be information guiding input of at least one key in the keyboard 230 to output a sound corresponding to the first song. For example, the first keyboard 230 information may be order information of keys corresponding to the order of notes to be output according to the performance of the first song.

제어부(250)는 제1 키보드(230) 정보에 기초하여, LED 장치(240)가 발광되도록 제어할 수 있다. 제어부(250)는 제1 키보드(230) 정보에 기초하여, 제1 곡에 대응되는 음이 출력될 순서로 키보드(230) 내의 적어도 하나의 키 각각에 부착된 LED 장치가 발광되도록 LED 장치(240)를 제어할 수 있다.The controller 250 may control the LED device 240 to emit light based on the information on the first keyboard 230 . Based on the information on the first keyboard 230 , the controller 250 causes the LED device 240 attached to each of at least one key in the keyboard 230 to emit light in an order in which a sound corresponding to the first song is output. ) can be controlled.

제어부(250)는 키보드(230)에 입력되는 입력 정보를 센싱할 수 있다. 예를 들면, LED 피아노(20)는 키보드(230)의 입력을 감지할 수 있는 센서를 포함할 수 있다. 센서는 키보드(230)에서 입력된 키가 어떤 키인지를 센싱할 수 있다. 통신 장치(220)는 센싱된 입력 정보를 전자 장치(10)로 전송할 수 있다. 제어부(250)는 입력 정보가 제1 키보드(230) 정보에 매칭되는지를 나타내는 매칭 결과가 LED 장치(240)를 통해 출력되도록 LED 장치(240)를 제어할 수 있다.The controller 250 may sense input information input to the keyboard 230 . For example, the LED piano 20 may include a sensor capable of detecting an input of the keyboard 230 . The sensor may sense which key is a key input from the keyboard 230 . The communication device 220 may transmit the sensed input information to the electronic device 10 . The controller 250 may control the LED device 240 so that a matching result indicating whether the input information matches the information of the first keyboard 230 is output through the LED device 240 .

예를 들면, 입력 정보가 제1 키보드(230) 정보와 매칭되지 않으면, 제어부(250)는 입력 정보가 오류임을 나타내는 결과가 LED 장치(240)를 통해 출력되도록 LED 장치(240)를 제어할 수 있다.For example, if the input information does not match the information of the first keyboard 230 , the controller 250 may control the LED device 240 to output a result indicating that the input information is an error through the LED device 240 . have.

다른 예를 들면, 입력 정보가 제1 키보드(230) 정보와 매칭되면, 제어부(250)는 입력 정보가 매칭됨을 나타내는 결과가 LED 장치(240)를 통해 출력되도록 LED 장치(240)를 제어할 수 있다.As another example, when the input information matches the information of the first keyboard 230 , the controller 250 may control the LED device 240 to output a result indicating that the input information is matched through the LED device 240 . have.

도 3은 일실시예에 따라, LED 피아노(20)에서 곡의 음에 대응되는 키의 LED 장치가 발광되는 과정을 설명하기 위한 도면이다.FIG. 3 is a view for explaining a process in which an LED device of a key corresponding to a sound of a song in the LED piano 20 emits light, according to an exemplary embodiment.

도 3을 참고하면, LED 피아노(20)와 연결된 전자 장치(10)에서, 제1 곡의 제1 전자 악보가 표시될 수 있다. 제1 전자 악보에는 제1 곡의 연주 위치에 기초하여, 제1 곡의 음의 키에 대응되는 막대키(311, 312, 313)가 표시될 수 있다.Referring to FIG. 3 , in the electronic device 10 connected to the LED piano 20 , a first electronic score of a first song may be displayed. In the first electronic score, bar keys 311 , 312 , and 313 corresponding to the key of a note of the first song may be displayed on the basis of the playing position of the first song.

또한, LED 피아노(20)는 제1 곡의 연주 위치에 기초하여, 제1 곡에 대응되는 음이 출력될 순서로 키보드 내의 키(321, 322, 323) 각각에 부착된 LED 장치를 발광시킬 수 있다. 또한, LED 피아노(20)는 키보드 내의 키(321, 322, 323)에 LED 장치를 통해 입력될 순서를 표시할 수 있다.In addition, the LED piano 20 can emit light from the LED device attached to each of the keys 321 , 322 , 323 in the keyboard in the order in which the notes corresponding to the first song are output based on the performance position of the first song. have. In addition, the LED piano 20 may display the order to be input through the LED device on the keys 321, 322, 323 in the keyboard.

또한, 현재 시점인 곡의 01:20 연주 위치에서 키보드에 제1 키(321)가 입력되면, LED 피아노(20)는 제1 키(521)가 제1 곡의 음과 매칭됨을 나타내는 결과를 LED 장치를 통해 출력할 수 있다. 예를 들면, LED 피아노(20)는 제1 키(321)에 부착된 LED 장치를 더 밝게 출력할 수 있다.In addition, when the first key 321 is input to the keyboard at the 01:20 performance position of the current song, the LED piano 20 displays a result indicating that the first key 521 matches the note of the first song. It can be output through the device. For example, the LED piano 20 may output the LED device attached to the first key 321 brighter.

또한, 현재 시점인 곡의 01:20 연주 위치에서 키보드에 제3 키(323)가 입력되면, 전자 장치(10)는 제3 키(323)가 제1 키(321)와 다름을 식별하고, 제1 곡의 음과 매칭되지 않음을 나타내는 결과를 LED 장치를 통해 출력할 수 있다. 예를 들면, LED 피아노(20)는 제3 키(321)에 부착된 LED 장치를 빨강색으로 출력하고, 제1 키(321)에 부착된 LED 장치가 깜박거리도록 출력할 수 있다.In addition, when the third key 323 is input to the keyboard at the 01:20 performance position of the current song, the electronic device 10 identifies that the third key 323 is different from the first key 321, A result indicating that the sound of the first song does not match may be output through the LED device. For example, the LED piano 20 may output the LED device attached to the third key 321 in red, and output the LED device attached to the first key 321 to blink.

도 4는 일실시예에 따라, 전자 장치(10)에서 LED 피아노(20)의 연주를 가이드 하기 위한 정보를 제공하는 애플리케이션을 동작시키는 방법을 설명하기 위한 흐름도이다.4 is a flowchart for explaining a method of operating an application providing information for guiding the performance of the LED piano 20 in the electronic device 10, according to an exemplary embodiment.

도 4의 단계 S410에서, 전자 장치(10)는 전자 장치(10)에서 LED 피아노(20)의 연주를 가이드 하기 위한 정보를 제공하는 애플리케이션을 실행할 수 있다.In step S410 of FIG. 4 , the electronic device 10 may execute an application that provides information for guiding the performance of the LED piano 20 in the electronic device 10 .

단계 S420에서, 전자 장치(10)는 전자 장치(10)와 LED 피아노(20) 간에 통신을 수행할 수 있도록 연결을 수행할 수 있다.In step S420 , the electronic device 10 may establish a connection to perform communication between the electronic device 10 and the LED piano 20 .

단계 S430에서, 전자 장치(10)는 LED 피아노(20)에서 연주될 제1 곡을 선택하는 입력을 수신할 수 있다. 전자 장치(10)는 제1 곡의 음의 정보에 대응되는 키보드 정보를 LED 피아노(20)로 전송할 수 있다.In operation S430 , the electronic device 10 may receive an input for selecting a first song to be played on the LED piano 20 . The electronic device 10 may transmit keyboard information corresponding to the sound information of the first song to the LED piano 20 .

한편, 전자 장치(10)는 제1 곡을 선택하는 입력을 수신함에 따라, 제1 곡에 대한 레슨 진행을 위한 인터페이스, 사용자가 제1 곡에 대한 연습 진행을 위한 인터페이스, 및 사용자의 제1 곡에 대한 연주 결과를 제공하는 인터페이스를 제공할 수 있다.Meanwhile, as the electronic device 10 receives an input for selecting the first song, an interface for conducting a lesson on the first song, an interface for a user to practice practicing on the first song, and the user's first song It is possible to provide an interface that provides performance results for .

단계 S440에서, 전자 장치(10)는 제1 곡의 음의 정보를 시각화 하여, LED 피아노(20)의 키보드 내의 적어도 하나의 키의 입력을 가이드 하는 제1 전자 악보를 표시할 수 있다.In operation S440 , the electronic device 10 may visualize the sound information of the first song to display the first electronic score guiding input of at least one key in the keyboard of the LED piano 20 .

전자 장치(10)는 LED 피아노(20)로부터 키보드에 입력된 입력 정보를 수신할 수 있다. 전자 장치(10)는 LED 피아노(20)에서 제1 곡이 연주됨에 따라, 키보드 내의 적어도 하나의 키의 입력 정보가 제1 곡의 음의 정보와 매칭되는지를 나타내는 매칭 결과를 표시할 수 있다.The electronic device 10 may receive input information input to the keyboard from the LED piano 20 . As the first song is played on the LED piano 20 , the electronic device 10 may display a matching result indicating whether input information of at least one key in the keyboard matches sound information of the first song.

예를 들면, 입력 정보가 제1 곡의 음의 정보와 매칭되면, 전자 장치(10)는 제1 곡의 연주가 올바르게 되고 있음을 나타내는 결과를 표시할 수 있다. 예를 들면, 전자 장치(10)는 제1 전자 악보에서 제1 곡의 음에 대응되는 키를 강조하여 표시할 수 있다. 예를 들면, 전자 장치(10)는 제1 곡의 연주가 올바르게 되고 있음을 나타내는 메시지를 표시할 수 있다.For example, when the input information matches sound information of the first song, the electronic device 10 may display a result indicating that the performance of the first song is being performed correctly. For example, the electronic device 10 may highlight and display a key corresponding to the sound of the first song in the first electronic score. For example, the electronic device 10 may display a message indicating that the performance of the first song is being performed correctly.

다른 예를 들면, 입력 정보가 제1 곡의 음의 정보와 매칭되지 않으면, 전자 장치(10)는 제1 곡의 연주가 올바르지 않음을 나타내는 결과를 표시할 수 있다. 예를 들면, 전자 장치(10)는 제1 곡의 연주가 틀렸음을 나타내는 메시지를 표시할 수 있다.As another example, if the input information does not match the sound information of the first song, the electronic device 10 may display a result indicating that the performance of the first song is incorrect. For example, the electronic device 10 may display a message indicating that the performance of the first song is incorrect.

전자 장치(10)는 LED 피아노(20)에서 제1 곡이 연주됨에 따라, 제1 곡의 연주 위치에 기초하여, 제1 전자 악보를 표시할 수 있다.As the first song is played on the LED piano 20 , the electronic device 10 may display the first electronic score based on the playing position of the first song.

예를 들면, 제1 전자 악보는 제1 곡의 연주 위치에 따라, 제1 곡의 음의 높이와 길이에 기반하여 키보드 내의 적어도 하나의 키에 대응되는 막대 모형으로 표시될 수 있다.For example, the first electronic sheet music may be displayed as a bar model corresponding to at least one key in the keyboard based on the playing position of the first song and the height and length of the notes of the first song.

전자 장치(10)는 적어도 하나의 키에 대응되는 막대 모형 상에 적어도 하나의 키가 입력될 순서를 표시할 수 있다.The electronic device 10 may display an order in which at least one key is to be input on a bar model corresponding to the at least one key.

한편, 전자 장치(10)는 LED 피아노(20)로부터 키보드에 입력된 입력 정보를 수신할 수 있다. 전자 장치(10)는 입력 정보에 기초하여, 제1 곡의 연주에 대한 피드백 정보를 제공할 수 있다.Meanwhile, the electronic device 10 may receive input information input to the keyboard from the LED piano 20 . The electronic device 10 may provide feedback information on the performance of the first song based on the input information.

전자 장치(10)는 입력 정보가 제1 전자 악보에 매칭되는지를 판단하여, 매칭 결과를 나타내는 수치 정보를 획득할 수 있다. 전자 장치(10)는 수치 정보를 표시할 수 있다.The electronic device 10 may determine whether the input information matches the first electronic score, and obtain numerical information indicating the matching result. The electronic device 10 may display numerical information.

전자 장치(10)는 입력 정보에 기초하여, 제1 곡 내에서 연주가 제1 곡의 음과 매칭되지 않는 적어도 하나의 구간을 추출할 수 있다. 전자 장치(10)는 적어도 하나의 구간에 대하여, 한 손 연습, 속도 조절, 및 반복 설정 중 적어도 하나를 설정하는 인터페이스를 제공할 수 있다. 또한, 전자 장치(10)는 적어도 하나의 구간과 유사한 음의 정보를 갖는 제2 곡을 추천할 수 있다.Based on the input information, the electronic device 10 may extract at least one section in which the performance of the first song does not match the sound of the first song. The electronic device 10 may provide an interface for setting at least one of one-handed practice, speed control, and repetition setting for at least one section. Also, the electronic device 10 may recommend a second song having sound information similar to that of at least one section.

도 5는 일실시예에 따라, 전자 악보에 표시된 음에 대응되는 키가 입력되면, 전자 장치(10)에서 표시되는 화면을 설명하기 위한 도면이다.FIG. 5 is a diagram for explaining a screen displayed on the electronic device 10 when a key corresponding to a sound displayed on an electronic score is input, according to an exemplary embodiment.

전자 장치(10)는 LED 피아노(20)의 연주를 가이드 하기 위한 정보를 제공하는 애플리케이션을 실행할 수 있다. 전자 장치(10)는 전자 장치(10)가 LED 피아노(20)와 연결되었는지를 확인할 수 있다. 전자 장치(10)와 LED 피아노(20) 간에 연결되지 않은 경우, 전자 장치(10)는 LED 피아노(20)와 통신을 수행할 수 있도록 연결을 시도할 수 있다. 예를 들면, 전자 장치(10)는 블루투스를 통해 LED 피아노(20)와 연결될 수 있다.The electronic device 10 may execute an application that provides information for guiding the performance of the LED piano 20 . The electronic device 10 may check whether the electronic device 10 is connected to the LED piano 20 . If there is no connection between the electronic device 10 and the LED piano 20 , the electronic device 10 may attempt to connect to the LED piano 20 to communicate. For example, the electronic device 10 may be connected to the LED piano 20 through Bluetooth.

전자 장치(10)는 애플리케이션의 실행 화면을 통해 사용자가 연주할 제1 곡을 선택하는 입력을 수신할 수 있다. 전자 장치(10)에서 제1 곡의 연주의 시작 요청이 있으면, 전자 장치(10)는 선택된 제1 곡에 대한 제1 전자 악보를 표시할 수 있다.The electronic device 10 may receive an input for selecting the first song to be played by the user through the execution screen of the application. When the electronic device 10 requests to start playing the first song, the electronic device 10 may display the first electronic score for the selected first song.

도 5를 참고하면, 전자 장치(10)는 제1 곡이 연주됨에 따라, 제1 전자 악보 상에 제1 곡의 연주 위치에 기초하여, 제1 곡의 음의 키에 대응되는 막대 모형을 표시할 수 있다. 여기서, 막대 모형의 길이는, 제1 곡의 음의 높이와 길이에 기반하여 결정될 수 있다.Referring to FIG. 5 , as the first song is played, the electronic device 10 displays a bar model corresponding to the key of the note of the first song based on the playing position of the first song on the first electronic score. can do. Here, the length of the rod model may be determined based on the height and length of the sound of the first song.

예를 들면, 제1 곡은 제1 키(521), 제2 키(522), 제3 키(523)의 순서로 연주되어야 한다고 가정한다. 전자 장치(10)는 제1 키(521)에 대응되는 막대키(511), 제2 키(522)에 대응되는 막대키(512), 및 제3 키(523)에 대응되는 막대키(513)을 곡의 진행에 따라 표시할 수 있다. 전자 장치(10)는 LED 피아노(20)의 키보드에서 입력된 키에 대한 입력 정보를 수신할 수 있다. 연주가 완료된 음에 대한 막대키는 사라지고, 곡의 연주에 따른 다음 음에 대한 막대키가 표시될 수 있다.For example, it is assumed that the first song should be played in the order of the first key 521 , the second key 522 , and the third key 523 . The electronic device 10 includes a bar key 511 corresponding to the first key 521 , a bar key 512 corresponding to the second key 522 , and a bar key 513 corresponding to the third key 523 . ) can be displayed according to the progress of the song. The electronic device 10 may receive input information on a key input from the keyboard of the LED piano 20 . The bar key for the finished note may disappear, and the bar key for the next note according to the performance of the song may be displayed.

또한, LED 피아노(20)는 제1 곡의 연주 위치에 기초하여, 제1 곡에 대응되는 음이 출력될 순서로 키보드 내의 키(521, 522, 523) 각각에 부착된 LED 장치를 발광시킬 수 있다. 또한, LED 피아노(20)는 키보드 내의 키(521, 522, 523)에 LED 장치를 통해 입력될 순서를 표시할 수 있다.In addition, the LED piano 20 may emit light from the LED device attached to each of the keys 521 , 522 , 523 in the keyboard in the order in which the notes corresponding to the first song are output based on the performance position of the first song. have. In addition, the LED piano 20 can display the order to be input through the LED device on the keys 521, 522, 523 in the keyboard.

예를 들면, 현재 시점인 곡의 01:20 연주 위치에서 제1 키(521)가 입력되면, 전자 장치(10)는 제1 키(521)가 제1 곡의 음과 매칭됨을 확인하고, 제1 키(521)에 대응되는 막대키(511)를 강조하여 표시할 수 있다. 또한, 전자 장치(10)는 제1 키(521)가 제1 곡의 음과 매칭됨을 나타내는 "Perfect" 메시지를 표시할 수도 있다.For example, when the first key 521 is input at the 01:20 performance position of the current song, the electronic device 10 confirms that the first key 521 matches the note of the first song, The bar key 511 corresponding to the 1 key 521 may be highlighted and displayed. Also, the electronic device 10 may display the message “Perfect” indicating that the first key 521 matches the note of the first song.

도 6은 일실시예에 따라, 전자 악보에 표시된 음에 대응되지 않는 키가 입력되면, 전자 장치(10)에서 표시되는 화면을 설명하기 위한 도면이다.FIG. 6 is a diagram for explaining a screen displayed on the electronic device 10 when a key that does not correspond to a sound displayed on an electronic score is input, according to an exemplary embodiment.

도 6을 참고하면, 전자 장치(10)는 제1 곡이 연주됨에 따라, 제1 전자 악보 상에 제1 곡의 연주 위치에 기초하여, 제1 곡의 음의 키에 대응되는 막대 모형을 표시할 수 있다. 여기서, 막대 모형의 길이는, 제1 곡의 음의 높이와 길이에 기반하여 결정될 수 있다.Referring to FIG. 6 , as the first song is played, the electronic device 10 displays a bar model corresponding to the key of the note of the first song based on the playing position of the first song on the first electronic score. can do. Here, the length of the rod model may be determined based on the height and length of the sound of the first song.

예를 들면, 제1 곡은 제4 키(621), 제5 키(622), 제6 키(623)의 순서로 연주되어야 한다고 가정한다. 전자 장치(10)는 제4 키(621)에 대응되는 막대키(611), 제5 키(622)에 대응되는 막대키(612), 및 제6 키(623)에 대응되는 막대키(613)을 곡의 진행에 따라 표시할 수 있다. 전자 장치(10)는 LED 피아노(20)의 키보드에서 입력된 키에 대한 입력 정보를 수신할 수 있다. 연주가 완료된 음에 대한 막대키는 사라지고, 곡의 연주에 따른 다음 음에 대한 막대키가 표시될 수 있다.For example, it is assumed that the first song should be played in the order of the fourth key 621 , the fifth key 622 , and the sixth key 623 . The electronic device 10 includes a bar key 611 corresponding to the fourth key 621 , a bar key 612 corresponding to the fifth key 622 , and a bar key 613 corresponding to the sixth key 623 . ) can be displayed according to the progress of the song. The electronic device 10 may receive input information on a key input from the keyboard of the LED piano 20 . The bar key for the finished note may disappear, and the bar key for the next note according to the performance of the song may be displayed.

예를 들면, 현재 시점인 곡의 02:10 연주 위치에서 제7 키(641)가 입력되면, 전자 장치(10)는 제7 키(641)가 제4 키(621)과 다름을 식별하고, 제1 곡의 음과 매칭되지 않음을 확인할 수 있다. 전자 장치(10)는 제7 키(641)가 제1 곡의 음과 매칭되지 않음을 나타내는 "Miss" 메시지를 표시할 수 있다.For example, when the seventh key 641 is input at the 02:10 performance position of the current song, the electronic device 10 identifies that the seventh key 641 is different from the fourth key 621, It can be seen that the notes of the first song do not match. The electronic device 10 may display a “Miss” message indicating that the seventh key 641 does not match the note of the first song.

도 7은 일실시예에 따라, 선택된 곡의 연주에 따라, 전자 장치(10)에서 표시되는 전자 악보를 설명하기 위한 도면이다.FIG. 7 is a diagram for describing an electronic score displayed on the electronic device 10 according to performance of a selected song, according to an exemplary embodiment.

전자 장치(10)에서 제1 곡의 연주의 시작 요청이 있으면, 전자 장치(10)는 선택된 제1 곡에 대한 제1 전자 악보를 표시할 수 있다. 도 7에 도시된 바와 같이, 전자 장치(10)는 제1 전자 악보에서 왼손과 오른손이 연주해야 할 음을 구별하여 표시할 수 있다. 구체적으로, 전자 장치(10)는 왼손이 연주해야 할 음의 키에 대응되는 막대키(711, 712, 713, 714)의 색을 파랑색으로 표시할 수 있다. 또한, 전자 장치(10)는 오른손이 연주해야 할 음의 키에 대응되는 막대키(721, 722, 723, 724)의 색을 노랑색으로 표시할 수 있다.When the electronic device 10 requests to start playing the first song, the electronic device 10 may display the first electronic score for the selected first song. As shown in FIG. 7 , the electronic device 10 may distinguishly display notes to be played by the left hand and the right hand in the first electronic score. Specifically, the electronic device 10 may display the color of the bar keys 711 , 712 , 713 , and 714 corresponding to the key to be played by the left hand in blue. Also, the electronic device 10 may display the color of the bar keys 721 , 722 , 723 , and 724 corresponding to the key of the note to be played by the right hand in yellow.

도 7에서는, 전자 장치(10)는 왼손과 오른손이 연주해야 할 음에 대응되는 막대키를 구별하기 위해 서로 다른 색으로 표시하였으나, 서로 다른 모양으로 표시할 수도 있다. 예를 들면, 전자 장치(10)는 왼손이 연주해야 할 음의 키를 막대키로 표시하고, 오른손이 연주해야 할 음의 키를 원통키로 표시할 수도 있다.In FIG. 7 , the electronic device 10 displays the bar keys corresponding to the notes to be played by the left hand and the right hand in different colors to distinguish them, but may be displayed in different shapes. For example, the electronic device 10 may display a key for a note to be played by the left hand as a bar key, and may display a key for a note to be played by the right hand as a cylindrical key.

도 7에 도시된 바와 같이, 전자 장치(10)는 막대키(711, 712, 713, 714, 721, 722, 723, 724)에 사용자가 어떤 손가락으로 키를 쳐야 하는지를 알려주는 정보를 표시할 수 있다. 구체적으로, 전자 장치(10)는 엄지 손가락으로 쳐야할 키는 1번으로, 검지 손가락으로 쳐야할 키는 2번으로, 중지 손가락으로 쳐야할 키는 3번으로, 약지 손가락으로 쳐야할 키는 4번으로, 소지 손가락으로 쳐야할 키는 5번으로 설정할 수 있다. 전자 장치(10)는 제1 전자 악보의 음에서 쳐야할 키의 손가락 정보를 숫자로 표시할 수 있다.As shown in FIG. 7 , the electronic device 10 may display information informing the user with which finger the user should hit the key on the bar keys 711 , 712 , 713 , 714 , 721 , 722 , 723 and 724 . have. Specifically, in the electronic device 10, the key to be struck with the thumb is number 1, the key to be struck with the index finger is number 2, the key to be struck with the middle finger is number 3, and the key to be struck with the ring finger is 4 You can set the key to hit with your little finger as number 5. The electronic device 10 may display finger information of a key to be struck in a note of the first electronic score as a number.

예를 들어, 왼손으로 쳐야할 키에 대하여, 전자 장치(10)는, 제1 막대키(711)에는 검지 손가락에 대응되는 2번을 표시하고, 제2 막대키(712) 및 제4 막대키(714)에는 중지 손가락에 대응되는 3번을 표시하고, 제3 막대키(713)에는 약지 손가락에 대응되는 4번을 표시할 수 있다. For example, with respect to a key to be struck with the left hand, the electronic device 10 displays number 2 corresponding to the index finger on the first bar key 711 , and the second bar key 712 and the fourth bar key No. 3 corresponding to the middle finger may be displayed at 714 , and No. 4 corresponding to the ring finger may be displayed on the third bar key 713 .

한편, LED 피아노(20)는 제1 곡의 연주 위치에 기초하여, 제1 곡에 대응되는 음이 출력될 순서로 키보드 내의 키 각각에 부착된 LED 장치를 발광시킬 수 있다.On the other hand, the LED piano 20 may emit light from the LED device attached to each key in the keyboard in the order in which the notes corresponding to the first song are output based on the playing position of the first song.

도 8은 일실시예에 따라, 선택된 곡의 연주가 완료되면, 전자 장치(10)에서 제공되는 피드백 정보를 설명하기 위한 도면이다.8 is a diagram for describing feedback information provided by the electronic device 10 when a performance of a selected song is completed, according to an exemplary embodiment.

전자 장치(10)는 LED 피아노(20)로부터 키보드에 입력된 입력 정보를 수신할 수 있다. 전자 장치(10)는 사용자가 제1 곡을 연주하기 시작한 시점부터 종료한 시점까지의 키보드에 입력된 입력 정보를 수집할 수 있다. 전자 장치(10)는 수집된 입력 정보에 기초하여, 입력 정보가 제1 곡의 제1 전자 악보에 매칭되는지를 판단하여, 사용자가 얼마나 정확하게 제1 곡을 연주하였는지를 나타내는 피드백 정보를 생성할 수 있다.The electronic device 10 may receive input information input to the keyboard from the LED piano 20 . The electronic device 10 may collect input information input into the keyboard from a time when the user starts playing the first song to a time when it ends. The electronic device 10 may determine whether the input information matches the first electronic score of the first song based on the collected input information, and generate feedback information indicating how accurately the user played the first song. .

도 8의 전자 장치(10)에 표시된 메시지(810)를 참고하면, 전자 장치(10)는 왼손 및 오른손 각각에 대한 피드백 정보를 생성할 수 있다. 또한, 전자 장치(10)는 사용자가 제1 곡을 연주하는 동안 실수한 횟수, 음정에 대한 정확도, 박자에 대한 정확도를 수치 정보로 나타낼 수 있다. 전자 장치(10)는 사용자가 실수한 위치에 대한 정보를 제공할 수 있다. 또한, 전자 장치(10)는 사용자에게 연습을 권유하는 메시지를 표시할 수도 있다.Referring to the message 810 displayed on the electronic device 10 of FIG. 8 , the electronic device 10 may generate feedback information for each of the left hand and the right hand. Also, the electronic device 10 may represent the number of times the user makes a mistake while playing the first song, the accuracy of the pitch, and the accuracy of the beat as numerical information. The electronic device 10 may provide information on the location where the user made a mistake. Also, the electronic device 10 may display a message recommending practice to the user.

한편, 사용자가 메시지(810)에서 실수한 횟수를 선택하면, 전자 장치(10)는 사용자가 제1 곡을 연주하는 동안 실수한 구간에 대한 구체적인 정보를 제공할 수 있다. 예를 들면, 전자 장치(10)는 실수한 구간에 대한 곡의 진행 시점 정보, 실수한 구간에서 입력된 키의 정보, 실수한 구간에서 반복된 실수 횟수 정보 등을 표시할 수 있다.Meanwhile, when the user selects the number of mistakes in the message 810 , the electronic device 10 may provide specific information about the section in which the user makes a mistake while playing the first song. For example, the electronic device 10 may display information on the progress time of the song for the section where the mistake was made, information on a key input in the section where the mistake was made, information on the number of mistakes made in the section where the mistake was made, and the like.

또한, 사용자가 메시지(810)에서 연습하러 가기를 선택하면, 전자 장치(10)는 사용자가 제1 곡을 연주하는 동안 실수한 구간을 재연습 할 수 있도록 실수한 구간에 대응되는 전자 악보를 표시할 수 있다.Also, when the user selects to go to practice in the message 810 , the electronic device 10 displays the electronic score corresponding to the erroneous section so that the user can re-practice the erroneous section while playing the first song. can do.

도 9는 다른 일실시예에 따라, 선택된 곡의 연주가 완료되면, 전자 장치(10)에서 제공되는 피드백 정보를 설명하기 위한 도면이다.FIG. 9 is a diagram for describing feedback information provided by the electronic device 10 when a performance of a selected song is completed, according to another exemplary embodiment.

전자 장치(10)는 사용자가 제1 곡을 연주하기 시작한 시점부터 종료한 시점까지의 키보드에 입력된 입력 정보를 수집할 수 있다. 전자 장치(10)는 수집된 입력 정보에 기초하여, 입력 정보가 제1 곡의 제1 전자 악보에 매칭되는지를 판단하여, 입력 정보가 제1 곡의 음과 매칭되지 않는 적어도 하나의 구간을 추출할 수 있다.The electronic device 10 may collect input information input into the keyboard from a time when the user starts playing the first song to a time when it ends. The electronic device 10 determines whether the input information matches the first electronic score of the first song based on the collected input information, and extracts at least one section in which the input information does not match the sound of the first song. can do.

도 9에 도시된 바와 같이, 전자 장치(10)는 제1 곡의 연주 시작 구간부터 연주 종료 구간까지(901) 중에서, 제1 구간(902) 및 제2 구간(903)을 입력 정보가 제1 곡의 음과 매칭되지 않는 구간으로 결정할 수 있다. 전자 장치(10)는 "실수한 구간은 2 곳에서 발견되었습니다"와 같은 메시지(904)를 표시할 수 있다.As illustrated in FIG. 9 , the electronic device 10 selects a first section 902 and a second section 903 from the performance start section to the performance end section 901 of the first song, the input information is the first It can be determined as a section that does not match the note of the song. The electronic device 10 may display a message 904 such as "The erroneous section was found in two places".

전자 장치(10)는 입력 정보가 제1 곡의 음과 매칭되지 않는 적어도 하나의 구간에 대하여, 한 손 연습, 속도 조절, 및 반복 설정 중 적어도 하나를 설정하는 인터페이스를 제공할 수 있다.The electronic device 10 may provide an interface for setting at least one of one-handed practice, speed control, and repetition setting for at least one section in which input information does not match the sound of the first song.

예를 들면, 도 9에 도시된 바와 같이, 전자 장치(10)는 실수한 구간을 반복하여 연습할 수 있도록 설정하는 인터페이스를 제공할 수 있다. 전자 장치(10)는 제1 구간(902) 및 제2 구간(903)을 포함하는 구간을 반복 구간(921)으로 설정할 수 있다. For example, as shown in FIG. 9 , the electronic device 10 may provide an interface for setting a erroneous section to be practiced repeatedly. The electronic device 10 may set a section including the first section 902 and the second section 903 as the repetition section 921 .

또한, 사용자는 반복 구간(921)의 시작 지점 및 종료 지점을 조절할 수 있다. 예를 들면, 사용자는 제1 구간의 시작 지점인 01:10을 01:00으로 조절하고, 제2 구간의 종료 지점인 02:40을 02:50으로 조절할 수 있다.Also, the user may adjust the starting point and the ending point of the repetition section 921 . For example, the user may adjust 01:10, a start point of the first section, to 01:00, and adjust 02:40, an end point, of the second section, to 02:50.

전자 장치(10)는 "실수한 구간의 2곳을 반복 구간으로 설정하시겠습니까?" 라는 메시지(931)를 표시할 수 있다. 전자 장치(10)는 "예"를 선택하는 입력을 수신하면, 제1 구간 및 제2 구간을 포함하는 구간을 반복 구간(921)으로 설정할 수 있다.The electronic device 10 asks, "Do you want to set two of the mistaken sections as repeat sections?" message 931 may be displayed. When receiving an input for selecting “Yes”, the electronic device 10 may set a section including the first section and the second section as the repetition section 921 .

또한, 전자 장치(10)는 제1 구간(902) 및 제2 구간(903) 각각에 대하여 재연습할 수 있는 구간으로 설정할 수도 있다. 또한, 전자 장치(10)는 제1 구간(902) 및 제2 구간(903)과 유사한 음의 정보를 갖는 제2 곡을 추천할 수 있다.In addition, the electronic device 10 may set each of the first section 902 and the second section 903 as a re-exercise section. Also, the electronic device 10 may recommend a second song having sound information similar to that of the first section 902 and the second section 903 .

도 10은 일실시예에 따라, 전자 장치(10)에서 제공되는 곡에 대한 인터페이스를 설명하기 위한 도면이다.10 is a diagram for explaining an interface for a song provided by the electronic device 10, according to an exemplary embodiment.

전자 장치(10)는 제1 곡을 선택하는 입력을 수신함에 따라, 제1 곡에 대한 인터페이스를 표시할 수 있다.In response to receiving an input for selecting the first song, the electronic device 10 may display an interface for the first song.

도 10에 도시된 바와 같이, 전자 장치(10)는 제1 곡에 대한 레슨 진행을 위한 레슨 모드 인터페이스(1001), 제1 곡에 대한 연습 진행을 위한 연습 모드 인터페이스(1002), 제1 곡에 대한 연주 결과를 제공하는 연주 모드 인터페이스(1003)를 표시할 수 있다.As shown in FIG. 10 , the electronic device 10 provides a lesson mode interface 1001 for performing a lesson on a first song, a practice mode interface 1002 for practicing on the first song, and a first song. A performance mode interface 1003 that provides a performance result for the user may be displayed.

전자 장치(10)에서 레슨 모드 인터페이스(1001)가 선택되면, 전자 장치(10)는 사용자가 제1 곡을 연주할 수 있도록 레슨하는 레슨 영상 또는 레슨 정보를 표시할 수 있다.When the lesson mode interface 1001 is selected in the electronic device 10 , the electronic device 10 may display a lesson image or lesson information for the user to play the first song.

전자 장치(10)에서 연습 모드 인터페이스(1002)가 선택되면, 전자 장치(10)는 제1 곡에 대한 한 손/두 손 연습, 속도 조절, 및 반복 구간을 설정하는 화면을 표시할 수 있다. 화면의 표시에 따라, 사용자는 한 손/두 손 연습, 속도 조절, 및 반복 구간 항목에 대하여 원하는 조건을 설정할 수 있다.When the practice mode interface 1002 is selected in the electronic device 10 , the electronic device 10 may display a screen for setting one-handed/two-handed practice, speed control, and repetition section for the first song. According to the display of the screen, the user can set desired conditions for one-handed/two-handed practice, speed control, and repetition section items.

전자 장치(10)에서 연주 모드 인터페이스(1003)가 선택되면, 전자 장치(10)는 제1 곡에 대한 제1 전자 악보를 표시하고, 사용자의 연주에 따른 데이터를 LED 피아노(20)로부터 획득할 수 있다.When the performance mode interface 1003 is selected in the electronic device 10 , the electronic device 10 displays the first electronic score for the first song and obtains data according to the user's performance from the LED piano 20 . can

전자 장치(10)는 사용자가 제1 곡을 얼마나 레슨을 진행하였는지를 나타내는 레슨 진도표(1011)를 표시할 수 있다. 또한, 전자 장치(10)는 사용자가 제1 곡을 얼마나 연습하였는지를 나타내는 총 연습 시간(1012)을 표시할 수 있다. 또한, 전자 장치(10)는 LED 피아노(20)의 키보드에 입력된 입력 정보와 제1 곡의 음의 정보와 비교하여, 매칭 결과를 획득할 수 있다. 전자 장치(10)는 매칭 결과에 기초하여, 점수 정보 및 랭킹 정보를 나타내는 연주 내역(1013)을 생성하고, 연주 내역(1013)을 표시할 수 있다.The electronic device 10 may display a lesson progress table 1011 indicating how many lessons the user has performed on the first song. Also, the electronic device 10 may display the total practice time 1012 indicating how much the user practiced the first song. Also, the electronic device 10 may obtain a matching result by comparing the input information input to the keyboard of the LED piano 20 with the sound information of the first song. The electronic device 10 may generate a performance history 1013 indicating score information and ranking information based on the matching result, and display the performance history 1013 .

상술한 전자 장치(10), LED 피아노(20), 및 서버(30)의 동작 방법은 컴퓨터 또는 프로세서에 의하여 실행 가능한 명령어 또는 데이터를 저장하는 컴퓨터 판독 가능 저장매체의 형태로 구현될 수 있다. 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터 판독 가능 저장매체를 이용하여 이와 같은 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 이와 같은 컴퓨터 판독 가능 저장매체는 ROM, RAM, flash memory, CD, DVD 마그네틱 테이프, 플로피 디스크, 광자기 데이터 저장 장치, 광학 데이터 저장 장치, 하드 디스크, 솔리드-스테이트 디스크(SSD), 그리고 명령어 또는 소프트웨어, 관련 데이터, 데이터 파일, 및 데이터 구조들을 저장할 수 있다.The above-described method of operating the electronic device 10 , the LED piano 20 , and the server 30 may be implemented in the form of a computer-readable storage medium for storing instructions or data executable by a computer or processor. It can be written as a program that can be executed on a computer, and can be implemented in a general-purpose digital computer that operates such a program using a computer-readable storage medium. Such computer-readable storage media include ROM, RAM, flash memory, CD, DVD magnetic tape, floppy disk, magneto-optical data storage device, optical data storage device, hard disk, solid-state disk (SSD), and instructions or software. , related data, data files, and data structures.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described with reference to the limited embodiments and drawings, various modifications and variations are possible from the above description by those skilled in the art. For example, the described techniques are performed in a different order than the described method, and/or the described components of the system, structure, apparatus, circuit, etc. are combined or combined in a different form than the described method, or other components Or substituted or substituted by equivalents may achieve an appropriate result.

그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, and should be defined by the following claims as well as the claims and equivalents.

Claims (1)

[LED 피아노와 연결되어, LED 피아노에서 연주될 곡에 대한 전자 악보를 제공해 주는 애플리케이션을 BROAD하게 권리화]
전자 장치에서 LED 피아노의 연주를 가이드 하기 위한 정보를 제공하는 애플리케이션을 실행하는 단계;
상기 전자 장치와 상기 LED 피아노 간에 통신을 수행할 수 있도록 연결하는 단계;
상기 LED 피아노에서 연주될 제1 곡을 선택하는 입력을 수신하는 단계; 및
상기 제1 곡의 음의 정보를 시각화하여, 상기 LED 피아노의 키보드 내의 적어도 하나의 키의 입력을 가이드 하는 제1 전자 악보를 표시하는 단계를 포함하는, 방법을 하드웨어와 결합되어 실행시키기 위해 매체에 저장된 애플리케이션.
[Right to BROAD an application that is connected to the LED piano and provides electronic score for songs to be played on the LED piano]
executing an application providing information for guiding the performance of the LED piano in the electronic device;
connecting the electronic device and the LED piano to perform communication;
receiving an input for selecting a first song to be played on the LED piano; and
Visualizing the sound information of the first song, and displaying a first electronic score guiding input of at least one key in the keyboard of the LED piano, the method comprising the step of displaying a method in combination with hardware to be stored in the medium to execute. saved applications.
KR1020190173267A 2019-12-23 2019-12-23 Principle of Sheet Music Algorithm Produced by Analyzing MIDI File and How It Works with Digital Piano KR20210081075A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190173267A KR20210081075A (en) 2019-12-23 2019-12-23 Principle of Sheet Music Algorithm Produced by Analyzing MIDI File and How It Works with Digital Piano

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190173267A KR20210081075A (en) 2019-12-23 2019-12-23 Principle of Sheet Music Algorithm Produced by Analyzing MIDI File and How It Works with Digital Piano

Publications (1)

Publication Number Publication Date
KR20210081075A true KR20210081075A (en) 2021-07-01

Family

ID=76860188

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190173267A KR20210081075A (en) 2019-12-23 2019-12-23 Principle of Sheet Music Algorithm Produced by Analyzing MIDI File and How It Works with Digital Piano

Country Status (1)

Country Link
KR (1) KR20210081075A (en)

Similar Documents

Publication Publication Date Title
US10417278B2 (en) Systems and methods to facilitate media search
US10614786B2 (en) Musical chord identification, selection and playing method and means for physical and virtual musical instruments
JP5369689B2 (en) Information processing apparatus and program
WO2018159831A1 (en) Playing support device and method
EP2760014A1 (en) Method for making audio file and terminal device
JP6459378B2 (en) Problem management apparatus and problem management program
JP5790686B2 (en) Chord performance guide apparatus, method, and program
US10013963B1 (en) Method for providing a melody recording based on user humming melody and apparatus for the same
TW201926077A (en) Apparatus, method, and computer program product thereof for generating control instructions based on text
US20190051275A1 (en) Method for providing accompaniment based on user humming melody and apparatus for the same
JP2013148773A (en) Performance training device and program therefor
KR20190088129A (en) Providing method, apparatus and computer-readable medium of music contents using a user terminal linking with an electronic musical instrument
KR20210081075A (en) Principle of Sheet Music Algorithm Produced by Analyzing MIDI File and How It Works with Digital Piano
KR20210080883A (en) Digital Piano Linked Piano Learning APP and MIDI Algorithm
CN106445964B (en) Method and device for processing audio information
CN115712473A (en) Music score display method and device, electronic equipment and storage medium
KR20200063583A (en) Led piano and method for operating of led piano
US11488491B2 (en) Recommend apparatus, information providing system, method, and storage medium
US20170287454A1 (en) Musical score display control device and method
JP4492446B2 (en) Measuring device and program for measuring positional relationship of performance operators that can be operated simultaneously
JP5808711B2 (en) Performance position detector
JP6736914B2 (en) Music selection device, karaoke system, and music selection program
US11880507B1 (en) Automated musical-score-referenced evaluation of haptic-based rhythmic performance
KR102569219B1 (en) Instrument Performance Tracking Systems and Methods
US20230298547A1 (en) Information processing method, information processing program, and information processing device

Legal Events

Date Code Title Description
E601 Decision to refuse application