KR101743958B1 - Apparatus and method for displaying music - Google Patents

Apparatus and method for displaying music Download PDF

Info

Publication number
KR101743958B1
KR101743958B1 KR1020150161053A KR20150161053A KR101743958B1 KR 101743958 B1 KR101743958 B1 KR 101743958B1 KR 1020150161053 A KR1020150161053 A KR 1020150161053A KR 20150161053 A KR20150161053 A KR 20150161053A KR 101743958 B1 KR101743958 B1 KR 101743958B1
Authority
KR
South Korea
Prior art keywords
information
sound source
scale
musical
music
Prior art date
Application number
KR1020150161053A
Other languages
Korean (ko)
Other versions
KR101743958B9 (en
KR20170057671A (en
Inventor
김영
Original Assignee
(주)싸이버텍홀딩스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)싸이버텍홀딩스 filed Critical (주)싸이버텍홀딩스
Priority to KR1020150161053A priority Critical patent/KR101743958B1/en
Publication of KR20170057671A publication Critical patent/KR20170057671A/en
Application granted granted Critical
Publication of KR101743958B1 publication Critical patent/KR101743958B1/en
Publication of KR101743958B9 publication Critical patent/KR101743958B9/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Auxiliary Devices For Music (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

본 발명은 음악 플레이 장치 및 방법에 관한 것으로, 더욱 상세하게는 음악의 다양한 요소들을 색을 통해 표현하여 음악을 시각화하여 플레이할 수 있는 음악 디스플레이 장치 및 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a music playing apparatus and method, and more particularly, to a music displaying apparatus and method capable of visualizing and playing music by expressing various elements of music through colors.

Description

음악 디스플레이 장치 및 방법{Apparatus and method for displaying music}[0001] Apparatus and method for displaying music [

본 발명은 음악 재생 장치 및 방법에 관한 것으로, 더욱 상세하게는 음악의 다양한 요소들을 색을 통해 표현하여 음악을 시각화하여 플레이할 수 있는 음악 디스플레이 장치 및 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a music reproducing apparatus and method, and more particularly, to a music displaying apparatus and method capable of visualizing and playing music by expressing various elements of music through colors.

일반적으로 음악은 형체를 갖고 있는 것은 아니나, 우리의 삶을 풍요롭게 하고 부드럽게 해주며, 나아가서 인류 문명의 밑받침이 되어 줄 수도 있다.In general, music does not have a form, but it enriches and softens our lives, and it can also become the underpinning of human civilization.

또한, 황폐해진 인간의 심성을 회복하는 데 음악이 무엇보다도 효과적일 수 있을 것이다.In addition, music can be most effective in restoring the ruined human mind.

이러한 음악을 청각장애인들은 들을 수 없어 청각장애인들의 황폐해진 심성을 회복할 수 있는 대체 방안이 요구되어지고 있다.Such music can not be heard by hearing-impaired people, and alternative methods are needed to recover the depleted minds of hearing-impaired people.

그러나 음악을 대체할 만한 것들이 많지 않고 음악이 청취자의 마음을 안정시키거나 심성을 회복하는 데 가장 효과적임에 따라 청각장애인들이 음악을 들을 수 있도록 하기 위해 방안이 요구되고 있다.However, there are not many things that can replace music, and music is the most effective way to stabilize the listener 's mind or to recover the mind, so that measures are needed to make the listener listen to music.

일반인들 또한, 음악을 귀로만 듣는 것이 아니라 인간의 다른 감각을 통해서도 감상할 수 있도록 하여 음악의 효과를 극대화할 수 있는 방안이 요구되어지고 있다.The public is also demanding a way to maximize the effect of music by not only listening to music but also through other senses.

이에 따라 청각이 아닌 인간의 다른 감각을 통해 음악을 감상할 수 있는 수 있도록 하기 위한 다양한 기술들이 개발되고 있다.Accordingly, various technologies are being developed to enable people to listen to music through different senses rather than by auditory sense.

이러한 기술로는 진동을 이용하여 음악을 전달하는 음악 진동 전달 방식과, 디스플레이 장치를 통한 색 표현에 의해 음악을 전달하는 음악 색 전달 방식이 있다. 이런 방식들이 적용된 장치들로는 음악 분수, 음악 진동 시트, 음악 색원 표시 장치 등이 있다.Such techniques include a musical vibration transmission method for transmitting music using vibration and a music color transmission method for transmitting music according to color expression through a display device. Such devices include music fountains, musical vibration sheets, and music source devices.

그러나 종래 진동 전달 방식은 음악의 요소들을 전달하는 데 제한적이며, 일반인들에게는 음악 청취의 방해 요소로 작용될 수도 있는 문제점이 있었다.However, the conventional vibration transmission method is limited in transmitting the elements of music, and it has a problem that it may be an obstacle to listening to music to the general public.

그리고 종래 색 전달 방식 또한, 음악의 요소들을 전달하는 데 제한적인 문제점이 있었다.Also, the conventional color delivery method has a limited problem in transmitting elements of music.

따라서 음악의 다양한 요소들을 간단하면서도 효율적으로 전달할 수 있는 방안이 요구되고 있다. Therefore, it is required to provide a simple and efficient way to transmit various elements of music.

등록특허 제10-0920952호(2009.10.01.)Registration No. 10-0920952 (Oct. 1, 2009)

따라서 본 발명의 목적은 음악의 다양한 요소들을 음계에 따른 서로 다른 색(색상)을 할당하고, 강약에 따라 색의 밝기(명도)를 조절하며, 음표, 즉 음의 길이에 따라 해당 색의 표시 시간을 제어하며, 옥타브에 따른 채도 및 색의 표시 위치 중 하나 이상을 달리하여 음악을 시각화하여 플레이할 수 있는 음악 디스플레이 장치 및 방법을 제공함에 있다.Accordingly, it is an object of the present invention to provide a method and apparatus for assigning different colors (colors) according to scales to various elements of music, adjusting brightness (brightness) of colors according to intensity, And a music display device and method capable of visualizing and playing music by using one or more of saturation and color display positions according to an octave.

상기와 같은 목적을 달성하기 위한 본 발명의 음악 디스플레이 장치는: 적어도 하나 이상의 음원에 대한 음계, 음표 및 강약 정보를 포함하는 음악연주분석정보를 저장하는 음악연주분석정보 저장부를 포함하는 저장부; 음악 시각화 데이터에 따라 음계별로 각각의 색 표시 시간 및 밝기를 가지는 색을 디스플레이하는 디스플레이부; 및 음악 재생 요청 발생 시 선택된 음원에 대응하는 음악연주분석정보를 로드하고, 음악연주분석정보의 음계, 음계별 음표정보 및 강약 정보에 근거하여 상기 음계를 대응하는 색으로 변환하고, 상기 음표정보에 대응하여 해당 색의 색 표시 시간을 결정하며, 상기 강약정보에 의해 상기 색의 밝기 정도를 결정한 후 상기 음계별 색정보, 각 색에 대한 색 표시 시간 정보, 각 색에 대한 색 밝기 정보를 포함하는 음악 시각화 데이터를 생성하고, 상기 디스플레이부를 통해 상기 음악 시각화 데이터에 따라 음악을 디스플레이하는 제어부를 포함하는 것을 특징으로 한다.According to an aspect of the present invention, there is provided a music display apparatus comprising: a storage unit including a music performance analysis information storage unit for storing music performance analysis information including musical scores, notes, and intensity information about at least one sound source; A display unit for displaying a color having respective color display time and brightness for each musical scale according to music visualization data; And musical performance analysis information corresponding to the selected sound source when the music reproduction request is generated and converts the musical scale into the corresponding color based on the scale of the musical performance analysis information, the note information of each scale and the intensity information, Determines the color display time of the corresponding color, determines the degree of brightness of the color according to the intensity information, and stores the color information for each scale, the color display time information for each color, and the color brightness information for each color And a controller for generating music visualization data and displaying music according to the music visualization data through the display unit.

상기 저장부는, 적어도 하나 이상의 음원을 저장하는 음원저장부; 음계별 특징에 따른 음계별 음계분석기준정보를 저장하는 음계분석기준정보 저장부; 및 화음별 특징에 따른 화음별 화음분석기준정보를 저장하고 있는 화음분석기준정보 저장부를 포함하고, 상기 제어부는, 음원 등록 요청 발생 시 등록할 음원을 선택받고, 상기 음계분석기준정보 및 화음분석기준정보에 근거하여 선택된 음원으로부터 음계, 음표정보, 강약정보 및 화음정보를 포함하는 상기 음악연주분석정보를 획득하여 상기 저장부에 저장하여 등록하는 음원 등록부; 상기 음악 재생 요청 발생 시 상기 화음정보에 대응하는 복수의 음계 표시층 정보를 더 포함하는 음악 시각화 데이터를 생성하여 출력하는 음원 시각 변환부; 및 상기 시각화 데이터를 상기 디스플레이부를 통해 출력하는 음악 디스플레이부를 포함하는 것을 특징으로 한다.Wherein the storage unit comprises: a sound source storage unit for storing at least one sound source; A musical scale analysis reference information storage unit for storing musical scale analysis reference information for each musical scale according to characteristics of each musical scale; And a chord analysis reference information storage unit for storing chord analysis standard information for each chord in accordance with a characteristic of each chord, wherein the control unit selects a sound source to be registered when a sound source registration request is generated, A sound source registering unit for acquiring the musical performance analysis information including musical scale, note information, intensity information, and chord information from a selected sound source, storing the musical performance analysis information in the storage unit, and registering the music performance analysis information; A sound source time conversion unit for generating and outputting music visualization data further including a plurality of scale display layer information corresponding to the chord information when the music reproduction request is generated; And a music display unit for outputting the visualization data through the display unit.

상기 저장부는, 악기별 음 특징 정보를 저장하는 악기 분석 기준정보를 저장하는 악기 분석 기준정보 저장부를 더 포함하고, 상기 음원 등록부는, 사용자로부터 상기 음원저장부에 저장된 음원들 중 하나를 선택받아 출력하는 음원 선택부; 상기 선택된 음원을 상기 음원저장부로부터 로딩하여 출력하는 음원 로딩부; 상기 음계분석 기준정보에 근거하여 로딩된 음원으로부터 음계를 검출하고 음계정보를 출력하는 음계 검출부; 상기 검출된 음계의 음표를 검출하고 음표정보를 출력하는 음표 검출부; 상기 검출된 음계의 강약을 검출하고 강약정보를 출력하는 강약 검출부; 상기 화음분석 기준정보에 근거하여 상기 로딩된 음원으로부터 화음을 검출하고 화음정보를 출력하는 화음 검출부; 상기 악기 분석 기준정보에 근거하여 상기 로딩된 음원을 연주한 악기의 종류를 검출하고, 악기종류 정보를 출력하는 악기종류 검출부; 및 상기 음계정보, 음표정보, 강약정보, 화음정보 및 악기종류 정보를 포함하는 음악연주분석정보를 생성하여 출력하는 음원분석정보 생성부를 포함하되, 상기 음원 시각 변환부는 악기종류 정보에 대응하는 적어도 하나 이상의 악기정보를 포함하는 음악 시각화 데이터를 생성하는 것을 특징으로 한다.The storage unit may further include a musical instrument analysis reference information storage unit for storing musical instrument analysis reference information for storing musical instrument sound feature information. The sound source registering unit may select one of the sound sources stored in the sound source storage unit A sound source selecting unit; A sound source loading unit loading the selected sound source from the sound source storage unit and outputting the loaded sound source; A scale detection unit for detecting a scale from the loaded sound source based on the scale analysis reference information and outputting scale information; A note detection unit for detecting the note of the detected scale and outputting note information; A strength detector for detecting the strength of the detected scale and outputting intensity information; A chord detection unit for detecting a chord from the loaded sound source based on the chord analysis reference information and outputting chord information; A musical instrument type detection unit for detecting the type of musical instrument that played the loaded sound source based on the musical instrument analysis reference information and outputting musical instrument type information; And a sound source analysis information generation unit for generating and outputting music performance analysis information including the scale information, the note information, the intensity information, the chord information, and the musical instrument type information, wherein the sound source time conversion unit includes at least one The music visualization data including the musical instrument information is generated.

상기 음원 등록부의 음계 검출부는, 상기 검출된 음계의 옥타브를 더 검출하고, 검출된 옥타브 정보를 더 출력하고, 상기 음원 시각 변환부는, 상기 옥타브 정보를 옥타브별로 정의된 서로 다른 채도 정보 및 서로 다른 음계 표시 위치를 가지는 음계 표시 위치 정보 중 하나 이상을 상기 음악 시각화 데이터에 더 포함하여 출력하는 것을 특징으로 한다.Wherein the tone detector of the sound source register further detects an octave of the detected tone scale and further outputs the detected octave information, and the tone time converter converts the octave information into different saturation information defined for each octave, Display position information having a display position in addition to the musical visualization data.

상기 음원 등록부는, 상기 음계 검출부 및 음표 검출부로부터 출력되는 음계정보 및 음표정보에 의해 상기 음원의 박자를 검출하고, 검출된 박자에 대한 박자정보를 출력하는 박자 검출부를 더 포함하고, 상기 음원 시각 변환부는, 상기 박자정보를 상기 음악 시각화 데이터에 더 포함하여 출력하는 것을 특징으로 한다.Wherein the sound source registration unit further comprises a beat detection unit for detecting the beat of the sound source based on the scale information and note information output from the scale detection unit and the note detection unit and outputting beat information about the detected beat, Wherein the music visualization data further includes the time signature information.

상기 악기정보는 상기 음원을 연주한 악기의 이미지 및 아이콘 중 하나 이상이고, 상기 박자정보는 텍스트 데이터인 아라비아 숫자 및 해당 박자정보를 포함하는 이미지 중 하나인 것을 특징으로 한다.Wherein the musical instrument information is at least one of an image and an icon of the musical instrument that played the sound source, and the beat information is one of an Arabic numeral that is text data and an image including the beat information.

상기 디스플레이부는, 음계별로 서로 다른 색을 표시하고, 상기 색 표시 시간에 따라 해당 색을 표시하고, 상기 밝기 정보에 따라 밝기를 조절할 수 있는 적어도 하나 이상의 발광다이오드로 구성되는 것을 특징으로 한다.The display unit may include at least one light emitting diode that displays different colors for each tone scale, displays corresponding colors according to the color display time, and adjusts the brightness according to the brightness information.

상기와 같은 목적을 달성하기 위한 본 발명의 음악 디스플레이 방법은: 제어부가 음악 재생 요청 발생 시 선택된 음원에 대응하는 음악연주분석정보를 로드하는 음악연주분석정보 획득 과정; 상기 제어부가 상기 로드된 음악연주분석정보의 음계, 음계별 음표정보 및 강약 정보에 근거하여 상기 음계를 대응하는 색으로 변환하고, 상기 음표정보에 대응하여 해당 색의 색 표시 시간을 결정하며, 상기 강약정보에 의해 상기 색의 밝기 정도를 결정한 후 상기 음계별 색정보, 각 색에 대한 색 표시 시간 정보, 각 색에 대한 밝기 정보를 포함하는 음악 시각화 데이터를 생성하는 음악 시각화 데이터 변환 과정; 및 상기 제어부가 디스플레이부를 통해 상기 생성된 음악 시각화 데이터를 출력하는 음악 시각화 데이터 출력 과정을 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a music display method including: a music performance analysis information acquisition step of loading music performance analysis information corresponding to a selected sound source when a controller requests a music reproduction; Wherein the control unit converts the musical scale to a corresponding color based on the scale of the loaded music performance analysis information, the note information of each scale, and the intensity information, determines a color display time of the corresponding color in accordance with the note information, A music visualization data conversion step of generating music visualization data including color information for each scale, color display time information for each color, and brightness information for each color after determining the degree of brightness of the color by intensity information; And a music visualization data output step of the controller outputting the generated music visualization data through a display unit.

상기 방법은: 상기 제어부가 음원 등록 요청 발생 시 등록할 음원을 선택받고, 음계분석기준정보 및 화음분석기준정보에 근거하여 선택된 음원으로부터 음계, 음표정보, 강약정보 및 화음정보를 포함하는 상기 음악연주분석정보를 획득하여 저장부에 저장하여 등록하는 음원 등록 과정을 더 포함하는 것을 특징으로 한다.The method includes the steps of: when the control unit selects a sound source to be registered when a sound source registration request is generated, receiving the music performance information including musical scale, note information, intensity information, and chord information from a selected sound source based on the scale analysis reference information and chord analysis reference information Acquiring analysis information, and storing the analysis information in a storage unit and registering the analysis information.

상기 음원 등록 과정은, 사용자로부터 음원저장부에 저장된 음원들 중 하나를 선택받아 출력하는 음원 선택 단계; 상기 선택된 음원을 상기 음원저장부로부터 로딩하여 출력하는 음원 로딩 단계; 상기 음계분석 기준정보에 근거하여 로딩된 음원으로부터 음계를 검출하고 음계정보를 출력하는 음계 검출 단계; 상기 검출된 음계의 음표를 검출하고 음표정보를 출력하는 음표 검출 단계; 상기 검출된 음계의 강약을 검출하고 강약정보를 출력하는 강약 검출 단계; 상기 화음분석 기준정보에 근거하여 상기 로딩된 음원으로부터 화음을 검출하고 검출된 화음에 대한 화음정보를 출력하는 화음 검출 단계; 악기 분석 기준정보에 근거하여 상기 로딩된 음원을 연주한 악기의 종류를 검출하고, 악기종류 정보를 출력하는 악기종류 검출 단계; 및 상기 음계정보, 음표정보, 강약정보, 화음정보 및 악기종류 정보를 포함하는 음악연주분석정보를 생성하여 음악연주분석정보 저장부에 저장하여 등록하는 등록 단계를 포함하고, 상기 음악 시각화 데이터 변환 과정은, 상기 제어부가 상기 로드된 음악연주분석정보의 음계, 음계별 음표정보 및 강약 정보에 근거하여 상기 음계를 대응하는 색으로 변환하는 음계 색변환 단계; 상기 제어부가 상기 음표정보에 대응하여 해당 색의 색 표시 시간을 결정하는 음표 색 표시 시간 변환 단계; 상기 제어부가 상기 강약정보에 의해 상기 색의 밝기 정도를 결정하는 강약 밝기 변환 단계; 및 상기 악기종류 정보에 대응하는 적어도 하나 이상의 악기정보를 포함하는 악기정보 삽입단계를 포함하는 것을 특징으로 한다.Wherein the sound source registering step comprises: a sound source selecting step of selecting one of the sound sources stored in the sound source storing unit from the user and outputting the selected sound source; A sound source loading step of loading the selected sound source from the sound source storage unit and outputting the loaded sound source; A musical tone detection step of detecting a musical scale from a loaded sound source based on the musical scale analysis reference information and outputting scale information; A musical note detecting step of detecting the musical note of the detected scale and outputting the note information; A strength detection step of detecting the strength of the detected scale and outputting intensity information; Detecting a chord from the loaded sound source based on the chord analysis reference information and outputting chord information for the detected chord; A musical instrument type detection step of detecting the type of musical instrument that played the loaded sound source based on the musical instrument analysis reference information and outputting musical instrument type information; And a registration step of generating and recording musical performance analysis information including the musical score information, note information, intensity information, chord information, and musical instrument type information in a musical performance analysis information storage unit, A musical tone color converting step of converting the musical scale into a corresponding color based on a musical scale of the loaded musical performance analysis information, musical note information of each musical scale, and intensity information; A musical notation color display time conversion step of the control unit determining a color display time of the corresponding color corresponding to the note information; A densification brightness converting step of the controller determining the degree of brightness of the color by the intensity information; And at least one musical instrument information corresponding to the musical instrument type information.

상기 음계 검출 단계는, 상기 음계분석 기준정보에 근거하여 로딩된 음원으로부터 음계를 검출하고 음계정보를 출력하는 음계정보 검출 단계; 및 상기 검출된 음계의 옥타브를 검출하고, 검출된 옥타브에 대한 옥타브 정보를 출력하는 옥타브 검출 단계를 포함하고, 상기 음악 시각화 데이터 변환 과정은, 상기 옥타브 정보를 서로 다르게 정의된 채도 정보 및 옥타브별로 서로 다른 음계 표시 위치를 가지는 음계 표시 위치 정보 중 하나 이상으로 변환하는 옥타브 음계 표시 위치 변환 단계를 더 포함하되, 상기 옥타브 음계 표시 위치 변환 단계에서 서로 다르게 정의된 채도 정보 및 옥타브별로 서로 다르게 지정된 음계 표시 위치 정보를 상기 음악 시각화 데이터에 더 포함시키는 것을 특징으로 한다.The scale detection step may include: a scale information detection step of detecting a scale from the loaded sound source based on the scale analysis reference information and outputting scale information; And an octave detection step of detecting an octave of the detected musical scale and outputting octave information of the detected octave. The music visualization data conversion step may include a step of converting the octave information into a plurality of octave information, Tone display position information having a different scale display position, wherein the octave scale display position conversion step further comprises the step of converting the octave scale display position, Information is further included in the music visualization data.

상기 음원 등록 과정은, 음계 검출부 및 음표 검출부로부터 출력되는 음계정보 및 음표정보에 의해 상기 음원의 박자를 검출하고, 검출된 박자에 대한 박자정보를 출력하는 박자 검출 단계를 더 포함하고, 상기 음악 시각화 데이터 변환 과정은, 상기 박자정보를 상기 음악 시각화 데이터에 더 포함하여 출력하는 것을 특징으로 한다.Wherein the sound source registration step further includes a beat detection step of detecting beat of the sound source by the scale information and note information output from the scale detection unit and the note detection unit and outputting beat information about the detected beat, And the data conversion process further includes outputting the beat information to the music visualization data.

본 발명은 음계에 따른 서로 다른 색을 할당함으로써 시청자가 시각을 통해 음계를 명확하게 알 수 있고, 그에 따른 색 표현을 통해 음악을 들을 수 있는 효과를 갖는다.The present invention has an effect that a viewer can clearly recognize a scales through vision by assigning different colors according to scales, and can listen to music through color expressions accordingly.

또한, 본 발명은 음계에 대응하여 표시된 색의 밝기를 조절하여 음의 강약을 표현함으로써 시청자가 해당 색의 밝기를 통해 음악의 강약을 명확하게 인지할 수 있으므로 음계의 색 표현 및 밝기를 통해 보다 현실감 있게 음악을 들을 수 있는 효과를 갖는다.In addition, the present invention displays brightness of a displayed color by adjusting the brightness of the displayed color corresponding to the scale, so that viewers can clearly recognize the strength of the music through the brightness of the corresponding color, So that it has the effect of listening to music.

또한, 본 발명은 서로 다른 채도 표현 및 복수개의 음계 표시 층 중 적어도 하나 이상을 구비하여 복수의 옥타브 변화를 효율적으로 표시할 수 있으며, 다양한 화음을 표시할 수 있고, 반(음)올림 및 반(음)내림 등의 음악적 요소를 표현할 수 있어 보다 풍부하게 음악을 표현할 수 있는 효과를 갖는다.In addition, the present invention can efficiently display a plurality of octave changes by displaying different chroma representations and at least one of a plurality of scale display layers, display various chords, And can be represented by musical elements such as music, music, and sound. Thus, the music can be expressed more abundantly.

또한, 본 발명은 악기 이미지 등을 통해 현재 플레이되고 있는 음악이 어떤 악기를 통해 연주되는 것인지를 표현할 수 있는 효과를 갖는다.In addition, the present invention has an effect of expressing through which musical instrument the currently played music is played through the musical instrument image or the like.

상술한 바와 같이 본 발명은 음악의 다양한 요소들을 색을 통해 청취자에게 전달함으로써 시각을 통해서도 음악의 다양한 효소들을 효율적으로 제공할 수 있는 효과를 갖는다.As described above, the present invention has an effect of efficiently providing various enzymes of music through visual transmission by transmitting various elements of music to a listener through color.

도 1은 본 발명에 따른 음악 디스플레이 장치의 구성을 나타낸 도면이다.
도 2는 본 발명의 일실시예에 따른 음악 디스플레이 장치의 음원 등록부의 상세 구성을 나타낸 도면이다.
도 3은 본 발명에 따른 음악 디스플레이 장치의 음원 시각 변환부의 상세 구성을 나타낸 도면이다.
도 4는 본 발명에 따른 색에 의한 음계 및 옥타브 표시 방법을 설명하기 위한 도면이다.
도 5는 본 발명의 일실시예에 따른 음계 표현 예를 나타낸 도면이다.
도 6은 본 발명에 따른 색에 의한 음악 음계 표시 예를 나타낸 도면이다.
도 7은 본 발명에 따른 음악 디스플레이 장치의 음표 표시 방법을 나타낸 도면이다.
도 8은 본 발명에 따른 음악 디스플레이 장치의 악기 종류 표시 방법을 나타낸 도면이다.
도 9는 본 발명에 따른 음악 디스플레이 방법의 디스플레이 음원 등록 방법을 나타낸 흐름도이다.
도 10은 본 발명에 따른 음악 디스플레이 방법의 음악 디스플레이 방법을 나타낸 흐름도이다.1 is a block diagram of a music display apparatus according to the present invention.
FIG. 2 is a detailed block diagram of a sound source registration unit of a music display apparatus according to an embodiment of the present invention. Referring to FIG.
3 is a detailed block diagram of a sound source time converting unit of the music display apparatus according to the present invention.
4 is a diagram for explaining a scales and an octave display method according to the present invention.
5 is a diagram illustrating an example of a scales according to an embodiment of the present invention.
6 is a diagram showing an example of a music musical scale display by color according to the present invention.
7 is a diagram illustrating a method of displaying notes in a music display device according to the present invention.
8 is a view illustrating a musical instrument type display method of the music display apparatus according to the present invention.
9 is a flowchart illustrating a method of registering a display sound source of the music display method according to the present invention.
10 is a flowchart illustrating a music display method of the music display method according to the present invention.

이하 첨부된 도면을 참조하여 본 발명의 음악 디스플레이 장치의 구성 및 동작을 설명하고, 그 장치에서의 음악 디스플레이 방법을 설명한다.Hereinafter, the configuration and operation of the music display apparatus of the present invention will be described with reference to the accompanying drawings, and a music display method in the apparatus will be described.

도 1은 본 발명에 따른 음악 디스플레이 장치의 구성을 나타낸 도면이다.1 is a block diagram of a music display apparatus according to the present invention.

본 발명에 따른 음악 디스플레이 장치는 제어부(100), 저장부(200), 입력부(300) 및 디스플레이부(400)를 포함하며, 실시예에 따라 통신부(500)를 더 포함할 수 있을 것이다.The music display apparatus according to the present invention includes a control unit 100, a storage unit 200, an input unit 300, and a display unit 400, and may further include the communication unit 500 according to an embodiment.

저장부(200)는 음원저장부(210), 음악연주분석정보 저장부(220), 음계분석기준정보 저장부(230), 화음분석기준정보 저장부(240), 악기분석기준정보 저장부(250) 및 시각 데이터 변환 테이블 저장부(260)를 포함한다.The storage unit 200 includes a sound source storage unit 210, a music performance analysis information storage unit 220, a scale analysis reference information storage unit 230, a chord analysis reference information storage unit 240, an instrument analysis reference information storage unit 250 and a time data conversion table storage unit 260.

음원저장부(210)는 적어도 하나 이상의 음원을 저장한다.The sound source storage unit 210 stores at least one sound source.

음악연주분석정보 저장부(220)는 임의의 음원에 대한 음계정보, 음표정보 및 강약정보를 포함하고, 악기종류 정보, 화음정보, 박자정보, 옥타브 정보 등을 선택적으로 포함하는 적어도 하나 이상의 음악연주분석정보를 저장한다.The musical performance analysis information storage unit 220 includes at least one musical performance information including musical instrument information, musical instrument information, musical instrument information, beat information, octave information, and the like, And stores analysis information.

음계분석기준정보 저장부(230)는 음계별 음 특성에 따른 음계별 특징정보를 저장한다. The scale analysis reference information storage unit 230 stores feature information for each scale according to the sound characteristics of each scale.

화음분석기준정보 저장부(240)는 화음 종류별 특성에 따른 화음별 특징 정보를 저장한다.The chord analysis reference information storage unit 240 stores feature information for each chord according to each chord type property.

악기분석기준정보 저장부(250)는 악기별 특성에 따른 악기별 특징 정보를 악기 분석 기준정보로서 저장한다.The instrument analysis reference information storage unit 250 stores the instrument-specific feature information according to the instrument-specific characteristics as musical instrument analysis reference information.

시각 데이터 변환 테이블 저장부(260)는 음악연주분석정보에 포함된 음악연주 요소(음계, 음표, 강약, 화음, 악기, 박자)들 각각을 시각적 요소로 변환하기 위한 시각적 요소(색, 표시 시간, 밝기, 음계 표시 계층, 악기 표시정보, 박자 표시정보)들을 정의하는 시각 데이터 변환 테이블을 저장한다.The visual data conversion table storage unit 260 stores a visual data conversion table for converting each of music performance elements (musical scale, note, intensity, chord, musical instrument, and beat) included in musical performance analysis information into visual elements A brightness, a scale display layer, musical instrument display information, and beat display information).

입력부(300)는 정보를 텍스트로 입력하고 선택할 수 있는 다수의 키들을 구비하는 키입력장치, 마우스, 기능 및 볼륨, 전원 제어를 위한 소수의 버튼을 구비하고 상기 버튼들 중 눌린 버튼에 대응하는 버튼신호를 출력하는 버튼 입력장치, 상기 디스플레이부(400)의 화면과 일체로 구성되어 터치된 위치에 대응하는 위치신호를 출력할 수 있는 터치패드 등 중 하나 이상을 포함하여 디스플레이부(400)와 함께 사용자에게 사용자 인터페이스 수단을 제공한다.The input unit 300 includes a key input device having a plurality of keys for inputting and selecting information as text, a mouse, a function and a volume, and a small number of buttons for power control, and a button corresponding to a pressed button among the buttons A button input device for outputting a signal, a touch pad configured to be integrated with a screen of the display unit 400 and capable of outputting a position signal corresponding to a touched position, and the like together with the display unit 400 And provides user interface means to the user.

디스플레이부(400)는 본 발명의 동작에 따른 정보를 표시할 수 있으며, 특히 본 발명에 따라 선택된 음원의 재생 요청 시 재생 요청된 음원에 대응하는 음악 시각화 데이터에 대응하는 음악 디스플레이 수단을 표시한다.The display unit 400 may display information according to the operation of the present invention. In particular, the display unit 400 displays music display means corresponding to the music visualization data corresponding to the sound source requested to be reproduced in response to the reproduction of the selected sound source according to the present invention.

상기 디스플레이부(400)는 액정표시장치(Liquid Crystal Display: LCD), 적어도 하나 이상의 발광다이오드(Light Emitting Diode: LED) 중 어느 하나 이상으로 구성될 수 있을 것이다. 상기 LED는 적어도 7(도, 레, 미, 파, 솔, 라, 시)개의 음계에 대응하는 7개의 색을 표현할 수 있는 LED가 적용될 것이다. 액정표시장치는 단독으로 구성되는 경우 그래픽 LCD인 것이 바람직하고, LED와 함께 구성되는 경우 캐릭터 LCD 및 그래픽 LCD 중 어느 하나가 될 수 있을 것이다.The display unit 400 may include at least one of a liquid crystal display (LCD) and at least one light emitting diode (LED). The LED will be applied to an LED capable of representing seven colors corresponding to at least seven (degrees, red, green, blue, green, blue) scales. The liquid crystal display device may be a graphic LCD if it is composed solely, and may be a character LCD or a graphic LCD when it is configured together with an LED.

또한, 디스플레이부(400)는 음계별로 서로 다른 길이를 가지는 투명 바(Bar)의 형태로 구성되고, 그 투명 바 각각에 LED가 삽입되도록 구성되어 LED에서 방출된 빛이 투명 바 전체를 통해 확산되어 출력되도록 구성될 수도 있을 것이다.In addition, the display unit 400 is configured in the form of a transparent bar having a different length for each scale, and the LED is inserted into each transparent bar so that the light emitted from the LED is diffused through the entire transparent bar Output.

통신부(500)는 인터넷망(미도시)을 통해 원격지의 서버로부터 음원, 음악연주분석정보, 음악 시각화 데이터 등을 다운로드 받을 수 있는 원거리 통신부(510) 및 근거리의 무선기기로부터 음원, 음악연주분석정보, 음악 시각화 데이터 등을 다운로드 발을 수 있는 근거리 통신부(520)를 포함한다.The communication unit 500 includes a remote communication unit 510 for downloading sound sources, music performance analysis information, music visualization data, and the like from a remote server through an Internet network (not shown) And a local communication unit 520 capable of downloading and displaying music visualization data and the like.

제어부(100)는 음원 등록부(110), 음원 시각 변환부(130) 및 음악 디스플레이부(140)를 포함하여 본 발명에 따른 음악 디스플레이 장치의 전반적인 동작을 제어한다.The control unit 100 includes a sound source register 110, a sound source time converting unit 130, and a music display unit 140 to control the overall operation of the music display apparatus according to the present invention.

구체적으로 설명하면, 음원 등록부(110)는 임의의 음원에 대한 음악연주분석정보를 획득한 후 상기 저장부(200)의 음악연주분석정보 저장부(220)에 저장하여 디스플레이 음원을 등록한다.Specifically, the sound source registration unit 110 acquires music performance analysis information on an arbitrary sound source, stores the analysis result in the music performance analysis information storage unit 220 of the storage unit 200, and registers the sound source.

음원 시각 변환부(130)는 등록된 디스플레이 음원에 대한 음악 재생 요청 발생 시 선택된 음원에 대응하는 음악연주분석정보를 로드하고, 음악연주분석정보의 음계, 음계별 음표정보 및 강약 정보에 근거하여 상기 음계를 대응하는 색으로 변환하고, 상기 음표정보에 대응하여 해당 색의 색 표시 시간을 결정하며, 상기 강약정보에 의해 상기 색의 밝기 정도를 결정한 후 상기 음계별 색 정보, 각 색에 대한 색 표시 시간 정보, 각 색에 대한 색 밝기 정보를 포함하는 음악 시각화 데이터를 생성하여 음악 디스플레이부(140)로 출력한다. The sound source time conversion unit 130 loads musical performance analysis information corresponding to the selected sound source when a music reproduction request for the registered display sound source is generated and loads the musical performance analysis information corresponding to the musical performance analysis information And determines the color display time of the corresponding color in accordance with the note information. After determining the degree of brightness of the color by the intensity information, the color information for each scale and the color display Time information, and color brightness information for each color, and outputs the generated music visualization data to the music display unit 140.

음악 디스플레이부(140)는 상기 디스플레이부(400)를 통해 상기 음악 시각화 데이터에 대응하는 음악 디스플레이 수단을 표시한다. 상기 음악 디스플레이 수단은 음악을 시각화하여 표시하는 수단으로 후술할 도 4 내지 7을 참조하여 상세히 설명한다.The music display unit 140 displays music display means corresponding to the music visualization data through the display unit 400. [ The music display means will be described in detail with reference to FIGS. 4 to 7 as means for visualizing and displaying music.

도 2는 본 발명에 따른 음악 디스플레이 장치의 음원 등록부의 상세 구성을 나타낸 도면이다. 도 2를 참조하여 음원 등록부(110)의 상세 구성 및 동작을 설명한다.FIG. 2 is a detailed block diagram of a sound source registration unit of a music display apparatus according to the present invention. The detailed configuration and operation of the tone generator registration unit 110 will be described with reference to FIG.

음원 등록부(110)는 음원 선택부(111), 음원 로딩부(112), 음원 분석부(113) 및 음원분석정보 생성부(121)를 포함한다.The sound source registering unit 110 includes a sound source selecting unit 111, a sound source loading unit 112, a sound source analyzing unit 113, and a sound source analysis information generating unit 121.

음원 선택부(111)는 디스플레이부(400)를 통해 음원저장부(210)에 저장되어 있는 음원들에 대한 리스트를 제공하고, 입력부(300)를 통해 음원들 중 하나가 선택되면 선택된 음원정보를 음원 로딩부(112)로 제공한다.The sound source selection unit 111 provides a list of the sound sources stored in the sound source storage unit 210 through the display unit 400. When one of the sound sources is selected through the input unit 300, And supplies it to the sound source loading unit 112.

음원 로딩부(112)는 음원 선택부(111)로부터 음원정보가 입력되면 입력된 음원정보에 대응 음원을 로딩하여 음원 분석부(113)로 출력한다.When the sound source information is input from the sound source selection unit 111, the sound source loading unit 112 loads the corresponding sound source information to the sound source analysis unit 113 and outputs the sound source information to the sound source analysis unit 113.

음원 분석부(113)는 상기 음원 로딩부(112)로부터 입력되는 음원을 분석하여 다수의 음악연주 요소 정보들을 검출하여 음원분석정보 생성부(121)로 출력한다.The sound source analyzing unit 113 analyzes a sound source input from the sound source loading unit 112 and detects a plurality of music playing element information and outputs the information to the sound source analysis information generating unit 121.

상기 음악연주 요소 정보는, 음계정보, 음표정보, 강약정보 등을 포함하고, 옥타브 정보, 박자정보, 화음정보 및 악기종류 정보 등을 선택적으로 포함할 수 있을 것이다.The musical performance element information may include scale information, note information, intensity information, and the like, and may optionally include octave information, beat information, chord information, and musical instrument type information.

즉 음원 분석부(113)는 음계 검출부(114), 음표 검출부(115) 및 강약 검출부(116)를 포함하고, 박자 검출부(117), 악기종류 검출부(119) 및 화음 검출부(120)를 선택적으로 포함한다.That is, the sound source analyzing unit 113 includes a sound detecting unit 114, a sound detecting unit 115, and a strength detecting unit 116. The sound source analyzing unit 113 selectively outputs the beat detecting unit 117, the musical instrument type detecting unit 119, and the chord detecting unit 120 .

음계 검출부(114)는 음원 로딩부(112)로부터 음원이 입력되기 시작하면 음계분석기준정보 저장부(230)의 음계분석기준정보를 참조하여 상기 플레이 중인 음원의 음계를 검출하고, 검출된 음계에 대한 음계정보를 음원분석정보 생성부(121)로 출력한다.When the sound source is input from the sound source loading unit 112, the sound detection unit 114 refers to the sound analysis reference information of the sound analysis reference information storage unit 230 to detect the sound source of the sound source being played, To the sound source analysis information generation unit 121. [0064]

음표 검출부(115)는 상기 음계 검출부(114)를 통해 음계가 검출되면 해당 음계의 음표를 검출하고, 검출된 음표에 대한 음표정보를 음원분석정보 생성부(121)로 출력한다. 상기 음표정보란 상기 음계의 길이를 의미할 수 있을 것이다.When a musical scale is detected through the scale detection unit 114, the note detection unit 115 detects a note of the corresponding musical scale, and outputs note information about the detected note to the sound source analysis information generation unit 121. The note information may mean the length of the scale.

강약 검출부(116)는 상기 검출된 음계의 강약, 즉 세기를 검출하고 검출된 세기에 대한 강약정보를 상기 음원분석정보 생성부(121)로 출력한다. 상기 강약정보는 해당 음원의 해당 음계 부분의 음의 세기에 의해 결정될 수 있으며, 강약 정보는 4레벨, 8레벨 등으로 구분되는 세기 레벨정보가 될 수 있을 것이다.The intensity detector 116 detects intensity of the detected scale, that is, intensity, and outputs strength information about the detected intensity to the sound source analysis information generating unit 121. The strength information may be determined by the strength of the sound of the corresponding sound portion of the sound source, and the strength information may be intensity level information classified into four levels, eight levels, or the like.

박자 검출부(117)는 음원 로딩부, 상기 음계 검출부(114) 및 음표 검출부(115)로부터 음원, 음계 정보 및 음표정보를 입력받아 박자를 검출하고, 검출된 박자에 대한 박자정보를 상기 음원분석정보 생성부(121)로 출력한다.The beat detection unit 117 receives the sound source, the scale information, and the note information from the sound source loading unit, the sound detection unit 114 and the sound detection unit 115, detects the beat and outputs the beat information about the detected beat to the sound source analysis information And outputs it to the generation unit 121.

악기종류 검출부(119)는 음원 로딩부(112)로부터 음원이 입력되기 시작하면 악기 분석 기준정보 저장부(250)의 악기분석기준정보를 참조하여 입력되는 음원을 연주하는 악기들의 종류를 검출하고, 검출된 악기종류 정보를 음원분석정보 생성부(121)로 출력한다.The musical instrument type detection unit 119 detects the type of musical instruments to be played by referring to the musical instrument analysis reference information stored in the musical instrument analysis reference information storage unit 250 when a sound source is input from the sound source loading unit 112, And outputs the detected musical instrument type information to the sound source analysis information generation unit 121. [

화음 검출부(120)는 음원 로딩부(112)로부터 음원이 입력되기 시작하면, 화음 분석 기준정보 저장부(240)의 화음 분석 기준정보를 참조하여 음원에 화음이 있는지를 검사하고 화음이 있으면 검출하고, 검출된 화음에 대한 화음정보를 음원분석정보 생성부(121)로 출력한다.When a sound source is input from the sound source loading unit 112, the chord detecting unit 120 checks whether or not a chord is present in the sound source by referring to the chord analysis reference information stored in the chord analysis reference information storage unit 240, , And outputs the chord information for the detected chord to the sound source analysis information generation unit 121.

음원분석정보 생성부(121)는 상기 음원 분석부(113)로부터 입력되는 음원정보, 음표정보, 강약정보를 포함하고, 박자정보, 악기종류정보 및 화음정보를 선택적으로 포함하는 음악연주분석정보를 생성하여 음악연주분석정보 저장부(220)에 저장한다.The sound source analysis information generation unit 121 includes music performance analysis information including sound source information, note information, and intensity information input from the sound source analysis unit 113, and selectively includes beat information, musical instrument type information, and chord information And stores the generated music performance analysis information in the music performance analysis information storage unit 220.

상기 도 2에서는 제어부(100)가 저장된 음원으로부터 음악연주분석정보를 자동 추출하는 구성 및 동작을 설명하였으나, 특정 음원에 대한 음악연주분석정보의 각 음악연주 요소들에 대해 사용자로부터 직접 입력받아 음악연주분석정보를 생성하여 저장할 수도 있고, 음악 전문가들에 의해 미리 생성되어 있는 음악연주분석정보를 통신부(500)를 통해 수신받아 저장할 수도 있을 것이다.2, the controller 100 automatically extracts the music performance analysis information from the music source stored in the controller 100. However, the music performance analysis information for the specific music source may be directly input from the user to each music performance element, The analysis information may be generated and stored, or the music performance analysis information generated in advance by the music experts may be received through the communication unit 500 and stored.

도 3은 본 발명에 따른 음악 디스플레이 장치의 음원 시각 변환부의 상세 구성을 나타낸 도면이고, 도 4는 본 발명에 따른 색에 의한 음계 및 옥타브 표시 방법을 설명하기 위한 도면이고, 도 5는 본 발명의 일실시예에 따른 음계 표현 예를 나타낸 도면이며, 도 6은 본 발명에 따른 색에 의한 음악 음계 표시 예를 나타낸 도면이며, 도 7은 본 발명에 따른 음악 디스플레이 장치의 음표 표시 방법을 나타낸 도면이고, 도 8은 본 발명에 따른 음악 디스플레이 장치의 악기 종류 표시 방법을 나타낸 도면이다. 이하 도 3 내지 도 8을 참조하여 설명한다.FIG. 3 is a detailed block diagram of a sound source time conversion unit of a music display apparatus according to the present invention. FIG. 4 is a diagram for explaining a method of displaying a scales and an octave according to the present invention, 6 is a view showing an example of a music musical scale display according to the present invention, FIG. 7 is a diagram illustrating a musical note display method of the music display apparatus according to the present invention, and FIG. And FIG. 8 is a diagram illustrating a method of displaying musical instrument types in the music display device according to the present invention. This will be described below with reference to Figs. 3 to 8. Fig.

음원 시각 변환부(130)는 연주분석정보 로딩부(132), 음계 구성부(133), 음표 구성부(134) 및 강약 구성부(135)를 포함하고, 음원 선택부(131), 박자 구성부(136) 및 악기 구성부(137)를 선택적으로 포함한다.The sound source time converting unit 130 includes a performance analyzing information loading unit 132, a musical tone generating unit 133, a musical tone generating unit 134 and a strength adjusting unit 135, and includes a sound source selecting unit 131, (136) and a musical instrument component (137).

음원 선택부(131)는 음원저장부(210)에 저장되어 있는 음원 및 음악연주분석정보 저장부(220)에 등록된 음악연주분석정보들의 음원정보들을 포함하는 음원 리스트를 디스플레이부(400)를 통해 표시하고, 사용자로부터 임의의 음원이 선택되면 선택 음원정보를 연주분석정보 로딩부(132)로 출력한다. 디스플레이부(400)가 LED로만 구성되는 경우 입력부(300)의 버튼(번호 버튼 등)에 미리 음원을 할당할 수 있고, 임의의 버튼이 눌리는 경우 눌린 버튼 번호가 선택 음원정보가 되어 연주분석정보 로딩부(132)로 입력되도록 구성될 수 있을 것이다.The sound source selection unit 131 may include a sound source list stored in the sound source storage unit 210 and a sound source list including the sound source information of the music performance analysis information registered in the music performance analysis information storage unit 220, And outputs the selected sound source information to the performance analysis information loading unit 132 when an arbitrary sound source is selected from the user. When the display unit 400 is composed only of LEDs, a sound source can be allocated to a button (number button, etc.) of the input unit 300 in advance. When a certain button is pressed, the pressed button number becomes the selected sound source information, (132).

연주분석정보 로딩부(132)는 선택 음원정보가 입력되면 선택 음원정보에 대응하는 음악연주분석정보가 음악연주분석정보 저장부(220)에 저장되어 있는지를 검사하고, 저장되어 있으면, 음악연주분석정보 저장부(220)로부터 해당 음악연주분석정보를 로딩하여 출력한다.The performance analyzing information loading unit 132 checks whether the music performance analysis information corresponding to the selected sound source information is stored in the music performance analysis information storage unit 220 when the selected sound source information is input, The music performance analysis information is loaded from the information storage unit 220 and output.

만일, 선택 음원정보에 대응하는 음악연주분석정보가 음악연주분석정보 저장부(220)에 저장되어 있지 않으면 연주분석정보 로딩부(132)는 음원저장부(210)에 저장되어 있는지를 검사하고, 음원저장부(210)에 해당 음원이 저장되어 있으면, 음원 등록부(110)로 해당 음원의 음원등록을 요청하여 해당 음원에 대한 음악연주분석정보를 획득하여 출력하도록 구성될 수도 있을 것이다.If the music performance analysis information corresponding to the selected sound source information is not stored in the music performance analysis information storage unit 220, the performance analysis information loading unit 132 checks whether or not the music performance analysis information is stored in the sound source storage unit 210, If the corresponding sound source is stored in the sound source storage unit 210, the sound source registration unit 110 may request the sound source registration of the corresponding sound source to acquire music performance analysis information for the sound source and output the acquired sound performance information.

음계 구성부(133)는 연주분석정보 로딩부(132)로부터 음악연주분석정보가 입력되면 시각 데이터 변환 테이블 저장부(260)의 시각 데이터 변환 테이블을 참조하여 음악연주분석정보의 각 음계정보를 해당 색 정보로 변환하여 출력한다.When musical performance analysis information is input from the performance analysis information loading unit 132, the musical tone composition unit 133 refers to the time data conversion table of the time data conversion table storage unit 260, And outputs the color information.

또한, 음계 구성부(133)는 음악연주분석정보에 옥타브 정보가 포함되어 있으면, 음원에 포함되어 있는 옥타브 수 및 해당 옥타브에 대응하는 음계 표시 층 정보를 옥타브 정보로서 출력한다. 예를 들어 음원에 3옥타브의 음계까지 존재하는 경우, 옥타브 정보로서 3과, 그에 대응하는 음계 표시 층 정보(예: 제1음계 표시 층(401), 제2음계 표시 층(402), 제3음계 표시층(403))를 출력할 것이다.If the musical performance analysis information includes octave information, the musical tone generating section 133 outputs the octave number included in the sound source and the scale display layer information corresponding to the octave as octave information. For example, when there are up to three octaves in the sound source, the octave information 3 and the corresponding scale display layer information (e.g., the first scale display layer 401, the second scale display layer 402, Scale display layer 403).

또한, 음계 구성부(133)는 음악연주분석정보에 반음 올림 및 반음 내림에 대한 반음정보를 반음 위치정보로 변환하여 시각화 데이터 생성부(138)로 출력한다. 상기 반음 위치정보는 반음 표시층(41X) 정보가 될 수 있을 것이다.The musical tone generator 133 converts semitone information about semitone and semitone down into semitone position information and outputs the semitone information to the visualization data generator 138. The semitone position information may be semitone display layer 41X information.

음표 구성부(134)는 연주분석정보 로딩부(132)로부터 입력되는 음악연주분석정보에 포함된 음계별 음표정보를 해당 음계에 대응하는 색의 색 표시 시간으로 변환하여 출력한다.The note composing unit 134 converts the note information of each musical scale included in the musical performance analysis information input from the performance analysis information loading unit 132 into the color display time of the color corresponding to the musical scale and outputs the converted color information.

예를 들어 설명하면, 음표 구성부(134)는 도 7과 같이 음계가 파이고, 음표 정보가 온음표 정보이면 (가)와 같은 색 표시 시간(t1)으로 변환하여 출력하고, 2분 음표 정보이면 (나)와 같은 색 표시 시간(t2) 정보로 변환하여 출력하며, 4분음표 정보이면 (다)와 같은 색 표시 시간(t3) 정보로 변환하여 출력하고, 8분음표이면 (라)와 같은 색 표시 시간(t4) 정보로 변환하여 출력한다.(단, t1>t2>t3>t4)For example, if the musical note information is the beat note information as shown in Fig. 7 and the note display information is the same color display time (t1) as shown in Fig. 7, (T2) information as in the case of (b), and outputs the converted information as the color display time t3 information as shown in (c) (T1 > t2 > t3 > t4)

강약 구성부(135)는 연주분석정보 로딩부(132)로부터 입력되는 음악연주분석정보에 포함된 음계별 강약정보를 해당 음계의 색에 대한 밝기 정보로 변환하여 출력한다.The intensity setting unit 135 converts the intensity information of each scale included in the music performance analysis information input from the performance analysis information loading unit 132 into brightness information for the color of the corresponding scale and outputs the brightness information.

박자 구성부(136)는 연주분석정보 로딩부(132)로부터 입력되는 음악연주분석정보에 포함된 박자정보를 검출하여 시각화 데이터 생성부(138)로 출력한다.The beat configuration unit 136 detects beat information included in the music performance analysis information input from the performance analysis information loading unit 132 and outputs the detected beat information to the visualization data generation unit 138.

악기 구성부(137)는 연주분석정보 로딩부(132)로부터 입력되는 음악연주분석정보의 악기종류 정보를 악기별 악기정보로 변환하여 상기 시각화 데이터 생성부(138)로 출력한다. 상기 악기정보는 해당 악기의 악기 이미지가 될 수도 있고 악기 이름 텍스트 정보가 될 수도 있을 것이다.The musical instrument configuration unit 137 converts musical instrument type information of musical performance analysis information input from the performance analysis information loading unit 132 into musical instrument information for each musical instrument and outputs the same to the visualization data generation unit 138. [ The musical instrument information may be a musical instrument image of the musical instrument or a musical instrument name text information.

시각화 데이터 생성부(138)는 상기 음계 구성부(133), 음표 구성부(134), 강약 구성부(135), 박자 구성부(136) 및 악기 구성부(137)로부터 음계별 색정보, 옥타브 정보, 색 표시 시간 정보, 박자정보 및 악기정보를 입력받아 음악 시각화 데이터를 생성하여 출력한다. 상기 음악 시각화 데이터는 음악 디스플레이 수단을 구성하는 데이터이다. The visualization data generating section 138 receives the color information by scale from the musical tone generating section 133, the musical tone generating section 134, the intensity setting section 135, the beat setting section 136 and the musical instrument configuring section 137, Information, color display time information, beat information, and musical instrument information, and generates and outputs music visualization data. The music visualization data is data constituting music display means.

상기 시각화 데이터 생성부(136)은 하나의 음계 표시 바(Bar)로 음악 디스플레이 수단을 구성하여 하나의 음계 표시 바(Bar)를 통해 모든 음계에 대응하는 색을 표시하도록 구성될 수도 있고, 도 4의 (가)와 같이 미리 정의된 색을 디스플레이하는 7개의 음계 표시 바(Bar)로 구성되는 음악 디스플레이 수단을 구성하여 해당 음계에 대응하는 음계 표시 바(Bar)를 활성화하도록 구성될 수 있으며, 음표 및 박자에 따라 음계 표시 바(Bar)의 개수를 유동적으로 결정하여 음악 디스플레이 수단을 구성할 수도 있을 것이다. 상기 음계 표시 바(Bar)는 도 4 및 도 6에서 보이는 바와 같이 복수의 층으로 구성될 수 있을 것이다.The visualization data generation unit 136 may be configured to display music corresponding to all scales through a single scale display bar (Bar) by constituting music display means with one scale display bar (Bar) And a seventh scale display bar (Bar) for displaying a predefined color as shown in (a) of FIG. 7, and to activate a scale display bar (Bar) corresponding to the scale, And the music display means may be configured by flexibly determining the number of scale indication bars according to the beat. The scales display bar may be composed of a plurality of layers as shown in FIGS.

두 번째 및 세 번째의 경우 도 6의 (가) 및 (나)에 표시된 바와 같이 음악연주분석정보의 음계 변화에 따라 활성화되는 음계 표시 바의 위치가 바뀌게 될 것이다. 즉, 도 6에서는 7개의 음계 표시 바(Bar)가 모두 활성화된 것처럼 보이나, 실제 디스플레이 시에는 음악(시간(t))의 진행에 따라 왼쪽에서 오른쪽으로 또는 오른쪽에서 왼쪽으로 순차 점등하게 구성될 수 있을 것이다.In the second and third cases, the position of the scale bar to be activated according to the scale change of the music performance analysis information will be changed as shown in (a) and (b) of FIG. In other words, in FIG. 6, seven scale indication bars may appear to be activated, but in actual display, they may be sequentially lit from left to right or from right to left according to the progress of music (time t) There will be.

또한, 시각화 데이터 생성부(138)는 음계 구성부(133)로부터 옥타브 정보가 입력되고, 옥타브 정보에 의해 음원에 2개의 옥타브가 존재하는 것으로 판단되는 경우, 도 4의 (나)와 같이 2개의 음계 표시층(401, 402)으로 음악 디스플레이 수단을 구성할 수 있고, 도 4의 (다)와 같이 음원에 3개의 옥타브가 존재하는 것으로 판단되는 경우 3개의 음계 표시층(401, 402, 403)으로 음악 디스플레이 수단을 구성할 수 있으며, 음계 구성부(133)로부터 반음정보가 입력되고, 반음정보에 의해 음원에 반음 올림 및 반음 내림 등의 요소가 있는 것으로 판단되는 경우, 도 4의 (라)와 같이 반음 올림 표시층(411) 및 반음 내림 표시층(412)을 포함하도록 음악 디스플레이 수단을 구성할 수도 있을 것이다.If the octave information is input from the scale component 133 and the octave information indicates that there are two octaves in the sound source, the visualization data generator 138 generates two When music display means is constituted by the scale display layers 401 and 402 and it is judged that three octaves are present in the sound source as shown in FIG. 4C, the three scale display layers 401, 402 and 403, If it is determined that the semitone information is input from the scale component 133 and that there are elements such as semitone up and semitone down in the sound source due to the semitone information, The music display means may include a semi-tone display layer 411 and a semi-tone lower display layer 412 as shown in FIG.

또한, 시각화 데이터 생성부(138)는 음계 구성부(133)로부터 옥타브 정보가 입력되고, 옥타브 정보에 의해 원원에 2개의 옥타브가 존재하는 것으로 판단되는 경우, 도 5와 같이 옥타브에 따른 서로 다른 채도의 색을 적용하는 음악 디스플레이 수단을 구성할 수도 있을 것이다.When the octave information is inputted from the scale component 133 and the octave information indicates that there are two octaves in the source, the visualization data generator 138 generates different visual saturation The music display means may be configured to apply the color of the music.

2개의 옥타브로 구성되는 음악을 예를 들면, 시각화 데이터 생성부(138)는 음악연주분석정보에 따라 해당 구간 내에 제1음계 표시층(401)에 대응하는 옥타브의 음계만 표시되는 경우 도 6의 (가)와 같이 표시하고, 해당 구간 내에 제1음계 표시층(401) 및 제2음계 표시층(402) 모두에 음계가 존재하는 경우 도 6의 (나)와 같이 표시될 수 있을 것이다.For example, if the musical performance analysis information indicates only the tone scale of the octave corresponding to the first scale display layer 401 within the corresponding interval, (A), and if a scale exists in both of the first scale marking layer 401 and the second scale marking layer 402 in the corresponding section, it can be displayed as shown in (b) of FIG.

상기 음악 디스플레이 수단은 음계 표시 수단이 바(Bar) 형태로 구성되는 경우를 나타내었으나, 원, 삼각형 등 다양한 형태로 구성될 수 있을 것이다.Although the musical display means has a bar-shaped display means, the display means may have various shapes such as a circle, a triangle, and the like.

또한, 시각화 데이터 생성부(138)는 악기 구성부(137)로부터 악기정보가 입력되면, 도 8의 (가), (나), (다)와 같이 해당 악기정보를 음계 표시 바(Bar)에 표시되거나, 음악 디스플레이 수단 배경에 표시될 수 있도록 음악 시각화 데이터를 생성할 것이다. 이를 위해서는 상기 디스플레이부(400)가 그래픽 LCD, 유기EL 등의 표시장치이어야 할 것이다.When the musical instrument information is input from the musical instrument configuration unit 137, the visualization data generation unit 138 outputs the musical instrument information to the musical scale display bar (Bar) as shown in Figs. 8A, 8B, Or may be displayed on the music display means background. To this end, the display unit 400 should be a display device such as a graphic LCD or an organic EL.

또한, 시각화 데이터 생성부(138)는 음표 구성부(134)로부터 음계별 색 표시 시간 정보가 입력되면 해당 색의 표시 시 도 7과 같이 그 음표정보에 따른 색 표시 시간 동안 해당 색이 표시될 수 있도록 음악 시각화 데이터를 생성한다.When the color display time information for each scale is input from the note composition unit 134, the visualization data generation unit 138 may display the corresponding color during the color display time according to the note information as shown in FIG. 7 To generate music visualization data.

도 9는 본 발명의 일실시예에 따른 음악 디스플레이 방법의 디스플레이 음원 등록 방법을 나타낸 흐름도이다.9 is a flowchart illustrating a method of registering a display sound source of a music display method according to an embodiment of the present invention.

이하 도 9를 참조하여 음원 등록 방법을 설명하면, 제어부(100) 입력부(300)를 통해 음원 등록 요청이 발생되는지를 검사한다(S111).Referring to FIG. 9, a sound source registration method will be described. In step S111, it is checked whether a sound source registration request is generated through the input unit 300 of the control unit 100. FIG.

제어부(100)는 음원 등록 요청이 발생되면 음원 등록부(110)를 활성화하고, 활성화된 음원 등록부(110)는 음원 등록 수단을 디스플레이부(400)를 통해 제공하고, 음원 등록 수단 및 입력부(300)를 통한 사용자의 명령을 검사하여 음원 자동 등록 요청이 발생하는지(S113), 음원 수동 등록 요청이 발생하는지(S115)를 검사한다.The controller 100 activates the tone generator register 110 when the tone generator registration request is generated and the tone generator registering unit 110 provides the tone generator register through the display unit 400. The tone generator registering unit and the input unit 300, (S113), and whether a manual sound source registration request is generated (S115) is checked.

음원 자동 등록 요청이 발생되면 음원 등록부(110)는 음원저장부(210)에 저장되어 있는 음원들에 대한 음원리스트를 디스플레이부(400)에 표시하고 음원을 선택할 것을 요청하고(S117), 음원이 선택되는지를 검사한다(S119).When a sound source automatic registration request is generated, the sound source registration unit 110 displays a sound source list for the sound sources stored in the sound source storage unit 210 on the display unit 400 and requests to select a sound source (S117) Is selected (S119).

음원이 선택되면 음원 등록부(110)는 음원을 재생하고(S121), 음원 분석부(113)를 활성화하여 재생되는 음원으로부터 음악연주분석 요소의 검출을 개시한다(S123).When the sound source is selected, the sound source registration unit 110 reproduces the sound source (S121) and activates the sound source analysis unit 113 to start the detection of the music performance analysis element from the sound source to be reproduced (S123).

음악연주분석 요소의 검출이 개시되면 음원 등록부(110)는 음계가 검출되는지를 검사한다(S124). 여기서의 음계 검출이란, 음계를 필수적으로 검출하고, 옥타브 및 반음의 검출을 선택적으로 검출하는 것을 의미한다.When the detection of the musical performance analysis element is started, the tone generator registration unit 110 checks whether a tone scale is detected (S124). Here, the detection of a scale means essentially detecting a scale and detecting the detection of octaves and semitones selectively.

음계가 검출되면 음원 등록부(110)는 검출된 음계에 대한 음계정보를 음원 분석정보 생성부(121)에 저장하고, 옥타브정보 및 음계정보를 검출 여부에 따라 선택적으로 저장한다(S125).When the scale is detected, the tone generator 110 stores the scale information about the detected scale in the tone analysis information generator 121, and selectively stores the octave information and scale information according to whether the octave information and scale information are detected (S125).

상기 음계가 검출되면 음원 등록부(110)는 입력되는 음원으로부터 음계별 음표, 즉 음의 길기가 검출되는지를 검사한다(S127).When the scale is detected, the tone generator 110 checks whether a tone corresponding to a tone scale, that is, a tone of the tone, is detected from the input tone source (S127).

음표가 검출되면 음원 등록부(110)는 음표정보를 음원 분석정보 생성부(121)에 저장한다(S129).When a note is detected, the tone generator 110 stores the tone information in the tone generator analysis information generator 121 (S129).

음표정보가 검출되어 저장되면 음원 등록부(110)는 강약 검출부(116)를 통해 검출된 음계의 강약 정보를 검출하고(S131), 검출된 강약정보를 음원 분석정보 생성부(121)에 저장한다(S133).When the note information is detected and stored, the sound source registration unit 110 detects the strength information of the scale detected through the strength detector 116 (S131), and stores the detected strength information in the sound source analysis information generation unit 121 S133).

또한, 음원 등록부(110)는 음원분석부(113)의 악기종류 검출부(119)를 통해 상기 음계를 연주한 악기종류정보가 검출되는지를 검사하고(S135), 악기종류정보가 검출되면 음원 분석정보 생성부(121)에 저장한다(S137).The sound source registration unit 110 checks whether the musical instrument type information that played the musical scale is detected through the musical instrument type detection unit 119 of the sound source analysis unit 113 (S135). If the musical instrument type information is detected, And stores it in the generation unit 121 (S137).

음원 등록부(110)는 음원분석부(113)의 박자 검출부(117)를 통해 상기 음원의 박자가 검출되는지를 검사하고(S139), 박자가 검출되면 해당 박자정보를 음원 분석정보 생성부(121)에 저장한다(S141).The sound source registration unit 110 checks whether the time signature of the sound source is detected through the time signature detection unit 117 of the sound source analysis unit 113. If the time signature is detected, (S141).

상기 음원 등록부(110)는 상기 선택된 음원의 재생이 완료될 때까지 상술한 정보 수집 과정을 반복 수행하여(S143) 음원 분석정보 생성부(121)를 통해 음악연주분석정보를 생성하여 음악연주분석정보 저장부(220)에 저장하여 등록을 완료한다(S145).The sound source registration unit 110 repeats the above-described information collection process until the reproduction of the selected sound source is completed (S143), generates music performance analysis information through the sound source analysis information generation unit 121, And stores it in the storage unit 220 to complete the registration (S145).

반면, 음원 수동 등록 요청이 발생하면(S115), 음원 등록부(110)는 음악연주 요소 수동 입력 수단을 디스플레이부(400)에 표시하여 음악연주분석 요소를 수동 입력할 것을 요청한다(S147).On the other hand, if a manual sound source registration request is generated (S115), the sound source registration unit 110 displays the music performance element manual input means on the display unit 400 to request manual input of the music performance analysis element (S147).

상기 음악연주 요소 수동 입력 수단의 표시 후 음원 등록부(110)는 음악연주 요소 등록 요청이 발생되는지를 검사하고(S149), 음악연주 요소 등록 요청이 발생되면 상기 음악연주 요소 수동 입력 수단을 통해 입력된 음악연주 요소 정보를 음악연주분석정보로서 음악연주분석정보 저장부(230)에 저장한다(S151).After the display of the musical performance element manual input means, the sound source registering unit 110 checks whether a music performance element registration request is generated (S149). If a music performance element registration request is generated, The musical performance element information is stored in the musical performance analysis information storage unit 230 as musical performance analysis information (S151).

도 10은 본 발명에 따른 음악 디스플레이 방법의 음악 디스플레이 방법을 나타낸 흐름도이다.10 is a flowchart illustrating a music display method of the music display method according to the present invention.

도 10을 참조하면, 제어부(100)는 입력부(300) 및 디스플레이부(400)에 표시된 음악 디스플레이 사용자 인터페이스 수단을 통해 음원 재생 요청이 발생되는지를 검사한다(S211).Referring to FIG. 10, the control unit 100 checks whether a sound reproduction request is generated through the music display user interface means displayed on the input unit 300 and the display unit 400 (S211).

음원 재생 요청이 발생되면 제어부(100)는 음원 시각 변환부(130)를 활성화하고, 활성화된 음원 시각 변환부(130)는 음악 디스플레이 사용자 인터페이스 수단을 통해 음원저장부(210)에 저장되어 있는 음원 및 음악연주분석정보 저장부(220)에 등록되어 있는 음원들 중 적어도 하나 이상에 대한 음원리스트를 생성하여 디스플레이부(400)에 표시한 후 재생하고자 하는 음원을 선택할 것을 요청한다(S213).The control unit 100 activates the sound source time conversion unit 130 and the activated sound source time conversion unit 130 receives the sound source playback request from the sound source storage unit 210 through the music display user interface unit, And the music performance analysis information storage unit 220 and displays the list on the display unit 400, and then requests to select a sound source to reproduce (S213).

상기 음원 선택 요청 후 음원 시각 변환부(130)는 임의의 음원이 선택되는지를 검사하고(S215), 임의의 음원이 선택되면 선택된 음원에 대한 음악연주분석정보가 존재하는지를 검색하여(S217), 상기 음원에 대한 음악연주분석정보의 존재 여부, 즉 음원 등록 여부를 판단한다(S219). 만일, 음원 시각 변환부(130)가 음악연주분석정보 저장부(220)에 미리 등록된 등록 음원, 즉 특정 음원의 음악연주분석정보를 직접 선택했다면 상기 과정은 필요하지 않을 것이다.After the sound source selection request, the sound source time conversion unit 130 checks whether an arbitrary sound source is selected (S215). If an arbitrary sound source is selected, it is searched whether there is music performance analysis information on the selected sound source (S217) It is determined whether or not the music performance analysis information for the sound source exists, that is, whether or not the sound source is registered (S219). If the sound source time converting unit 130 has directly selected the music performance analysis information of the registered sound source registered in advance in the music performance analysis information storage unit 220, that is, the specific sound source, the above process will not be necessary.

선택된 음원에 대한 음악연주분석정보가 존재하지 않으면 음원 시각 변환부(130)는 상기 도 9의 음원 등록 과정을 통해 해당 음원에 대한 음악연주분석정보를 생성하여 저장한다(S221).If there is no music performance analysis information for the selected sound source, the sound source time conversion unit 130 generates and stores music performance analysis information for the sound source through the sound source registration process of FIG. 9 (S221).

상기 음악연주분석정보가 존재하면 음원 시각 변환부(130)는 연주분석정보 로딩부(132)를 통해 해당 음악연주분석정보를 로딩하여 음계 구성부(133), 음표 구성부(134), 강약 구성부(135), 박자 구성부(136) 및 악기 구성부(137)로 제공하기 시작한다(S223).If the musical performance analysis information exists, the sound source time conversion unit 130 loads the musical performance analysis information through the performance analysis information loading unit 132, and outputs the musical performance analysis information to the musical performance analysis unit 133, the musical note composition unit 134, (Step S223), and supplies it to the musical instrument unit 135, the tempo unit 136, and the musical instrument unit 137, respectively.

그러면 음원 시각 변환부(130)는 상기 각 구성부들 통해 음악연주 요소들을 시각 정보로 변환하여 출력한다.Then, the sound source time converting unit 130 converts the musical performance elements into the time information through the respective constituent units and outputs the time information.

상기 변환 과정은, 음계정보를 시각정보로 변환하는 음계-색 변환 단계(S225), 음계의 강약정보를 시각정보인 음계의 세기에 따른 밝기정보로 변환하는 강약-밝기 변환 단계(S227), 박자정보 검출단계(S229), 화음정보를 시각정보인 화음 음계 표시 층 정보로 변환하는 화음-음계 표시 층 정보 변환 단계(S231), 악기종류정보를 시각정보인 악기정보로 변환하는 악기-이미지 변환 단계(S233)를 포함한다.The conversion process includes a scale-to-color conversion step S225 for converting the scale information into the time information, a strength-brightness conversion step S227 for converting the intensity information of the scale to brightness information according to the intensity of the scale, An information detection step (S229), a chord-to-scale display layer information conversion step (S231) for converting the chord information into chord musical scale display layer information which is time information, a musical instrument-image conversion step (S233).

상기 음계정보는 음계, 음표 및 옥타브 정보를 포함하며, 상기 음계-색변환 단계는 상기 음계에 대응하는 색 변환 단계, 상기 음계의 음표정보를 색 표시 시간 정보로 변환하는 색 표시 시간 변환 단계, 상기 옥타브 정보를 음계 표시 층 정보로 변환하는 음계 표시 층 변환 단계를 포함한다.  Wherein the scale information includes a scale, a note, and octave information, wherein the scale-color conversion step includes a color conversion step corresponding to the scale, a color display time conversion step of converting the note information of the scale to color display time information, And a scale display layer conversion step of converting octave information into scale display layer information.

상기 음원 시각 변환부(130)는 시각 데이터 생성부(138)를 통해 상기 구성부들을 통해 수집된 정보들에 의해 음악 시각화 데이터를 생성하고(S235), 생성된 음악 시각화 데이터에 따라 음악 디스플레이 수단을 구성하여 디스플레이부(400)에 표시한다(S237).The sound source time converting unit 130 generates music visualizing data based on the information collected through the constituent units via the time data generating unit 138 (S235), and outputs the music visualizing data in accordance with the generated music visualizing data And displays it on the display unit 400 (S237).

상기 제어부(100)는 음원 시각 변환부(130) 및 음악 디스플레이부(140)를 통해 음원의 재생이 종료될 까지(S239) 상기 변환 동작 및 디스플레이 동작을 반복하여 수행한다.The control unit 100 repeatedly performs the conversion operation and the display operation until the reproduction of the sound source is completed through the sound source time conversion unit 130 and the music display unit 140 (S239).

상기 도 10에서는 음악 시각화 데이터를 실시간으로 디스플레이하는 경우를 설명하였으나, 음원 전체에 대해 음악 시각화 데이터가 생성된 후 음악 시각화 데이터에 따라 음악을 디스플레이하도록 구성될 수도 있을 것이다.In FIG. 10, music visualization data is displayed in real time. However, music visualization data may be generated for the whole sound source, and music may be displayed according to music visualization data.

한편, 본 발명은 전술한 전형적인 바람직한 실시예에만 한정되는 것이 아니라 본 발명의 요지를 벗어나지 않는 범위 내에서 여러 가지로 개량, 변경, 대체 또는 부가하여 실시할 수 있는 것임은 당해 기술분야에서 통상의 지식을 가진 자라면 용이하게 이해할 수 있을 것이다. 이러한 개량, 변경, 대체 또는 부가에 의한 실시가 이하의 첨부된 특허청구범위의 범주에 속하는 것이라면 그 기술사상 역시 본 발명에 속하는 것으로 보아야 한다.While the present invention has been described with reference to exemplary embodiments, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, is intended to cover various modifications and equivalent arrangements included within the spirit and scope of the appended claims. It will be easily understood. It is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, it is intended to cover various modifications within the scope of the appended claims.

100: 제어부 110: 음원 등록부
111: 음원 선택부 112: 음원 로딩부
113: 음원 분석부 114: 음계 검출부
115: 음표 검출부 116: 강약 검출부
117: 박자 검출부 119: 악기종류 검출부
120: 화음 검출부 121: 음원분석정보 생성부
130: 음원 시각 변환부 131: 음원 선택부
132: 연주분석정보 로딩부 133: 음계 구성부
134: 음표 구성부 135: 강약 구성부
136: 박자 구성부 137: 악기 구성부
138: 시각화 데이터 생성부
140: 음악 디스플레이부 200: 저장부
210: 음원저장부 220: 음악연주분석정보 저장부
230: 음계 분석 기준정보 저장부 240: 화음 분석 기준정보 저장부
250: 악기 분석 기준정보 저장부 300: 입력부
400: 디스플레이부 500: 통신부
510: 원거리 통신부 520: 근거리 통신부100: control unit 110: sound source registration unit
111: sound source selection unit 112: sound source loading unit
113: Sound source analysis unit 114: Scale detection unit
115: a musical note detecting section 116:
117: beat detection unit 119: musical instrument type detection unit
120: Chord detection unit 121: Sound source analysis information generation unit
130: sound source time conversion unit 131: sound source selection unit
132: performance analysis information loading unit 133:
134: note composing part 135: strength composing part
136: beat component 137: musical instrument component
138: Visualization data generator
140: music display unit 200: storage unit
210: Sound source storage unit 220: Music performance analysis information storage unit
230: Scale analysis reference information storage unit 240: Chord analysis reference information storage unit
250: musical instrument analysis reference information storage unit 300: input unit
400: display unit 500: communication unit
510: remote communication unit 520: local communication unit

Claims (12)

적어도 하나 이상의 음원에 대한 음계, 음표 및 강약 정보를 포함하는 음악연주분석정보를 저장하는 음악연주분석정보 저장부를 포함하는 저장부;
음악 시각화 데이터에 따라 음계별로 각각의 색 표시 시간 및 밝기를 가지는 색을 디스플레이하는 디스플레이부; 및
음악 재생 요청 발생 시 선택된 음원에 대응하는 음악연주분석정보를 로드하고, 음악연주분석정보의 음계, 음계별 음표정보 및 강약 정보에 근거하여 상기 음계를 대응하는 색으로 변환하고, 상기 음표정보에 대응하여 해당 색의 색 표시 시간을 결정하며, 상기 강약정보에 의해 상기 색의 밝기 정도를 결정한 후 상기 음계별 색정보, 각 색에 대한 색 표시 시간 정보, 각 색에 대한 색 밝기 정보를 포함하는 음악 시각화 데이터를 생성하고, 상기 디스플레이부를 통해 상기 음악 시각화 데이터에 따라 음악을 디스플레이하는 제어부를 포함하되,
상기 저장부는,
적어도 하나 이상의 음원을 저장하는 음원저장부;
음계별 특징에 따른 음계별 음계분석기준정보를 저장하는 음계분석기준정보 저장부; 및
화음별 특징에 따른 화음별 화음분석기준정보를 저장하고 있는 화음분석기준정보 저장부를 포함하고,
상기 제어부는,
음원 등록 요청 발생 시 등록할 음원을 선택받고, 상기 음계분석기준정보 및 화음분석기준정보에 근거하여 선택된 음원으로부터 음계, 음표정보, 강약정보 및 화음정보를 포함하는 상기 음악연주분석정보를 획득하여 상기 저장부에 저장하여 등록하는 음원 등록부;
상기 음악 재생 요청 발생 시 상기 화음정보에 대응하는 복수의 음계 표시층 정보를 더 포함하는 음악 시각화 데이터를 생성하여 출력하는 음원 시각 변환부; 및
상기 시각화 데이터를 상기 디스플레이부를 통해 출력하는 음악 디스플레이부를 포함하는 것을 특징으로 하는 음악 디스플레이 장치.
A music performance analysis information storage unit for storing music performance analysis information including scale, note, and intensity information for at least one sound source;
A display unit for displaying a color having respective color display time and brightness for each musical scale according to music visualization data; And
The musical performance analysis information corresponding to the selected sound source is loaded when the music reproduction request is generated, and the musical performance analysis information is converted into the corresponding color based on the scale of the musical performance analysis information, the note information of each scale and the intensity information, Determines the color display time of the corresponding color, determines the degree of brightness of the color based on the intensity information, and stores the color information of each color, the color display time information of each color, and the color brightness information of each color And a control unit for generating visualization data and displaying music according to the music visualization data through the display unit,
Wherein,
A sound source storage unit for storing at least one sound source;
A musical scale analysis reference information storage unit for storing musical scale analysis reference information for each musical scale according to characteristics of each musical scale; And
And a chord analysis reference information storage unit for storing chord analysis reference information for each chord in accordance with the characteristics of each chord,
Wherein,
The musical performance analysis information including scales, note information, intensity information, and chord information from a selected sound source on the basis of the musical scale analysis reference information and the chord analysis reference information, A sound source registering unit for storing and registering the sound source in a storage unit;
A sound source time conversion unit for generating and outputting music visualization data further including a plurality of scale display layer information corresponding to the chord information when the music reproduction request is generated; And
And a music display unit for outputting the visualization data through the display unit.
삭제delete 제1항에 있어서,
상기 저장부는,
악기별 음 특징 정보를 저장하는 악기 분석 기준정보를 저장하는 악기 분석 기준정보 저장부를 더 포함하고,
상기 음원 등록부는,
사용자로부터 상기 음원저장부에 저장된 음원들 중 하나를 선택받아 출력하는 음원 선택부;
상기 선택된 음원을 상기 음원저장부로부터 로딩하여 출력하는 음원 로딩부;
상기 음계분석 기준정보에 근거하여 로딩된 음원으로부터 음계를 검출하고 음계정보를 출력하는 음계 검출부;
상기 검출된 음계의 음표를 검출하고 음표정보를 출력하는 음표 검출부;
상기 검출된 음계의 강약을 검출하고 강약정보를 출력하는 강약 검출부;
상기 화음분석 기준정보에 근거하여 상기 로딩된 음원으로부터 화음을 검출하고 화음정보를 출력하는 화음 검출부;
상기 악기 분석 기준정보에 근거하여 상기 로딩된 음원을 연주한 악기의 종류를 검출하고, 악기종류 정보를 출력하는 악기종류 검출부; 및
상기 음계정보, 음표정보, 강약정보, 화음정보 및 악기종류 정보를 포함하는 음악연주분석정보를 생성하여 출력하는 음원분석정보 생성부를 포함하되,
상기 음원 시각 변환부는 악기종류 정보에 대응하는 적어도 하나 이상의 악기정보를 포함하는 음악 시각화 데이터를 생성하는 것을 특징으로 하는 음악 디스플레이 장치.
The method according to claim 1,
Wherein,
And a musical instrument analysis reference information storage unit for storing musical instrument analysis reference information for storing musical instrument sound characteristic information,
Wherein the sound source registration unit comprises:
A sound source selection unit for selecting and outputting one of the sound sources stored in the sound source storage unit from a user;
A sound source loading unit loading the selected sound source from the sound source storage unit and outputting the loaded sound source;
A scale detection unit for detecting a scale from the loaded sound source based on the scale analysis reference information and outputting scale information;
A note detection unit for detecting the note of the detected scale and outputting note information;
A strength detector for detecting the strength of the detected scale and outputting intensity information;
A chord detection unit for detecting a chord from the loaded sound source based on the chord analysis reference information and outputting chord information;
A musical instrument type detection unit for detecting the type of musical instrument that played the loaded sound source based on the musical instrument analysis reference information and outputting musical instrument type information; And
And a sound source analysis information generation unit for generating and outputting music performance analysis information including the scale information, note information, intensity information, chord information, and instrument type information,
Wherein the sound source time conversion unit generates music visualization data including at least one musical instrument information corresponding to musical instrument type information.
제3항에 있어서,
상기 음원 등록부의 음계 검출부는,
상기 검출된 음계의 옥타브를 더 검출하고, 검출된 옥타브 정보를 더 출력하고,
상기 음원 시각 변환부는,
상기 옥타브 정보를 옥타브별로 정의된 서로 다른 채도 정보 및 서로 다른 음계 표시 위치를 가지는 음계 표시 위치 정보 중 하나 이상을 상기 음악 시각화 데이터에 더 포함하여 출력하는 것을 특징으로 하는 음악 디스플레이 장치.
The method of claim 3,
Wherein the scale detection unit of the sound source registration unit comprises:
Further detects an octave of the detected musical scale, further outputs the detected octave information,
Wherein the sound source time-
Wherein the musical visualization data further includes at least one of musical display position information having different chroma information defined for each octave and different musical scale display positions of the octave information.
제3항에 있어서,
상기 음원 등록부는,
상기 음계 검출부 및 음표 검출부로부터 출력되는 음계정보 및 음표정보에 의해 상기 음원의 박자를 검출하고, 검출된 박자에 대한 박자정보를 출력하는 박자 검출부를 더 포함하고,
상기 음원 시각 변환부는,
상기 박자정보를 상기 음악 시각화 데이터에 더 포함하여 출력하는 것을 특징으로 하는 음악 디스플레이 장치.
The method of claim 3,
Wherein the sound source registration unit comprises:
Further comprising a beat detecting section for detecting the beat of the sound source based on the scale information and note information output from the scale detecting section and the note detecting section and for outputting beat information for the detected beat,
Wherein the sound source time-
And further outputs the time signature information to the music visualization data.
제5항에 있어서,
상기 악기정보는 상기 음원을 연주한 악기의 이미지 및 아이콘 중 하나 이상이고, 상기 박자정보는 텍스트 데이터인 아라비아 숫자 및 해당 박자정보를 포함하는 이미지 중 하나인 것을 특징으로 하는 음악 디스플레이 장치.
6. The method of claim 5,
Wherein the musical instrument information is at least one of an image and an icon of the musical instrument that played the sound source, and the beat information is one of Arabic numerals, which are text data, and an image including the beat information.
제1항에 있어서,
상기 디스플레이부는,
음계별로 서로 다른 색을 표시하고, 상기 색 표시 시간에 따라 해당 색을 표시하고, 상기 밝기 정보에 따라 밝기를 조절할 수 있는 적어도 하나 이상의 발광다이오드로 구성되는 것을 특징으로 하는 음악 디스플레이 장치.
The method according to claim 1,
The display unit includes:
And at least one light emitting diode capable of displaying different colors for each tone scale, displaying a corresponding color according to the color display time, and adjusting the brightness according to the brightness information.
제어부가 음악 재생 요청 발생 시 선택된 음원에 대응하는 음악연주분석정보를 로드하는 음악연주분석정보 획득 과정;
상기 제어부가 상기 로드된 음악연주분석정보의 음계, 음계별 음표정보 및 강약 정보에 근거하여 상기 음계를 대응하는 색으로 변환하고, 상기 음표정보에 대응하여 해당 색의 색 표시 시간을 결정하며, 상기 강약정보에 의해 상기 색의 밝기 정도를 결정한 후 상기 음계별 색정보, 각 색에 대한 색 표시 시간 정보, 각 색에 대한 밝기 정보를 포함하는 음악 시각화 데이터를 생성하는 음악 시각화 데이터 변환 과정; 및
상기 제어부가 디스플레이부를 통해 상기 생성된 음악 시각화 데이터를 출력하는 음악 시각화 데이터 출력 과정을 포함하되,
상기 제어부가 음원 등록 요청 발생 시 등록할 음원을 선택받고, 음계분석기준정보 및 화음분석기준정보에 근거하여 선택된 음원으로부터 음계, 음표정보, 강약정보 및 화음정보를 포함하는 상기 음악연주분석정보를 획득하여 저장부에 저장하여 등록하는 음원 등록 과정을 더 포함하는 것을 특징으로 하는 음악 디스플레이 방법.
A music performance analysis information acquisition step of loading music performance analysis information corresponding to a selected sound source when a control section generates a music reproduction request;
Wherein the control unit converts the musical scale to a corresponding color based on the scale of the loaded music performance analysis information, the note information of each scale, and the intensity information, determines a color display time of the corresponding color in accordance with the note information, A music visualization data conversion step of generating music visualization data including color information for each scale, color display time information for each color, and brightness information for each color after determining the degree of brightness of the color by intensity information; And
And outputting the generated music visualization data through the display unit by the control unit,
The control unit selects the sound source to be registered when the sound source registration request is generated, and obtains the music performance analysis information including the musical scale, note information, intensity information, and chord information from the selected sound source based on the scale analysis reference information and the chord analysis reference information And registering the music data in the storage unit and registering the music data in the storage unit.
삭제delete 제8항에 있어서,
상기 음원 등록 과정은,
사용자로부터 음원저장부에 저장된 음원들 중 하나를 선택받아 출력하는 음원 선택 단계;
상기 선택된 음원을 상기 음원저장부로부터 로딩하여 출력하는 음원 로딩 단계;
상기 음계분석 기준정보에 근거하여 로딩된 음원으로부터 음계를 검출하고 음계정보를 출력하는 음계 검출 단계;
상기 검출된 음계의 음표를 검출하고 음표정보를 출력하는 음표 검출 단계;
상기 검출된 음계의 강약을 검출하고 강약정보를 출력하는 강약 검출 단계;
상기 화음분석 기준정보에 근거하여 상기 로딩된 음원으로부터 화음을 검출하고 검출된 화음에 대한 화음정보를 출력하는 화음 검출 단계;
악기 분석 기준정보에 근거하여 상기 로딩된 음원을 연주한 악기의 종류를 검출하고, 악기종류 정보를 출력하는 악기종류 검출 단계; 및
상기 음계정보, 음표정보, 강약정보, 화음정보 및 악기종류 정보를 포함하는 음악연주분석정보를 생성하여 음악연주분석정보 저장부에 저장하여 등록하는 등록 단계를 포함하고,
상기 음악 시각화 데이터 변환 과정은,
상기 제어부가 상기 로드된 음악연주분석정보의 음계, 음계별 음표정보 및 강약 정보에 근거하여 상기 음계를 대응하는 색으로 변환하는 음계 색변환 단계;
상기 제어부가 상기 음표정보에 대응하여 해당 색의 색 표시 시간을 결정하는 음표 색 표시 시간 변환 단계;
상기 제어부가 상기 강약정보에 의해 상기 색의 밝기 정도를 결정하는 강약 밝기 변환 단계; 및
상기 악기종류 정보에 대응하는 적어도 하나 이상의 악기정보를 포함하는 악기정보 삽입단계를 포함하는 것을 특징으로 하는 음악 디스플레이 방법.
9. The method of claim 8,
The sound source registration process includes:
A sound source selection step of selecting one of the sound sources stored in the sound source storage unit from the user and outputting the selected sound source;
A sound source loading step of loading the selected sound source from the sound source storage unit and outputting the loaded sound source;
A musical tone detection step of detecting a musical scale from a loaded sound source based on the musical scale analysis reference information and outputting scale information;
A musical note detecting step of detecting the musical note of the detected scale and outputting the note information;
A strength detection step of detecting the strength of the detected scale and outputting intensity information;
Detecting a chord from the loaded sound source based on the chord analysis reference information and outputting chord information for the detected chord;
A musical instrument type detection step of detecting the type of musical instrument that played the loaded sound source based on the musical instrument analysis reference information and outputting musical instrument type information; And
And a registration step of generating and recording musical performance analysis information including musical performance information, musical score information, intensity information, chord information, and musical instrument type information in a musical performance analysis information storage unit,
The music visualization data conversion process includes:
A musical tone color converting step of converting the musical scale into a corresponding color based on a musical scale of the loaded musical performance analysis information, musical note information of each musical scale, and intensity information;
A musical notation color display time conversion step of the control unit determining a color display time of the corresponding color corresponding to the note information;
A densification brightness converting step of the controller determining the degree of brightness of the color by the intensity information; And
Wherein the musical instrument information includes at least one musical instrument information corresponding to the musical instrument type information.
제10항에 있어서,
상기 음계 검출 단계는,
상기 음계분석 기준정보에 근거하여 로딩된 음원으로부터 음계를 검출하고 음계정보를 출력하는 음계정보 검출 단계; 및
상기 검출된 음계의 옥타브를 검출하고, 검출된 옥타브에 대한 옥타브 정보를 출력하는 옥타브 검출 단계를 포함하고,
상기 음악 시각화 데이터 변환 과정은,
상기 옥타브 정보를 서로 다르게 정의된 채도 정보 및 옥타브별로 서로 다른 음계 표시 위치를 가지는 음계 표시 위치 정보 중 하나 이상으로 변환하는 옥타브 음계 표시 위치 변환 단계를 더 포함하되,
상기 옥타브 음계 표시 위치 변환 단계에서 서로 다르게 정의된 채도 정보 및 옥타브별로 서로 다르게 지정된 음계 표시 위치 정보를 상기 음악 시각화 데이터에 더 포함시키는 것을 특징으로 하는 음악 디스플레이 방법.
11. The method of claim 10,
Wherein the musical tone detection step comprises:
A scale information detecting step of detecting a scale from the loaded sound source based on the scale analysis reference information and outputting scale information; And
And an octave detecting step of detecting an octave of the detected musical scale and outputting octave information on the detected octave,
The music visualization data conversion process includes:
And converting the octave information into at least one of saturation display information having differently defined saturation information and different scaled display positions for each octave,
Wherein the musical visualization data further includes musical display position information differently specified for each of the octave and the chroma information defined differently in the octave scale display position conversion step.
제10항에 있어서,
상기 음원 등록 과정은,
음계 검출부 및 음표 검출부로부터 출력되는 음계정보 및 음표정보에 의해 상기 음원의 박자를 검출하고, 검출된 박자에 대한 박자정보를 출력하는 박자 검출 단계를 더 포함하고,
상기 음악 시각화 데이터 변환 과정은,
상기 박자정보를 상기 음악 시각화 데이터에 더 포함하여 출력하는 것을 특징으로 하는 음악 디스플레이 방법.11. The method of claim 10,
The sound source registration process includes:
Further comprising a beat detecting step of detecting beat of the sound source by the scale information and note information output from the scale detecting unit and the note detecting unit and outputting beat information about the detected beat,
The music visualization data conversion process includes:
Wherein the musical visualization data further includes the time signature information.
KR1020150161053A 2015-11-17 2015-11-17 Apparatus and method for displaying music KR101743958B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150161053A KR101743958B1 (en) 2015-11-17 2015-11-17 Apparatus and method for displaying music

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150161053A KR101743958B1 (en) 2015-11-17 2015-11-17 Apparatus and method for displaying music

Publications (3)

Publication Number Publication Date
KR20170057671A KR20170057671A (en) 2017-05-25
KR101743958B1 true KR101743958B1 (en) 2017-06-08
KR101743958B9 KR101743958B9 (en) 2021-09-14

Family

ID=59050700

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150161053A KR101743958B1 (en) 2015-11-17 2015-11-17 Apparatus and method for displaying music

Country Status (1)

Country Link
KR (1) KR101743958B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190023301A (en) 2017-08-28 2019-03-08 (주)싸이버텍홀딩스 Authentication system using music display and method thereof
KR20220109712A (en) * 2021-01-29 2022-08-05 조관희 Method for generating image pattern based on music and system operating thereof
KR20230109302A (en) * 2022-01-13 2023-07-20 주식회사 킨트 System for Music matching and method therefor

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180004040A (en) * 2017-12-11 2018-01-10 전대연 Smart method of Sound-Color expression and by use of RGB-Color code, music-painting app system
KR102414970B1 (en) * 2020-06-29 2022-07-05 (주)주스 Harmony scoring device and method

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000235388A (en) * 1999-02-15 2000-08-29 Nippon Telegr & Teleph Corp <Ntt> Method and device for visualizing music, and recording medium where music visualizing program is recorded
JP2008233576A (en) * 2007-03-22 2008-10-02 Hyphenation:Kk Method for making musical piece and musical score into video and image

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000235388A (en) * 1999-02-15 2000-08-29 Nippon Telegr & Teleph Corp <Ntt> Method and device for visualizing music, and recording medium where music visualizing program is recorded
JP2008233576A (en) * 2007-03-22 2008-10-02 Hyphenation:Kk Method for making musical piece and musical score into video and image

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190023301A (en) 2017-08-28 2019-03-08 (주)싸이버텍홀딩스 Authentication system using music display and method thereof
KR20220109712A (en) * 2021-01-29 2022-08-05 조관희 Method for generating image pattern based on music and system operating thereof
KR102579046B1 (en) * 2021-01-29 2023-09-15 조관희 Method for generating image pattern based on music and system operating thereof
KR20230109302A (en) * 2022-01-13 2023-07-20 주식회사 킨트 System for Music matching and method therefor
KR102651201B1 (en) 2022-01-13 2024-03-26 주식회사 킨트 System for Music matching and method therefor

Also Published As

Publication number Publication date
KR101743958B9 (en) 2021-09-14
KR20170057671A (en) 2017-05-25

Similar Documents

Publication Publication Date Title
KR101743958B1 (en) Apparatus and method for displaying music
US7390958B2 (en) Method for teaching music
US6515210B2 (en) Musical score displaying apparatus and method
US7888579B2 (en) Electronic musical instrument and performance control program systems and methods
Freedman Teaching music through composition: A curriculum using technology
US20110283867A1 (en) Method, system and apparatus for instructing a keyboardist
US11341944B2 (en) Playback, recording, and analysis of music scales via software configuration
US10403250B2 (en) Interactive performance direction for a simultaneous multi-tone instrument
Hayes et al. Imposing a networked vibrotactile communication system for improvisational suggestion
KR20170138135A (en) Method of helping piano performance and based on augemented reality and apparatus performing the same
Trujano et al. ARPiano efficient music learning using augmented reality
JP5789915B2 (en) Music score display apparatus and program for realizing music score display method
CN113160655A (en) Musical instrument teaching system, method and readable storage medium
CN111667554B (en) Control method of information processing apparatus, electronic device, and performance data display system
JP6944366B2 (en) Karaoke equipment
JP2019061006A (en) Performance practice support device
JP2018146716A (en) Training device, training program, and training method
KR100668793B1 (en) Karaoke system having function of digital piano
JP2022010066A (en) Information processing device, information processing method, and program
CN116057622A (en) Information processing method, information processing program, and information processing apparatus
JP2020038281A (en) Electronic musical instrument
FR2643490A1 (en) Method for linear encoding of musical notes by computers
DK201100075U4 (en) Polyphonic Voice Recorder
JP2006064746A (en) Musical information specifying device, and program for realizing musical information specifying method
Nam DESIGNING AND EVALUATING A COMPOSITION SOFTWARE INTERFACE WITH VIBROTACTILE NOTATION SYSTEM

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
G170 Publication of correction