WO2019194345A1 - Image-based sheet music generation apparatus and sheet music-based image generation apparatus - Google Patents

Image-based sheet music generation apparatus and sheet music-based image generation apparatus Download PDF

Info

Publication number
WO2019194345A1
WO2019194345A1 PCT/KR2018/005081 KR2018005081W WO2019194345A1 WO 2019194345 A1 WO2019194345 A1 WO 2019194345A1 KR 2018005081 W KR2018005081 W KR 2018005081W WO 2019194345 A1 WO2019194345 A1 WO 2019194345A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
pixel
sheet music
processing module
color
Prior art date
Application number
PCT/KR2018/005081
Other languages
French (fr)
Korean (ko)
Inventor
심재훈
Original Assignee
심재훈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 심재훈 filed Critical 심재훈
Publication of WO2019194345A1 publication Critical patent/WO2019194345A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10GREPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
    • G10G1/00Means for the representation of music
    • G10G1/02Chord or note indicators, fixed or adjustable, for keyboard of fingerboards
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/005Musical accompaniment, i.e. complete instrumental rhythm synthesis added to a performed melody, e.g. as output by drum machines

Definitions

  • an image-based sheet music generating apparatus and a sheet music-based image generating apparatus generating a sheet music corresponding to the image based on an image such as a picture, a picture, a video, or the like, or generating a corresponding image based on the sheet music. It is about.
  • Republic of Korea Patent No. 10-875 name: music composition system using a mobile terminal
  • Republic of Korea Patent No. 10-1807754 name: self-producing server and method
  • Korean Patent Publication No. 10-2017-137526 name: composition method using a composition program
  • an object of the present invention is to scan a pixel constituting an image according to a preset image scan rule, read the color of each pixel, and then read the read color in an electronic device having an operating system or the like.
  • Computational module that can assign the color number corresponding to the pixel for each pixel by comparing with the stored color number for each color ",” Read each color number after reading the color number corresponding to each pixel.
  • " Computational module that can set the scale corresponding to the corresponding pixel for each pixel by comparing with the stored scale for each color number "," Reads the scale corresponding to each pixel, and creates the basic note corresponding to each scale.
  • a time signature is given to the basic note to generate a notation note, and each generated notation note is arranged on the stave in accordance with the scanning order of each pixel.
  • Computer module capable of generating a musical score corresponding to the image.
  • Another object of the present invention is to compare the musical scale of each musical score constituting the musical score with a preset color number for each musical score in an electronic device having an operating system or the like.
  • Computer module for assigning color numbers to " ", " Reading color numbers corresponding to respective music scores, and comparing the read color numbers with the color information for each color number previously stored, for each musical score side color number.
  • a computing module capable of generating pixels having a color corresponding to the " " " " " preset image pixel composition rule, and then generating or arranging pixels according to the read image pixel composition rule, Computer module that can generate images.
  • the present invention is installed in an electronic device having an operating system, and outputs a guide frame for operating an image-based sheet music generating service through the electronic device to operate a sheet music generating service.
  • the generating apparatus "each pixel constituting the image is scanned according to a preset image scanning rule, and the color of each pixel is read, and then the read color is compared with the stored color number for each color.
  • a color number processing module for each image pixel for assigning a color number corresponding to the corresponding pixel; After reading the color number corresponding to each pixel, the color processing module for each image pixel for setting the scale corresponding to the corresponding pixel for each pixel by comparing the read color numbers with the previously stored scale for each color number.
  • an image correspondence notation processing module for arranging notation notation in the stave notation according to the scanning order of each pixel to generate the notation corresponding to the image.
  • Computational module that can set the scale corresponding to the corresponding pixel for each pixel compared with the scale for each color number "," Read the scale corresponding to each pixel, generate the basic note corresponding to each scale, In accordance with the set time setting rule, a time signature is given to the basic note to generate a sheet music note, and each generated sheet music note is arranged in a stave in the scanning order of each pixel.
  • Corresponding computing module that can produce a score for a "can be provided and the like disposed systematically. Therefore, under the implementation environment of the present invention, the user side can automatically generate / acquire the score corresponding to the self-retaining image (eg, a picture, an image, a picture, etc.) by a very simple procedure of simply operating the electronic device. . As a result, it is possible to maximize the additional utilization of the image by linking the image with the composition without any difficulty.
  • the color number corresponding to the musical score note is compared to the musical score for each musical score by comparing the musical scale of each musical score constituting the musical score with the preset color numbers.
  • Computer module that can be assigned to ",” Read the color number corresponding to each sheet music note, and compares the read color number with the color information for each stored color number, corresponding to the color number of each sheet music note
  • Computation module capable of generating pixels having a color ",” Read image pixel composition rules that have been set, and then generate or arrange pixels according to the read image pixel composition rules to generate an image corresponding to the score. Can be provided in a systematic manner.
  • the user side can automatically generate / acquire an image corresponding to the self-retaining music score by a very simple procedure of simply operating the electronic device. Eventually, without any difficulty, by linking the sheet music with the image, it is possible to further maximize the additional utilization of the sheet music.
  • FIG. 1 is an exemplary diagram conceptually showing a detailed configuration of an image-based sheet music generating apparatus according to the present invention.
  • FIG. 2 is an exemplary view conceptually showing a posting pattern of a guide frame according to the present invention.
  • 3 to 5 are exemplary diagrams conceptually showing a detailed functional procedure of the image-based sheet music generating apparatus according to the present invention.
  • FIG. 6 is an exemplary diagram conceptually showing a detailed configuration of a music score-based image generating apparatus according to another embodiment of the present invention.
  • FIG. 7 is an exemplary view conceptually illustrating a posting pattern of a guide frame according to another exemplary embodiment of the present invention.
  • FIGS. 8 to 10 are exemplary diagrams conceptually showing a detailed functional procedure of the music score-based image generating apparatus according to another embodiment of the present invention.
  • the image-based music score generating apparatus 100 is an operation information processing installed in an electronic device 10 (eg, a smartphone, a tablet PC, etc.) having an operating system 11.
  • the operation information processing module 102 stores and manages various operation information required for the image-based music score generation service.
  • the various operation information is, for example, the registration information of the operating system 11, the registration information of the function support server 30, the program / source information for the formation / maintenance of the communication session, the program for the process of each computer module / Source information, text / image / image / program information for generating / publishing / operating the guide frame 112, and the like.
  • the operation information processing module 102 side serves to reflect the function support information to the functions of each computer module side, thereby assisting a series of image-based sheet music generation service procedures according to the present invention to proceed normally without any difficulty.
  • the user performs a computational operation based on the operating system 11 at the user side who wants to perform the image-based music score generation service according to the present invention. For example, when a series of device call-up events occur, the guide frame 112 as shown in FIG. 2 is generated by utilizing the operation information previously stored in the operation information processing module 102. . Then, by outputting / posting the generated guide frame 112 through the electronic device 10, a series of image-based sheet music generation service operation procedure according to the present invention assists to proceed normally without any difficulty.
  • the pixel number processing module 104 for each image pixel stores each pixel P constituting the image I in the image scan rule storage module 109. Scanning is performed according to a preset image scan rule, and the procedure of reading the color of each pixel P is performed.
  • the image scanning rule is a scan rule that says “scan the image from the pixel arranged at the top to the pixel arranged at the bottom", “Scan the image from the pixel arranged at the bottom to the pixel arranged at the top”.
  • a scanning rule called “scan an image from a pixel arranged on the left to a pixel arranged on the right”, and a scan rule called “scan an image from a pixel arranged on the right to a pixel arranged on the left”.
  • At least one of the scan rule “scan the image while forming a parabolic scan line”
  • the scan rule “scan the image while forming a circular spring-shaped scan line”.
  • the color number processing module 104 for each image pixel assigns a color number corresponding to the pixel P to each pixel P. (See FIG. 3).
  • the color number is assigned to each pixel P by comparing the color of each read-out pixel P with the color number for each color previously stored in the color number storage module 108 for each color.
  • the color number may be any one of a hex (HEX) color code or a three primary color value.
  • the scale processing module 105 for each image pixel corresponds to each pixel P.
  • the scale processing module 105 for each image pixel corresponds to each pixel P.
  • FIG. Read the color number. Thereafter, each read color number is compared with the color number scale previously stored in the color storage scale 110 for each color number, and sets a scale corresponding to the pixel P for each pixel P. It will play a role.
  • the image correspondence notation processing module 106 side is assigned to the basic note 1 according to the time setting rule previously set in the time setting rule storage module.
  • the procedure for generating the music score 2 is carried out (see Fig. 5).
  • the image correspondence notation processing module 106 side according to the time signature setting rule "to give a beat to the basic note 1 according to the continuous arrangement state of the basic note 1 which has the same scale," By giving a beat to the basic note 1, the sheet music note 2 is generated (see Fig. 5).
  • the six basic notes (1) when six basic notes (1) having the same scale called "two octaves" are arranged in succession, the six basic notes (1) have a time signature of four beats (i.e., It is subjected to a procedure of converting / generating to one sheet music note (2) having a whole note format.
  • the three basic notes (1) when three basic notes (1) having the same scale called "three-octave me" are arranged in succession, the three basic notes (1) have a length of one and a half beats (that is, Undergoes a procedure of converting / creating to a single note (2).
  • one of the basic notes (1) has a half-note half length (that is, a thirty-second note). Undergoes a procedure of converting / creating to a single note (2).
  • the image correspondence notation processing module 106 side in addition to the time signature setting rule described above, it is also possible to give the beat to the basic note (1) in accordance with another time setting rule, to generate the sheet music note (2) (See Figure 5).
  • another time setting rule is, "When the pixels P filled with the same color are not arranged in succession, and thus the scan time of the pixel P is shortened, the basic note corresponding to the pixel P (1) ) Gives a fast beat, and the pixels P filled with the same color are arranged in succession, so that when the scanning time of the pixels P becomes long, the basic note 1 corresponding to the corresponding pixels P is long. Give it a slow beat.
  • the pixels P filled with the same color are not arranged in succession.
  • a fast time signature is given to the basic note 1 corresponding to the pixel P.
  • the basic note 1 undergoes a procedure of being converted / generated into one sheet music note 2 having a short length (e.g., half beat, half beat, etc.).
  • the pixels P filled with the same color are arranged in succession, when the scan time of the pixels P is long, a plurality of basic notes 1 corresponding to the pixels P have a slow beat. Is given. As a result, the plurality of basic notes 1 undergo a procedure of being converted / generated into one sheet music note 2 having a long length (for example, two beats, three beats, four beats, etc.).
  • the image correspondence notation processing module 106 side arranges the generated notation notation 2 in the stave report 3 according to the scanning order (up-down, left-right, etc.) of each pixel P described above.
  • the procedure for generating the music score M corresponding to the image I is performed (see FIG. 5).
  • the sheet music genre processing module 107 communicates with the image corresponding sheet music processing module 106.
  • the music score genre processing module 107 when a user message for determining the genre of music score is input through the guide frame 112, the user message may be transmitted to the image corresponding music score processing module 106.
  • the sheet music M generated by the image corresponding sheet music processing module 106 is induced to have a genre characteristic (eg, jazz, ballad, shake, trot, lock, etc.) corresponding to the user message. .
  • each pixel P constituting the image I is scanned in accordance with a preset image scanning rule
  • a computer module that can assign a color number corresponding to the pixel P for each pixel P by comparing the read color with the color number for each color previously stored. After reading the color number corresponding to each pixel P, comparing the read color numbers with the previously stored scales for each color number and setting the scale corresponding to the corresponding pixel for each pixel P.
  • Computer module " read the scale corresponding to each pixel P, generate a basic note 1 corresponding to each scale, and then, according to a preset time setting rule, the basic note 1 ) To create a musical score (2), and scan each generated musical score for each pixel (P) Arranged on the stave report 3 in order, the computer module which can generate the music score M corresponding to the said image I ", etc. can be systematically arranged and provided. Therefore, under the implementation environment of the present invention, on the user side, only a very simple procedure of simply operating the electronic device 10 can automatically generate a very colorful sheet music corresponding to an image (eg, a picture, an image, a picture, etc.) owned by the user. Can be created / obtained. As a result, it is possible to maximize the additional utilization of the image (I) by linking the image (I) with the composition without any difficulty.
  • an image eg, a picture, an image, a picture, etc.
  • the music score-based image generating apparatus 200 is located in an electronic device 40 (eg, a smartphone, a tablet PC, etc.) having an operating system 41.
  • the genre processing module 207, the color number storage module 208 for each scale, the image pixel configuration rule storage module 209, and the color information storage module 210 for each color number may take a close combination.
  • the operation information processing module 202 may play a role of storing / managing various operation information required for the music score-based image generation service.
  • the various operation information for example, the registration information of the operating system 11, the registration information of the function support server 30, the program / source information for the formation / maintenance of the communication session, for the progress of the process of each computer module It includes program / source information and text / image / image / program information for generating / posting / operating the guide frame 211.
  • the function support server 60 via the communication network 50, it is possible to receive the function support information including the update information of each computer module.
  • a series of sheet music based image generation service procedure assists to proceed normally without any difficulty.
  • the guide frame operation module 203 side immediately, By using the operation information previously stored in the operation information processing module 202, generates a guide frame 211 as shown in Figure 7, and outputs the generated guide frame 211 through the electronic device 40 Can publish For this reason, the guide frame operation module 203 side assists the operation procedure of a series of sheet music-based image generation services according to the present invention to be normally performed without any difficulty.
  • the color number processing module 204 for the sheet music note stores the scale of each sheet music note 2 constituting the music score M on the color number storage module for each scale. It is compared with the color number for each scale previously set in (208). Thereafter, each sheet music note 2 serves to give a color number corresponding to the sheet music note 2.
  • the image pixel processing module 205 for each sheet music note has been assigned to each sheet music note 2 as shown in FIG. Read the corresponding color number. Thereafter, the read-out color number is compared with the color information for each color number previously stored in the color information storage module 210 for each color number, and through this, "the color corresponding to the color number for each music note 2 side is obtained. Branch serves to generate the pixel P ".
  • the sheet music correspondence image processing module 206 has an image.
  • the image pixel composition rule previously set in the pixel composition rule storage module 209 is read. Thereafter, according to the read image pixel configuration rule, each pixel P is generated or arranged to generate an image I corresponding to the score.
  • the sheet music correspondence image processing module 206 side of the present invention has a rule of "increase the number of pixels P corresponding to the sheet music note 2 of a slow beat, and increase the pixel section to image". According to the included image pixel composition rule, pixels are generated or arranged (see FIG. 10).
  • the number of pixels P corresponding to the sheet music note 2, which is in the form of a triple beat point half note (i.e. in the form of a slow beat), is further increased in number.
  • the pixel section being imaged increases.
  • the pixel P corresponding to the sheet music note 2 which is in the form of a thirty-second note of the half beater of the half-halves (ie, in the form of a fast beat), has a pixel section to be imaged without increasing its number. You are in a short situation.
  • the image genre processing module 207 communicates with the music score corresponding image processing module 206.
  • the image genre processing module 207 may transmit the corresponding user message to the score corresponding image processing module 206.
  • the image I generated by the sheet music correspondence image processing module 206 may have a genre characteristic corresponding to the user message (eg cartoon, landscape, watercolor, portrait, pencil image, etc.). do.
  • a computer module capable of assigning each sheet music note 2 a color number corresponding to the sheet music note 2 ", " a color number corresponding to each sheet music note 2 "
  • Computer module that can generate the pixel P having the color corresponding to the color number of each sheet music note 2 by comparing the color number with the color information for each color number previously stored, "" Preset image After reading the pixel composition rule, according to the read image pixel composition rule, a computer module capable of generating or arranging pixels P to generate an image I corresponding to the score M, etc.
  • the present invention is not limited to a specific field, and exhibits useful effects generally in various fields requiring effective operation of various multimedia contents.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Auxiliary Devices For Music (AREA)

Abstract

The present invention relates to: an image-based sheet music generation apparatus for scanning an image so as to assign a corresponding color number to each pixel, comparing the assigned color number with a pre-stored color number-specific scale so as to configure a corresponding scale for each pixel, generating a basic note corresponding to each scale, and assigning a time according to a pre-configured time configuration rule and then generating a sheet music corresponding to the image by using staff notation; and a sheet music-based image generation apparatus for comparing a scale constituting a sheet music with a pre-configured scale-specific color number so as to assign a corresponding color number to a note of the relevant sheet music, and generating a corresponding pixel and then generating an image corresponding to the sheet music, according to an image pixel configuration rule.

Description

이미지 기반 악보 생성장치 및 악보 기반 이미지 생성장치Image-based sheet music generator and sheet music-based image generator
본 발명은 예컨대, 사진, 그림, 영상 등과 같은 이미지를 기반으로 하여 그에 상응하는 악보를 생성해주거나, 악보를 기반으로 하여, 그에 상응하는 이미지를 생성해주는 이미지 기반 악보 생성장치 및 악보 기반 이미지 생성장치에 관한 것이다.According to the present invention, for example, an image-based sheet music generating apparatus and a sheet music-based image generating apparatus generating a sheet music corresponding to the image based on an image such as a picture, a picture, a video, or the like, or generating a corresponding image based on the sheet music. It is about.
최근, 전기/전자/프로그램 관련기술이 급격한 발전을 이루면서, 다양한 유형의 자동 작곡시스템들이 폭 넓게 개발/보급되고 있다.Recently, with the rapid development of electric / electronic / program related technologies, various types of automatic composition systems have been widely developed / distributed.
예를 들어, 대한민국등록특허 제10-875호(명칭: 휴대단말을 이용한 음악작곡시스템)(2010.12.14.자 공고), 대한민국등록특허 제10-1807754호(명칭: 자작곡 생성 서버 및 그 방법)(2017.12.13,자 공고), 대한민국공개특허 제10-2017-137526호(명칭: 작곡 프로그램을 이용한 작곡 방법)(2017.12.13.자 공개) 등에는 이러한 종래의 기술에 따른 자동 작곡시스템들의 일례가 좀더 상세하게 개시되어 있다.For example, the Republic of Korea Patent No. 10-875 (name: music composition system using a mobile terminal) (published December 14, 2010), the Republic of Korea Patent No. 10-1807754 (name: self-producing server and method) (December 13, 2017), Korean Patent Publication No. 10-2017-137526 (name: composition method using a composition program) (published December 13, 2017) and the like, examples of such automatic composition systems according to the prior art Is disclosed in more detail.
한편, 근래에, 사진, 영상 등의 촬영이 가능한 여러 타입의 카메라를 구비한 전자기기(예컨대, 스마트 폰, 테블릿 PC 등)의 보급이 급속히 확대되면서, 각 사용자들 간에 유통되는 이미지(예컨대, 사진, 영상, 그림 등)의 유통규모 또한 빠른 성장을 보이고 있다.Meanwhile, as the spread of electronic devices (eg, smart phones, tablet PCs, etc.) equipped with various types of cameras capable of capturing photographs, images, and the like rapidly expands, images distributed among users (eg, Distribution volume of photographs, videos, pictures, etc. is also growing rapidly.
때문에, 예를 들어, 음악을 구성하는 악보를 이미지와 연계시킴으로써, 해당 악보의 부가 활용도를 좀더 극대화하고자 하는 사용자 욕구 또한 점차 커지고 있다.Therefore, for example, by linking the music notation constituting the music with the image, the user desire to further maximize the additional utilization of the music score is also increasing.
그러나, 종래의 체제 하에서는 자동 작곡시스템 분야와, 그래픽 촬영/유통 관련 시스템 분야는 별개의 기술시장을 이루며 독립적으로 성장하고 있어 왔다. 때문에, 상기 사용자의 욕구가 커지는 상황에도 불구하고, 사용자 측에서는 이미지를 작곡과 연계시킴으로써, 해당 이미지의 부가 활용도를 좀더 극대화하고자 하는 욕구를 전혀 충족시킬 수 없었다.However, under the conventional system, the field of automatic composition system and the field of graphic photographing / distribution system have grown independently, forming a separate technology market. Therefore, in spite of the situation in which the user's desire is increased, the user's desire to further maximize the additional utilization of the image cannot be satisfied by linking the image with the composition.
한편, 근래에, 음악의 청취가 가능한 전자기기(예컨대, 스마트 폰, 테블릿 PC 등)의 보급이 급속히 확대되면서, 각 사용자들 간에 유통되는 음악의 유통규모 또한 빠른 성장을 보이고 있다.On the other hand, in recent years, as the spread of electronic devices capable of listening to music (eg, smart phones, tablet PCs, etc.) is rapidly expanding, the distribution of music distributed among users is also showing rapid growth.
상술한 바와 같이, 각 사용자들 간에 유통되는 음악의 유통규모가 빠르게 성장하면서, 예를 들어, 음악을 구성하는 악보를 이미지와 연계시켜, 해당 악보의 부가 활용도를 좀더 극대화하고자 하는 사용자 욕구 또한 점차 커지고 있다.As described above, as the distribution scale of music distributed among users grows rapidly, for example, the user desire to further maximize the utilization of the sheet music by linking the sheet music constituting the music with an image also increases. have.
그러나, 종래의 체제 하에서 악보와 이미지는 그 적용분야가 완전히 다른, 상호 독립적인 창작물로 유통되고 있어 왔다. 때문에, 사용자 측에서는 이러한 사용자 욕구를 전혀 충족시킬 수 없었다.However, the music scores and images have been distributed as mutually independent creations with completely different fields of application under the conventional system. Therefore, the user's desire could not be satisfied at all.
따라서, 본 발명의 목적은 운영체제 등을 구비한 전자기기 내에, "이미지를 구성하는 각 픽셀을 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여, 각 픽셀의 색상을 판독한 후, 판독된 색상을 기 저장되어 있던 색상별 색채번호와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 색채번호를 부여할 수 있는 전산모듈", "각 픽셀에 상응하는 색채번호를 판독한 후, 판독된 각 색채번호를 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 음계를 설정할 수 있는 전산모듈", "각 픽셀에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표를 생성한 후, 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표에 박자를 부여하여, 악보음표를 생성하고, 생성된 각 악보음표를 각 픽셀의 스캔 순서에 따라 오선보에 배열하여, 상기 이미지에 상응하는 악보를 생성할 수 있는 전산모듈" 등을 체계적으로 배치 제공하는데 있다. 또한, 사용자 측에서, 단지, 전자기기를 단순 조작하는 지극히 간단한 절차만으로도, 자가보유 이미지(예컨대, 사진, 영상, 그림 등)에 상응하는 악보를 자동으로 생성/확보할 수 있도록 유도함으로써, 결국, 별다른 어려움 없이, 이미지를 작곡과 연계시켜, 해당 이미지의 부가 활용도를 좀더 극대화시킬 수 있도록 가이드 하는데 있다.Accordingly, an object of the present invention is to scan a pixel constituting an image according to a preset image scan rule, read the color of each pixel, and then read the read color in an electronic device having an operating system or the like. Computational module that can assign the color number corresponding to the pixel for each pixel by comparing with the stored color number for each color "," Read each color number after reading the color number corresponding to each pixel. " Computational module that can set the scale corresponding to the corresponding pixel for each pixel by comparing with the stored scale for each color number "," Reads the scale corresponding to each pixel, and creates the basic note corresponding to each scale. Then, according to the time signature set in advance, a time signature is given to the basic note to generate a notation note, and each generated notation note is arranged on the stave in accordance with the scanning order of each pixel. Computer module capable of generating a musical score corresponding to the image. In addition, on the user's side, only a very simple procedure of simply manipulating the electronic device can induce the automatic generation / acquisition of a sheet music corresponding to a self-retaining image (eg, a picture, an image, a picture, etc.) Without any difficulty, it is to guide the image to compose the composition to maximize the additional utilization of the image.
또한, 본 발명의 다른 목적은 운영체제 등을 구비한 전자기기 내에, "악보를 구성하는 각 악보음표의 음계를 기 설정되어 있던 음계별 색채번호와 비교하여, 각 악보음표에, 해당 악보음표에 상응하는 색채번호를 부여할 수 있는 전산모듈", "각 악보음표에 상응하는 색채번호를 판독한 후, 판독된 색채번호를 기 저장되어 있던 색채번호별 색상정보와 비교하여, 각 악보음표 측 색채번호에 상응하는 색상을 가지는 픽셀을 생성할 수 있는 전산모듈", "기 설정되어 있던 이미지 픽셀 구성 룰을 판독한 후, 판독된 이미지 픽셀 구성 룰에 따라, 픽셀을 생성 또는 배열하여, 악보에 상응하는 이미지를 생성할 수 있는 전산모듈" 등을 체계적으로 배치 제공하는데 있다. 또한, 사용자 측에서, 단지, 전자기기를 단순 조작하는 지극히 간단한 절차만으로도, 자가보유 악보에 상응하는 이미지를 자동으로 생성/확보할 수 있도록 유도함으로써, 결국, 별다른 어려움 없이, 악보를 이미지와 연계시켜, 해당 악보의 부가 활용도를 좀더 극대화시킬 수 있도록 가이드 하는데 있다.In addition, another object of the present invention is to compare the musical scale of each musical score constituting the musical score with a preset color number for each musical score in an electronic device having an operating system or the like. Computer module for assigning color numbers to " ", " Reading color numbers corresponding to respective music scores, and comparing the read color numbers with the color information for each color number previously stored, for each musical score side color number. A computing module capable of generating pixels having a color corresponding to the " " " " " preset image pixel composition rule, and then generating or arranging pixels according to the read image pixel composition rule, Computer module that can generate images. " In addition, by inducing the user to automatically generate / acquire an image corresponding to the self-retained sheet music only by a simple procedure of simply manipulating the electronic device, the music sheet is linked to the image without any difficulty. Therefore, the guide is intended to maximize the additional use of the score.
본 발명의 또 다른 목적들은 다음의 상세한 설명과 첨부된 도면으로부터 보다 명확해질 것이다.Still other objects of the present invention will become more apparent from the following detailed description and the accompanying drawings.
상기와 같은 목적을 달성하기 위하여 본 발명에서는 운영체제를 구비한 전자기기 내에 설치되며, 이미지 기반의 악보 생성 서비스를 운영하기 위한 가이드 프레임을 상기 전자기기를 통해 출력하여 악보 생성 서비스를 운영하는 이미지 기반 악보 생성장치에 있어서, "이미지를 구성하는 각 픽셀을 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여 각 픽셀의 색상을 판독한 후, 판독된 색상을 기 저장되어 있던 색상별 색채번호와 비교하여 각 픽셀별로, 해당 픽셀에 상응하는 색채번호를 부여하는 이미지 픽셀별 색채번호 처리모듈"과; "각 픽셀에 상응하는 색채번호를 판독한 후, 판독된 각 색채번호를 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 음계를 설정하는 이미지 픽셀별 음계 처리모듈"과; "각 픽셀에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표를 생성한 후, 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표에 박자를 부여하여 악보음표를 생성하고, 생성된 각 악보음표를 각 픽셀의 스캔 순서에 따라 오선보에 배열하여 상기 이미지에 상응하는 악보를 생성하는 이미지 상응 악보 처리모듈"을 포함하는 것을 특징으로 하는 이미지 기반 악보 생성장치를 개시한다.In order to achieve the above object, the present invention is installed in an electronic device having an operating system, and outputs a guide frame for operating an image-based sheet music generating service through the electronic device to operate a sheet music generating service. In the generating apparatus, "each pixel constituting the image is scanned according to a preset image scanning rule, and the color of each pixel is read, and then the read color is compared with the stored color number for each color. A color number processing module for each image pixel for assigning a color number corresponding to the corresponding pixel; After reading the color number corresponding to each pixel, the color processing module for each image pixel for setting the scale corresponding to the corresponding pixel for each pixel by comparing the read color numbers with the previously stored scale for each color number. "and; "Read the scale corresponding to each pixel, generate a basic note corresponding to each scale, and give a beat to the basic note according to a preset time setting rule to generate a musical score, And an image correspondence notation processing module for arranging notation notation in the stave notation according to the scanning order of each pixel to generate the notation corresponding to the image.
또한, 본 발명의 다른 측면에서는 운영체제를 구비한 전자기기 내에 설치되며, 악보 기반의 이미지 생성 서비스를 운영하기 위한 가이드 프레임을 상기 전자기기를 통해 출력하여 악보 생성 서비스를 운영하는 악보 기반 이미지 생성장치에 있어서. "악보를 구성하는 각 악보음표의 음계를 기 설정되어 있던 음계별 색채번호와 비교하여, 각 악보음표에, 해당 악보음표에 상응하는 색채번호를 부여하는 악보음표별 색채번호 처리모듈"과; "각 악보음표에 상응하는 색채번호를 판독한 후, 판독된 색채번호를 기 저장되어 있던 색채번호별 색상정보와 비교하여 각 악보음표 측 색채번호에 상응하는 색상을 가지는 픽셀을 생성하는 악보음표별 이미지 픽셀 처리모듈"과; "기 설정되어 있던 이미지 픽셀 구성 룰을 판독한 후, 판독된 이미지 픽셀 구성 룰에 따라 픽셀을 생성 또는 배열하여, 상기 악보에 상응하는 이미지를 생성하는 악보 상응 이미지 처리모듈을 포함하는 것을 특징으로 하는 악보 기반 이미지 생성장치"를 개시한다.In addition, in another aspect of the present invention is installed in an electronic device having an operating system, and outputs a guide frame for operating a sheet music-based image generation service through the electronic device to the sheet music-based image generating device operating a sheet music generation service In. "Color number processing module for sheet music notes, which compares the musical scale of each sheet music notes constituting the sheet music with color numbers for each scale, and assigns the color numbers corresponding to the sheet music notes to each sheet music note"; "Reading the color number corresponding to each sheet music score, and compares the read color number with the stored color information for each color number to create a pixel having a color corresponding to the color number of each sheet music note An image pixel processing module "; And a music score correspondence image processing module configured to read a preset image pixel composition rule, and to generate or arrange pixels according to the read image pixel composition rule to generate an image corresponding to the sheet music. Sheet music based image generating device "is disclosed.
본 발명에서는 운영체제 등을 구비한 전자기기 내에, "이미지를 구성하는 각 픽셀을 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여, 각 픽셀의 색상을 판독한 후, 판독된 색상을 기 저장되어 있던 색상별 색채번호와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 색채번호를 부여할 수 있는 전산모듈", "각 픽셀에 상응하는 색채번호를 판독한 후, 판독된 각 색채번호를 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 음계를 설정할 수 있는 전산모듈", "각 픽셀에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표를 생성한 후, 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표에 박자를 부여하여, 악보음표를 생성하고, 생성된 각 악보음표를 각 픽셀의 스캔 순서에 따라 오선보에 배열하여, 상기 이미지에 상응하는 악보를 생성할 수 있는 전산모듈" 등을 체계적으로 배치 제공할 수 있다. 때문에, 본 발명의 구현환경 하에서, 사용자 측에서는, 전자기기를 단순 조작하는 지극히 간단한 절차만으로도, 자가보유 이미지(예컨대, 사진, 영상, 그림 등)에 상응하는 악보를 자동으로 생성/확보할 수 있게 된다. 결국, 별다른 어려움 없이, 이미지를 작곡과 연계시켜, 해당 이미지의 부가 활용도를 좀더 극대화시킬 수 있게 된다.According to the present invention, in an electronic device having an operating system or the like, " scan each pixel constituting the image according to a preset image scanning rule, read the color of each pixel, and then read the color previously stored. Computational module that can assign a color number corresponding to the corresponding pixel for each pixel compared with the star color number "," Read the color number corresponding to each pixel, and store each color number read in advance. Computational module that can set the scale corresponding to the corresponding pixel for each pixel compared with the scale for each color number "," Read the scale corresponding to each pixel, generate the basic note corresponding to each scale, In accordance with the set time setting rule, a time signature is given to the basic note to generate a sheet music note, and each generated sheet music note is arranged in a stave in the scanning order of each pixel. Corresponding computing module that can produce a score for a "can be provided and the like disposed systematically. Therefore, under the implementation environment of the present invention, the user side can automatically generate / acquire the score corresponding to the self-retaining image (eg, a picture, an image, a picture, etc.) by a very simple procedure of simply operating the electronic device. . As a result, it is possible to maximize the additional utilization of the image by linking the image with the composition without any difficulty.
또한, 본 발명에서는 운영체제 등을 구비한 전자기기 내에, "악보를 구성하는 각 악보음표의 음계를 기 설정되어 있던 음계별 색채번호와 비교하여, 각 악보음표에, 해당 악보음표에 상응하는 색채번호를 부여할 수 있는 전산모듈", "각 악보음표에 상응하는 색채번호를 판독한 후, 판독된 색채번호를 기 저장되어 있던 색채번호별 색상정보와 비교하여, 각 악보음표 측 색채번호에 상응하는 색상을 가지는 픽셀을 생성할 수 있는 전산모듈", "기 설정되어 있던 이미지 픽셀 구성 룰을 판독한 후, 판독된 이미지 픽셀 구성 룰에 따라, 픽셀을 생성 또는 배열하여, 악보에 상응하는 이미지를 생성할 수 있는 전산모듈" 등을 체계적으로 배치 제공할 수 있다. 때문에, 본 발명의 구현환경 하에서, 사용자 측에서는, 전자기기를 단순 조작하는 지극히 간단한 절차만으로도, 자가보유 악보에 상응하는 이미지를 자동으로 생성/확보할 수 있게 된다. 결국, 별다른 어려움 없이, 악보를 이미지와 연계시켜, 해당 악보의 부가 활용도를 좀더 극대화시킬 수 있게 된다.In addition, in the present invention, in the electronic device provided with the operating system or the like, " the color number corresponding to the musical score note is compared to the musical score for each musical score by comparing the musical scale of each musical score constituting the musical score with the preset color numbers. Computer module that can be assigned to "," Read the color number corresponding to each sheet music note, and compares the read color number with the color information for each stored color number, corresponding to the color number of each sheet music note Computation module capable of generating pixels having a color "," Read image pixel composition rules that have been set, and then generate or arrange pixels according to the read image pixel composition rules to generate an image corresponding to the score. Can be provided in a systematic manner. Therefore, under the implementation environment of the present invention, the user side can automatically generate / acquire an image corresponding to the self-retaining music score by a very simple procedure of simply operating the electronic device. Eventually, without any difficulty, by linking the sheet music with the image, it is possible to further maximize the additional utilization of the sheet music.
도 1은 본 발명에 따른 이미지 기반 악보 생성장치의 세부적인 구성을 개념적으로 도시한 예시도이다.1 is an exemplary diagram conceptually showing a detailed configuration of an image-based sheet music generating apparatus according to the present invention.
도 2는 본 발명에 따른 가이드 프레임의 게시 패턴을 개념적으로 도시한 예시도이다.2 is an exemplary view conceptually showing a posting pattern of a guide frame according to the present invention.
도 3 내지 도 5는 본 발명에 따른 이미지 기반 악보 생성장치의 세부적인 기능수행절차를 개념적으로 도시한 예시도이다.3 to 5 are exemplary diagrams conceptually showing a detailed functional procedure of the image-based sheet music generating apparatus according to the present invention.
도 6은 본 발명의 다른 실시에 따른 악보 기반 이미지 생성장치의 세부적인 구성을 개념적으로 도시한 예시도이다.6 is an exemplary diagram conceptually showing a detailed configuration of a music score-based image generating apparatus according to another embodiment of the present invention.
도 7은 본 발명의 다른 실시에 따른 가이드 프레임의 게시 패턴을 개념적으로 도시한 예시도이다.7 is an exemplary view conceptually illustrating a posting pattern of a guide frame according to another exemplary embodiment of the present invention.
도 8 내지 도 10은 본 발명의 다른 실시에 따른 악보 기반 이미지 생성장치의 세부적인 기능수행절차를 개념적으로 도시한 예시도이다.8 to 10 are exemplary diagrams conceptually showing a detailed functional procedure of the music score-based image generating apparatus according to another embodiment of the present invention.
이하, 첨부된 도면을 참조하여, 본 발명의 각 실시에 따른 이미지 기반 악보 생성장치 및 악보 기반 이미지 생성장치를 좀더 상세히 설명하면 다음과 같다.Hereinafter, an image-based sheet music generating apparatus and a sheet music-based image generating apparatus according to each embodiment of the present invention will be described in detail with reference to the accompanying drawings.
도 1에 도시된 바와 같이, 본 발명에 따른 이미지 기반 악보 생성장치(100)는 운영체제(11)를 구비한 전자기기(10)(예컨대, 스마트 폰, 테블릿 PC 등) 내에 설치되는 운영정보 처리모듈(102), 가이드 프레임 운영모듈(103), 이미지 픽셀별 색채번호 처리모듈(104), 이미지 픽셀별 음계 처리모듈(105), 이미지 상응 악보 처리모듈(106), 악보장르 처리모듈(107), 색상별 색채번호 저장모듈(108), 이미지 스캔 룰 저장모듈(109), 색채번호별 음계 저장모듈(110), 박자 설정 룰 저장모듈(111) 등을포함한다.As shown in FIG. 1, the image-based music score generating apparatus 100 according to the present invention is an operation information processing installed in an electronic device 10 (eg, a smartphone, a tablet PC, etc.) having an operating system 11. Module 102, guide frame operation module 103, color number processing module 104 for each image pixel, scale processing module 105 for each image pixel, image corresponding sheet music processing module 106, sheet music genre processing module 107 , A color number storage module 108 for each color, an image scan rule storage module 109, a scale storage module 110 for color numbers, a time setting rule storage module 111, and the like.
운영정보 처리모듈(102) 측에서는 이미지 기반 악보 생성 서비스에 필요한 각종 운영정보를 저장/관리하는 역할을 수행한다. 여기서, 각종 운영정보는 예를 들어, 운영체제(11)의 등록정보, 기능지원 서버(30)의 등록정보, 통신 세션의 형성/유지를 위한 프로그램/소스 정보, 각 전산모듈들의 프로세스 진행을 위한 프로그램/소스 정보, 가이드 프레임(112)의 생성/게시/운영을 위한 문자/영상/이미지/프로그램 정보 등을 포함한다. 또한, 통신망(20)을 매개로 기능지원 서버(30)와 통신을 취하여, 각 전산모듈들의 업-데이트 정보를 포함하는 기능지원정보를 수신한다. 운영정보 처리모듈(102) 측에서는 기능지원정보를 각 전산모듈 측의 기능에 반영하는 역할을 수행함으로써, 본 발명에 따른 일련의 이미지 기반 악보 생성 서비스 절차가 별다른 어려움 없이 정상적으로 진행될 수 있도록 보조하게 된다.The operation information processing module 102 stores and manages various operation information required for the image-based music score generation service. Here, the various operation information is, for example, the registration information of the operating system 11, the registration information of the function support server 30, the program / source information for the formation / maintenance of the communication session, the program for the process of each computer module / Source information, text / image / image / program information for generating / publishing / operating the guide frame 112, and the like. In addition, communication with the function support server 30 through the communication network 20, and receives the function support information including the update information of each computer module. The operation information processing module 102 side serves to reflect the function support information to the functions of each computer module side, thereby assisting a series of image-based sheet music generation service procedures according to the present invention to proceed normally without any difficulty.
가이드 프레임 운영모듈(103) 측에서는 본 발명에 따른 이미지 기반 악보 생성 서비스를 시행 받고자 하는 사용자 측에서, 운영체제(11)를 토대로 전산작업을 진행한다. 예를 들어, 일련의 장치 콜업 이벤트가 발생하게 되면, 그 즉시, 운영정보 처리모듈(102)에 기 저장되어 있던 운영정보를 활용하여, 도 2에 도시된 바와 같은 가이드 프레임(112)을 생성한다. 그러면, 생성 완료된 가이드 프레임(112)을 전자기기(10)를 통해 출력/게시함으로써, 본 발명에 따른 일련의 이미지 기반 악보 생성 서비스 운영절차가 별다른 어려움 없이 정상적으로 진행될 수 있도록 보조하게 된다. In the guide frame operation module 103, the user performs a computational operation based on the operating system 11 at the user side who wants to perform the image-based music score generation service according to the present invention. For example, when a series of device call-up events occur, the guide frame 112 as shown in FIG. 2 is generated by utilizing the operation information previously stored in the operation information processing module 102. . Then, by outputting / posting the generated guide frame 112 through the electronic device 10, a series of image-based sheet music generation service operation procedure according to the present invention assists to proceed normally without any difficulty.
이러한 기반 인프라가 갖추어진 상황 하에서, 도 3에 도시된 바와 같이, 이미지 픽셀별 색채번호 처리모듈(104) 측에서는 이미지(I)를 구성하는 각 픽셀(P)을 이미지 스캔 룰 저장모듈(109)에 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여, 각 픽셀(P)의 색상을 판독하는 절차를 진행하게 된다.Under such a situation that the infrastructure is prepared, as shown in FIG. 3, the pixel number processing module 104 for each image pixel stores each pixel P constituting the image I in the image scan rule storage module 109. Scanning is performed according to a preset image scan rule, and the procedure of reading the color of each pixel P is performed.
이 경우, 상기 이미지 스캔 룰은 "위쪽에 배열된 픽셀로부터 아래쪽에 배열된 픽셀로 이미지를 스캔하라"고 하는 스캔 룰, "아래쪽에 배열된 픽셀로부터 위쪽에 배열된 픽셀로 이미지를 스캔하라"고 하는 스캔 룰, "좌측에 배열된 픽셀로부터 우측에 배열된 픽셀로 이미지를 스캔하라"고 하는 스캔 룰, "우측에 배열된 픽셀로부터 좌측에 배열된 픽셀로 이미지를 스캔하라"고 하는 스캔 룰. "포물선 모양의 스캔라인을 형성하면서, 이미지를 스캔하라"고 하는 스캔 룰, "원형 스프링 모양의 스캔라인을 형성하면서, 이미지를 스캔하라"고 하는 스캔 룰 중의 적어도 어느 하나를 포함하게 된다. In this case, the image scanning rule is a scan rule that says "scan the image from the pixel arranged at the top to the pixel arranged at the bottom", "Scan the image from the pixel arranged at the bottom to the pixel arranged at the top". A scanning rule called "scan an image from a pixel arranged on the left to a pixel arranged on the right", and a scan rule called "scan an image from a pixel arranged on the right to a pixel arranged on the left". At least one of the scan rule "scan the image while forming a parabolic scan line", and the scan rule "scan the image while forming a circular spring-shaped scan line".
상술한 절차를 통해, 각 픽셀(P)의 색상이 판독 완료되면, 이미지 픽셀별 색채번호 처리모듈(104) 측에서는 각 픽셀(P)별로, 해당 픽셀(P)에 상응하는 색채번호를 부여하는 역할을 수행하게 된다(도 3 참조). 상기 색채번호는 판독 완료된 각 픽셀(P)의 색상을 색상별 색채번호 저장모듈(108)에 기 저장되어 있던 색상별 색채번호와 비교하여 각 픽셀(P)별로 부여된다. 이 경우, 상기 색채번호는 헥스(HEX) 색채코드 또는 삼원색 색채 값 중에 어느 하나일 수 있다.Through the above-described procedure, when the color of each pixel P has been read, the color number processing module 104 for each image pixel assigns a color number corresponding to the pixel P to each pixel P. (See FIG. 3). The color number is assigned to each pixel P by comparing the color of each read-out pixel P with the color number for each color previously stored in the color number storage module 108 for each color. In this case, the color number may be any one of a hex (HEX) color code or a three primary color value.
이렇게 하여, 각 픽셀(P)별로, 해당 픽셀(P)에 상응하는 색채번호가 부여 완료되면, 도 4에 도시된 바와 같이, 이미지 픽셀별 음계 처리모듈(105) 측에서는 각 픽셀(P)에 상응하는 색채번호를 판독한다. 그 후, 판독 완료된 각 색채번호를 색채번호별 음계 저장모듈(110)에 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀(P)별로, 해당 픽셀(P)에 상응하는 음계를 설정하는 역할을 수행하게 된다. In this way, when a color number corresponding to the pixel P is assigned to each pixel P, as shown in FIG. 4, the scale processing module 105 for each image pixel corresponds to each pixel P. As shown in FIG. Read the color number. Thereafter, each read color number is compared with the color number scale previously stored in the color storage scale 110 for each color number, and sets a scale corresponding to the pixel P for each pixel P. It will play a role.
상술한 절차를 통해, 각 픽셀(P)별로, 해당 픽셀(P)에 상응하는 음계가 설정 완료되면, 도 5에 도시된 바와 같이, 이미지 상응 악보 처리모듈(106) 측에서는 각 픽셀(P)에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표(1)를 생성하는 절차를 진행하게 된다. Through the above-described procedure, when the scale corresponding to the pixel P is set for each pixel P, as shown in FIG. 5, the image correspondence notation processing module 106 side is assigned to each pixel P. As shown in FIG. By reading the corresponding scale, a procedure of generating the basic note 1 corresponding to each scale is performed.
이렇게 하여, 각 음계에 상응하는 기본음표(1)가 생성 완료되면, 이미지 상응 악보 처리모듈(106) 측에서는 박자 설정 룰 저장모듈에 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표(1)에 박자를 부여하여, 악보음표(2)를 생성하는 절차를 진행하게 된다(도 5 참조). In this way, when the basic note 1 corresponding to each scale is generated, the image correspondence notation processing module 106 side is assigned to the basic note 1 according to the time setting rule previously set in the time setting rule storage module. By giving a beat, the procedure for generating the music score 2 is carried out (see Fig. 5).
이러한 절차 하에서, 이미지 상응 악보 처리모듈(106) 측에서는 "동일 음계를 가지는 기본음표(1)의 연속 배열상태에 따라, 해당 기본음표(1)에 박자를 부여하라"라고 하는 박자 설정 룰에 따라, 상기 기본음표(1)에 박자를 부여하여, 상기 악보음표(2)를 생성하게 된다(도 5 참조). Under this procedure, the image correspondence notation processing module 106 side according to the time signature setting rule "to give a beat to the basic note 1 according to the continuous arrangement state of the basic note 1 which has the same scale," By giving a beat to the basic note 1, the sheet music note 2 is generated (see Fig. 5).
이에 따라서, 예를 들어, "2옥타브 레"라고 하는 동일 음계를 가지는 기본음표(1) 6개가 연속으로 배열되어 있는 경우, 해당 기본음표(1) 6개는 4박자의 박자 길이를 가지는(즉, 온음표 형식을 가지는) 1개의 악보음표(2)로 변환/생성되는 절차를 겪게 된다.Thus, for example, when six basic notes (1) having the same scale called "two octaves" are arranged in succession, the six basic notes (1) have a time signature of four beats (i.e., It is subjected to a procedure of converting / generating to one sheet music note (2) having a whole note format.
다른 예로, "3옥타브 미"라고 하는 동일 음계를 가지는 기본음표(1) 3개가 연속으로 배열되어 있는 경우, 해당 기본음표(1) 3개는 1박자 반의 길이를 가지는(즉, 점 사분음표의 형식을 가지는) 1개의 악보음표(2)로 변환/생성되는 절차를 겪게 된다.As another example, when three basic notes (1) having the same scale called "three-octave me" are arranged in succession, the three basic notes (1) have a length of one and a half beats (that is, Undergoes a procedure of converting / creating to a single note (2).
또 다른 예로, "1옥타브 라"라고 하는 음계를 가지는 기본음표(1) 1개가 연속성 없이 배열되어 있는 경우, 해당 기본음표(1) 1개는 반의반의 반박자의 길이를 가지는(즉, 32분음표의 형식을 가지는) 1개의 악보음표(2)로 변환/생성되는 절차를 겪게 된다.As another example, when one basic note (1) having a musical scale called "one octave" is arranged without continuity, one of the basic notes (1) has a half-note half length (that is, a thirty-second note). Undergoes a procedure of converting / creating to a single note (2).
한편, 이미지 상응 악보 처리모듈(106) 측에서는 상술한 박자 설정 룰 이외에, 또 다른 박자 설정 룰에 따라, 상기 기본음표(1)에 박자를 부여하여, 상기 악보음표(2)를 생성할 수도 있게 된다(도 5 참조). 여기서, 또 다른 박자 설정 룰은 "동일 색상으로 채워진 픽셀(P)이 연속으로 배열되어 있지 않아서, 해당 픽셀(P)의 스캔시간이 짧아지는 경우, 해당 픽셀(P)에 상응하는 기본음표(1)에는 빠른 박자를 부여하고, 동일 색상으로 채워진 픽셀(P)이 연속으로 배열되어 있어서, 해당 픽셀(P)들의 스캔시간이 길어지는 경우, 해당 연속 픽셀(P)에 상응하는 기본음표(1)에는 느린 박자를 부여하라"일 수 있다. 이에 따라서, 예를 들어, 상술한 이미지 픽셀별 색채번호 처리모듈(104)의 픽셀(P) 스캔동작 시, 동일 색상으로 채워진 픽셀(P)이 연속으로 배열되어 있지 않아서, 해당 픽셀(P)의 스캔시간이 짧았던 경우, 해당 픽셀(P)에 상응하는 기본음표(1)에는 빠른 박자가 부여된다. 결국, 해당 기본음표(1)는 짧은 길이(예컨대, 반의반의 반 박자, 반의 반 박자 등)를 가지는 1개의 악보음표(2)로 변환/생성되는 절차를 겪게 된다.On the other hand, the image correspondence notation processing module 106 side, in addition to the time signature setting rule described above, it is also possible to give the beat to the basic note (1) in accordance with another time setting rule, to generate the sheet music note (2) (See Figure 5). Here, another time setting rule is, "When the pixels P filled with the same color are not arranged in succession, and thus the scan time of the pixel P is shortened, the basic note corresponding to the pixel P (1) ) Gives a fast beat, and the pixels P filled with the same color are arranged in succession, so that when the scanning time of the pixels P becomes long, the basic note 1 corresponding to the corresponding pixels P is long. Give it a slow beat. " Accordingly, for example, in the pixel P scanning operation of the color number processing module 104 for each image pixel described above, the pixels P filled with the same color are not arranged in succession, When the scan time is short, a fast time signature is given to the basic note 1 corresponding to the pixel P. As a result, the basic note 1 undergoes a procedure of being converted / generated into one sheet music note 2 having a short length (e.g., half beat, half beat, etc.).
다른 예로, 동일 색상으로 채워진 픽셀(P)들이 연속으로 배열되어 있어서, 해당 픽셀(P)들의 스캔시간이 길었던 경우, 해당 픽셀(P)에 상응하는 복수의 기본음표(1)들에는 느린 박자가 부여된다. 결국, 해당 복수의 기본음표(1)들은 긴 길이(예컨대, 2박자, 3박자, 4박자 등)를 가지는 1개의 악보음표(2)로 변환/생성되는 절차를 겪게 된다.As another example, when the pixels P filled with the same color are arranged in succession, when the scan time of the pixels P is long, a plurality of basic notes 1 corresponding to the pixels P have a slow beat. Is given. As a result, the plurality of basic notes 1 undergo a procedure of being converted / generated into one sheet music note 2 having a long length (for example, two beats, three beats, four beats, etc.).
상술한 절차를 통해, 기본음표(1)에 박자가 부여되어, 상기 악보음표(2)가 생성 완료된다. 그러면, 이미지 상응 악보 처리모듈(106) 측에서는 생성 완료된 각 악보음표(2)를 상술한 각 픽셀(P)의 스캔 순서(위쪽-아래쪽, 왼쪽-오른쪽 등)에 따라 오선보(3)에 배열하여, 상기 이미지(I)에 상응하는 악보(M)를 생성하는 절차를 진행하게 된다(도 5 참조).Through the above-described procedure, a time signature is given to the basic note 1, and the sheet music note 2 is generated. Then, the image correspondence notation processing module 106 side arranges the generated notation notation 2 in the stave report 3 according to the scanning order (up-down, left-right, etc.) of each pixel P described above. The procedure for generating the music score M corresponding to the image I is performed (see FIG. 5).
이러한 악보의 생성 국면에서, 악보 장르 처리모듈(107) 측에서는 이미지 상응 악보 처리모듈(106)과 통신을 취한다. 악보 장르 처리모듈(107) 측에서는 상기 가이드 프레임(112)을 통해 악보의 장르를 결정하기 위한 사용자 메시지가 입력되는 경우, 해당 사용자 메시지를 상기 이미지 상응 악보 처리모듈(106)로 전달할 수 있다. 이로 인해, 상기 이미지 상응 악보 처리모듈(106)에 의해 생성되는 악보(M)가 상기 사용자 메시지에 상응하는 장르 특징(예컨대, 째즈, 발라드, 동요, 트로트, 락 등)을 가질 수 있도록 유도하게 된다.In the generation of such sheet music, the sheet music genre processing module 107 communicates with the image corresponding sheet music processing module 106. In the music score genre processing module 107, when a user message for determining the genre of music score is input through the guide frame 112, the user message may be transmitted to the image corresponding music score processing module 106. As a result, the sheet music M generated by the image corresponding sheet music processing module 106 is induced to have a genre characteristic (eg, jazz, ballad, shake, trot, lock, etc.) corresponding to the user message. .
이와 같이, 본 발명에서는 운영체제(11) 등을 구비한 전자기기(10) 내에, "이미지(I)를 구성하는 각 픽셀(P)을 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여, 각 픽셀(P)의 색상을 판독한 후, 판독된 색상을 기 저장되어 있던 색상별 색채번호와 비교하여, 각 픽셀(P)별로, 해당 픽셀(P)에 상응하는 색채번호를 부여할 수 있는 전산모듈", "각 픽셀(P)에 상응하는 색채번호를 판독한 후, 판독된 각 색채번호를 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀(P)별로, 해당 픽셀에 상응하는 음계를 설정할 수 있는 전산모듈", "각 픽셀(P)에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표(1)를 생성한 후, 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표(1)에 박자를 부여하여, 악보음표(2)를 생성하고, 생성된 각 악보음표를 각 픽셀(P)의 스캔 순서에 따라 오선보(3)에 배열하여, 상기 이미지(I)에 상응하는 악보(M)를 생성할 수 있는 전산모듈" 등을 체계적으로 배치 제공할 수 있다. 때문에, 본 발명의 구현환경 하에서, 사용자 측에서는, 단지, 전자기기(10)를 단순 조작하는 지극히 간단한 절차만으로도, 자신이 보유한 이미지(예컨대, 사진, 영상, 그림 등)에 상응하는 매우 다채로운 악보를 자동으로 생성/확보할 수 있게 된다. 결국, 별다른 어려움 없이, 이미지(I)를 작곡과 연계시켜, 해당 이미지(I)의 부가 활용도를 좀더 극대화시킬 수 있게 된다.As described above, in the present invention, in the electronic device 10 having the operating system 11 or the like, " each pixel P constituting the image I is scanned in accordance with a preset image scanning rule, A computer module that can assign a color number corresponding to the pixel P for each pixel P by comparing the read color with the color number for each color previously stored. After reading the color number corresponding to each pixel P, comparing the read color numbers with the previously stored scales for each color number and setting the scale corresponding to the corresponding pixel for each pixel P. Computer module ", " read the scale corresponding to each pixel P, generate a basic note 1 corresponding to each scale, and then, according to a preset time setting rule, the basic note 1 ) To create a musical score (2), and scan each generated musical score for each pixel (P) Arranged on the stave report 3 in order, the computer module which can generate the music score M corresponding to the said image I ", etc. can be systematically arranged and provided. Therefore, under the implementation environment of the present invention, on the user side, only a very simple procedure of simply operating the electronic device 10 can automatically generate a very colorful sheet music corresponding to an image (eg, a picture, an image, a picture, etc.) owned by the user. Can be created / obtained. As a result, it is possible to maximize the additional utilization of the image (I) by linking the image (I) with the composition without any difficulty.
한편, 도 6에 도시된 바와 같이, 본 발명의 다른 실시에 따른 악보 기반 이미지 생성장치(200)는 운영체제(41)를 구비한 전자기기(40)(예컨대, 스마트 폰, 테블릿 PC 등) 내에 설치되는 운영정보 처리모듈(202), 가이드 프레임 운영모듈(203), 악보음표별 색채번호 처리모듈(204), 악보음표별 이미지 픽셀 처리모듈(205), 악보 상응 이미지 처리모듈(206), 이미지 장르 처리모듈(207), 음계별 색채번호 저장모듈(208), 이미지 픽셀 구성 룰 저장모듈(209), 색채번호별 색상정보 저장모듈(210) 등이 긴밀하게 조합된 구성을 취하게 된다.Meanwhile, as shown in FIG. 6, the music score-based image generating apparatus 200 according to another embodiment of the present invention is located in an electronic device 40 (eg, a smartphone, a tablet PC, etc.) having an operating system 41. Installed operation information processing module 202, guide frame operation module 203, color number processing module 204 for music scores, image pixel processing module 205 for music scores, image processing module 206 corresponding to the score, image The genre processing module 207, the color number storage module 208 for each scale, the image pixel configuration rule storage module 209, and the color information storage module 210 for each color number may take a close combination.
이때, 운영정보 처리모듈(202) 측에서는 악보 기반 이미지 생성 서비스에 필요한 각종 운영정보를 저장/관리하는 역할을 수행할 수 있다. 여기서, 각종 운영정보는, 예를 들어, 운영체제(11)의 등록정보, 기능지원 서버(30)의 등록정보, 통신 세션의 형성/유지를 위한 프로그램/소스 정보, 각 전산모듈들의 프로세스 진행을 위한 프로그램/소스 정보, 가이드 프레임(211)의 생성/게시/운영을 위한 문자/영상/이미지/프로그램 정보 등을 포함한다. 아울러, 통신망(50)을 매개로 기능지원 서버(60)와 통신을 취하여, 각 전산모듈들의 업-데이트 정보를 포함하는 기능지원정보를 수신할 수 있다. 또한, 이를 각 전산모듈 측의 기능에 반영하는 역할을 수행함으로써, 본 발명에 따른 일련의 악보 기반 이미지 생성 서비스 절차가 별다른 어려움 없이 정상적으로 진행될 수 있도록 보조하게 된다.In this case, the operation information processing module 202 may play a role of storing / managing various operation information required for the music score-based image generation service. Here, the various operation information, for example, the registration information of the operating system 11, the registration information of the function support server 30, the program / source information for the formation / maintenance of the communication session, for the progress of the process of each computer module It includes program / source information and text / image / image / program information for generating / posting / operating the guide frame 211. In addition, by communicating with the function support server 60 via the communication network 50, it is possible to receive the function support information including the update information of each computer module. In addition, by performing the role of reflecting this to the function of each computer module side, a series of sheet music based image generation service procedure according to the present invention assists to proceed normally without any difficulty.
또한, 본 발명에 따른 악보 기반 이미지 생성 서비스를 시행 받고자 하는 사용자 측에서 운영체제(41)를 토대로 전산작업을 진행하여 일련의 장치 콜업 이벤트가 발생하게 되면, 가이드 프레임 운영모듈(203) 측에서는 그 즉시, 운영정보 처리모듈(202)에 기 저장되어 있던 운영정보를 활용하여, 도 7에 도시된 바와 같은 가이드 프레임(211)을 생성하고, 생성 완료된 가이드 프레임(211)을 전자기기(40)를 통해 출력/게시할 수 있다. 이로 인해, 가이드 프레임 운영모듈(203) 측에서는 본 발명에 따른 일련의 악보 기반 이미지 생성 서비스의 운영절차가 별다른 어려움 없이 정상적으로 진행될 수 있도록 보조하게 된다.In addition, when the user's side attempting to perform the music score-based image generation service according to the present invention proceeds with the operation based on the operating system 41, and a series of device call-up events occurs, the guide frame operation module 203 side immediately, By using the operation information previously stored in the operation information processing module 202, generates a guide frame 211 as shown in Figure 7, and outputs the generated guide frame 211 through the electronic device 40 Can publish For this reason, the guide frame operation module 203 side assists the operation procedure of a series of sheet music-based image generation services according to the present invention to be normally performed without any difficulty.
이러한 기반 인프라가 갖추어진 상황 하에서, 도 8에 도시된 바와 같이, 악보음표별 색채번호 처리모듈(204) 측에서는 악보(M)를 구성하는 각 악보음표(2)의 음계를 음계별 색채번호 저장모듈(208)에 기 설정되어 있던 음계별 색채번호와 비교한다. 그 후, 각 악보음표(2)에, 해당 악보음표(2)에 상응하는 색채번호를 부여하는 역할을 수행하게 된다.8, the color number processing module 204 for the sheet music note stores the scale of each sheet music note 2 constituting the music score M on the color number storage module for each scale. It is compared with the color number for each scale previously set in (208). Thereafter, each sheet music note 2 serves to give a color number corresponding to the sheet music note 2.
각 악보음표(2)에, 해당 악보음표(2)에 상응하는 색채번호가 부여 완료되면, 도 9에 도시된 바와 같이, 악보음표별 이미지 픽셀 처리모듈(205) 측에서는 각 악보음표(2)에 상응하는 색채번호를 판독한다. 그 후, 판독 완료된 색채번호를 색채번호별 색상정보 저장모듈(210)에 기 저장되어 있던 색채번호별 색상정보와 비교하고, 이를 통해, "각 악보음표(2) 측 색채번호에 상응하는 색상을 가지는 픽셀(P)"을 생성하는 역할을 수행하게 된다.When the color numbers corresponding to the sheet music notes 2 have been assigned to each sheet music note 2, as shown in FIG. 9, the image pixel processing module 205 for each sheet music note has been assigned to each sheet music note 2 as shown in FIG. Read the corresponding color number. Thereafter, the read-out color number is compared with the color information for each color number previously stored in the color information storage module 210 for each color number, and through this, "the color corresponding to the color number for each music note 2 side is obtained. Branch serves to generate the pixel P ".
상술한 절차를 통해, "각 악보음표(2) 측 색채번호에 상응하는 색상을 가지는 픽셀(P)"이 생성 완료되면, 도 10에 도시된 바와 같이, 악보 상응 이미지 처리모듈(206) 측에서는 이미지 픽셀 구성 룰 저장모듈(209)에 기 설정되어 있던 이미지 픽셀 구성 룰을 판독한다. 그 후, 판독 완료된 이미지 픽셀 구성 룰에 따라, 각 픽셀(P)을 생성 또는 배열하여, 상기 악보(M)에 상응하는 이미지(I)를 생성하는 역할을 수행하게 된다.Through the above-described procedure, when the " pixel P having the color corresponding to the color number of each sheet music note 2 " is completed, as shown in FIG. 10, the sheet music correspondence image processing module 206 has an image. The image pixel composition rule previously set in the pixel composition rule storage module 209 is read. Thereafter, according to the read image pixel configuration rule, each pixel P is generated or arranged to generate an image I corresponding to the score.
이러한 절차 하에서, 본 발명의 악보 상응 이미지 처리모듈(206) 측에서는 "느린 박자의 악보음표(2)에 상응하는 픽셀(P)은 그 개수를 늘려, 이미지화 하는 화소 구간을 증가시켜라"라고 하는 룰을 포함하는 이미지 픽셀 구성 룰에 따라, 픽셀을 생성 또는 배열하게 된다(도 10 참조).Under this procedure, the sheet music correspondence image processing module 206 side of the present invention has a rule of "increase the number of pixels P corresponding to the sheet music note 2 of a slow beat, and increase the pixel section to image". According to the included image pixel composition rule, pixels are generated or arranged (see FIG. 10).
이 상황 하에서, 예를 들어, 3박자 길이의 점 2분음표의 형식을 취하고 있던(즉, 느린 박자의 형식을 취하고 있던) 악보음표(2)에 상응하는 픽셀(P)은 그 개수가 추가로 늘어나, 이미지화 되는 화소 구간이 증가하는 상황에 놓이게 된다.Under this situation, for example, the number of pixels P corresponding to the sheet music note 2, which is in the form of a triple beat point half note (i.e. in the form of a slow beat), is further increased in number. Increasingly, the pixel section being imaged increases.
다른 예로, 반의반의 반박자의 32분음표의 형식을 취하고 있던(즉, 빠른 박자의 형식을 취하고 있던) 악보음표(2)에 상응하는 픽셀(P)은 그 개수의 증가 없이, 이미지화 되는 화소 구간이 짧은 상황에 놓이게 된다.As another example, the pixel P corresponding to the sheet music note 2, which is in the form of a thirty-second note of the half beater of the half-halves (ie, in the form of a fast beat), has a pixel section to be imaged without increasing its number. You are in a short situation.
이러한 이미지의 생성 국면에서, 이미지 장르 처리모듈(207) 측에서는 악보 상응 이미지 처리모듈(206)과 통신을 취한다. 이미지 장르 처리모듈(207) 측에서는 상기 가이드 프레임(211)을 통해 이미지의 장르를 결정하기 위한 사용자 메시지가 입력되는 경우, 해당 사용자 메시지를 상기 악보 상응 이미지 처리모듈(206)로 전달할 수 있다. 이로 인해, 상기 악보 상응 이미지 처리모듈(206)에 의해 생성되는 이미지(I)가 상기 사용자 메시지에 상응하는 장르 특징(예컨대, 만화, 풍경화, 수채화, 초상화, 연필 뎃상 등)을 가질 수 있도록 유도하게 된다.In the generation phase of such an image, the image genre processing module 207 communicates with the music score corresponding image processing module 206. When a user message for determining the genre of an image is input through the guide frame 211, the image genre processing module 207 may transmit the corresponding user message to the score corresponding image processing module 206. Thus, the image I generated by the sheet music correspondence image processing module 206 may have a genre characteristic corresponding to the user message (eg cartoon, landscape, watercolor, portrait, pencil image, etc.). do.
이와 같이, 본 발명의 다른 실시에서는 운영체제(41) 등을 구비한 전자기기(40) 내에, "악보(M)를 구성하는 각 악보음표(2)의 음계를 기 설정되어 있던 음계별 색채번호와 비교하여, 각 악보음표(2)에, 해당 악보음표(2)에 상응하는 색채번호를 부여할 수 있는 전산모듈", "각 악보음표(2)에 상응하는 색채번호를 판독한 후, 판독된 색채번호를 기 저장되어 있던 색채번호별 색상정보와 비교하여, 각 악보음표(2) 측 색채번호에 상응하는 색상을 가지는 픽셀(P)을 생성할 수 있는 전산모듈", "기 설정되어 있던 이미지 픽셀 구성 룰을 판독한 후, 판독된 이미지 픽셀 구성 룰에 따라, 픽셀(P)을 생성 또는 배열하여, 악보(M)에 상응하는 이미지(I)를 생성할 수 있는 전산모듈" 등을 체계적으로 배치 제공할 수 있다. 때문에, 본 발명의 구현환경 하에서, 사용자 측에서는, 단지, 전자기기(40)를 단순 조작하는 지극히 간단한 절차만으로도, 자가보유 악보(M)에 상응하는 다채로운 이미지를 자동으로 생성/확보할 수 있게 된다. 결국, 별다른 어려움 없이, 악보(M)를 이미지(I)와 연계시켜, 해당 악보(M)의 부가 활용도를 좀더 극대화시킬 수 있게 된다.As described above, according to another embodiment of the present invention, in the electronic device 40 including the operating system 41 or the like, " the color scale for each musical scale which has previously been set to the musical scale of each musical score 2 constituting the musical score M, In comparison, a computer module capable of assigning each sheet music note 2 a color number corresponding to the sheet music note 2 ", " a color number corresponding to each sheet music note 2 " Computer module that can generate the pixel P having the color corresponding to the color number of each sheet music note 2 by comparing the color number with the color information for each color number previously stored, "" Preset image After reading the pixel composition rule, according to the read image pixel composition rule, a computer module capable of generating or arranging pixels P to generate an image I corresponding to the score M, etc. systematically. Can provide batch. Therefore, under the implementation environment of the present invention, on the user side, only a very simple procedure of simply operating the electronic device 40 can automatically generate / acquire a variety of images corresponding to the self-retaining score M. FIG. After all, without any difficulty, by linking the sheet music (M) with the image (I), it is possible to further maximize the additional utilization of the sheet music (M).
이러한 본 발명은 특정 분야에 국한되지 아니하며, 각종 멀티미디어 컨텐츠의 효과적인 운영이 필요한 여러 분야에서, 전반적으로 유용한 효과를 발휘한다. The present invention is not limited to a specific field, and exhibits useful effects generally in various fields requiring effective operation of various multimedia contents.
그리고, 앞에서, 본 발명의 특정한 실시 예가 설명되고 도시되었지만 본 발명이 당업자에 의해 다양하게 변형되어 실시될 가능성이 있는 것은 자명한 일이다. And, in the foregoing, specific embodiments of the present invention have been described and illustrated, but it is obvious that the present invention may be variously modified and implemented by those skilled in the art.
이와 같은 변형된 실시 예들은 본 발명의 기술적 사상이나 관점으로부터 개별적으로 이해되어서는 안되며 이와 같은 변형된 실시 예들은 본 발명의 첨부된 특허청구의 범위 안에 속한다 해야 할 것이다.Such modified embodiments should not be individually understood from the technical spirit or viewpoint of the present invention, and such modified embodiments should fall within the scope of the appended claims of the present invention.
[부호의 설명][Description of the code]
I: 이미지I: image
M: 악보M: Sheet music
10,40: 정보기기10,40: Information equipment
11,41: 운영체제11,41: operating system
20,50: 통신망20,50: network
30,60: 기능지원 서버30,60: Function Support Server
100: 이미지 기반 악보 생성장치100: image-based sheet music generating device
101,201: 인터페이스 모듈101,201: interface module
102,202: 운영정보 처리모듈102, 202: operation information processing module
103,203: 가이드 프레임 운영모듈103,203: guide frame operation module
104: 이미지 픽셀별 색채번호 처리모듈104: color number processing module for each image pixel
105: 이미지 픽셀별 음계 처리모듈105: scale processing module for each image pixel
106: 이미지 상응 악보 처리모듈106: image matching score processing module
107: 악보장르 처리모듈107: music score genre processing module
108: 색상별 색채번호 저장모듈108: color number storage module for each color
109: 이미지 스캔 룰 저장모듈109: image scan rule storage module
110: 색채번호별 음계 저장모듈110: scale storage module by color number
111: 박자 설정 룰 저장모듈111: Beat setting rule storage module
200: 악보 기반 이미지 생성장치200: sheet music based image generating device
204: 악보음표별 색채번호 처리모듈204: color number processing module for each sheet music note
205: 악보음표별 이미지 픽셀 처리모듈205: image pixel processing module for each sheet music note
206: 악보 상응 이미지 처리모듈206: music score corresponding image processing module
207: 이미지 장르 처리모듈207: Image genre processing module
208: 음계별 색채번호 저장모듈208: color number storage module for each scale
209: 이미지 픽셀 구성 룰 저장모듈209: image pixel composition rule storage module
210: 색채번호별 색상정보 저장모듈210: color information storage module for each color number

Claims (8)

  1. 운영체제를 구비한 전자기기 내에 설치되며, 이미지 기반의 악보 생성 서비스를 운영하기 위한 가이드 프레임을 상기 전자기기를 통해 출력하여 악보 생성 서비스를 운영하는 이미지 기반 악보 생성장치에 있어서.An image-based sheet music generating apparatus installed in an electronic device having an operating system and operating a sheet music generating service by outputting a guide frame for operating an image-based sheet music generating service through the electronic device.
    이미지를 구성하는 각 픽셀을 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여 각 픽셀의 색상을 판독한 후, 판독된 색상을 기 저장되어 있던 색상별 색채번호와 비교하여 각 픽셀별로, 해당 픽셀에 상응하는 색채번호를 부여하는 이미지 픽셀별 색채번호 처리모듈;Each pixel constituting the image is scanned according to the preset image scanning rules, and the color of each pixel is read, and the read color is compared with the stored color number of each color to correspond to the corresponding pixel. A color number processing module for each image pixel assigning a color number to the color number;
    각 픽셀에 상응하는 색채번호를 판독한 후, 판독된 각 색채번호를 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 음계를 설정하는 이미지 픽셀별 음계 처리모듈; 및An image pixel scale processing module configured to read a color number corresponding to each pixel and compare the read color numbers with previously stored scales for each color number, and set a scale corresponding to the corresponding pixel for each pixel; And
    각 픽셀에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표를 생성한 후, 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표에 박자를 부여하여 악보음표를 생성하고, 생성된 각 악보음표를 각 픽셀의 스캔 순서에 따라 오선보에 배열하여 상기 이미지에 상응하는 악보를 생성하는 이미지 상응 악보 처리모듈을 포함하는 것을 특징으로 하는 이미지 기반 악보 생성장치.After reading the scale corresponding to each pixel, generating a basic note corresponding to each scale, according to the preset time setting rule, giving a beat to the basic note to generate a musical score, and generating each score And an image correspondence notation processing module for generating musical notes corresponding to the image by arranging musical notes in a stair notch according to the scanning order of each pixel.
  2. 제 1 항에 있어서, 상기 색채번호는 헥스(HEX) 색채코드 또는 삼원색 색채 값 중에 어느 하나인 것을 특징으로 하는 이미지 기반 악보 생성장치.The apparatus of claim 1, wherein the color number is one of a hex color code or a three primary color value.
  3. 제 1 항에 있어서, 상기 이미지 상응 악보 처리모듈 측에서는 제1 박자 설정 룰, 또는 제2 박자 설정 룰에 따라 상기 기본음표에 박자를 부여하여, 상기 악보음표를 생성하되, 상기 제1 박자 설정 룰은 동일 음계를 가지는 기본음표의 연속 배열상태에 따라, 기본음표에 박자를 부여하는 것을 나타내고, 상기 제2 박자 설정 룰은 동일 색상으로 채워진 픽셀이 연속으로 배열되어 있지 않은 경우, 해당 픽셀에 상응하는 기본음표에는 빠른 박자를 부여하고, 동일 색상으로 채워진 픽셀이 연속으로 배열된 경우, 해당 연속 픽셀에 상응하는 기본음표에는 느린 박자를 부여하는 것을 나타내는 것을 특징으로 하는 이미지 기반 악보 생성장치.According to claim 1, wherein the image-correspondence sheet processing module side to give the beat to the base note according to the first time setting rule, or the second time setting rule, to generate the sheet music note, the first time setting rule is According to the continuous arrangement of the basic notes having the same scale, a time signature is given to the basic note, and the second time setting rule indicates that when pixels filled with the same color are not arranged in succession, the corresponding basic pixels An image-based notation generating apparatus of claim 1, wherein the note is provided with a fast beat, and when pixels filled with the same color are arranged in succession, a slow beat is given to a basic note corresponding to the continuous pixel.
  4. 제 1 항에 있어서, 상기 이미지 스캔 룰은 제1 스캔 룰, 제2 스캔 룰, 제3 스캔 룰, 제4 스캔 룰, 제5 스캔 룰, 및 제6 스캔 룰 중 적어도 하나를 포함하되, The method of claim 1, wherein the image scan rule includes at least one of a first scan rule, a second scan rule, a third scan rule, a fourth scan rule, a fifth scan rule, and a sixth scan rule.
    상기 제1 스캔 룰은 위쪽에 배열된 픽셀로부터 아래쪽에 배열된 픽셀로 이미지를 스캔하는 것을 나타내고, 상기 제2 스캔 룰은 아래쪽에 배열된 픽셀로부터 위쪽에 배열된 픽셀로 이미지를 스캔하는 것을 나타내며 , 상기 제3 스캔 룰은 좌측에 배열된 픽셀로부터 우측에 배열된 픽셀로 이미지를 스캔하는 것을 나타내고, 상기 제4 스캔 룰은 우측에 배열된 픽셀로부터 좌측에 배열된 픽셀로 이미지를 스캔하는 것을 나타내며, 상기 제5 스캔룰은 포물선 모양의 스캔라인을 형성하면서, 이미지를 스캔하는 것을 나타내며, 제6 스캔 룰은 원형 스프링 모양의 스캔라인을 형성하면서, 이미지를 스캔하는 것을 나타내는 것을 특징으로 하는 이미지 기반 악보 생성장치.The first scan rule indicates scanning an image from the pixels arranged above and the pixels arranged below, and the second scan rule indicates scanning the image from the pixels arranged below and the pixels arranged above. The third scan rule indicates scanning an image from the pixels arranged on the left side to the pixel arranged on the right side, and the fourth scan rule indicates scanning the image from the pixels arranged on the right side to the pixel arranged on the left side, The fifth scan rule indicates scanning an image while forming a parabolic scan line, and the sixth scan rule indicates scanning an image while forming a circular spring shape scan line. Generating device.
  5. 제 1 항에 있어서, 상기 이미지 상응 악보 처리모듈과 통신하는 악보 장르 처리모듈을 더 포함하되,The music score processing module of claim 1, further comprising a music genre processing module in communication with the image corresponding music processing module,
    상기 악보 장르 처리모듈은 상기 가이드 프레임을 통해 악보의 장르를 결정하기 위한 사용자 메시지가 입력되는 경우, 해당 사용자 메시지를 상기 이미지 상응 악보 처리모듈로 전달하여 상기 이미지 상응 악보 처리모듈에 의해 생성되는 악보가 상기 사용자 메시지에 상응하는 장르 특징을 가질 수 있도록 유도하도록 구성되는 것을 특징으로 하는 이미지 기반 악보 생성장치.When the user message for determining the genre of sheet music is input through the guide frame, the sheet music genre processing module transmits the corresponding user message to the image corresponding sheet music processing module to display the sheet music generated by the image corresponding sheet music processing module. And generating a genre feature corresponding to the user message.
  6. 운영체제를 구비한 전자기기 내에 설치되며, 악보 기반의 이미지 생성 서비스를 운영하기 위한 가이드 프레임을 상기 전자기기를 통해 출력하여 이미지 생성 서비스를 운영하는 악보 기반 이미지 생성장치에 있어서.A music score-based image generating device installed in an electronic device having an operating system and operating a image generating service by outputting a guide frame for operating a music score-based image generating service through the electronic device.
    악보를 구성하는 각 악보음표의 음계를 기 설정되어 있던 음계별 색채번호와 비교하여, 각 악보음표에, 해당 악보음표에 상응하는 색채번호를 부여하는 악보음표별 색채번호 처리모듈;A color number processing module for each sheet music note, which compares the scale of each sheet music note constituting the sheet music with a preset color number for each score, and gives each sheet music note a color number corresponding to the sheet music note;
    각 악보음표에 상응하는 색채번호를 판독한 후, 판독된 색채번호를 기 저장되어 있던 색채번호별 색상정보와 비교하여, 각 악보음표 측 색채번호에 상응하는 색상을 가지는 픽셀을 생성하는 악보음표별 이미지 픽셀 처리모듈; 및After reading the color number corresponding to each sheet music score, comparing the read color number with the previously stored color information for each color number, and for each sheet music score to generate a pixel having a color corresponding to the color number of each sheet music score An image pixel processing module; And
    기 설정되어 있던 이미지 픽셀 구성 룰을 판독한 후, 판독된 이미지 픽셀 구성 룰에 따라, 픽셀을 생성 또는 배열하여, 상기 악보에 상응하는 이미지를 생성하는 악보 상응 이미지 처리모듈을 포함하는 것을 특징으로 하는 악보 기반 이미지 생성장치.And a music score correspondence image processing module configured to read the preset image pixel composition rule and to generate or arrange pixels according to the read image pixel composition rule to generate an image corresponding to the sheet music. Sheet music based image generator.
  7. 제 6 항에 있어서, 상기 악보 상응 이미지 처리모듈 측에서는, 느린 박자의 악보음표에 상응하는 픽셀은 그 개수를 늘려, 이미지화 하는 화소 구간을 증가시키는 것을 나타내는 룰을 포함하는 이미지 픽셀 구성 룰에 따라, 픽셀을 생성 또는 배열하는 것을 특징으로 하는 악보 기반 이미지 생성장치.The pixel according to the image pixel composition rule of claim 6, wherein, on the sheet music correspondence image processing module side, a pixel corresponding to a sheet music note of a slow beat increases its number to increase a pixel section to be imaged. Music score-based image generating device, characterized in that for generating or arranging.
  8. 제 6 항에 있어서, 상기 악보 상응 이미지 처리모듈과 통신하는 이미지 장르 처리 모듈을 더 포함하되, 상기 이미지 장르 처리 모듈은 상기 가이드 프레임을 통해 이미지의 장르를 결정하기 위한 사용자 메시지가 입력되는 경우, 해당 사용자 메시지를 상기 악보 상응 이미지 처리모듈로 전달하여, 상기 악보 상응 이미지 처리모듈에 의해 생성되는 이미지가 상기 사용자 메시지에 상응하는 장르 특징을 가질 수 있도록 유도하도록 구성되는 것을 특징으로 하는 악보 기반 이미지 생성장치.The image genre processing module of claim 6, further comprising an image genre processing module communicating with the sheet music correspondence image processing module, wherein the image genre processing module is configured to input a user message for determining a genre of an image through the guide frame. The sheet music-based image generating device is configured to transmit a user message to the sheet music correspondence image processing module so that an image generated by the sheet music correspondence image processing module may have a genre characteristic corresponding to the user message. .
PCT/KR2018/005081 2018-04-06 2018-05-02 Image-based sheet music generation apparatus and sheet music-based image generation apparatus WO2019194345A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2018-0040617 2018-04-06
KR1020180040617A KR20190117307A (en) 2018-04-06 2018-04-06 The apparatus which generates a music based on the image and the apparatus which generates a image based on the music

Publications (1)

Publication Number Publication Date
WO2019194345A1 true WO2019194345A1 (en) 2019-10-10

Family

ID=68101001

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/005081 WO2019194345A1 (en) 2018-04-06 2018-05-02 Image-based sheet music generation apparatus and sheet music-based image generation apparatus

Country Status (2)

Country Link
KR (1) KR20190117307A (en)
WO (1) WO2019194345A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113160781A (en) * 2021-04-12 2021-07-23 广州酷狗计算机科技有限公司 Audio generation method and device, computer equipment and storage medium

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000172252A (en) * 1998-12-09 2000-06-23 Atr Media Integration & Communications Res Lab Media conversion device
KR100772168B1 (en) * 2006-09-14 2007-10-31 이창주 Music and color coupling system, method thereof and recorded medium recorded program performing it
JP2008233576A (en) * 2007-03-22 2008-10-02 Hyphenation:Kk Method for making musical piece and musical score into video and image
KR20160141070A (en) * 2015-05-27 2016-12-08 (주)제이유엑스 apparatus for music playing by using image, method for music playing by using image and storage medium for music playing by using image
KR20180004040A (en) * 2017-12-11 2018-01-10 전대연 Smart method of Sound-Color expression and by use of RGB-Color code, music-painting app system

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170137526A (en) 2016-06-03 2017-12-13 서나희 Composing method using composition program
KR101807754B1 (en) 2016-09-21 2017-12-13 김기윤 Server and method for generating music

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000172252A (en) * 1998-12-09 2000-06-23 Atr Media Integration & Communications Res Lab Media conversion device
KR100772168B1 (en) * 2006-09-14 2007-10-31 이창주 Music and color coupling system, method thereof and recorded medium recorded program performing it
JP2008233576A (en) * 2007-03-22 2008-10-02 Hyphenation:Kk Method for making musical piece and musical score into video and image
KR20160141070A (en) * 2015-05-27 2016-12-08 (주)제이유엑스 apparatus for music playing by using image, method for music playing by using image and storage medium for music playing by using image
KR20180004040A (en) * 2017-12-11 2018-01-10 전대연 Smart method of Sound-Color expression and by use of RGB-Color code, music-painting app system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113160781A (en) * 2021-04-12 2021-07-23 广州酷狗计算机科技有限公司 Audio generation method and device, computer equipment and storage medium
CN113160781B (en) * 2021-04-12 2023-11-17 广州酷狗计算机科技有限公司 Audio generation method, device, computer equipment and storage medium

Also Published As

Publication number Publication date
KR20190117307A (en) 2019-10-16

Similar Documents

Publication Publication Date Title
US7835510B2 (en) Conference system and terminal apparatus
WO2011059175A2 (en) Display apparatus, client, image display system including the same, and image displaying method
WO2012118299A2 (en) Method and apparatus for sharing media based on social network in communication system
WO2011059176A2 (en) Display apparatus, terminal, and image display method
WO2011059201A2 (en) Image display apparatus, camera and control method of the same
WO2010101434A2 (en) Apparatus and method of generating panoramic image and computer-readable recording medium storing program for executing the method
WO2020111426A1 (en) Method and system of presenting moving images or videos corresponding to still images
WO2013105760A1 (en) Contents providing system and operating method thereof
WO2018084536A1 (en) Time slice image provision server, method and user terminal
WO2018074618A1 (en) Method and system for sharing effect for image
WO2019027070A1 (en) Website production support server, and method for supporting production of website by same server
WO2017222258A1 (en) Multilateral video communication system and method using 3d depth camera
EP3979631A1 (en) Communication management apparatus, image communication system, communication management method, and carrier means
WO2019194345A1 (en) Image-based sheet music generation apparatus and sheet music-based image generation apparatus
WO2022216020A1 (en) Image/audio acquisition or editing apparatus for generating original image/audio file or deepfake-modulated file including metadata associated with generation history of image/audio, hash bank server for receiving and storing hash value related to original image/audio file or deepfake-modulated file, and server and method for receiving and processing original image/audio file or deepfake-modulated file
WO2019216528A1 (en) Method for providing virtual exhibition space by using 2.5-dimensionalization
WO2020166849A1 (en) Display system for sensing defect on large-size display
EP3476081A1 (en) Providing service according to user authority
WO2023167496A1 (en) Method for composing music by using artificial intelligence
WO2019132126A1 (en) Operation device for graphic content-based composition service
WO2020116740A1 (en) Real-time broadcasting editing system and editing method
WO2023085493A1 (en) Electronic device for supporting content editing, and operating method therefor
WO2022145505A1 (en) Three-dimensional image rendering method for holographic printer
WO2024039026A1 (en) Method, computer device, and computer program for generating multi-angle image-based 3d avatar
WO2024039025A1 (en) Method, computer device, and computer program for generating facial expression through image synthesis using 3d character-based standard model

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18913211

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18913211

Country of ref document: EP

Kind code of ref document: A1