KR20190117307A - The apparatus which generates a music based on the image and the apparatus which generates a image based on the music - Google Patents

The apparatus which generates a music based on the image and the apparatus which generates a image based on the music Download PDF

Info

Publication number
KR20190117307A
KR20190117307A KR1020180040617A KR20180040617A KR20190117307A KR 20190117307 A KR20190117307 A KR 20190117307A KR 1020180040617 A KR1020180040617 A KR 1020180040617A KR 20180040617 A KR20180040617 A KR 20180040617A KR 20190117307 A KR20190117307 A KR 20190117307A
Authority
KR
South Korea
Prior art keywords
image
pixel
color
processing module
sheet music
Prior art date
Application number
KR1020180040617A
Other languages
Korean (ko)
Inventor
심재훈
Original Assignee
심재훈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 심재훈 filed Critical 심재훈
Priority to KR1020180040617A priority Critical patent/KR20190117307A/en
Priority to PCT/KR2018/005081 priority patent/WO2019194345A1/en
Publication of KR20190117307A publication Critical patent/KR20190117307A/en

Links

Images

Classifications

    • G06K9/4652—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/56—Extraction of image or video features relating to colour
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10G—REPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
    • G10G1/00—Means for the representation of music
    • G10G1/02—Chord or note indicators, fixed or adjustable, for keyboard of fingerboards
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/005—Musical accompaniment, i.e. complete instrumental rhythm synthesis added to a performed melody, e.g. as output by drum machines

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Auxiliary Devices For Music (AREA)

Abstract

The present invention relates to a device for generating a score based on an image and a device for generating an image based on a score, comprising: a color number processing module for each image pixel; a scale processing module for each image pixel; and an image-correspondent score processing module. Therefore, a score is linked with an image, such that additional utilization of the score can be maximized.

Description

이미지 기반 악보 생성장치 및 악보 기반 이미지 생성장치{The apparatus which generates a music based on the image and the apparatus which generates a image based on the music}The apparatus which generates a music based on the image and the apparatus which generates a image based on the music}

본 발명은 예컨대, 사진, 그림, 영상 등과 같은 이미지를 기반으로 하여 그에 상응하는 악보를 생성해주거나, 악보를 기반으로 하여, 그에 상응하는 이미지를 생성해주는 이미지 기반 악보 생성장치 및 악보 기반 이미지 생성장치에 관한 것이다.According to the present invention, for example, an image-based sheet music generating apparatus and a sheet music-based image generating apparatus generating a sheet music corresponding to the image based on an image such as a picture, a picture, a video, or the like, or generating a corresponding image based on the sheet music. It is about.

최근, 전기/전자/프로그램 관련기술이 급격한 발전을 이루면서, 다양한 유형의 자동 작곡시스템들이 폭 넓게 개발/보급되고 있다.Recently, with the rapid development of electric / electronic / program related technologies, various types of automatic composition systems have been widely developed / distributed.

예를 들어, 대한민국등록특허 제10-875호(명칭: 휴대단말을 이용한 음악작곡시스템)(2010.12.14.자 공고), 대한민국등록특허 제10-1807754호(명칭: 자작곡 생성 서버 및 그 방법)(2017.12.13,자 공고), 대한민국공개특허 제10-2017-137526호(명칭: 작곡 프로그램을 이용한 작곡 방법)(2017.12.13.자 공개) 등에는 이러한 종래의 기술에 따른 자동 작곡시스템들의 일례가 좀더 상세하게 개시되어 있다.For example, the Republic of Korea Patent No. 10-875 (name: music composition system using a mobile terminal) (published December 14, 2010), the Republic of Korea Patent No. 10-1807754 (name: self-producing server and method) (December 13, 2017), Korean Patent Publication No. 10-2017-137526 (name: composition method using a composition program) (published December 13, 2017) and the like, examples of such automatic composition systems according to the prior art Is disclosed in more detail.

한편, 근래에, 사진, 영상 등의 촬영이 가능한 여러 타입의 카메라 구비형 전자기기(예컨대, 스마트 폰, 테블릿 PC 등)의 보급이 급속히 확대되면서, 각 사용자들 간에 유통되는 이미지(예컨대, 사진, 영상, 그림 등)의 유통규모 또한 빠른 성장을 보이고 있다.Meanwhile, as the spread of various types of camera-equipped electronic devices (eg, smartphones, tablet PCs, etc.) capable of capturing photographs, images, and the like rapidly expands, images (eg, photographs) distributed between users are recently expanded. , Distribution of video, pictures, etc. are also growing rapidly.

물론, 상술한 바와 같이, 각 사용자들 간에 유통되는 이미지(예컨대, 사진, 영상, 그림 등)의 유통규모가 빠르게 성장하면서, 예를 들어, 이미지를 자동 작곡시스템과 연계시켜, 이미지의 부가 활용도를 좀더 극대화하고자 하는 사용자 욕구 또한 점차 커지고 있다.Of course, as described above, while the distribution scale of images (eg, photos, images, pictures, etc.) distributed between users grows rapidly, for example, by linking images with an automatic composition system, User desire to maximize more is also increasing.

그러나, 상황이 이러함에도 불구하고, 종래의 체제 하에서, 자동 작곡시스템 분야와, 그래픽 촬영/유통 관련 시스템 분야는 별개의 기술시장을 이루며 독립적으로 성장하고 있었기 때문에, 별도의 조치가 취해지지 않는 한, 사용자 측에서는 이미지를 작곡과 연계시켜, 해당 이미지의 부가 활용도를 좀더 극대화하고자 하는 욕구가 있음에도 불구하고 이를 전혀 충족시킬 수 없었다.However, despite this situation, under the conventional system, since the field of automatic composition system and the field of graphic shooting / distribution related systems were growing independently in a separate technology market, unless special measures were taken, On the user's side, even though there was a desire to link the image with the composition to maximize the additional utilization of the image, it could not be satisfied at all.

한편, 근래에, 음악의 청취가 가능한 전자기기(예컨대, 스마트 폰, 테블릿 PC 등)의 보급이 급속히 확대되면서, 각 사용자들 간에 유통되는 음악의 유통규모 또한 빠른 성장을 보이고 있다.On the other hand, in recent years, as the spread of electronic devices capable of listening to music (eg, smart phones, tablet PCs, etc.) is rapidly expanding, the distribution of music distributed among users is also showing rapid growth.

물론, 상술한 바와 같이, 각 사용자들 간에 유통되는 음악의 유통규모가 빠르게 성장하면서, 예를 들어, 음악을 구성하는 악보를 이미지와 연계시켜, 해당 악보의 부가 활용도를 좀더 극대화하고자 하는 사용자 욕구 또한 점차 커지고 있다.Of course, as described above, as the distribution scale of the music distributed among the users grows rapidly, for example, the user desire to further maximize the additional utilization of the sheet music by linking the sheet music constituting the music with an image. It's getting bigger.

그러나, 상황이 이러함에도 불구하고, 종래의 체제 하에서, 악보와 이미지는 그 적용분야가 완전히 다른, 상호 독립적인 창작물로 유통되고 있었기 때문에, 별도의 조치가 취해지지 않는 한, 사용자 측에서는 음악을 구성하는 악보를 이미지와 연계시켜, 해당 악보의 부가 활용도를 좀더 극대화하고자 하는 욕구가 있음에도 불구하고 이를 전혀 충족시킬 수 없었다.However, despite this situation, since the scores and images were distributed as mutually independent creations with completely different fields of application under the conventional system, the user may compose music on the user side unless special measures are taken. Even though there was a desire to link the score with the image and maximize the additional use of the score, it could not be satisfied at all.

대한민국등록특허 제10-875호(명칭: 휴대단말을 이용한 음악작곡시스템)(2010.12.14.자 공고)Republic of Korea Patent No. 10-875 (Name: Music composition system using a mobile terminal) (announced on December 14, 2010) 대한민국등록특허 제10-1807754호(명칭: 자작곡 생성 서버 및 그 방법)(2017.12.13,자 공고)Republic of Korea Patent No. 10-1807754 (name: self-produced server and method) (2017.12.13, party announcement) 대한민국공개특허 제10-2017-137526호(명칭: 작곡 프로그램을 이용한 작곡 방법)(2017.12.13.자 공개)Republic of Korea Patent Publication No. 10-2017-137526 (Name: composition method using a composition program) (published Dec. 13, 2017)

따라서, 본 발명의 목적은 운영체제 등을 구비한 전자기기 내에, <이미지를 구성하는 각 픽셀을 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여, 각 픽셀의 색상을 판독한 후, 판독된 색상을 기 저장되어 있던 색상별 색채번호와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 색채번호를 부여할 수 있는 전산모듈>, <각 픽셀에 상응하는 색채번호를 판독한 후, 판독된 각 색채번호를 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 음계를 설정할 수 있는 전산모듈>, <각 픽셀에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표를 생성한 후, 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표에 박자를 부여하여, 악보음표를 생성하고, 생성된 각 악보음표를 각 픽셀의 스캔 순서에 따라 오선보에 배열하여, 상기 이미지에 상응하는 악보를 생성할 수 있는 전산모듈> 등을 체계적으로 배치 제공하고, 이를 통해, 사용자 측에서, 단지, 전자기기를 단순 조작하는 지극히 간단한 절차만으로도, 자가보유 이미지(예컨대, 사진, 영상, 그림 등)에 상응하는 악보를 자동으로 생성/확보할 수 있도록 유도함으로써, 결국, 별다른 어려움 없이, 이미지를 작곡과 연계시켜, 해당 이미지의 부가 활용도를 좀더 극대화시킬 수 있도록 가이드 하는데 있다.Accordingly, an object of the present invention is to scan each pixel constituting an image according to a preset image scan rule, read the color of each pixel, and then read the read color in an electronic device having an operating system or the like. Computational module that can assign the color number corresponding to the corresponding pixel for each pixel by comparing with the stored color number for each color>, <Read the color number corresponding to each pixel, and then read each color number read. Computational module that can set the scale corresponding to the corresponding pixel for each pixel, compared to the previously stored scale for each color number>, <Reads the scale corresponding to each pixel, and creates the basic note corresponding to each scale. Then, according to the time signature set in advance, a time signature is given to the basic note to generate a notation note, and each generated notation note is arranged on the stave in accordance with the scanning order of each pixel. And systematically arrange and provide a computer module> capable of generating a music score corresponding to the image, and through this, on the user's side, a simple procedure of simply manipulating an electronic device can provide a self-retaining image (eg, a photo, By inducing them to automatically generate / acquire music scores corresponding to images, pictures, etc., in the end, it is possible to guide the maximization of additional utilization of the image by linking the image with the composition without any difficulty.

또한, 본 발명의 다른 목적은 운영체제 등을 구비한 전자기기 내에, <악보를 구성하는 각 악보음표의 음계를 기 설정되어 있던 음계별 색채번호와 비교하여, 각 악보음표에, 해당 악보음표에 상응하는 색채번호를 부여할 수 있는 전산모듈>, <각 악보음표에 상응하는 색채번호를 판독한 후, 판독된 색채번호를 기 저장되어 있던 색채번호별 색상정보와 비교하여, 각 악보음표 측 색채번호에 상응하는 색상을 가지는 픽셀을 생성할 수 있는 전산모듈>, <기 설정되어 있던 이미지 픽셀 구성 룰을 판독한 후, 판독된 이미지 픽셀 구성 룰에 따라, 픽셀을 생성 또는 배열하여, 악보에 상응하는 이미지를 생성할 수 있는 전산모듈> 등을 체계적으로 배치 제공하고, 이를 통해, 사용자 측에서, 단지, 전자기기를 단순 조작하는 지극히 간단한 절차만으로도, 자가보유 악보에 상응하는 이미지를 자동으로 생성/확보할 수 있도록 유도함으로써, 결국, 별다른 어려움 없이, 악보를 이미지와 연계시켜, 해당 악보의 부가 활용도를 좀더 극대화시킬 수 있도록 가이드 하는데 있다.Further, another object of the present invention is to compare the musical scale of each musical score constituting the musical score with a preset color number for each musical scale in an electronic device equipped with an operating system or the like, and correspond to the musical score for each musical score. Computer module for assigning color numbers to the color number>, <Read color number corresponding to each music note, and compare the read color number with the color information for each color number previously stored. Computation module capable of generating pixels having a color corresponding to the < > < &lt; Preset image pixel composition rule, and then generating or arranging pixels according to the read image pixel composition rule, Computerized module> which can generate images, etc. is provided systematically, and through this, on the user's side, only the extremely simple procedure of simple operation of electronic devices, self-holding By inducing them to automatically generate / acquire images corresponding to the scores, in the end, the scores are guided to maximize the additional utilization of the scores by linking the scores with the images without any difficulty.

본 발명의 또 다른 목적들은 다음의 상세한 설명과 첨부된 도면으로부터 보다 명확해질 것이다.Still other objects of the present invention will become more apparent from the following detailed description and the accompanying drawings.

상기와 같은 목적을 달성하기 위하여 본 발명에서는 운영체제를 구비한 전자기기 내에 설치되며, 이미지 기반의 악보 생성 서비스를 운영하기 위한 가이드 프레임을 상기 전자기기를 통해 출력하여 운영하는 이미지 기반 악보 생성장치에 있어서. 이미지를 구성하는 각 픽셀을 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여, 각 픽셀의 색상을 판독한 후, 판독된 색상을 기 저장되어 있던 색상별 색채번호와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 색채번호를 부여하는 이미지 픽셀별 색채번호 처리모듈과; 각 픽셀에 상응하는 색채번호를 판독한 후, 판독된 각 색채번호를 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 음계를 설정하는 이미지 픽셀별 음계 처리모듈과; 각 픽셀에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표를 생성한 후, 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표에 박자를 부여하여, 악보음표를 생성하고, 생성된 각 악보음표를 각 픽셀의 스캔 순서에 따라 오선보에 배열하여, 상기 이미지에 상응하는 악보를 생성하는 이미지 상응 악보 처리모듈을 포함하는 것을 특징으로 하는 이미지 기반 악보 생성장치를 개시한다.In order to achieve the above object in the present invention is installed in an electronic device having an operating system, in the image-based sheet music generating apparatus for outputting and operating a guide frame for operating an image-based sheet music generating service through the electronic device; . Each pixel constituting the image is scanned according to a preset image scanning rule, the color of each pixel is read, and then the read color is compared with the stored color number for each color, and for each pixel, A color number processing module for each image pixel which assigns a color number corresponding to the color number; After reading the color number corresponding to each pixel, the color processing module for each image pixel to set the scale corresponding to the corresponding pixel for each pixel by comparing the read color number with the previously stored scale for each color number; ; After reading the scale corresponding to each pixel, generating a basic note corresponding to each scale, and applying a beat to the basic note according to a preset time setting rule to generate a musical score, Disclosed is an image-based sheet music generating apparatus, comprising an image correspondence sheet music processing module for arranging sheet music notes in a staircase according to the scanning order of each pixel, thereby generating the sheet music corresponding to the image.

또한, 본 발명의 다른 측면에서는 운영체제를 구비한 전자기기 내에 설치되며, 악보 기반의 이미지 생성 서비스를 운영하기 위한 가이드 프레임을 상기 전자기기를 통해 출력하여 운영하는 악보 기반 이미지 생성장치에 있어서. 악보를 구성하는 각 악보음표의 음계를 기 설정되어 있던 음계별 색채번호와 비교하여, 각 악보음표에, 해당 악보음표에 상응하는 색채번호를 부여하는 악보음표별 색채번호 처리모듈과; 각 악보음표에 상응하는 색채번호를 판독한 후, 판독된 색채번호를 기 저장되어 있던 색채번호별 색상정보와 비교하여, 각 악보음표 측 색채번호에 상응하는 색상을 가지는 픽셀을 생성하는 악보음표별 이미지 픽셀 처리모듈과; 기 설정되어 있던 이미지 픽셀 구성 룰을 판독한 후, 판독된 이미지 픽셀 구성 룰에 따라, 픽셀을 생성 또는 배열하여, 상기 악보에 상응하는 이미지를 생성하는 악보 상응 이미지 처리모듈을 포함하는 것을 특징으로 하는 악보 기반 이미지 생성장치를 개시한다.In another aspect of the present invention, in the sheet music-based image generating device installed in the electronic device having an operating system, and outputs and operates a guide frame for operating a sheet music-based image generation service through the electronic device. A color number processing module for each sheet music note, which compares the scale of each sheet music note constituting the sheet music with a preset color number for each score, and gives each sheet music note a color number corresponding to the sheet music note; After reading the color number corresponding to each sheet music score, comparing the read color number with the previously stored color information for each color number, and for each sheet music score to generate a pixel having a color corresponding to the color number of each sheet music score An image pixel processing module; And a music score correspondence image processing module configured to read the preset image pixel composition rule and to generate or arrange pixels according to the read image pixel composition rule to generate an image corresponding to the sheet music. A musical score based image generating apparatus is disclosed.

본 발명에서는 운영체제 등을 구비한 전자기기 내에, <이미지를 구성하는 각 픽셀을 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여, 각 픽셀의 색상을 판독한 후, 판독된 색상을 기 저장되어 있던 색상별 색채번호와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 색채번호를 부여할 수 있는 전산모듈>, <각 픽셀에 상응하는 색채번호를 판독한 후, 판독된 각 색채번호를 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 음계를 설정할 수 있는 전산모듈>, <각 픽셀에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표를 생성한 후, 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표에 박자를 부여하여, 악보음표를 생성하고, 생성된 각 악보음표를 각 픽셀의 스캔 순서에 따라 오선보에 배열하여, 상기 이미지에 상응하는 악보를 생성할 수 있는 전산모듈> 등을 체계적으로 배치 제공하기 때문에, 본 발명의 구현환경 하에서, 사용자 측에서는, 단지, 전자기기를 단순 조작하는 지극히 간단한 절차만으로도, 자가보유 이미지(예컨대, 사진, 영상, 그림 등)에 상응하는 악보를 자동으로 생성/확보할 수 있게 되며, 결국, 별다른 어려움 없이, 이미지를 작곡과 연계시켜, 해당 이미지의 부가 활용도를 좀더 극대화시킬 수 있게 된다.In the present invention, in the electronic device having an operating system or the like, <each pixel constituting the image is scanned according to a preset image scanning rule, and the color of each pixel is read, and then the read color is previously stored. Computational module that can assign a color number corresponding to the corresponding pixel for each pixel in comparison with the star color number>, <Read the color number corresponding to each pixel, and then store each read color number. Computational module that can set the scale corresponding to the pixel for each pixel by comparing with the scale for each color number>, <Read the scale corresponding to each pixel, and generate the basic note corresponding to each scale. In accordance with the set time setting rule, a time signature is given to the basic note to generate a sheet music note, and each generated sheet music note is arranged in a stave in the scanning order of each pixel. In order to systematically arrange and provide a computer module for generating a musical score corresponding to the present invention, under the implementation environment of the present invention, the user side may use a self-retaining image (e.g., It is possible to automatically generate / acquire music scores corresponding to pictures, images, pictures, etc., and eventually, it is possible to maximize the additional utilization of the image by linking the image with the composition without any difficulty.

또한, 본 발명에서는 운영체제 등을 구비한 전자기기 내에, <악보를 구성하는 각 악보음표의 음계를 기 설정되어 있던 음계별 색채번호와 비교하여, 각 악보음표에, 해당 악보음표에 상응하는 색채번호를 부여할 수 있는 전산모듈>, <각 악보음표에 상응하는 색채번호를 판독한 후, 판독된 색채번호를 기 저장되어 있던 색채번호별 색상정보와 비교하여, 각 악보음표 측 색채번호에 상응하는 색상을 가지는 픽셀을 생성할 수 있는 전산모듈>, <기 설정되어 있던 이미지 픽셀 구성 룰을 판독한 후, 판독된 이미지 픽셀 구성 룰에 따라, 픽셀을 생성 또는 배열하여, 악보에 상응하는 이미지를 생성할 수 있는 전산모듈> 등을 체계적으로 배치 제공하기 때문에, 본 발명의 구현환경 하에서, 사용자 측에서는, 단지, 전자기기를 단순 조작하는 지극히 간단한 절차만으로도, 자가보유 악보에 상응하는 이미지를 자동으로 생성/확보할 수 있게 되며, 결국, 별다른 어려움 없이, 악보를 이미지와 연계시켜, 해당 악보의 부가 활용도를 좀더 극대화시킬 수 있게 된다.In the present invention, in the electronic device provided with an operating system or the like, the color scale of each sheet music note constituting the sheet music is compared with the preset color numbers of the scales, and the color numbers corresponding to the sheet music notes correspond to the sheet music notes. Computation module that can be assigned to>, <Read color number corresponding to each sheet music note, and compare the read color number with the color information for each color number previously stored, corresponding to the color number of each sheet music note Computation module that can generate pixels with color>, <Read image pixel composition rule, and then generate or arrange pixels according to the read image pixel composition rule to generate an image corresponding to the score. In order to systematically arrange and provide a computer module, etc., in the implementation environment of the present invention, on the user side, an extremely simple procedure of simply operating an electronic device is simple. As also, the self-image that corresponds to the holding music is able to automatically create / secure in, after all, linked to the music and the images, without any difficulty, it is possible to further maximize the utilization of the additional notes.

도 1은 본 발명에 따른 이미지 기반 악보 생성장치의 세부적인 구성을 개념적으로 도시한 예시도.
도 2는 본 발명에 따른 가이드 프레임의 게시 패턴을 개념적으로 도시한 예시도.
도 3 내지 도 5는 본 발명에 따른 이미지 기반 악보 생성장치의 세부적인 기능수행절차를 개념적으로 도시한 예시도.
도 6은 본 발명의 다른 실시에 따른 악보 기반 이미지 생성장치의 세부적인 구성을 개념적으로 도시한 예시도.
도 7은 본 발명의 다른 실시에 따른 가이드 프레임의 게시 패턴을 개념적으로 도시한 예시도.
도 8 내지 도 10은 본 발명의 다른 실시에 따른 악보 기반 이미지 생성장치의 세부적인 기능수행절차를 개념적으로 도시한 예시도.1 is an exemplary diagram conceptually showing a detailed configuration of an image-based sheet music generating apparatus according to the present invention.
2 conceptually illustrates a publication pattern of a guide frame according to the present invention;
3 to 5 is an exemplary diagram conceptually showing a detailed functional procedure of the image-based sheet music generating apparatus according to the present invention.
6 is an exemplary diagram conceptually showing a detailed configuration of a music score-based image generating apparatus according to another embodiment of the present invention.
7 is an exemplary view conceptually showing a posting pattern of a guide frame according to another embodiment of the present invention.
8 to 10 are conceptual views showing the detailed functional procedure of the sheet music-based image generating apparatus according to another embodiment of the present invention.

이하, 첨부된 도면을 참조하여, 본 발명의 각 실시에 따른 이미지 기반 악보 생성장치 및 악보 기반 이미지 생성장치를 좀더 상세히 설명하면 다음과 같다.Hereinafter, an image-based sheet music generating apparatus and a sheet music-based image generating apparatus according to each embodiment of the present invention will be described in detail with reference to the accompanying drawings.

도 1에 도시된 바와 같이, 본 발명에 따른 이미지 기반 악보 생성장치(100)는 운영체제(11)를 구비한 전자기기(10)(예컨대, 스마트 폰, 테블릿 PC 등) 내에 설치되는 운영정보 처리모듈(102), 가이드 프레임 운영모듈(103), 이미지 픽셀별 색채번호 처리모듈(104), 이미지 픽셀별 음계 처리모듈(105), 이미지 상응 악보 처리모듈(106), 악보장르 처리모듈(107), 색상별 색채번호 저장모듈(108), 이미지 스캔 룰 저장모듈(109), 색채번호별 음계 저장모듈(110), 박자 설정 룰 저장모듈(111) 등이 긴밀하게 조합된 구성을 취하게 된다.As shown in FIG. 1, the image-based music score generating apparatus 100 according to the present invention is an operation information processing installed in an electronic device 10 (eg, a smartphone, a tablet PC, etc.) having an operating system 11. Module 102, guide frame operation module 103, color number processing module 104 for each image pixel, scale processing module 105 for each image pixel, image corresponding sheet music processing module 106, sheet music genre processing module 107 The color number storage module 108 for each color, the image scan rule storage module 109, the scale storage module 110 for color numbers, the time setting rule storage module 111, and the like are closely combined.

이때, 운영정보 처리모듈(102) 측에서는 이미지 기반 악보 생성 서비스에 필요한 각종 운영정보, 예를 들어, 운영체제(11)의 등록정보, 기능지원 서버(30)의 등록정보, 통신 세션의 형성/유지를 위한 프로그램/소스 정보, 각 전산모듈들의 프로세스 진행을 위한 프로그램/소스 정보, 가이드 프레임(112)의 생성/게시/운영을 위한 문자/영상/이미지/프로그램 정보 등을 저장/관리하는 역할을 수행함과 아울러, 통신망(20)을 매개로 기능지원 서버(30)와 통신을 취하여, 각 전산모듈들의 업-데이트 정보를 포함하는 기능지원정보를 수신하고, 이를 각 전산모듈 측의 기능에 반영하는 역할을 수행함으로써, 본 발명에 따른 일련의 이미지 기반 악보 생성 서비스 절차가 별다른 어려움 없이 정상적으로 진행될 수 있도록 보조하게 된다.At this time, the operation information processing module 102, the various operation information required for the image-based sheet music generation service, for example, the registration information of the operating system 11, the registration information of the function support server 30, the formation / maintenance of the communication session Program / source information, program / source information for process progress of each computer module, text / video / image / program information for generation / posting / operation of guide frame 112, and the like. In addition, by communicating with the function support server 30 via the communication network 20, and receives the function support information including the update information of each computer module, and reflects this to the function of each computer module side By doing so, a series of image-based sheet music generating service procedures according to the present invention assists to proceed normally without any difficulty.

또한, 가이드 프레임 운영모듈(103) 측에서는 본 발명에 따른 이미지 기반 악보 생성 서비스를 시행 받고자 하는 사용자 측에서, 운영체제(11)를 토대로 전산작업을 진행하여, 일련의 장치 콜업 이벤트가 발생하게 되면, 그 즉시, 운영정보 처리모듈(102)에 기 저장되어 있던 운영정보를 활용하여, 도 2에 도시된 바와 같은 가이드 프레임(112)을 생성하고, 생성 완료된 가이드 프레임(112)을 전자기기(10)를 통해 출력/게시함으로써, 본 발명에 따른 일련의 이미지 기반 악보 생성 서비스 운영절차가 별다른 어려움 없이 정상적으로 진행될 수 있도록 보조하게 된다.In addition, the guide frame operation module 103, when the user wants to implement the image-based sheet music generation service according to the present invention, proceeds with the computer based on the operating system 11, when a series of device call-up events occur, Immediately, by using the operation information previously stored in the operation information processing module 102, to generate a guide frame 112 as shown in Figure 2, the generated guide frame 112 to the electronic device 10 By outputting / posting through, a series of image-based sheet music generating service operating procedures according to the present invention assists to proceed normally without any difficulty.

이러한 기반 인프라가 갖추어진 상황 하에서, 도 3에 도시된 바와 같이, 이미지 픽셀별 색채번호 처리모듈(104) 측에서는 이미지(I)를 구성하는 각 픽셀(P)을 이미지 스캔 룰 저장모듈(109)에 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여, 각 픽셀(P)의 색상을 판독하는 절차를 진행하게 된다.Under such a situation that the infrastructure is prepared, as shown in FIG. 3, the pixel number processing module 104 for each image pixel stores each pixel P constituting the image I in the image scan rule storage module 109. Scanning is performed according to a preset image scan rule, and the procedure of reading the color of each pixel P is performed.

이 경우, 상기 이미지 스캔 룰은 <위쪽에 배열된 픽셀로부터 아래쪽에 배열된 픽셀로 이미지를 스캔하라>고 하는 스캔 룰, <아래쪽에 배열된 픽셀로부터 위쪽에 배열된 픽셀로 이미지를 스캔하라>고 하는 스캔 룰, <좌측에 배열된 픽셀로부터 우측에 배열된 픽셀로 이미지를 스캔하라>고 하는 스캔 룰, <우측에 배열된 픽셀로부터 좌측에 배열된 픽셀로 이미지를 스캔하라>고 하는 스캔 룰. <포물선 모양의 스캔라인을 형성하면서, 이미지를 스캔하라>고 하는 스캔 룰, <원형 스프링 모양의 스캔라인을 형성하면서, 이미지를 스캔하라>고 하는 스캔 룰 중의 적어도 어느 하나를 포함하게 된다. In this case, the image scanning rule is a scan rule that says <scan the image from the pixel arranged at the top to the pixel arranged at the bottom>, and <scan the image from the pixel arranged at the top to the pixel arranged at the top>. A scanning rule called <scan an image from a pixel arranged on the left to a pixel arranged on the right>, and a scan rule called <scan an image from a pixel arranged on the right to a pixel arranged on the left>. At least one of the scan rule &quot; scan the image while forming a parabolic scan line &quot; and the scan rule &quot; Scan the image while forming a circular spring-shaped scan line &quot;.

상술한 절차를 통해, 각 픽셀(P)의 색상이 판독 완료되면, 이미지 픽셀별 색채번호 처리모듈(104) 측에서는 판독 완료된 각 픽셀(P)의 색상을 색상별 색채번호 저장모듈(108)에 기 저장되어 있던 색상별 색채번호와 비교하여, 각 픽셀(P)별로, 해당 픽셀(P)에 상응하는 색채번호를 부여하는 역할을 수행하게 된다(도 3 참조).When the color of each pixel P is read through the above-described procedure, the color number processing module 104 for each image pixel writes the color of each read pixel P to the color number storage module 108 for each color. The color number corresponding to the pixel P is assigned to each pixel P in comparison with the stored color number for each color P (see FIG. 3).

이 경우, 상기 색채번호는 HEX 색채코드 또는 삼원색 색채 값 중에 어느 하나일 수 있다.In this case, the color number may be any one of a HEX color code or three primary color values.

이렇게 하여, 각 픽셀(P)별로, 해당 픽셀(P)에 상응하는 색채번호가 부여 완료되면, 도 4에 도시된 바와 같이, 이미지 픽셀별 음계 처리모듈(105) 측에서는 각 픽셀(P)에 상응하는 색채번호를 판독한 후, 판독 완료된 각 색채번호를 색채번호별 음계 저장모듈(110)에 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀(P)별로, 해당 픽셀(P)에 상응하는 음계를 설정하는 역할을 수행하게 된다. In this way, when a color number corresponding to the pixel P is assigned to each pixel P, as shown in FIG. 4, the scale processing module 105 for each image pixel corresponds to each pixel P. As shown in FIG. After reading the color number to be compared, each read color number is compared with the color number scale previously stored in the scale storage module 110 for each color number, corresponding to the corresponding pixel (P) for each pixel (P) It will play the role of setting the scale.

상술한 절차를 통해, 각 픽셀(P)별로, 해당 픽셀(P)에 상응하는 음계가 설정 완료되면, 도 5에 도시된 바와 같이, 이미지 상응 악보 처리모듈(106) 측에서는 각 픽셀(P)에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표(1)를 생성하는 절차를 진행하게 된다. Through the above-described procedure, when the scale corresponding to the pixel P is set for each pixel P, as shown in FIG. 5, the image correspondence notation processing module 106 side is assigned to each pixel P. As shown in FIG. By reading the corresponding scale, a procedure of generating the basic note 1 corresponding to each scale is performed.

이렇게 하여, 각 음계에 상응하는 기본음표(1)가 생성 완료되면, 이미지 상응 악보 처리모듈(106) 측에서는 박자 설정 룰 저장모듈에 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표(1)에 박자를 부여하여, 악보음표(2)를 생성하는 절차를 진행하게 된다(도 5 참조). In this way, when the basic note 1 corresponding to each scale is generated, the image correspondence notation processing module 106 side is assigned to the basic note 1 according to the time setting rule previously set in the time setting rule storage module. By giving a beat, the procedure for generating the music score 2 is carried out (see Fig. 5).

이러한 절차 하에서, 이미지 상응 악보 처리모듈(106) 측에서는 <동일 음계를 가지는 기본음표(1)의 연속 배열상태에 따라, 해당 기본음표(1)에 박자를 부여하라>라고 하는 박자 설정 룰에 따라, 상기 기본음표(1)에 박자를 부여하여, 상기 악보음표(2)를 생성하게 된다(도 5 참조). Under this procedure, the image-corresponding notation processing module 106 side according to the time setting rule of <giving the beat to the basic note 1 according to the continuous arrangement state of the basic notes 1 having the same scale>, By giving a beat to the basic note 1, the sheet music note 2 is generated (see Fig. 5).

이에 따라서, 예를 들어, <2옥타브 레>라고 하는 동일 음계를 가지는 기본음표(1) 6개가 연속으로 배열되어 있는 경우, 해당 기본음표(1) 6개는 4박자의 박자 길이를 가지는(즉, 온음표 형식을 가지는) 1개의 악보음표(2)로 변환/생성되는 절차를 겪게 된다.Thus, for example, when six basic notes (1) having the same scale called <2 octaves> are arranged in succession, the six basic notes (1) have a beat length of four beats (that is, It is subjected to a procedure of converting / generating to one sheet music note (2) having a whole note format.

다른 예로, <3옥타브 미>라고 하는 동일 음계를 가지는 기본음표(1) 3개가 연속으로 배열되어 있는 경우, 해당 기본음표(1) 3개는 1박자 반의 길이를 가지는(즉, 점 사분음표의 형식을 가지는) 1개의 악보음표(2)로 변환/생성되는 절차를 겪게 된다.As another example, when three basic notes (1) having the same scale called <3 octave me> are arranged in succession, the three basic notes (1) have a length of one and a half beats (that is, Undergoes a procedure of converting / creating to a single note (2).

또 다른 예로, <1옥타브 라>라고 하는 음계를 가지는 기본음표(1) 1개가 연속성 없이 배열되어 있는 경우, 해당 기본음표(1) 1개는 반의반의 반박자의 길이를 가지는(즉, 32분음표의 형식을 가지는) 1개의 악보음표(2)로 변환/생성되는 절차를 겪게 된다.As another example, when one basic note (1) having a musical scale called <1 octave> is arranged without continuity, one of the basic notes (1) has a half-note half length (that is, a thirty-second note). Undergoes a procedure of converting / creating to a single note (2).

한편, 이미지 상응 악보 처리모듈(106) 측에서는 상술한 박자 설정 룰 이외에, <동일 색상으로 채워진 픽셀(P)이 연속으로 배열되어 있지 않아서, 해당 픽셀(P)의 스캔시간이 짧아지는 경우, 해당 픽셀(P)에 상응하는 기본음표(1)에는 빠른 박자를 부여하고, 동일 색상으로 채워진 픽셀(P)이 연속으로 배열되어 있어서, 해당 픽셀(P)들의 스캔시간이 길어지는 경우, 해당 연속 픽셀(P)에 상응하는 기본음표(1)에는 느린 박자를 부여하라>라고 하는 또 다른 박자 설정 룰에 따라, 상기 기본음표(1)에 박자를 부여하여, 상기 악보음표(2)를 생성할 수도 있게 된다(도 5 참조).On the other hand, in the image-correspondence notation processing module 106 side, in addition to the above-described time setting rule, when the pixels P filled with the same color are not arranged in succession, the scan time of the pixel P is shortened. The basic note 1 corresponding to (P) is given a fast beat, and the pixels P filled with the same color are arranged in succession, so that when the scanning time of the pixels P is long, the corresponding pixels ( To give the basic note (1) corresponding to P), the beat is given to the basic note (1) according to another time setting rule of &gt; (See FIG. 5).

이에 따라서, 예를 들어, 상술한 이미지 픽셀별 색채번호 처리모듈(104)의 픽셀(P) 스캔동작 시, 동일 색상으로 채워진 픽셀(P)이 연속으로 배열되어 있지 않아서, 해당 픽셀(P)의 스캔시간이 짧았던 경우, 해당 픽셀(P)에 상응하는 기본음표(1)에는 빠른 박자가 부여되며, 결국, 해당 기본음표(1)는 짧은 길이(예컨대, 반의반의 반 박자, 반의 반 박자 등)를 가지는 1개의 악보음표(2)로 변환/생성되는 절차를 겪게 된다.Accordingly, for example, in the pixel P scanning operation of the color number processing module 104 for each image pixel described above, the pixels P filled with the same color are not arranged in succession, When the scan time is short, the basic note 1 corresponding to the pixel P is given a fast beat, and eventually, the basic note 1 has a short length (for example, a half beat, a half beat, etc.) It is subjected to the procedure of conversion / generation to one sheet music note (2) having.

다른 예로, 상술한 이미지 픽셀별 색채번호 처리모듈(104)의 픽셀(P) 스캔동작 시, 동일 색상으로 채워진 픽셀(P)들이 연속으로 배열되어 있어서, 해당 픽셀(P)들의 스캔시간이 길었던 경우, 해당 픽셀(P)에 상응하는 복수의 기본음표(1)들에는 느린 박자가 부여되며, 결국, 해당 복수의 기본음표(1)들은 긴 길이(예컨대, 2박자, 3박자, 4박자 등)를 가지는 1개의 악보음표(2)로 변환/생성되는 절차를 겪게 된다.As another example, when the pixel P scanning operation of the color number processing module 104 for each image pixel described above is performed, the pixels P filled with the same color are continuously arranged, so that the scan time of the corresponding pixels P is long. In addition, a plurality of basic notes 1 corresponding to the corresponding pixels P are given a slow beat, and thus, the plurality of basic notes 1 have a long length (eg, two beats, three beats, four beats, etc.). It is subjected to the procedure of conversion / generation to one sheet music note (2) having.

상술한 절차를 통해, 기본음표(1)에 박자가 부여되어, 상기 악보음표(2)가 생성 완료되면, 이미지 상응 악보 처리모듈(106) 측에서는 생성 완료된 각 악보음표(2)를 상술한 각 픽셀(P)의 스캔 순서(위쪽-아래쪽, 왼쪽-오른쪽 등)에 따라 오선보(3)에 배열하여, 상기 이미지(I)에 상응하는 악보(M)를 생성하는 절차를 진행하게 된다(도 5 참조).Through the above-described procedure, when a time signature is given to the basic note 1 and the sheet music note 2 is generated, the image correspondence sheet processing module 106 side generates each of the pixel notes 2 described above. Arranged on the stave beams 3 according to the scanning order (up-down, left-right, etc.) of (P), a procedure of generating the score M corresponding to the image I is performed (see FIG. 5). ).

이러한 악보의 생성 국면에서, 악보 장르 처리모듈(107) 측에서는 이미지 상응 악보 처리모듈(106)과 통신을 취하면서, 상기 가이드 프레임(112)을 통해 악보의 장르를 결정하기 위한 사용자 메시지가 입력되는 경우, 해당 사용자 메시지를 상기 이미지 상응 악보 처리모듈(106)로 전달함으로써, 상기 이미지 상응 악보 처리모듈(106)에 의해 생성되는 악보(M)가 상기 사용자 메시지에 상응하는 장르 특징(예컨대, 째즈, 발라드, 동요, 트로트, 락 등)을 가질 수 있도록 유도하게 된다.In the generation of the sheet music, the sheet music genre processing module 107 side communicates with the image corresponding sheet music processing module 106 while a user message for determining the genre of the sheet music is input through the guide frame 112. By transmitting the corresponding user message to the image corresponding sheet music processing module 106, the music score M generated by the image corresponding sheet music processing module 106 corresponds to a genre feature (eg, jazz, ballad) corresponding to the user message. , Agitation, trot, lock, etc.).

이와 같이, 본 발명에서는 운영체제(11) 등을 구비한 전자기기(10) 내에, <이미지(I)를 구성하는 각 픽셀(P)을 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여, 각 픽셀(P)의 색상을 판독한 후, 판독된 색상을 기 저장되어 있던 색상별 색채번호와 비교하여, 각 픽셀(P)별로, 해당 픽셀(P)에 상응하는 색채번호를 부여할 수 있는 전산모듈>, <각 픽셀(P)에 상응하는 색채번호를 판독한 후, 판독된 각 색채번호를 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀(P)별로, 해당 픽셀에 상응하는 음계를 설정할 수 있는 전산모듈>, <각 픽셀(P)에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표(1)를 생성한 후, 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표(1)에 박자를 부여하여, 악보음표(2)를 생성하고, 생성된 각 악보음표를 각 픽셀(P)의 스캔 순서에 따라 오선보(3)에 배열하여, 상기 이미지(I)에 상응하는 악보(M)를 생성할 수 있는 전산모듈> 등을 체계적으로 배치 제공하기 때문에, 본 발명의 구현환경 하에서, 사용자 측에서는, 단지, 전자기기(10)를 단순 조작하는 지극히 간단한 절차만으로도, 자가보유 이미지(예컨대, 사진, 영상, 그림 등)에 상응하는 매우 다채로운 악보를 자동으로 생성/확보할 수 있게 되며, 결국, 별다른 어려움 없이, 이미지(I)를 작곡과 연계시켜, 해당 이미지(I)의 부가 활용도를 좀더 극대화시킬 수 있게 된다.As described above, in the present invention, each pixel P constituting the image I is scanned in the electronic device 10 including the operating system 11 or the like according to the preset image scanning rule, After reading the color of P), comparing the read color with the stored color number for each color, and calculating the corresponding color number corresponding to the pixel P for each pixel P> After reading the color number corresponding to each pixel P, comparing the read color number with the previously stored scale for each color number, and setting the scale corresponding to the pixel for each pixel P. Computer module>, < read a scale corresponding to each pixel P, generate a basic note 1 corresponding to each scale, and then, according to a preset time setting rule, the basic note 1 ) To create a musical score (2), and scan each generated musical score for each pixel (P) In order to systematically arrange and provide the computer module> etc. which can arrange the music score M corresponding to the said image (I) by arrange | positioning to the staircase 3 according to the order, on the user side in the implementation environment of this invention, Only a very simple procedure of simply operating the electronic device 10 can automatically generate / acquire a very colorful sheet music corresponding to a self-retaining image (eg, a picture, an image, a picture, etc.) Without, by linking the image (I) with the composition, it is possible to further maximize the additional utilization of the image (I).

한편, 도 6에 도시된 바와 같이, 본 발명의 다른 실시에 따른 악보 기반 이미지 생성장치(200)는 운영체제(41)를 구비한 전자기기(40)(예컨대, 스마트 폰, 테블릿 PC 등) 내에 설치되는 운영정보 처리모듈(202), 가이드 프레임 운영모듈(203), 악보음표별 색채번호 처리모듈(204), 악보음표별 이미지 픽셀 처리모듈(205), 악보 상응 이미지 처리모듈(206), 이미지 장르 처리모듈(207), 음계별 색채번호 저장모듈(208), 이미지 픽셀 구성 룰 저장모듈(209), 색채번호별 색상정보 저장모듈(210) 등이 긴밀하게 조합된 구성을 취하게 된다.Meanwhile, as shown in FIG. 6, the music score-based image generating apparatus 200 according to another embodiment of the present invention is located in an electronic device 40 (eg, a smartphone, a tablet PC, etc.) having an operating system 41. Installed operation information processing module 202, guide frame operation module 203, color number processing module 204 for music scores, image pixel processing module 205 for music scores, image processing module 206 corresponding to the score, image The genre processing module 207, the color number storage module 208 for each scale, the image pixel configuration rule storage module 209, and the color information storage module 210 for each color number may take a close combination.

이때, 운영정보 처리모듈(202) 측에서는 악보 기반 이미지 생성 서비스에 필요한 각종 운영정보, 예를 들어, 운영체제(11)의 등록정보, 기능지원 서버(30)의 등록정보, 통신 세션의 형성/유지를 위한 프로그램/소스 정보, 각 전산모듈들의 프로세스 진행을 위한 프로그램/소스 정보, 가이드 프레임(211)의 생성/게시/운영을 위한 문자/영상/이미지/프로그램 정보 등을 저장/관리하는 역할을 수행함과 아울러, 통신망(50)을 매개로 기능지원 서버(60)와 통신을 취하여, 각 전산모듈들의 업-데이트 정보를 포함하는 기능지원정보를 수신하고, 이를 각 전산모듈 측의 기능에 반영하는 역할을 수행함으로써, 본 발명에 따른 일련의 악보 기반 이미지 생성 서비스 절차가 별다른 어려움 없이 정상적으로 진행될 수 있도록 보조하게 된다.At this time, the operation information processing module 202 side, various operation information required for the music score-based image generation service, for example, the registration information of the operating system 11, the registration information of the function support server 30, the formation / maintenance of the communication session Program / source information, program / source information for process progress of each computer module, text / video / image / program information for generation / posting / operation of guide frame 211, and the like. In addition, by communicating with the function support server 60 via the communication network 50, and receives the function support information including the update information of each computer module, and reflects this to the function of each computer module side By doing so, a series of sheet music-based image generation service procedures according to the present invention is assisted to proceed normally without any difficulty.

또한, 가이드 프레임 운영모듈(203) 측에서는 본 발명에 따른 악보 기반 이미지 생성 서비스를 시행 받고자 하는 사용자 측에서, 운영체제(41)를 토대로 전산작업을 진행하여, 일련의 장치 콜업 이벤트가 발생하게 되면, 그 즉시, 운영정보 처리모듈(202)에 기 저장되어 있던 운영정보를 활용하여, 도 7에 도시된 바와 같은 가이드 프레임(211)을 생성하고, 생성 완료된 가이드 프레임(211)을 전자기기(40)를 통해 출력/게시함으로써, 본 발명에 따른 일련의 악보 기반 이미지 생성 서비스의 운영절차가 별다른 어려움 없이 정상적으로 진행될 수 있도록 보조하게 된다.In addition, the guide frame operation module 203, when the user wants to implement the music score-based image generation service according to the present invention, proceeds with the computer based on the operating system 41, when a series of device call-up events occur, Immediately, using the operation information previously stored in the operation information processing module 202, the guide frame 211 as shown in FIG. 7 is generated, and the generated guide frame 211 is connected to the electronic device 40. By outputting / publishing through, the operation procedure of a series of sheet music-based image generating services according to the present invention is assisted to proceed normally without any difficulty.

이러한 기반 인프라가 갖추어진 상황 하에서, 도 8에 도시된 바와 같이, 악보음표별 색채번호 처리모듈(204) 측에서는 악보(M)를 구성하는 각 악보음표(2)의 음계를 음계별 색채번호 저장모듈(208)에 기 설정되어 있던 음계별 색채번호와 비교하고, 이를 통해, 각 악보음표(2)에, 해당 악보음표(2)에 상응하는 색채번호를 부여하는 역할을 수행하게 된다.8, the color number processing module 204 for the sheet music note stores the scale of each sheet music note 2 constituting the music score M on the color number storage module for each scale. Compared with the color numbers for each musical scale set in step 208, through this, it plays a role of assigning the color numbers corresponding to the sheet music notes 2 to each sheet music notes 2.

이렇게 하여, 각 악보음표(2)에, 해당 악보음표(2)에 상응하는 색채번호가 부여 완료되면, 도 9에 도시된 바와 같이, 악보음표별 이미지 픽셀 처리모듈(205) 측에서는 각 악보음표(2)에 상응하는 색채번호를 판독한 후, 판독 완료된 색채번호를 색채번호별 색상정보 저장모듈(210)에 기 저장되어 있던 색채번호별 색상정보와 비교하고, 이를 통해, <각 악보음표(2) 측 색채번호에 상응하는 색상을 가지는 픽셀(P)>을 생성하는 역할을 수행하게 된다.In this way, when the color numbers corresponding to the sheet music notes 2 have been assigned to each sheet music note 2, as shown in FIG. 9, the image pixel processing module 205 for each sheet music note has the respective scores ( After reading the color number corresponding to 2), the read color number is compared with the color information for each color number previously stored in the color information storage module 210 for each color number. ) To generate a pixel P> having a color corresponding to the color number.

상술한 절차를 통해, <각 악보음표(2) 측 색채번호에 상응하는 색상을 가지는 픽셀(P)>이 생성 완료되면, 도 10에 도시된 바와 같이, 악보 상응 이미지 처리모듈(206) 측에서는 이미지 픽셀 구성 룰 저장모듈(209)에 기 설정되어 있던 이미지 픽셀 구성 룰을 판독한 후, 판독 완료된 이미지 픽셀 구성 룰에 따라, 각 픽셀(P)을 생성 또는 배열하여, 상기 악보(M)에 상응하는 이미지(I)를 생성하는 역할을 수행하게 된다.Through the above-described procedure, when < pixel P having a color corresponding to the color number of each sheet music note 2 side > is generated, as shown in FIG. After reading the image pixel composition rule previously set in the pixel composition rule storing module 209, each pixel P is generated or arranged according to the read image pixel composition rule, and corresponds to the score M. It will play a role of generating an image (I).

이러한 절차 하에서, 본 발명의 악보 상응 이미지 처리모듈(206) 측에서는 <느린 박자의 악보음표(2)에 상응하는 픽셀(P)은 그 개수를 늘려, 이미지화 하는 화소 구간을 증가시켜라>라고 하는 룰을 포함하는 이미지 픽셀 구성 룰에 따라, 픽셀을 생성 또는 배열하게 된다(도 5 참조).Under such a procedure, the sheet music correspondence image processing module 206 side of the present invention implements a rule of <increase the number of pixels P corresponding to the sheet music note 2 of the slow beat to increase the number of pixel sections to be imaged>. According to the included image pixel composition rule, pixels are generated or arranged (see FIG. 5).

이 상황 하에서, 예를 들어, 3박자 길이의 점 2분음표의 형식을 취하고 있던(즉, 느린 박자의 형식을 취하고 있던) 악보음표(2)에 상응하는 픽셀(P)은 그 개수가 추가로 늘어나, 이미지화 되는 화소 구간이 증가하는 상황에 놓이게 된다.Under this situation, for example, the number of pixels P corresponding to the sheet music note 2, which is in the form of a triple beat point half note (i.e. in the form of a slow beat), is further increased in number. Increasingly, the pixel section being imaged increases.

다른 예로, 반의반의 반박자의 32분음표의 형식을 취하고 있던(즉, 빠른 박자의 형식을 취하고 있던) 악보음표(2)에 상응하는 픽셀(P)은 그 개수의 증가 없이, 이미지화 되는 화소 구간이 짧은 상황에 놓이게 된다.As another example, the pixel P corresponding to the sheet music note 2, which is in the form of a thirty-second note of the half beat of the half-halves (i.e., in the form of a fast beat), has a pixel section to be imaged without increasing its number. You are in a short situation.

이러한 이미지의 생성 국면에서, 이미지 장르 처리모듈(207) 측에서는 악보 상응 이미지 처리모듈(206)과 통신을 취하면서, 상기 가이드 프레임(211)을 통해 이미지의 장르를 결정하기 위한 사용자 메시지가 입력되는 경우, 해당 사용자 메시지를 상기 악보 상응 이미지 처리모듈(206)로 전달함으로써, 상기 악보 상응 이미지 처리모듈(206)에 의해 생성되는 이미지(I)가 상기 사용자 메시지에 상응하는 장르 특징(예컨대, 만화, 풍경화, 수채화, 초상화, 연필 뎃상 등)을 가질 수 있도록 유도하게 된다.In the image generation phase, when the image genre processing module 207 communicates with the music score corresponding image processing module 206, a user message for determining the genre of the image is input through the guide frame 211. By transmitting the corresponding user message to the sheet music correspondence image processing module 206, the image I generated by the sheet music correspondence image processing module 206 corresponds to a genre feature (eg, cartoon, landscape painting) corresponding to the user message. , Watercolors, portraits, pencil images, etc.).

이와 같이, 본 발명의 다른 실시에서는 운영체제(41) 등을 구비한 전자기기(40) 내에, <악보(M)를 구성하는 각 악보음표(2)의 음계를 기 설정되어 있던 음계별 색채번호와 비교하여, 각 악보음표(2)에, 해당 악보음표(2)에 상응하는 색채번호를 부여할 수 있는 전산모듈>, <각 악보음표(2)에 상응하는 색채번호를 판독한 후, 판독된 색채번호를 기 저장되어 있던 색채번호별 색상정보와 비교하여, 각 악보음표(2) 측 색채번호에 상응하는 색상을 가지는 픽셀(P)을 생성할 수 있는 전산모듈>, <기 설정되어 있던 이미지 픽셀 구성 룰을 판독한 후, 판독된 이미지 픽셀 구성 룰에 따라, 픽셀(P)을 생성 또는 배열하여, 악보(M)에 상응하는 이미지(I)를 생성할 수 있는 전산모듈> 등을 체계적으로 배치 제공하기 때문에, 본 발명의 구현환경 하에서, 사용자 측에서는, 단지, 전자기기(40)를 단순 조작하는 지극히 간단한 절차만으로도, 자가보유 악보(M)에 상응하는 다채로운 이미지를 자동으로 생성/확보할 수 있게 되며, 결국, 별다른 어려움 없이, 악보(M)를 이미지(I)와 연계시켜, 해당 악보(M)의 부가 활용도를 좀더 극대화시킬 수 있게 된다.As described above, according to another embodiment of the present invention, in the electronic device 40 including the operating system 41 and the like, the color scale of each musical score 2 constituting the musical score M is set to the color number for each scale. In comparison, a computer module capable of assigning a color number corresponding to the sheet music note 2 to each sheet music note 2 &gt; &lt; Computational module that can generate a pixel (P) having a color corresponding to the color number of each sheet music note (2) by comparing the color number with previously stored color information for each color number>, <Preset image After reading the pixel composition rule, according to the read image pixel composition rule, a computer module for generating or arranging the pixels P to generate an image I corresponding to the score M, In the implementation environment of the present invention, on the user side, Even with a very simple procedure of simply operating the magnetic device 40, it is possible to automatically generate / acquire a colorful image corresponding to the self-retaining score M, and finally, without difficulty, the image of the score M is imaged (I). ), The additional utilization of the score (M) can be further maximized.

이러한 본 발명은 특정 분야에 국한되지 아니하며, 각종 멀티미디어 컨텐츠의 효과적인 운영이 필요한 여러 분야에서, 전반적으로 유용한 효과를 발휘한다. The present invention is not limited to a specific field, and exhibits useful effects generally in various fields requiring effective operation of various multimedia contents.

그리고, 앞에서, 본 발명의 특정한 실시 예가 설명되고 도시되었지만 본 발명이 당업자에 의해 다양하게 변형되어 실시될 가능성이 있는 것은 자명한 일이다. And, in the foregoing, specific embodiments of the present invention have been described and illustrated, but it is obvious that the present invention may be variously modified and implemented by those skilled in the art.

이와 같은 변형된 실시 예들은 본 발명의 기술적 사상이나 관점으로부터 개별적으로 이해되어서는 안되며 이와 같은 변형된 실시 예들은 본 발명의 첨부된 특허청구의 범위 안에 속한다 해야 할 것이다.Such modified embodiments should not be individually understood from the technical spirit or viewpoint of the present invention, and such modified embodiments should fall within the scope of the appended claims of the present invention.

I: 이미지
M: 악보
10,40: 정보기기
11,41: 운영체제
20,50: 통신망
30,60: 기능지원 서버
100: 이미지 기반 악보 생성장치
101,201: 인터페이스 모듈
102,202: 운영정보 처리모듈
103,203: 가이드 프레임 운영모듈
104: 이미지 픽셀별 색채번호 처리모듈
105: 이미지 픽셀별 음계 처리모듈
106: 이미지 상응 악보 처리모듈
107: 악보장르 처리모듈
108: 색상별 색채번호 저장모듈
109: 이미지 스캔 룰 저장모듈
110: 색채번호별 음계 저장모듈
111: 박자 설정 룰 저장모듈
200: 악보 기반 이미지 생성장치
204: 악보음표별 색채번호 처리모듈
205: 악보음표별 이미지 픽셀 처리모듈
206: 악보 상응 이미지 처리모듈
207: 이미지 장르 처리모듈
208: 음계별 색채번호 저장모듈
209: 이미지 픽셀 구성 룰 저장모듈
210: 색채번호별 색상정보 저장모듈I: image
M: Sheet music
10,40: Information equipment
11,41: operating system
20,50: network
30,60: Function Support Server
100: image-based sheet music generating device
101,201: interface module
102, 202: operation information processing module
103,203: guide frame operation module
104: color number processing module for each image pixel
105: scale processing module for each image pixel
106: image matching score processing module
107: music score genre processing module
108: color number storage module for each color
109: image scan rule storage module
110: scale storage module by color number
111: Beat setting rule storage module
200: sheet music based image generating device
204: color number processing module for each sheet music note
205: Image pixel processing module for each sheet music note
206: music score corresponding image processing module
207: Image genre processing module
208: color number storage module for each scale
209: image pixel composition rule storage module
210: color information storage module for each color number

Claims (8)

운영체제를 구비한 전자기기 내에 설치되며, 이미지 기반의 악보 생성 서비스를 운영하기 위한 가이드 프레임을 상기 전자기기를 통해 출력하여 운영하는 이미지 기반 악보 생성장치에 있어서.
이미지를 구성하는 각 픽셀을 기 설정되어 있던 이미지 스캔 룰에 따라 스캔하여, 각 픽셀의 색상을 판독한 후, 판독된 색상을 기 저장되어 있던 색상별 색채번호와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 색채번호를 부여하는 이미지 픽셀별 색채번호 처리모듈과;
각 픽셀에 상응하는 색채번호를 판독한 후, 판독된 각 색채번호를 기 저장되어 있던 색채번호별 음계와 비교하여, 각 픽셀별로, 해당 픽셀에 상응하는 음계를 설정하는 이미지 픽셀별 음계 처리모듈과;
각 픽셀에 상응하는 음계를 판독하여, 각 음계에 상응하는 기본음표를 생성한 후, 기 설정되어 있던 박자 설정 룰에 따라, 상기 기본음표에 박자를 부여하여, 악보음표를 생성하고, 생성된 각 악보음표를 각 픽셀의 스캔 순서에 따라 오선보에 배열하여, 상기 이미지에 상응하는 악보를 생성하는 이미지 상응 악보 처리모듈을 포함하는 것을 특징으로 하는 이미지 기반 악보 생성장치.An image-based sheet music generating apparatus installed in an electronic device having an operating system and outputting and operating a guide frame for operating an image-based sheet music generating service through the electronic device.
Each pixel constituting the image is scanned according to a preset image scanning rule, the color of each pixel is read, and then the read color is compared with the stored color number for each color, and for each pixel, the corresponding pixel. A color number processing module for each image pixel which assigns a color number corresponding to the color number;
After reading the color number corresponding to each pixel, the color processing module for each image pixel to set the scale corresponding to the corresponding pixel for each pixel by comparing the read color number with the previously stored scale for each color number; ;
After reading the scale corresponding to each pixel, generating a basic note corresponding to each scale, and applying a beat to the basic note according to a preset time setting rule to generate a musical score, And an image correspondence notation processing module for arranging notation scores in the stave notches according to the scanning order of each pixel to generate the score notation corresponding to the image. 제 1 항에 있어서, 상기 색채번호는 HEX 색채코드 또는 삼원색 색채 값 중에 어느 하나인 것을 특징으로 하는 이미지 기반 악보 생성장치.The apparatus of claim 1, wherein the color number is any one of a HEX color code and a three primary color value. 제 1 항에 있어서, 상기 이미지 상응 악보 처리모듈 측에서는 <동일 음계를 가지는 기본음표의 연속 배열상태에 따라, 기본음표에 박자를 부여하라>라고 하는 박자 설정 룰, 또는, <동일 색상으로 채워진 픽셀이 연속으로 배열되어 있지 않아서, 해당 픽셀의 스캔시간이 짧아지는 경우, 해당 픽셀에 상응하는 기본음표에는 빠른 박자를 부여하고, 동일 색상으로 채워진 픽셀이 연속으로 배열되어 있어서, 해당 픽셀들의 스캔시간이 길어지는 경우, 해당 연속 픽셀에 상응하는 기본음표에는 느린 박자를 부여하라>고 하는 박자 설정 룰에 따라, 상기 기본음표에 박자를 부여하여, 상기 악보음표를 생성하는 것을 특징으로 하는 이미지 기반 악보 생성장치.According to claim 1, wherein the image-corresponding notation processing module side is a time setting rule of &quot; Give a beat to the base note according to the continuous arrangement of the base notes having the same scale &quot;, or &quot; pixels filled with the same color. If the scan time of the pixel is shortened because it is not arranged in a row, a fast time is given to the basic note corresponding to the pixel, and pixels filled with the same color are arranged in a row, so that the scan time of the pixels is long. In the case of losing, the image-based notation generating apparatus generates a notation by adding a beat to the basic note according to a beat setting rule of applying a slow beat to a basic note corresponding to the corresponding continuous pixel. . 제 1 항에 있어서, 상기 이미지 스캔 룰은 <위쪽에 배열된 픽셀로부터 아래쪽에 배열된 픽셀로 이미지를 스캔하라>고 하는 스캔 룰, <아래쪽에 배열된 픽셀로부터 위쪽에 배열된 픽셀로 이미지를 스캔하라>고 하는 스캔 룰, <좌측에 배열된 픽셀로부터 우측에 배열된 픽셀로 이미지를 스캔하라>고 하는 스캔 룰, <우측에 배열된 픽셀로부터 좌측에 배열된 픽셀로 이미지를 스캔하라>고 하는 스캔 룰. <포물선 모양의 스캔라인을 형성하면서, 이미지를 스캔하라>고 하는 스캔 룰, <원형 스프링 모양의 스캔라인을 형성하면서, 이미지를 스캔하라>고 하는 스캔 룰 중의 적어도 어느 하나를 포함하는 것을 특징으로 하는 이미지 기반 악보 생성장치.The scanning rule of claim 1, wherein the image scanning rule is a scan rule of <scan an image from a pixel arranged on the top to a pixel arranged on the bottom>, and <scan the image from a pixel arranged on the top to a pixel arranged on the top. Scan rule that says, "scan the image from the pixels arranged on the left to pixels arranged on the right", and scan rule that says <scan the image with pixels arranged on the left from the pixels arranged on the right> Scan rule. And at least one of a scan rule called <Scan an image while forming a parabolic scan line> and a scan rule called <Scan an image while forming a circular spring shape scan line>. Image-based sheet music generating device. 제 1 항에 있어서, 상기 이미지 상응 악보 처리모듈과 통신하면서, 상기 가이드 프레임을 통해 악보의 장르를 결정하기 위한 사용자 메시지가 입력되는 경우, 해당 사용자 메시지를 상기 이미지 상응 악보 처리모듈로 전달하여, 상기 이미지 상응 악보 처리모듈에 의해 생성되는 악보가 상기 사용자 메시지에 상응하는 장르 특징을 가질 수 있도록 유도하는 악보 장르 처리모듈을 더 포함하는 것을 특징으로 하는 이미지 기반 악보 생성장치.The method of claim 1, wherein when a user message for determining the genre of sheet music is input through the guide frame while communicating with the image corresponding sheet music processing module, the user message is transmitted to the image corresponding sheet music processing module. And a sheet music genre processing module for inducing the sheet music generated by the image corresponding sheet music processing module to have a genre characteristic corresponding to the user message. 운영체제를 구비한 전자기기 내에 설치되며, 악보 기반의 이미지 생성 서비스를 운영하기 위한 가이드 프레임을 상기 전자기기를 통해 출력하여 운영하는 악보 기반 이미지 생성장치에 있어서.
악보를 구성하는 각 악보음표의 음계를 기 설정되어 있던 음계별 색채번호와 비교하여, 각 악보음표에, 해당 악보음표에 상응하는 색채번호를 부여하는 악보음표별 색채번호 처리모듈과;
각 악보음표에 상응하는 색채번호를 판독한 후, 판독된 색채번호를 기 저장되어 있던 색채번호별 색상정보와 비교하여, 각 악보음표 측 색채번호에 상응하는 색상을 가지는 픽셀을 생성하는 악보음표별 이미지 픽셀 처리모듈과;
기 설정되어 있던 이미지 픽셀 구성 룰을 판독한 후, 판독된 이미지 픽셀 구성 룰에 따라, 픽셀을 생성 또는 배열하여, 상기 악보에 상응하는 이미지를 생성하는 악보 상응 이미지 처리모듈을 포함하는 것을 특징으로 하는 악보 기반 이미지 생성장치.A music score-based image generating device installed in an electronic device having an operating system, and outputting and operating a guide frame for operating a music score-based image generating service through the electronic device.
A color number processing module for each sheet music note, which compares the scale of each sheet music note constituting the sheet music with a preset color number for each score, and gives each sheet music note a color number corresponding to the sheet music note;
After reading the color number corresponding to each sheet music score, comparing the read color number with the previously stored color information for each color number, and for each sheet music score to generate a pixel having a color corresponding to the color number of each sheet music score An image pixel processing module;
And a music score correspondence image processing module configured to read the preset image pixel composition rule and to generate or arrange pixels according to the read image pixel composition rule to generate an image corresponding to the sheet music. Sheet music based image generator. 제 6 항에 있어서, 상기 악보 상응 이미지 처리모듈 측에서는 <느린 박자의 악보음표에 상응하는 픽셀은 그 개수를 늘려, 이미지화 하는 화소 구간을 증가시켜라>라고 하는 룰을 포함하는 이미지 픽셀 구성 룰에 따라, 픽셀을 생성 또는 배열하는 것을 특징으로 하는 악보 기반 이미지 생성장치.According to claim 6, wherein the music score corresponding image processing module according to the image pixel configuration rule including the rule &quot; Increase the number of pixels corresponding to the music score of the slow beat, increase the pixel section to be imaged>, A music score-based image generating device, comprising generating or arranging pixels. 제 6 항에 있어서, 상기 악보 상응 이미지 처리모듈과 통신하면서, 상기 가이드 프레임을 통해 이미지의 장르를 결정하기 위한 사용자 메시지가 입력되는 경우, 해당 사용자 메시지를 상기 악보 상응 이미지 처리모듈로 전달하여, 상기 악보 상응 이미지 처리모듈에 의해 생성되는 이미지가 상기 사용자 메시지에 상응하는 장르 특징을 가질 수 있도록 유도하는 이미지 장르 처리모듈을 더 포함하는 것을 특징으로 하는 악보 기반 이미지 생성장치.The method of claim 6, wherein when the user message for determining the genre of the image is input through the guide frame while communicating with the score corresponding image processing module, the user message is transmitted to the score corresponding image processing module. The music score-based image generating device further comprising an image genre processing module for inducing an image generated by the music score corresponding image processing module to have a genre characteristic corresponding to the user message.
KR1020180040617A 2018-04-06 2018-04-06 The apparatus which generates a music based on the image and the apparatus which generates a image based on the music KR20190117307A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020180040617A KR20190117307A (en) 2018-04-06 2018-04-06 The apparatus which generates a music based on the image and the apparatus which generates a image based on the music
PCT/KR2018/005081 WO2019194345A1 (en) 2018-04-06 2018-05-02 Image-based sheet music generation apparatus and sheet music-based image generation apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180040617A KR20190117307A (en) 2018-04-06 2018-04-06 The apparatus which generates a music based on the image and the apparatus which generates a image based on the music

Publications (1)

Publication Number Publication Date
KR20190117307A true KR20190117307A (en) 2019-10-16

Family

ID=68101001

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180040617A KR20190117307A (en) 2018-04-06 2018-04-06 The apparatus which generates a music based on the image and the apparatus which generates a image based on the music

Country Status (2)

Country Link
KR (1) KR20190117307A (en)
WO (1) WO2019194345A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113160781B (en) * 2021-04-12 2023-11-17 广州酷狗计算机科技有限公司 Audio generation method, device, computer equipment and storage medium

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101807754B1 (en) 2016-09-21 2017-12-13 김기윤 Server and method for generating music
KR20170137526A (en) 2016-06-03 2017-12-13 서나희 Composing method using composition program

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3229939B2 (en) * 1998-12-09 2001-11-19 株式会社エイ・ティ・アール知能映像通信研究所 Media converter
KR100772168B1 (en) * 2006-09-14 2007-10-31 이창주 Music and color coupling system, method thereof and recorded medium recorded program performing it
JP2008233576A (en) * 2007-03-22 2008-10-02 Hyphenation:Kk Method for making musical piece and musical score into video and image
KR20160141070A (en) * 2015-05-27 2016-12-08 (주)제이유엑스 apparatus for music playing by using image, method for music playing by using image and storage medium for music playing by using image
KR20180004040A (en) * 2017-12-11 2018-01-10 전대연 Smart method of Sound-Color expression and by use of RGB-Color code, music-painting app system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170137526A (en) 2016-06-03 2017-12-13 서나희 Composing method using composition program
KR101807754B1 (en) 2016-09-21 2017-12-13 김기윤 Server and method for generating music

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
대한민국등록특허 제10-875호(명칭: 휴대단말을 이용한 음악작곡시스템)(2010.12.14.자 공고)

Also Published As

Publication number Publication date
WO2019194345A1 (en) 2019-10-10

Similar Documents

Publication Publication Date Title
US20220224737A1 (en) Method and system for information sharing
EP3972236A1 (en) Communication terminal, image communication system, method for displaying image, and carrier means
CN112004034A (en) Method and device for close photographing, electronic equipment and computer readable storage medium
CN113542624A (en) Method and device for generating commodity object explanation video
EP3979631A1 (en) Communication management apparatus, image communication system, communication management method, and carrier means
Hwang et al. Magnification of 3D reconstructed images in integral imaging using an intermediate-view reconstruction technique
CN110111241A (en) Method and apparatus for generating dynamic image
US20190164323A1 (en) Method and program for generating virtual reality contents
US9986066B2 (en) Collective output system, collective output method and terminal device
KR20190117307A (en) The apparatus which generates a music based on the image and the apparatus which generates a image based on the music
CN109615583B (en) Game map generation method and device
KR102054116B1 (en) Customized Stage Video Delivery System
JP6051521B2 (en) Image composition system
JP2019008636A (en) Imaging System
JP2010251920A (en) Content production management device, content production device, content production management program, and content production program
JP2010081440A (en) Three-dimensional video image display, three-dimensional video display method, and three-dimensional video display program
CN116560504A (en) Interactive method, computer device and computer readable storage medium for performance site
RU2012114692A (en) METHOD AND DEVICE FOR FORMING PARTIAL VIEWS AND / OR ORIGINAL OF STEREOSCOPIC IMAGE FROM TWO-DIMENSIONAL IMAGE FOR STEREOSCOPIC PLAYBACK
CN115016688A (en) Virtual information display method and device and electronic equipment
KR100369901B1 (en) Method and apparatus for generating a 3 dimension image on a network
JP6069241B2 (en) Spatial projection apparatus and spatial projection program
JP2017215706A (en) Video synthesis method, video acquisition device, video synthesis system, and computer program
JP2011066745A (en) Terminal apparatus, communication method and communication system
WO2023037956A1 (en) Musical performance recording method, musical performance recording system, and program
CN111158618A (en) Method and equipment for displaying pattern based on mobile terminal

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application