KR102089207B1 - Method of playing image into music and server supplying program for performing the same - Google Patents

Method of playing image into music and server supplying program for performing the same Download PDF

Info

Publication number
KR102089207B1
KR102089207B1 KR1020190005651A KR20190005651A KR102089207B1 KR 102089207 B1 KR102089207 B1 KR 102089207B1 KR 1020190005651 A KR1020190005651 A KR 1020190005651A KR 20190005651 A KR20190005651 A KR 20190005651A KR 102089207 B1 KR102089207 B1 KR 102089207B1
Authority
KR
South Korea
Prior art keywords
image
order
color
music
display
Prior art date
Application number
KR1020190005651A
Other languages
Korean (ko)
Inventor
김강욱
Original Assignee
김강욱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김강욱 filed Critical 김강욱
Priority to KR1020190005651A priority Critical patent/KR102089207B1/en
Application granted granted Critical
Publication of KR102089207B1 publication Critical patent/KR102089207B1/en

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

The technological project of the present invention is to provide a music playing method based on an image so that a visually visible image can be made to be played as acoustically audible music. To this end, the music playing method based on an image of the present invention is a music playing method in which an image displayed on a display of a portable terminal is played as music. The music playing method comprises the steps of: displaying an image on the display; dividing the image into a plurality of sections; determining a color most distributed of a plurality of colors in each divided section as a main color; converting the main color into a sound; and playing the converted sound in accordance with a set order.

Description

이미지에 기초한 음악 재생 방법 및 이를 수행하기 위한 프로그램을 제공하는 서버{Method of playing image into music and server supplying program for performing the same}Method of playing image into music and server supplying program for performing the same}

본 발명은 이미지를 음악으로 재생하기 위한 기술에 관한 것이다.The present invention relates to a technique for reproducing an image as music.

일반적으로, 이미지(image)는, "영상"이라고도 하며, 현실을 있는 그대로 보여 주거나 혹인 현실이 아닌 상상의 세계를 시각으로 포착하도록 그림이나 사진 등으로 표상화한 것이다.In general, an image is also referred to as a "image" and is represented by a picture or a photograph to show the reality as it is or to capture the imaginary world visually rather than the real world.

이러한 이미지는, 시각을 통해서만 볼 수 있는 한계가 있다.This image has a limitation that can only be seen through vision.

본 발명의 기술적 과제는, 시각적으로 볼 수 있는 이미지를 청각적으로 들을 수 있는 음악으로 재생할 수 있도록 한 이미지에 기초한 음악 재생 방법 및 이를 수행하기 위한 프로그램을 제공하는 서버를 제공하는 것이다.The technical problem of the present invention is to provide a server that provides a method for reproducing music based on an image and a program for performing the same so that a visually viewable image can be reproduced as audible music.

상기 목적을 달성하기 위하여, 본 발명의 일 실시예에 따른 이미지에 기초한 음악 재생 방법은, 휴대 단말기의 디스플레이에 표시된 이미지가 음악으로 재생되도록 이미지에 기초한 음악 재생 방법으로, 상기 디스플레이에 이미지를 표시하는 단계; 상기 이미지를 복수의 구간으로 분할하는 단계; 상기 분할된 각 구간에 있는 복수의 색상 중 가장 많이 분포된 색상을 메인 색상으로 정하는 단계; 상기 메인 색상을 음으로 변환하는 단계; 및 상기 변환된 음을 설정 순서에 따라 재생하는 단계;를 포함하고, 상기 복수의 구간으로 분할하는 단계는, 상기 이미지를 설정 수의 구간으로 분할하되 격자 형태로 분할하고, 상기 각각의 구간은 동일한 크기를 가지고, 상기 설정 수는 상기 디스플레이에 표시되는 숫자 입력창을 통해 입력된 숫자의 수로 정해지고, 상기 이미지에 기초한 음악 재생 방법은, 상기 메인 색상을 음으로 변환하는 단계 전에, 상기 디스플레이에 매칭 데이터 생성창을 활성화시켜 상기 매칭 데이터 생성창을 통해 각각의 색에 대해 사용자가 원하는 가청 주파수의 음을 부여하는 방식으로 매칭 데이터를 생성하는 단계; 및 상기 생성된 매칭 데이터를 메모리에 저장하는 단계;를 더 포함하고, 상기 메인 색상을 음으로 변환하는 단계는, 상기 메모리에 저장된 상기 매칭 데이터를 검색하여 상기 메인 색상에 해당하는 가청 주파수를 불러오는 방식으로 진행되고, 상기 설정 순서에 따라 재생하는 단계에서, 상기 설정 순서는, 좌에서 우로 이동되는 순서, 우에서 좌로 이동되는 순서, 위에서 아래로 이동되는 순서, 아래에서 위로 이동되는 순서, 가운데서 가장자리로 이동되는 순서, 또는 가장자리에서 가운데로 이동되는 순서 중 어느 하나의 순서를 포함하고, 상기 설정 순서는 상기 디스플레이에 활성화되는 순서 선택창을 통해 선택된 순서로 정해지고, 상기 순서 선택창은 상기 이미지를 표시하는 단계와 상기 복수의 구간으로 분할하는 단계 사이에 활성화된다.In order to achieve the above object, a music reproduction method based on an image according to an embodiment of the present invention is a music reproduction method based on an image such that an image displayed on a display of a portable terminal is played as music, and displaying an image on the display step; Dividing the image into a plurality of sections; Determining a color most distributed among a plurality of colors in each divided section as a main color; Converting the main color to sound; And reproducing the converted sound according to a set order. In the step of dividing the plurality of sections, the image is divided into a set number of sections, but divided into a grid, and each section is the same. With a size, the number of settings is determined by the number of numbers input through the number input window displayed on the display, and the music reproduction method based on the image matches the display before the step of converting the main color to sound Generating matching data in a manner of activating a data generation window to give a tone of a desired audible frequency for each color through the matching data generation window; And storing the generated matching data in a memory. The method of converting the main color to a negative may include a method of retrieving the matching data stored in the memory to retrieve an audible frequency corresponding to the main color. In the step of playing in accordance with the setting order, the setting order is, from left to right order, from right to left order, from top to bottom order, from bottom to top order, from center to edge The order of moving, or the order of moving from the edge to the center, includes any order, and the setting order is determined in the order selected through the order selection window activated on the display, and the order selection window displays the image And the step of dividing into the plurality of sections.

상기 이미지를 표시하는 단계는, 상기 휴대 단말기의 메모리에 저장된 이미지를 불러와서 표시하거나 상기 휴대 단말기의 카메라로 촬영하여 표시할 수 있다.In the displaying of the image, an image stored in the memory of the portable terminal may be fetched and displayed, or photographed and displayed by a camera of the portable terminal.

삭제delete

상기 메인 색으로 정하는 단계는, 상기 디스플레이를 이루는 복수의 픽셀 중 상기 각 구간에 위치되는 복수의 픽셀에 전송되는 색상 값들을 수신하여 상기 색상 값들 중 가장 많은 색상 값의 색상을 메인 색으로 정할 수 있다.In the determining of the main color, color values transmitted to a plurality of pixels positioned in each section among a plurality of pixels constituting the display may be received to determine a color of the most color value among the color values as the main color. .

삭제delete

삭제delete

삭제delete

한편, 본 발명의 다른 실시예에 따른 서버는, 상술한 본 발명의 일 실시예에 따른 이미지에 기초한 음악 재생 방법에 포함된 각 단계를 수행하기 위한 일련의 명령을 포함하는 프로그램을 상기 휴대 단말기에 제공한다.On the other hand, the server according to another embodiment of the present invention, a program including a series of commands for performing each step included in the music reproduction method based on the image according to an embodiment of the present invention described above to the mobile terminal to provide.

이상에서와 같이, 본 발명의 실시예에 따른 이미지에 기초한 음악 재생 방법 및 이를 수행하기 위한 프로그램을 제공하는 서버는 다음과 같은 효과를 가질 수 있다.As described above, a server providing a method for reproducing music based on an image according to an embodiment of the present invention and a program for performing the same may have the following effects.

본 발명의 실시예에 의하면, 휴대 단말기의 디스플레이에 표시된 이미지가 음악으로 재생되도록 이미지에 기초한 음악 재생 방법으로, 디스플레이에 이미지를 표시하는 과정과, 이미지를 복수의 구간으로 분할하는 과정과, 분할된 각 구간에 있는 복수의 색상 중 가장 많이 분포된 색상을 메인 색상으로 정하는 과정과, 메인 색상을 음으로 변환하는 과정과, 그리고 변환된 음을 설정 순서에 따라 재생하는 과정을 포함하는 기술구성을 제공하므로, 시각적으로 볼 수 있는 이미지를 청각적으로 들을 수 있는 음악으로 재생할 수 있어, 보지 않더라도 이미지에 대한 대략의 색상 배치 등의 정보를 파악할 수 있고, 음악을 모르는 초보자들도 자신이 그린 그림 등의 이미지 등을 통해 음악을 대략적으로 만들 수 있는 등 음악에 대한 흥미를 북돋울 수 있다.According to an embodiment of the present invention, as a music reproduction method based on an image so that an image displayed on a display of a mobile terminal is played as music, a process of displaying an image on a display, a process of dividing an image into a plurality of sections, and divided Provides a technical configuration that includes determining the most distributed color among the plurality of colors in each section as the main color, converting the main color to notes, and playing the converted notes in a set order. Therefore, the visually visible image can be reproduced as audible music, so you can grasp information such as the approximate color arrangement of the image even if you do not see it. You can enhance your interest in music, such as roughly making music through images.

도 1은 본 발명의 일 실시예에 따른 이미지에 기초한 음악 재생 방법을 구현하기 위한 장치를 개략적으로 나타낸 블록도이다.
도 2는 본 발명의 일 실시예에 따른 이미지에 기초한 음악 재생 방법을 개략적으로 나타낸 플로우차트이다.
도 3은 각각의 색상에 대해 서로 다른 음을 부여하는 예를 개략적으로 보여주기 위한 도면이다.
도 4는 재생하는 순서의 예를 개략적으로 나타낸 도면이다.
도 5는 본 발명의 이미지에 기초한 음락 재생 방법을 수행하기 위한 프로그램을 휴대 단말기에 제공하기 위해 휴대 단말기와 서버가 서로 통신하고 있는 상태를 개략적으로 나타낸 블록도이다.
1 is a block diagram schematically showing an apparatus for implementing a method for reproducing music based on an image according to an embodiment of the present invention.
2 is a flowchart schematically showing a method for reproducing music based on an image according to an embodiment of the present invention.
FIG. 3 is a diagram schematically showing an example in which different sounds are assigned to respective colors.
4 is a diagram schematically showing an example of a reproduction order.
5 is a block diagram schematically showing a state in which a mobile terminal and a server are in communication with each other in order to provide a mobile terminal with a program for performing a sound reproduction method based on the image of the present invention.

이하, 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art to which the present invention pertains can easily practice. However, the present invention can be implemented in many different forms and is not limited to the embodiments described herein.

도 1은 본 발명의 일 실시예에 따른 이미지에 기초한 음악 재생 방법을 구현하기 위한 장치를 개략적으로 나타낸 블록도이고, 도 2는 본 발명의 일 실시예에 따른 이미지에 기초한 음악 재생 방법을 개략적으로 나타낸 플로우차트이다. 도 3은 각각의 색상에 대해 서로 다른 음을 부여하는 예를 개략적으로 보여주기 위한 도면이고, 도 4는 재생하는 순서의 예를 개략적으로 나타낸 도면이다.1 is a block diagram schematically showing an apparatus for implementing an image-based music reproduction method according to an embodiment of the present invention, and FIG. 2 schematically illustrates a music reproduction method based on an image according to an embodiment of the present invention This is the flowchart shown. FIG. 3 is a diagram schematically showing an example of giving different sounds to each color, and FIG. 4 is a diagram schematically showing an example of a reproduction order.

본 발명의 일 실시예에 따른 이미지에 기초한 음악 재생 방법은, 휴대 단말기(100)(예를 들어, 스마트폰이나 태블릿PC 등의 단말기)의 디스플레이(110)에 표시된 이미지가 음악으로 재생되도록 이미지에 기초한 음악 재생 방법으로, 설정된 프로그램(일명 "앱")이 설치된 휴대 단말기(100)를 통해 구현될 수 있다. 여기서, 휴대 단말기(100)는, 도 1에 도시된 바와 같이, 디스플레이(110)와 제어부(120)와 메모리(130)와 카메라(140)를 포함할 수 있고, 설정된 프로그램은 메모리(130)에 설치될 수 있다.Music playback method based on an image according to an embodiment of the present invention, the image displayed on the display 110 of the mobile terminal 100 (for example, a terminal such as a smartphone or a tablet PC) to the image to be played as music As a basic music reproduction method, it may be implemented through the mobile terminal 100 in which a set program (aka “app”) is installed. Here, as shown in FIG. 1, the portable terminal 100 may include a display 110, a control unit 120, a memory 130, and a camera 140, and the set program is stored in the memory 130 Can be installed.

제어부(120)는 설정된 프로그램에 의해 동작하는 하나 이상의 마이크로 프로세서로 구현될 수 있으며, 이러한 설정된 프로그램은 후술하는 본 발명의 일 실시예의 방법에 포함된 각 과정(도 3의 S110 내지 S150 참조)을 수행하기 위한 일련의 명령을 포함하는 것으로 할 수 있다.The control unit 120 may be implemented by one or more microprocessors operated by a set program, and the set program performs each process (refer to S110 to S150 in FIG. 3) included in the method of an embodiment of the present invention described below. It can be said to include a series of instructions for doing so.

본 발명의 일 실시예에 따른 이미지에 기초한 음악 재생 방법을 구체적으로 설명하면 다음과 같다.A method of reproducing music based on an image according to an embodiment of the present invention will be described in detail as follows.

먼저, 도 1 및 도 2에 도시된 바와 같이, 디스플레이(110)에 음악으로 재생할 이미지를 표시할 수 있다(S110). 구체적으로, 휴대 단말기(100)를 통해 설정된 프로그램이 실행되면 제어부(120)는 디스플레이(110)에 음악으로 재생할 이미지가 표시되도록 이미지 안내창(미도시)을 활성화시킬 수 있다.First, as shown in FIGS. 1 and 2, an image to be played as music may be displayed on the display 110 (S110). Specifically, when a program set through the portable terminal 100 is executed, the controller 120 may activate an image guide window (not shown) so that an image to be played as music is displayed on the display 110.

여기서, 이미지 안내창(미도시)은, 도시되지는 않았지만, "메모리에 저장된 이미지 불러오기" 또는 "카메라로 촬영하여 이미지 표시하기" 등으로 디스플레이(110)에 활성화될 수 있다. 즉, 디스플레이(110)에 이미지를 표시하는 과정(S110)은, 휴대 단말기(100)의 메모리(130)에 미리 저장된 이미지를 불러와서 표시할 수도 있고, 다른 예로 휴대 단말기(100)의 카메라(140)로 바로 촬영하여 표시할 수도 있다.Here, the image guide window (not shown), although not shown, may be activated on the display 110, such as "Recall the image stored in the memory" or "Shooting with a camera to display the image". That is, in the process of displaying an image on the display 110 (S110), an image previously stored in the memory 130 of the portable terminal 100 may be fetched and displayed, and as another example, the camera 140 of the portable terminal 100 may be displayed. You can also shoot right away with).

이 후, 제어부(120)는 디스플레이(110)에 표시된 이미지를 복수의 구간(section)으로 분할할 수 있다(S120). 예를 들어, 복수의 구간으로 분할하는 과정(S120)은, 도 4에 도시된 바와 같이, 제어부(120)를 통해 이미지를 설정 수의 구간으로 분할하되 격자 형태로 분할할 수 있다. 또한, 분할된 각각의 구간은 동일한 크기를 가질 수 있다.Thereafter, the controller 120 may divide the image displayed on the display 110 into a plurality of sections (S120). For example, in the process of dividing into a plurality of sections (S120), as shown in FIG. 4, the image may be divided into a set number of sections through the control unit 120, but may be divided into a grid. Also, each divided section may have the same size.

특히, 설정 수는, 도시되지는 않았지만, 디스플레이(110)에 표시되는 숫자 입력창(미도시)을 통해 입력된 숫자의 수로 정해질 수 있다. 예를 들어, 디스플레이(110)에 이미지가 표시되면, 제어부(120)는 이미지에 오버랩(overlap)되도록 디스플레이(110)에 숫자 입력창(미도시)을 활성화시킬 수 있고, 사용자가 이 활성화된 숫자 입력창(미도시)에 숫자를 입력하면 제어부(120)는 그 입력된 숫자의 수만큼 이미지를 분할할 수 있다. 나아가, 제어부(120)는, 도 4에 도시된 바와 같이, 분할된 이미지 사이의 경계선이 이미지에 함께 오버랩(overlap)되도록 디스플레이(110)에 경계선을 격자 형태로 표시할 수 있다.In particular, the set number, although not shown, may be determined by the number of numbers input through a number input window (not shown) displayed on the display 110. For example, when an image is displayed on the display 110, the controller 120 may activate a number input window (not shown) on the display 110 so as to overlap the image, and the user may activate the activated number. When a number is input in an input window (not shown), the controller 120 may divide an image by the number of input numbers. Furthermore, as illustrated in FIG. 4, the controller 120 may display the boundary lines in a grid form on the display 110 so that the boundary lines between the divided images overlap together with the images.

그리고 나서, 제어부(120)는 분할된 각 구간에 있는 복수의 색상 중 가장 많이 분포된 색상을 메인 색상으로 정할 수 있다(S130). 구체적으로, 디스플레이(110)는 복수의 픽셀(pixel; 화소)(미도시)로 이루어질 수 있고, 제어부(120)는 이미지 센서(미도시)로부터 각각의 픽셀(pixel; 화소)로 전송되는 각각의 색상 값(즉, 색상 신호)을 수신하되, 상기 분할된 각 구간에 위치되는 복수의 픽셀로 전송되는 색상 값들을 수신하여 이 색상 값들 중 상대적으로 가장 많은 분포를 가지는 색상 값의 색상을 메인 색으로 정할 수 있다.Then, the controller 120 may determine the most distributed color among the plurality of colors in each divided section as the main color (S130). Specifically, the display 110 may be formed of a plurality of pixels (pixels) (not shown), and the controller 120 may transmit each image (not shown) from the image sensor (not shown) to each pixel (pixel). A color value (i.e., a color signal) is received, but color values transmitted to a plurality of pixels located in each of the divided sections are received, and the color of the color value having the most distribution among these color values is used as the main color. Can be decided.

예를 들어, 빨간색의 색상 값이 상대적으로 많다면 메인 색은 빨간색일 수 있고, 노란색의 색상 값이 상대적으로 많다면 메인 색은 노란색일 수 있다. 참고로, 이러한 색상은 명도 및 채도에 따라 변화되는 색의 부분(예를 들어, 빨간색의 경우 연한 빨간색, 짙은 빨간색 등)을 포함하여 하나의 색상으로 정의할 수도 있고, 다른 예로 이러한 명도 및 채도에 따라 변화되는 색의 부분(예를 들어, 빨간색의 경우 연한 빨간색, 짙은 빨간색 등)을 각각 별도의 색상으로 정의할 수도 있을 것이다.For example, if the color value of red is relatively large, the main color may be red, and if the color value of yellow is relatively large, the main color may be yellow. For reference, these colors may be defined as a single color including a portion of a color that changes according to brightness and saturation (for example, light red and dark red for red), and for example, for such brightness and saturation. The part of the color that changes accordingly (for example, in the case of red, light red, dark red, etc.) may be defined as separate colors.

다음으로, 제어부(120)는 메인 색상을 음으로 변환할 수 있다(S140). 구체적으로, 메인 색상을 음으로 변환하는 과정(S140)은, 매칭 데이터를 메모리(130)에서 검색하여 메인 색상에 해당하는 가청 주파수의 음을 불러오는 방식으로 진행될 수 있다. 예를 들어, 매칭 데이터는, 도 3에 도시된 바와 같이, 각각의 색상에 대해 서로 다른 가청 주파수의 음을 부여하는 방식으로 생성할 수 있다. 또한, 매칭 데이터는 프로그램의 실행 전부터 휴대 단말기(100)의 메모리(130)에 미리 저장될 수 있다.Next, the controller 120 may convert the main color to sound (S140). Specifically, the process of converting the main color to sound (S140) may be performed by searching for matching data in the memory 130 and recalling the sound of the audible frequency corresponding to the main color. For example, as shown in FIG. 3, matching data may be generated in a manner of giving a tone of a different audible frequency to each color. In addition, the matching data may be previously stored in the memory 130 of the portable terminal 100 even before the execution of the program.

참고로, 도 3에 도시된 바와 같이, 음계 기준으로 할 경우, 빨간색은 "도", 주황색은 "레", 노란색은 "미", 초록색은 "파", 파란색은 "솔", 남색은 "라", 보라색은 "시" 등으로 매칭시킬 수 있으며, 이 매칭 방법은 하나의 예시일 뿐 이 기술분야의 통상의 기술자에 의해 필요에 따라 변경 가능할 것이다. 나아가, 제어부(120)는 디스플레이(110)에 매칭 데이터 생성창(미도시)을 활성화시킬 수 있으며, 사용자는 이 매칭 데이터 생성창(미도시)을 통해 각각의 색에 대해 자기가 원하는 가청 주파수의 음을 부여하는 방식으로 매칭 데이터를 생성할 수도 있다. 그리고, 제어부(120)는 매칭 데이터 생성창(미도시)을 통해 생성된 매칭 데이터가 메모리(130)에 저장되도록 할 수 있다. 또한, 이러한 매칭 데이터 생성창(미도시)은, 메인 색상을 음으로 변환하는 과정(S140)이 진행되기 전에 디스플레이(110)에 활성화될 수 있다.For reference, as shown in FIG. 3, when using the scale as a reference, red is "degree", orange is "le", yellow is "mi", green is "wave", blue is "sol", and indigo is " D, purple can be matched with "poem" and the like, and this matching method is only an example and may be changed as necessary by a person skilled in the art. Furthermore, the control unit 120 may activate a matching data generation window (not shown) on the display 110, and a user may select a desired audible frequency for each color through the matching data generation window (not shown). Matching data can also be generated in a manner that gives a tone. In addition, the controller 120 may allow matching data generated through a matching data generation window (not shown) to be stored in the memory 130. In addition, the matching data generation window (not shown) may be activated on the display 110 before the process of converting the main color to sound (S140).

끝으로, 제어부(120)는 변환된 음을 설정 순서에 따라 재생할 수 있다(S150).Finally, the control unit 120 may play the converted sound in a set order (S150).

여기서, 설정 순서는, 도시되지는 않았지만, 좌에서 우로 이동되는 순서, 우에서 좌로 이동되는 순서, 위에서 아래로 이동되는 순서, 아래에서 위로 이동되는 순서, 가운데서 가장자리로 이동되는 순서, 또는 가장자리에서 가운데로 이동되는 순서 중 어느 하나의 순서를 포함할 수 있다.Here, the setting order is not shown, but the order of moving from left to right, the order of moving from right to left, the order of moving from top to bottom, the order of moving from bottom to top, the order of moving from center to edge, or from edge to center It may include any one of the order to move to.

예를 들어, 도 4에서는 복수의 구간에서 좌측의 첫 열에 있는 3개의 구간은 아래에서 위로 그 순서가 진행되고, 그리고 우측으로 다음 열이 진행되며, 다음 열에서는 반대로 위에서 아래로 그 순서가 진행될 수 있으며, 이러한 순서를 우측으로 갈수록 반복될 수 있다. 따라서, 사용자는 귀로 음악을 들으면서 대략의 이미지를 위와 같은 순서로 머리에서 연상할 수 있다. 나아가, 도 4에 도시된 바와 같이, 세로 열은 화음을 구성하는 영역일 수 있고, 가로 행은 세로 열을 통해 구성된 화음의 진행방향일 수 있다.For example, in FIG. 4, the order of three sections in the first column on the left in a plurality of sections proceeds from bottom to top, and the next column progresses to the right, and in the next column, the order may proceed from top to bottom. And this sequence can be repeated to the right. Therefore, the user can associate the approximate image from the head in the above order while listening to music with the ears. Furthermore, as illustrated in FIG. 4, the vertical column may be an area constituting the chord, and the horizontal row may be a progression direction of the chord configured through the vertical column.

또한, 설정 순서는, 디스플레이(110)에 활성화되는 순서 선택창(미도시)을 통해 선택된 순서로 정해질 수 있다. 구체적으로, 제어부(120)는 디스플레이(110)에 순서 선택창(미도시)을 활성화시킬 수 있다. 특히, 제어부(120)는, 이미지를 표시하는 과정(S110)과 복수의 구간으로 분할하는 과정(S120) 사이에서 순서 선택창(미도시)을 활성화시킬 수 있다. 따라서, 사용자는 디스플레이(110)에 표시된 이미지를 보면서 이 이미지에 알맞는 설정 순서를 순서 선택창(미도시)을 통해 선택할 수 있다. 이러한 순서 선택창(미도시)은, 복수의 터치버튼(미도시)으로 표시되어 사용자가 이 중 어느 하나의 터치버튼을 터치하는 것으로 선택될 수 있다.In addition, the setting order may be determined in the order selected through an order selection window (not shown) that is activated on the display 110. Specifically, the control unit 120 may activate an order selection window (not shown) on the display 110. Particularly, the controller 120 may activate an order selection window (not shown) between the process of displaying an image (S110) and the process of dividing into a plurality of sections (S120). Therefore, the user can select an appropriate setting sequence for the image through the sequence selection window (not shown) while viewing the image displayed on the display 110. The order selection window (not shown) may be displayed as a plurality of touch buttons (not shown) and selected by a user touching any one of them.

이하, 도 5를 참조하여, 본 발명의 다른 실시예에 따른 서버(200)에 대해 설명한다.Hereinafter, a server 200 according to another embodiment of the present invention will be described with reference to FIG. 5.

도 5는 본 발명의 이미지에 기초한 음락 재생 방법을 수행하기 위한 프로그램을 휴대 단말기에 제공하기 위해 휴대 단말기와 서버가 서로 통신하고 있는 상태를 개략적으로 나타낸 블록도이다.5 is a block diagram schematically showing a state in which a mobile terminal and a server are in communication with each other in order to provide a mobile terminal with a program for performing a sound reproduction method based on the image of the present invention.

본 발명의 다른 실시예에 따른 서버(200)는, 도 5에 도시된 바와 같이, 통신을 통해 상술한 본 발명의 일 실시예에 따른 이미지에 기초한 음악 재생 방법에 포함된 각 단계를 수행하기 위한 일련의 명령을 포함하는 설정된 프로그램을 통신을 통해 휴대 단말기(100)로 제공할 수 있다.The server 200 according to another embodiment of the present invention, as shown in Figure 5, for performing each step included in the music reproduction method based on the image according to an embodiment of the present invention described above via communication The set program including a series of commands may be provided to the portable terminal 100 through communication.

이상에서와 같이, 본 발명의 실시예들에 따른 이미지에 기초한 음악 재생 방법 및 이를 수행하기 위한 프로그램을 제공하는 서버는 다음과 같은 효과를 가질 수 있다.As described above, a server that provides a method for reproducing music based on an image according to embodiments of the present invention and a program for performing the same may have the following effects.

본 발명의 실시예들에 의하면, 휴대 단말기(100)의 디스플레이(110)에 표시된 이미지가 음악으로 재생되도록 이미지에 기초한 음악 재생 방법으로, 디스플레이(110)에 이미지를 표시하는 과정(S110)과, 이미지를 복수의 구간으로 분할하는 과정(S120)과, 분할된 각 구간에 있는 복수의 색상 중 가장 많이 분포된 색상을 메인 색상으로 정하는 과정(S130)과, 메인 색상을 음으로 변환하는 과정(S140)과, 그리고 변환된 음을 설정 순서에 따라 재생하는 과정(S150)을 포함하는 기술구성을 제공하므로, 시각적으로 볼 수 있는 이미지를 청각적으로 들을 수 있는 음악으로 재생할 수 있어, 보지 않더라도 이미지에 대한 대략의 색상 배치 등의 정보를 파악할 수 있고, 음악을 모르는 초보자들도 자신이 그린 그림 등의 이미지 등을 통해 음악을 대략적으로 만들 수 있는 등 음악에 대한 흥미를 북돋울 수 있다.According to embodiments of the present invention, a method for displaying an image on the display 110 as a music reproduction method based on an image such that the image displayed on the display 110 of the mobile terminal 100 is played as music (S110), The process of dividing the image into a plurality of sections (S120), the process of determining the most distributed color among the plurality of colors in each segment as the main color (S130), and the process of converting the main color to sound (S140) ), And the process of reproducing the converted sound according to the set order (S150), so that the visually viewable image can be reproduced as music that can be heard audibly, so that the image can be It is possible to grasp information such as the approximate color arrangement, and even beginners who do not know music can roughly make music through images such as pictures they draw. It can inspire interest in evil.

이상에서 본 발명의 바람직한 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.The preferred embodiments of the present invention have been described in detail above, but the scope of the present invention is not limited to this, and various modifications and improvements of those skilled in the art using the basic concept of the present invention defined in the following claims are also provided. It belongs to the scope of rights.

100: 휴대 단말기 110: 디스플레이
120: 제어부 130: 메모리
140: 카메라 200: 서버
100: mobile terminal 110: display
120: control unit 130: memory
140: camera 200: server

Claims (4)

휴대 단말기의 디스플레이에 표시된 이미지가 음악으로 재생되도록 이미지에 기초한 음악 재생 방법으로,
상기 디스플레이에 이미지를 표시하는 단계;
상기 이미지를 복수의 구간으로 분할하는 단계;
상기 분할된 각 구간에 있는 복수의 색상 중 가장 많이 분포된 색상을 메인 색상으로 정하는 단계;
상기 메인 색상을 음으로 변환하는 단계; 및
상기 변환된 음을 설정 순서에 따라 재생하는 단계;
를 포함하고,
상기 복수의 구간으로 분할하는 단계는,
상기 이미지를 설정 수의 구간으로 분할하되 격자 형태로 분할하고,
상기 각각의 구간은,
동일한 크기를 가지고,
상기 설정 수는,
상기 디스플레이에 표시되는 숫자 입력창을 통해 입력된 숫자의 수로 정해지고,
상기 이미지에 기초한 음악 재생 방법은,
상기 메인 색상을 음으로 변환하는 단계 전에, 상기 디스플레이에 매칭 데이터 생성창을 활성화시켜 상기 매칭 데이터 생성창을 통해 각각의 색에 대해 사용자가 원하는 가청 주파수의 음을 부여하는 방식으로 매칭 데이터를 생성하는 단계; 및
상기 생성된 매칭 데이터를 메모리에 저장하는 단계;
를 더 포함하고,
상기 메인 색상을 음으로 변환하는 단계는,
상기 메모리에 저장된 상기 매칭 데이터를 검색하여 상기 메인 색상에 해당하는 가청 주파수를 불러오는 방식으로 진행되고,
상기 설정 순서에 따라 재생하는 단계에서, 상기 설정 순서는,
좌에서 우로 이동되는 순서, 우에서 좌로 이동되는 순서, 위에서 아래로 이동되는 순서, 아래에서 위로 이동되는 순서, 가운데서 가장자리로 이동되는 순서, 또는 가장자리에서 가운데로 이동되는 순서 중 어느 하나의 순서를 포함하고,
상기 설정 순서는,
상기 디스플레이에 활성화되는 순서 선택창을 통해 선택된 순서로 정해지고,
상기 순서 선택창은,
상기 이미지를 표시하는 단계와 상기 복수의 구간으로 분할하는 단계 사이에 활성화되는
이미지에 기초한 음악 재생 방법.
A music playback method based on an image so that the image displayed on the display of the mobile terminal is played as music,
Displaying an image on the display;
Dividing the image into a plurality of sections;
Determining a color most distributed among a plurality of colors in each divided section as a main color;
Converting the main color to sound; And
Playing the converted sound according to a set order;
Including,
The step of dividing the plurality of sections,
Divide the image into a set number of sections, but divide it into a grid,
Each of the above sections,
Have the same size,
The number of settings,
Determined by the number of numbers entered through the number input window displayed on the display,
The music reproduction method based on the image,
Before the step of converting the main color to sound, the matching data generation window is activated on the display to generate matching data in a manner of giving a tone of a desired audible frequency for each color through the matching data generation window. step; And
Storing the generated matching data in a memory;
Further comprising,
The step of converting the main color to sound,
The matching data stored in the memory is searched for and audible frequencies corresponding to the main colors are retrieved.
In the step of reproducing according to the setting order, the setting order is,
Includes any one of the following: left-to-right order, right-to-left order, top-to-bottom order, bottom-to-top order, center-to-edge order, or edge-to-center order. and,
The above setting procedure,
It is determined in the order selected through the order selection window activated on the display,
The order selection window,
It is activated between displaying the image and dividing into the plurality of sections.
How to play music based on images.
제1항에서,
상기 메인 색으로 정하는 단계는,
상기 디스플레이를 이루는 복수의 픽셀 중 상기 각 구간에 위치되는 복수의 픽셀에 전송되는 색상 값들을 수신하여 상기 색상 값들 중 가장 많은 색상 값의 색상을 메인 색으로 정하는
이미지에 기초한 음악 재생 방법.
In claim 1,
The step of determining the main color,
Among the plurality of pixels constituting the display, color values transmitted to a plurality of pixels located in each section are received to determine the color of the most color value among the color values as the main color
How to play music based on images.
삭제delete 제1항 또는 제2항의 이미지에 기초한 음악 재생 방법에 포함된 각 단계를 수행하기 위한 일련의 명령을 포함하는 프로그램을 상기 휴대 단말기에 제공하는
서버.
Providing a program including a series of instructions for performing each step included in the music reproduction method based on the image of claim 1 or claim 2 to the portable terminal
server.
KR1020190005651A 2019-01-16 2019-01-16 Method of playing image into music and server supplying program for performing the same KR102089207B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190005651A KR102089207B1 (en) 2019-01-16 2019-01-16 Method of playing image into music and server supplying program for performing the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190005651A KR102089207B1 (en) 2019-01-16 2019-01-16 Method of playing image into music and server supplying program for performing the same

Publications (1)

Publication Number Publication Date
KR102089207B1 true KR102089207B1 (en) 2020-03-13

Family

ID=69938462

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190005651A KR102089207B1 (en) 2019-01-16 2019-01-16 Method of playing image into music and server supplying program for performing the same

Country Status (1)

Country Link
KR (1) KR102089207B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170110473A (en) * 2016-03-23 2017-10-11 권혁민 Apparatus for changing image into audio source
KR101896193B1 (en) * 2017-08-28 2018-09-07 한양대학교 산학협력단 Method for converting image into music

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170110473A (en) * 2016-03-23 2017-10-11 권혁민 Apparatus for changing image into audio source
KR101896193B1 (en) * 2017-08-28 2018-09-07 한양대학교 산학협력단 Method for converting image into music

Similar Documents

Publication Publication Date Title
US10514885B2 (en) Apparatus and method for controlling audio mixing in virtual reality environments
US8891909B2 (en) Information processing apparatus capable of modifying images based on audio data, program and information processing method
JP6058192B1 (en) Music information generating apparatus, music information generating method, program, and recording medium
US20130182012A1 (en) Method of providing augmented reality and terminal supporting the same
JP4991120B2 (en) Image color correction apparatus and method, and recording medium for recording program for causing computer to execute the method
MX2012009594A (en) Content reproduction device, television receiver, content reproduction method, content reproduction program, and recording medium.
WO2020133372A1 (en) Video subtitle processing method and broadcast direction system
KR20090092035A (en) Method for generating mosaic image and apparatus for the same
KR102054116B1 (en) Customized Stage Video Delivery System
US10134164B2 (en) Information processing apparatus, information processing system, information processing method, and program
CN113810837B (en) Synchronous sounding control method of display device and related equipment
JP2006314014A (en) Display system
KR102089207B1 (en) Method of playing image into music and server supplying program for performing the same
JP2007140180A (en) Display device, program, and information storage medium
CN108632553A (en) Image processing apparatus, projecting apparatus, image processing method and storage medium
CN115604887A (en) Atmosphere lamp group control method, control console and device
WO2019087331A1 (en) Reference position detection device and reference position detection method
US9899057B2 (en) Control method for synchronized video, control system for synchronized video and electronic apparatus thereof
TW201946445A (en) Video processing method
JP3643829B2 (en) Musical sound generating apparatus, musical sound generating program, and musical sound generating method
JP5803956B2 (en) Karaoke system and karaoke device
KR20220036210A (en) Device and method for enhancing the sound quality of video
CN112274932A (en) Game resource data processing method and device, storage medium and computer equipment
JP2011053345A (en) Karaoke system including stereoscopic display function of lyric character
KR101843024B1 (en) System and Computer Implemented Method for Playing Compoiste Video through Selection of Environment Object in Real Time Manner

Legal Events

Date Code Title Description
X091 Application refused [patent]
GRNT Written decision to grant