WO2011136454A1 - 이미지를 이용한 음원 생성 시스템 및 방법 - Google Patents

이미지를 이용한 음원 생성 시스템 및 방법 Download PDF

Info

Publication number
WO2011136454A1
WO2011136454A1 PCT/KR2010/008973 KR2010008973W WO2011136454A1 WO 2011136454 A1 WO2011136454 A1 WO 2011136454A1 KR 2010008973 W KR2010008973 W KR 2010008973W WO 2011136454 A1 WO2011136454 A1 WO 2011136454A1
Authority
WO
WIPO (PCT)
Prior art keywords
line
command
image
inflection point
sound source
Prior art date
Application number
PCT/KR2010/008973
Other languages
English (en)
French (fr)
Inventor
노도영
Original Assignee
(주)세가인정보기술
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)세가인정보기술 filed Critical (주)세가인정보기술
Publication of WO2011136454A1 publication Critical patent/WO2011136454A1/ko

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0008Associated control or indicating means
    • G10H1/0025Automatic or semi-automatic music composition, e.g. producing random music, applying rules from music theory or modifying a musical piece
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/441Image sensing, i.e. capturing images or optical patterns for musical purposes or musical control purposes

Definitions

  • the present invention relates to a sound source generation system and method using an image, and more particularly to a system and method for extracting sound source information from an image to convert the visual information into auditory information.
  • Representative visual information includes images such as videos, pictures, and pictures. People who cannot use the visual field or those who are unable to use the visual image have difficulty in recognizing the information. .
  • This problem may be solved if there is a means for providing visual information in a form that can be recognized using a sense other than vision.
  • a means of converting visual information into the form of auditory information may be considered.
  • the present invention has been made to solve such a conventional problem, so that users who cannot use the visual field or users who cannot use the visual field can recognize the information on the image.
  • the object of the present invention is to explore new genres of music and provide new types of content such as ringtones and music emoticons by using the generated auditory information.
  • a sound source generation system using an image according to the present invention includes a line layer generator, a line extractor, an inflection point extractor, and a command setter.
  • the line layer generator generates a line layer by extracting a line according to a preset method from an image to extract a sound source, and the line extractor superimposes a preset line layer on the line layer to include a line included in a preset range of the line layer. Extract
  • the inflection point extracting unit extracts an inflection point corresponding to a preset criterion from the extracted line, and if the extracted inflection point is included in a preset command range on the stairway layer, the inflection point extractor sets the corresponding command line.
  • the mistaken layer may be generated according to the mistaken information received from the user.
  • the command line setting unit may set an inflection point included in the boundary range as a semitone command between the two commandments.
  • command setter may receive from the user a point where a note is generated in a line between different inflection points.
  • the sound source generation system using the image according to the present invention may further include an instrument setting unit for setting the instrument to play according to the command from among the previously registered instruments.
  • the sound source generation system using the image according to the present invention may further include a rhythm setting unit for setting the rhythm to be assigned to the command set by the instrument from among the pre-registered rhythm.
  • the sound source generation system using the image according to the present invention may further include a time setting unit for setting the time signature to give a rhythm set command from among the pre-registered beats.
  • the sound source generation method using the image according to the present invention includes a line layer generation step, a line extraction step, an inflection point extraction step, and a command setting step.
  • a line layer is generated by extracting a line according to a preset method from an image to extract a sound source, and in the line extraction step, a preset line layer is superimposed on the line layer and included in a preset range of the line layer. Extract the lines that are
  • an inflection point corresponding to a preset criterion is extracted from the extracted line.
  • the setting commanding step when the extracted inflection point is included in a preset command range on the stairway layer, the corresponding command line is set at the inflection point.
  • the mistaken layer may be generated according to the mistaken information received from the user.
  • the inflection point included in the boundary range may be set as the halftone command between the two commandments.
  • a user may receive a point at which a note is generated in a line between the different inflection points.
  • the sound source generation method using the image according to the present invention may further comprise a musical instrument setting step of setting the instrument to play according to the command from among the instruments registered in advance after the commanding setting step.
  • the sound source generation method using the image according to the present invention may further include a rhythm setting step of setting the rhythm to be assigned to the set command of the instrument from among the rhythms registered in advance after the instrument setting step.
  • the sound source generation method using an image according to the present invention may further include a time setting step of setting the time signature to give a rhythm set command among the beats registered in advance after the rhythm setting step.
  • the present invention extracts sound source information from lines extracted from an image and converts the visual information into auditory information, so that users who cannot use the time or users who cannot use the time can recognize the information about the image. can do.
  • the auditory information generated from the visual information may be used to explore new music genres and provide new types of content such as ringtones and music emoticons.
  • FIG. 1 is a block diagram schematically showing an embodiment of a sound source generation system configuration using an image according to the present invention.
  • FIG. 2 is a diagram illustrating an embodiment of extracting a line to be converted into a sound source in a line layer
  • FIG. 3 is a diagram showing an embodiment of automatically setting a command line in an extracted line
  • FIG. 4 is a diagram illustrating an embodiment of setting a command line according to a command range in FIG. 3.
  • FIG. 5 illustrates an embodiment in which the command line is manually input in a line between different inflection points in FIG. 3.
  • FIG. 6 is a diagram illustrating an embodiment in which a rhythm is set to a set command line.
  • FIG. 7 is a diagram illustrating an embodiment of setting a time signature through screen adjustment.
  • FIG. 8 is a flowchart schematically showing an embodiment of a sound source generating method using an image according to the present invention
  • FIG. 1 is a block diagram schematically showing an embodiment of a configuration of a sound source generation system 100 using an image according to the present invention.
  • the sound source generation system 100 using the image includes a line layer generator 110, a line extractor 120, an inflection point extractor 130, a command setter 140, an instrument setter 150, and a rhythm setter ( 160, and a time setting unit 170, hereinafter, a sound source generation system 100 using an image according to the present invention will be described using an image generated by photographing Bukhansan.
  • the line layer generator 110 extracts a line according to a preset method from an image to extract a sound source to generate a line layer.
  • the line layer includes a plurality of lines, and these lines may be generated by recognizing the outer shape of an object such as a mountain range or a cloud as a line in the Bukhansan image, which is an image to extract sound sources.
  • an image processing technique for recognizing lines one of various image processing techniques currently used, such as an image processing technique for recognizing a sharply changing portion of a line as an image, may be applied.
  • the line extractor 120 superimposes a preset line layer on the line layer generated by the line layer generator 110 to extract a line included in a preset range of the line layer.
  • the setting of the stairway layer is to set the number of stave lines included in the stave line layer, and the stave information such as whether the stave is a treble clef or a low treble clef, and can be set in real time by a user.
  • FIG. 2 is a diagram illustrating an embodiment of extracting a line to be converted into a sound source from a line layer, and the line extractor 120 will be described in detail with reference to FIG. 2.
  • a line included in the preset range of the stairway layer is extracted from the plurality of lines. For example, the top few cm centered on the top line of the stave and the bottom few centimeters centered on the bottom line of the stave are set as the range.
  • the range can be set to other conditions.
  • only one line may be extracted from the lines included in the range set according to the user input as shown in FIG. 2, or two or more lines may be extracted to insert a chord.
  • the inflection point extractor 130 extracts an inflection point corresponding to a preset criterion from the extracted line.
  • the lines extracted from the image are mainly composed of curves (numerous small inflection points), it may not be easy to extract inflection points (points at which the continuous angles of the lines change) to generate sound sources when there is no setting criterion.
  • the command setting unit 140 sets the corresponding command line at the inflection point.
  • FIG. 3 is a diagram illustrating an embodiment of automatically setting a command line in an extracted line
  • FIG. 4 is a diagram illustrating an embodiment of setting a command line according to a command range in FIG. 3.
  • the command line is automatically set at the inflection point which is the portion where the continuous angle of the line changes (that is, the portion where the line is bent).
  • the inflection point is located in the range of command line on the divided line as shown in FIG. 4, the corresponding command name is set directly, but if the inflection point is included in the boundary range between two preset commandments, the inflection point included in the boundary range is a semitone between the two commandments. Set to commandment.
  • the extracted inflection point is included in the command range of 'pa, me, or le', which is the section 1, 3, or 5 of FIG.
  • the correct scale can be set.
  • the left side represents an inflection point, which is the center point of the note head represented by the stave, as 'A', and the right side shows 'wave' and 'le' in the stave. It is an enlarged representation of two lines representing.
  • the scale of the inflection point is set to the halftone of 'Mi' or 'Pa'. At this time, 'Mi' or 'Pa' has the same playing sound, so the difference in the sign It does not affect production.
  • the scale of the inflection point can be set to the semitone of' Le 'or' Mi '.
  • command setter 130 may receive from the user a point where a note is generated in a line between different inflection points.
  • FIG. 5 is a diagram illustrating an embodiment in which a command line is manually input in a line between different inflection points in FIG. 3.
  • the dark note head refers to an inflection point corresponding to the command line set automatically in FIG. 3, and the light note head refers to a manually generated (input from the user) note generation point.
  • a note generation point When a note generation point is manually input, a note generation point may be set by applying a preset command range or a command line included in a boundary range as shown in FIG. 4.
  • the instrument setting unit 150 sets an instrument to be played according to the command from among previously registered instruments.
  • Pre-registered instruments include the violin, viola, cello, contra bass, wind instruments flute, ocarina, oboe, clarinet, trumpet, trombone, tuba, piccolo, and percussion pianos. have.
  • the instrument to be played is set by the user's selection.
  • the rhythm setting unit 160 sets a rhythm to be assigned to a set command of the instrument among pre-registered rhythms.
  • Pre-registered rhythms include dance, hip hop, ballads, tango, boredom, cha cha cha, rumba, and all other rhythms can be registered.
  • the note (16th note, eighth note, quarter note, half note, whole note, etc.), chapter, and minor can be set as shown in FIG. 6 according to the set rhythm.
  • FIG. 6 is a diagram illustrating an embodiment in which a rhythm is set in a set command line.
  • the beat setting unit 170 sets a beat to be applied to a commanding command having a rhythm among beats registered in advance.
  • Pre-registered beats are very slow, slow, normal fast, fast, very fast, and all other beats can be registered.
  • the time signature can be set by increasing or decreasing the screen of the line layer to the left or the right as shown in FIG. 7. When the screen is increased, the beat becomes slower, and when the screen is reduced, the beat becomes faster.
  • FIG. 7 is a diagram illustrating an embodiment of setting a time signature by adjusting a screen.
  • the line layer generator 110, the line extractor 120, the inflection point extractor 130, the command setter 140, the instrument setter 150, the rhythm setter 160, and the beat setter Due to the configuration of 170, by converting the visual information into auditory information, the users who cannot use the vision or the users who are in a situation where the visual is not available can recognize the information about the image.
  • the auditory information generated from the visual information may be used to explore new music genres and provide new types of content such as ringtones and music emoticons.
  • FIG. 8 is a flowchart schematically showing an embodiment of a sound source generating method using an image according to the present invention.
  • the line layer generator 110 generates a line layer including a plurality of lines according to a preset method such as recognizing an external shape of an object included in an image to extract a sound source as a line.
  • the line extracting unit 120 overlaps the pre-set line paper layer on the line layer, and extracts a line included in the preset range of the line paper layer (S200), and extracts the line included in the preset line (sampling interval, etc.) from the extracted line. A corresponding inflection point is extracted (S300).
  • the staff line layer may be set in advance whether the number of staff members, the treble clef, or the treble clef.
  • the corresponding command is set at the inflection point (S400).
  • the inflection point when an inflection point is located in a preset command range, the corresponding command name is set at an inflection point, and when the inflection point is located at a boundary between two commandments, the inflection point is set as a semitone command between the two commandments.
  • the corresponding command is set.
  • the instrument for playing the scale is selected by setting one among the pre-registered instruments (S600), and the rhythm is set by selecting one of the pre-registered rhythms (S600). S700), and complete the note according to the rhythm.
  • the invention can also be embodied as computer readable code on a computer readable recording medium.
  • the computer-readable recording medium includes all kinds of recording devices in which data that can be read by a computer system is stored. Examples of computer-readable recording media include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage, and the like, and may also be implemented in the form of a carrier wave (for example, transmission over the Internet). Include.
  • the computer readable recording medium can also be distributed over network coupled computer systems so that the computer readable code is stored and executed in a distributed fashion.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

이미지로부터 음원 정보를 추출하여 시각 정보를 청각 정보로 변환시키기 위한 이미지를 이용한 음원 생성 시스템은 라인 레이어 생성부, 라인 추출부, 변곡점 추출부, 계명 설정부, 악기 설정부, 리듬 설정부, 및 박자 설정부를 포함한다. 라인 레이어 생성부는 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하고, 라인 추출부는 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다. 또한, 변곡점 추출부는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하며, 계명 설정부는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다. 이로 인해, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식하도록 할 수 있으며, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공할 수 있다.

Description

이미지를 이용한 음원 생성 시스템 및 방법
본 발명은 이미지를 이용한 음원 생성 시스템 및 방법에 관한 것으로, 보다 상세하게는 이미지로부터 음원 정보를 추출하여 시각 정보를 청각 정보로 변환시키기 위한 시스템 및 방법에 관한 것이다.
일반적으로 사람들은 오감인 시각, 청각, 촉각, 미각, 후각 중에서 대부분의 정보를 시각을 통해 받아들이고 있다.
대표적인 시각 정보로는 동영상이나 사진, 그림과 같은 이미지가 있는데, 시각을 이용할 수 없는 사람들이나, 시각을 이용할 수 없는 상황에 처해있는 사람들은 이러한 이미지들로부터 정보를 인식하는 데에 많은 어려움을 겪고 있다.
이러한 문제점은 시각 정보를 시각 이외의 다른 감각을 이용하여 인식할 수 있는 형태로 제공하는 수단이 있을 경우 해결가능할 것이다.
예를 들어, 시각 정보를 청각 정보의 형태로 변환시키는 수단을 고려해볼 수 있다.
이와 같이, 시각 정보를 청각 정보의 형태로 변환시키는 수단이 제공된다면, 상술한 문제점의 해결 이외에도 다른 유용한 활용예로서 이용될 수 있을 것이다.
예를 들어, 멋진 풍경을 담은 이미지를 음악으로 표현하여 새로운 음악 장르를 개척하는 데에 이용할 수 있고, 인물 사진 등의 이미지로부터 개성적인 벨소리를 제작하여 활용할 수도 있으며, 문자 이모티콘 대신에 음악 이모티콘을 첨부하여 문자 메시지 전송시에 개인의 감정을 색다르게 표현할 수도 있을 것이다.
하지만 이와 같이 시각 정보를 청각 정보의 형태로 제공해주는 수단은 현재까지 구현된 바 없는 실정이다.
본 발명은 이와 같은 종래의 문제점을 해결하기 위해 안출된 것으로서, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식할 수 있도록 하며, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공하는 것을 목적으로 한다.
상기 목적을 달성하기 위해 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 라인 레이어 생성부, 라인 추출부, 변곡점 추출부, 및 계명 설정부를 포함한다.
라인 레이어 생성부는 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하고, 라인 추출부는 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다.
또한, 변곡점 추출부는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하며, 계명 설정부는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다.
이로 인해, 시각 정보를 청각 정보로 변환시킴으로써, 시각으로 정보를 인식하지 못하는 사용자들이나, 시각으로 정보를 인식할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식하도록 할 수 있다.
또한, 오선지 레이어는 사용자로부터 입력받은 오선지 정보에 따라 생성할 수 있다.
또한, 계명 설정부는 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 경계 범위에 포함되는 변곡점을 두 계명 사이의 반음 계명으로 설정할 수 있다.
또한, 계명 설정부는 서로 다른 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받을 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 미리 등록된 악기들 중에서 계명에 따라 연주할 악기를 설정하는 악기 설정부를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 미리 등록된 리듬들 중에서 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정부를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 미리 등록된 박자들 중에서 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정부를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 라인 레이어 생성 단계, 라인 추출 단계, 변곡점 추출 단계, 및 계명 설정 단계를 포함한다.
라인 레이어 생성 단계에서는 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하고, 라인 추출 단계에서는 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다.
또한, 변곡점 추출 단계에서는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하며, 계명 설정 단계에서는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다.
또한, 오선지 레이어는 사용자로부터 입력받은 오선지 정보에 따라 생성될 수 있다.
또한, 계명 설정 단계에서는 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 경계 범위 포함되는 변곡점을 두 계명 사이의 반음 계명으로 설정할 수 있다.
또한, 계명 설정 단계에서는 서로 다른 상기 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받을 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 계명 설정 단계 이후에 미리 등록된 악기들 중에서 계명에 따라 연주할 악기를 설정하는 악기 설정 단계를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 악기 설정 단계 이후에 미리 등록된 리듬들 중에서 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정 단계를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 리듬 설정 단계 이후에 미리 등록된 박자들 중에서 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정 단계를 더 포함할 수 있다.
본 발명에 의해 이미지에서 추출한 라인으로부터 음원 정보를 추출하여 시각 정보를 청각 정보로 변환시킴으로써, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식하도록 할 수 있다.
또한, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공할 수 있다.
도 1은 본 발명에 따른 이미지를 이용한 음원 생성 시스템 구성의 일 실시예를 개략적으로 나타낸 블록도.
도 2는 라인 레이어에서 음원으로 변환하고자 하는 라인을 추출하는 일 실시예를 도시한 도면.
도 3은 추출한 라인에 자동으로 계명을 설정하는 일 실시예를 도시한 도면.
도 4는 도 3에서 계명 범위에 따라 계명을 설정하는 일 실시예를 도시한 도면.
도 5는 도 3에서 서로 다른 변곡점 사이의 라인에서 수동으로 계명이 입력되는 일 실시예를 도시한 도면.
도 6은 설정된 계명에 리듬을 설정한 일 실시예를 도시한 도면.
도 7은 화면 조절을 통해 박자를 설정하는 일 실시예를 도시한 도면.
도 8은 본 발명에 따른 이미지를 이용한 음원 생성 방법의 일 실시예를 개략적으로 나타낸 흐름도.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 설명한다. 발명의 이해를 보다 명확하게 하기 위해 동일한 구성요소에 대해서는 상이한 도면에서도 동일한 부호를 사용하도록 한다.
도 1은 본 발명에 따른 이미지를 이용한 음원 생성 시스템(100) 구성의 일 실시예를 개략적으로 나타낸 블록도이다.
이미지를 이용한 음원 생성 시스템(100)은 라인 레이어 생성부(110), 라인 추출부(120), 변곡점 추출부(130), 계명 설정부(140), 악기 설정부(150), 리듬 설정부(160), 및 박자 설정부(170)를 포함하며, 이하에서는 북한산을 영상 촬영하여 생성된 이미지를 이용하여 본 발명에 따른 이미지를 이용한 음원 생성 시스템(100)을 설명하고자 한다.
라인 레이어 생성부(110)는 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성한다.
라인 레이어는 다수의 라인을 포함하고 있으며, 이러한 라인은 음원을 추출하고자 하는 이미지인 북한산 이미지에서 산맥 또는 구름과 같은 물체의 외각 형상을 라인으로 인식함으로써 생성할 수 있다.
이때, 라인을 인식하는 영상처리 기법으로는 이미지상에서 명암이 급격히 변화하는 부분을 라인으로 인식하는 영상처리 기법 등, 현재 사용되고 있는 다양한 영상처리 기법들 중 하나가 적용될 수 있다.
라인 추출부(120)는 라인 레이어 생성부(110)에서 생성된 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다.
이때, 오선지 레이어의 설정은 오선지 레이어에 포함되는 오선의 개수, 및 해당 오선이 높은음자리 오선인지, 낮은음자리 오선인지 여부 등의 오선지 정보를 설정하는 것이며, 사용자로부터 실시간으로 설정될 수 있다.
도 2는 라인 레이어에서 음원으로 변환하고자 하는 라인을 추출하는 일 실시예를 도시한 도면이며, 도 2를 참조하여 라인 추출부(120)를 상세히 설명하고자 한다.
라인을 추출하기 전에 라인 레이어와 오선지 레이어가 중첩되었을 경우, 도 2의 상부 첫 번째 오선 부분과 중첩된 라인 레이어에는 다수의 라인이 인식된다(추출된 라인 및 상부의 조그마한 구름의 형상으로부터 인식된 라인 등).
이러한 다수의 라인 중에서 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하는데, 예컨대, 오선의 최상위 선을 중심으로 한 상부 몇 cm, 및 오선의 최하부 선을 중심으로 한 하부 몇 cm 등을 범위로 설정할 수 있으며, 이 밖의 다른 조건들로 범위를 설정할 수 있다.
또한, 추가적으로, 사용자의 입력에 따라 설정된 범위에 포함되는 라인들 중에서 도 2에서와 같이 하나의 라인만을 추출하거나, 또는 두 개 이상의 라인을 추출하여 화음을 넣을 수도 있다.
변곡점 추출부(130)는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출한다.
이미지로부터 추출한 라인은 주로 곡선(무수히 많은 작은 변곡점)으로 이루어져 있기 때문에 설정 기준이 없을 경우 음원으로 생성하기 위한 변곡점(라인의 연속적인 각도가 변하는 지점)을 추출하기가 용이하지 않을 수 있다.
그러므로, 추출된 라인에서 음원을 생성하기에 적합하도록 샘플링 간격을 미리 지정하는 등 당업자가 고려할 수 있는 다양한 방법으로 변곡점 추출을 위한 기준을 미리 설정해야 할 것이다.
계명 설정부(140)는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다.
도 3은 추출한 라인에 자동으로 계명을 설정하는 일 실시예를 도시한 도면이고, 도 4는 도 3에서 계명 범위에 따라 계명을 설정하는 일 실시예를 도시한 도면이다.
도 3에서 추출한 라인의 일부를 확대한 이미지를 보면, 라인의 연속적인 각도가 변하는 부분(즉, 라인이 꺾이는 부분)인 변곡점에 자동적으로 계명이 설정되는 것을 볼 수 있다.
이때, 변곡점이 도 4와 같이 구분된 오선 상의 계명 범위에 위치한다면 해당 계명이 바로 설정되지만, 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함된다면, 경계 범위에 포함되는 변곡점을 두 계명 사이의 반음 계명으로 설정한다.
즉, 추출된 변곡점이 도 4의 ①, ③, 또는 ⑤ 구간인 '파, 미, 또는 레'의 계명 범위에 포함된다면 도 3의 하단 오선의 좌측에서와 같이 '파, 미, 또는 레'의 정확한 음계가 설정될 수 있다.
반면, 추출된 변곡점이 도 4의 ② 또는 ④ 구간인 '파, 미' 또는 '미, 레'의 경계 범위에 포함된다면 도 3의 하단 오선의 우측에서와 같이 정확하지 않은 음계가 설정될 수 있으므로, 두 계명 사이의 반음 계명을 설정한다.
변곡점이 경계 범위에 포함되는 경우를 도 4를 참조하여 자세히 살펴보면, 도 4에서 좌측은 오선에 나타내는 음표 머리의 중심점인 변곡점을 'A'라 나타낸 것이며, 우측은 오선에서 '파' 및 '레'를 나타내는 두 선을 확대하여 나타낸 것이다.
상술한 바와 같이 'A'가 '파' 라인에 정확히 위치하거나 ① 구간에 위치하면 '파' 계명으로 설정되며, 'A'가 '레' 라인에 정확히 위치하거나 ⑤ 구간에 위치하면 '레' 계명으로 설정되고, 'A'가 '파'와 '레' 라인의 정 중앙선(점선)에 정확히 위치하거나 ③ 구간에 위치하면 '미' 계명으로 설정된다.
하지만, 'A'가 '파'와 '미' 음계의 경계 범위인 ② 구간에 위치하거나, 또는 '미'와 '레' 음계의 경계 범위인 ④ 구간에 위치할 경우에는 #(샵) 또는 ♭(플렛)을 이용하여 반음 계명을 설정할 수 있다.
'A'가 ② 구간에 위치하면 '미#' 또는 '파♭'의 반음으로 변곡점의 음계를 설정하는데 이때, '미#' 또는 '파♭'은 같은 연주 음을 가지고 있으므로 부호의 차이가 음원 생성에 영향을 미치지는 않는다.
마찬가지로, A'가 ④ 구간에 위치하면 '레#' 또는 '미♭'의 반음으로 변곡점의 음계를 설정할 수 있다.
또한, 계명 설정부(130)는 서로 다른 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받을 수 있다.
도 5는 도 3에서 서로 다른 변곡점 사이의 라인에서 수동으로 계명이 입력되는 일 실시예를 도시한 도면이다.
진한 색 음표 머리는 도 3에서 자동으로 설정된 계명에 해당하는 변곡점을 의미하며, 흐린 색 음표 머리는 수동으로 입력된(사용자로부터 입력) 음표 생성 지점을 의미한다.
수동으로 음표 생성 지점이 입력될 때 도 4에서와 같이 미리 설정된 계명 범위, 또는 경계 범위에 포함되는 계명을 적용하여 음표 생성 지점을 설정할 수 있다.
악기 설정부(150)는 미리 등록된 악기들 중에서 계명에 따라 연주할 악기를 설정한다.
미리 등록된 악기로는 현악기인 바이올린, 비올라, 첼로, 콘트라 베이스, 관악기인 피리, 오카리나, 오보에, 클라리넷, 트럼펫, 트럼본, 튜바, 피콜로, 타악기인 피아노 이외에도 음을 낼 수 있는 모든 악기들이 등록될 수 있다.
이 중 사용자의 선택에 의해 연주할 악기가 설정된다.
리듬 설정부(160)는 미리 등록된 리듬들 중에서 악기가 설정된 계명에 부여할 리듬을 설정한다.
미리 등록된 리듬으로는 댄스, 힙합, 발라드, 탱고, 지루박, 차차차, 룸바 등이 있으며, 기타 모든 리듬들이 등록될 수 있다.
이 중 사용자의 선택에 의해 리듬이 설정되면, 설정된 리듬에 따라 도 6과 같이 음표(16분 음표, 8분 음표, 4분 음표, 2분 음표, 온음표 등) 및 장, 단조를 설정할 수 있다.
도 6은 설정된 계명에 리듬을 설정한 일 실시예를 도시한 도면이다.
박자 설정부(170)는 미리 등록된 박자들 중에서 리듬이 설정된 계명에 부여할 박자를 설정한다.
미리 등록된 박자로는 아주 느리게, 느리게, 보통 빠르기, 빠르게, 아주 빠르게 등이 있으며, 기타 모든 박자들이 등록될 수 있다.
이러한 박자의 설정은 도 7에서와 같이 라인 레이어의 화면을 좌우로 늘리거나, 줄임으로써 설정할 수 있는데, 화면을 늘리면 박자는 느려지고, 화면을 줄이면 박자는 빨라지게 된다.
도 7은 화면 조절을 통해 박자를 설정하는 일 실시예를 도시한 도면이다.
이와 같은 라인 레이어 생성부(110), 라인 추출부(120), 변곡점 추출부(130), 계명 설정부(140), 악기 설정부(150), 리듬 설정부(160), 및 박자 설정부(170)의 구성으로 인해, 시각 정보를 청각 정보로 변환시킴으로써, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식하도록 할 수 있다.
또한, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공할 수 있다.
도 8은 본 발명에 따른 이미지를 이용한 음원 생성 방법의 일 실시예를 개략적으로 나타낸 흐름도이다.
먼저, 라인 레이어 생성부(110)에서 음원을 추출하고자 하는 이미지에 포함된 물체의 외각 형태를 라인으로 인식하는 등의 미리 설정된 방식에 따라 다수의 라인을 포함하는 라인 레이어를 생성한다.
다음으로, 라인 추출부(120)에서 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하고(S200), 추출한 라인에서 미리 설정된 기준(샘플링 간격 등)에 대응하는 변곡점을 추출한다(S300).
오선지 레이어는 오선의 개수 또는 높은음자리 오선인지, 낮은음자리 오선인지 여부 등이 미리 설정될 수 있다.
추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다(S400).
즉, 도 4에서 설명한 바와 같이 미리 설정된 계명 범위에 변곡점이 위치하면 해당 계명을 변곡점에 설정하고, 변곡점이 두 계명 사이의 경계 범위에 위치하는 경우에는 변곡점을 두 계명 사이의 반음 계명으로 설정한다.
그리고나서, 서로 다른 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받는다(S500).
사용자로부터 입력받은 음표 생성 지점도 단계 S400에서와 같이 계명 범위, 또는 경계 범위에 위치하는지에 따라 해당 계명을 설정한다.
라인에 따라 모든 음계가 설정되면, 다음으로 음계를 연주할 악기를 미리 등록되어 있는 악기들 중에서 하나를 선택하여 설정하고(S600), 미리 등록되어 있는 리듬들 중에서 하나를 선택하여 리듬을 설정하며(S700), 그 리듬에 따라 음표를 완성한다.
마지막으로 박자(빠르기)를 설정하는데(S800), 이는 화면의 좌우를 늘리거나 줄임으로써 설정될 수 있다.
이러한 방법으로 인해, 사용자가 인물 사진 등의 이미지로부터 벨소리나 컬러링과 같은 개성적인 멀티미디어 콘텐츠를 제작하여 이용하도록 할 수 있고, 새로운 음악 장르를 개척할 수 있으며, 문자 이모티콘 대신 음악 이모티콘을 첨부하여 문자 메시지 전송시에 개인의 감정을 색다르게 표현하도록 할 수 있다.
또한, 시각 장애인을 위한 명화, 사진 등의 이미지 인식 기록 태그로 활용할 수 있고, 바코드로 상품의 정보를 인식하는 것과 같이 상품을 촬영한 이미지로부터 음원을 생성하여 상품의 정보를 인식하도록 할 수 있으며, 직접 이미지를 촬영할 경우, 손금 또는 얼굴, 몸의 동작을 음악을 통해 기록할 수도 있다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (15)

  1. 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하는 라인 레이어 생성부;
    상기 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 상기 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하는 라인 추출부;
    상기 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하는 변곡점 추출부; 및
    상기 추출한 변곡점이 상기 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 상기 변곡점에 해당 계명을 설정하는 계명 설정부; 를 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  2. 제 1항에 있어서,
    상기 오선지 레이어는,
    상기 사용자로부터 입력받은 오선지 정보에 따라 생성되는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  3. 제 1항에 있어서,
    상기 계명 설정부는,
    상기 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 상기 경계 범위에 포함되는 변곡점을 상기 두 계명 사이의 반음 계명으로 설정하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  4. 제 3항에 있어서,
    상기 계명 설정부는,
    서로 다른 상기 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  5. 제 1항에 있어서,
    미리 등록된 악기들 중에서 상기 계명에 따라 연주할 악기를 설정하는 악기 설정부; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  6. 제 5항에 있어서,
    미리 등록된 리듬들 중에서 상기 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정부; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  7. 제 6항에 있어서,
    미리 등록된 박자들 중에서 상기 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정부; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  8. 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하는 라인 레이어 생성 단계;
    상기 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 상기 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하는 라인 추출 단계;
    상기 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하는 변곡점 추출 단계; 및
    상기 추출한 변곡점이 상기 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 상기 변곡점에 해당 계명을 설정하는 계명 설정 단계; 를 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  9. 제 8항에 있어서,
    상기 오선지 레이어는,
    상기 사용자로부터 입력받은 오선지 정보에 따라 생성되는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  10. 제 8항에 있어서,
    상기 계명 설정 단계에서는,
    상기 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 상기 경계 범위 포함되는 변곡점을 상기 두 계명 사이의 반음 계명으로 설정하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  11. 제 10항에 있어서,
    상기 계명 설정 단계에서는,
    서로 다른 상기 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  12. 제 8항에 있어서,
    상기 계명 설정 단계 이후에,
    미리 등록된 악기들 중에서 상기 계명에 따라 연주할 악기를 설정하는 악기 설정 단계; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  13. 제 12항에 있어서,
    상기 악기 설정 단계 이후에,
    미리 등록된 리듬들 중에서 상기 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정 단계; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  14. 제 13항에 있어서,
    상기 리듬 설정 단계 이후에,
    미리 등록된 박자들 중에서 상기 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정 단계; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  15. 제 8항 내지 제 14항 중 어느 한 항의 이미지를 이용한 음원 생성 방법을 컴퓨터에서 판독할 수 있고, 실행 가능한 프로그램 코드로 기록한 기록 매체.
PCT/KR2010/008973 2010-04-30 2010-12-15 이미지를 이용한 음원 생성 시스템 및 방법 WO2011136454A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2010-0040458 2010-04-30
KR1020100040458A KR20110121049A (ko) 2010-04-30 2010-04-30 이미지를 이용한 음원 생성 시스템 및 방법

Publications (1)

Publication Number Publication Date
WO2011136454A1 true WO2011136454A1 (ko) 2011-11-03

Family

ID=44861721

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2010/008973 WO2011136454A1 (ko) 2010-04-30 2010-12-15 이미지를 이용한 음원 생성 시스템 및 방법

Country Status (2)

Country Link
KR (1) KR20110121049A (ko)
WO (1) WO2011136454A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104918059A (zh) * 2015-05-19 2015-09-16 京东方科技集团股份有限公司 图像传输方法及装置、终端设备
CN108665888A (zh) * 2018-05-11 2018-10-16 西安石油大学 一种将书面符号、图像转换成音频数据的系统及方法
WO2018187890A1 (zh) * 2017-04-09 2018-10-18 格兰比圣(深圳)科技有限公司 一种根据图片生成音乐的方法和装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001350473A (ja) * 2000-06-08 2001-12-21 Web Logic:Kk 画像情報を音声情報に変換するシステム及び画像情報を音声情報に変換する方法
JP2004205738A (ja) * 2002-12-25 2004-07-22 Shunsuke Nakamura 楽音生成装置、楽音生成プログラムおよび楽音生成方法
JP2007219393A (ja) * 2006-02-20 2007-08-30 Doshisha 画像から音楽を生成する音楽生成装置
KR20100100330A (ko) * 2009-03-06 2010-09-15 (주)세가인정보기술 이미지를 이용한 음원 생성 시스템 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001350473A (ja) * 2000-06-08 2001-12-21 Web Logic:Kk 画像情報を音声情報に変換するシステム及び画像情報を音声情報に変換する方法
JP2004205738A (ja) * 2002-12-25 2004-07-22 Shunsuke Nakamura 楽音生成装置、楽音生成プログラムおよび楽音生成方法
JP2007219393A (ja) * 2006-02-20 2007-08-30 Doshisha 画像から音楽を生成する音楽生成装置
KR20100100330A (ko) * 2009-03-06 2010-09-15 (주)세가인정보기술 이미지를 이용한 음원 생성 시스템 및 방법

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104918059A (zh) * 2015-05-19 2015-09-16 京东方科技集团股份有限公司 图像传输方法及装置、终端设备
CN104918059B (zh) * 2015-05-19 2018-07-20 京东方科技集团股份有限公司 图像传输方法及装置、终端设备
US10547392B2 (en) 2015-05-19 2020-01-28 Boe Technology Group Co., Ltd. Terminal device, apparatus and method for transmitting an image
WO2018187890A1 (zh) * 2017-04-09 2018-10-18 格兰比圣(深圳)科技有限公司 一种根据图片生成音乐的方法和装置
CN108665888A (zh) * 2018-05-11 2018-10-16 西安石油大学 一种将书面符号、图像转换成音频数据的系统及方法

Also Published As

Publication number Publication date
KR20110121049A (ko) 2011-11-07

Similar Documents

Publication Publication Date Title
US7288712B2 (en) Music station for producing visual images synchronously with music data codes
US9111462B2 (en) Comparing display data to user interactions
US6084168A (en) Musical compositions communication system, architecture and methodology
US8053657B2 (en) System and methodology for image and overlaid annotation display, management and communication
US7157638B1 (en) System and methodology for musical communication and display
US20120057012A1 (en) Electronic music stand performer subsystems and music communication methodologies
WO2019031650A1 (ko) 사용자 허밍 멜로디 기반 반주 제공 방법 및 이를 위한 장치
WO2015030319A1 (ko) 음원 평가방법, 이에 사용되는 연주정보 분석방법과 기록매체 그리고 이를 이용한 음원의 평가장치
WO2021162362A1 (ko) 음성 인식 모델을 학습시키는 방법 및 상기 방법을 이용하여 학습된 음성 인식 장치
WO2014003513A1 (ko) 사용자 음원 평가 장치 및 방법
WO2011136454A1 (ko) 이미지를 이용한 음원 생성 시스템 및 방법
US11127383B1 (en) Musical notation system
WO2014148665A2 (ko) 멀티미디어 콘텐츠 편집장치 및 그 방법
WO2013005997A2 (ko) 단어학습 음악파일을 위한 반주와 음성의 매칭방법
KR101007227B1 (ko) 이미지를 이용한 음원 생성 시스템 및 방법
CA2395863A1 (en) Device for displaying music using a single or several linked workstations
WO2010047444A1 (ko) 음악분수 구동장치 및 방법과 이를 위한 음악분수 시나리오 생성장치 및 방법
WO2013077658A2 (ko) 디지털 음악파일을 이용한 전자악보 제공장치 및 전자악보 제공방법
Fein Teaching music improvisation with technology
WO2019132126A1 (ko) 그래픽 컨텐츠 기반 작곡서비스 운영장치
WO2009096762A2 (ko) 자동음정 기타
JPH06332443A (ja) 楽譜認識装置
WO2023096226A1 (ko) 코드명 표기법 상의 구성요소와 대응되는 대응버튼을 각각 구비하고 이를 한번에 동시에 운지하여 코드를 확정하는 오토기타
KR20140081212A (ko) 페이퍼 악보 연주장치
WO2023234614A1 (ko) 악기 연주 추적 시스템 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10850820

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 10850820

Country of ref document: EP

Kind code of ref document: A1