KR101007227B1 - 이미지를 이용한 음원 생성 시스템 및 방법 - Google Patents

이미지를 이용한 음원 생성 시스템 및 방법 Download PDF

Info

Publication number
KR101007227B1
KR101007227B1 KR1020090019158A KR20090019158A KR101007227B1 KR 101007227 B1 KR101007227 B1 KR 101007227B1 KR 1020090019158 A KR1020090019158 A KR 1020090019158A KR 20090019158 A KR20090019158 A KR 20090019158A KR 101007227 B1 KR101007227 B1 KR 101007227B1
Authority
KR
South Korea
Prior art keywords
line
command
image
inflection point
sound source
Prior art date
Application number
KR1020090019158A
Other languages
English (en)
Other versions
KR20100100330A (ko
Inventor
노도영
Original Assignee
(주)세가인정보기술
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)세가인정보기술 filed Critical (주)세가인정보기술
Priority to KR1020090019158A priority Critical patent/KR101007227B1/ko
Publication of KR20100100330A publication Critical patent/KR20100100330A/ko
Application granted granted Critical
Publication of KR101007227B1 publication Critical patent/KR101007227B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/02—Means for controlling the tone frequencies, e.g. attack or decay; Means for producing special musical effects, e.g. vibratos or glissandos
    • G10H1/06—Circuits for establishing the harmonic content of tones, or other arrangements for changing the tone colour
    • G10H1/08—Circuits for establishing the harmonic content of tones, or other arrangements for changing the tone colour by combining tones
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0008—Associated control or indicating means
    • G10H1/0025—Automatic or semi-automatic music composition, e.g. producing random music, applying rules from music theory or modifying a musical piece
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155—User input interfaces for electrophonic musical instruments
    • G10H2220/441—Image sensing, i.e. capturing images or optical patterns for musical purposes or musical control purposes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

이미지로부터 음원 정보를 추출하여 시각 정보를 청각 정보로 변환시키기 위한 이미지를 이용한 음원 생성 시스템은 라인 레이어 생성부, 라인 추출부, 변곡점 추출부, 계명 설정부, 악기 설정부, 리듬 설정부, 및 박자 설정부를 포함한다. 라인 레이어 생성부는 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하고, 라인 추출부는 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다. 또한, 변곡점 추출부는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하며, 계명 설정부는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다. 이로 인해, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식하도록 할 수 있으며, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공할 수 있다.
벨소리, 음원, 계명

Description

이미지를 이용한 음원 생성 시스템 및 방법{System and method for creating a sound source using images}
본 발명은 이미지를 이용한 음원 생성 시스템 및 방법에 관한 것으로, 보다 상세하게는 이미지로부터 음원 정보를 추출하여 시각 정보를 청각 정보로 변환시키기 위한 시스템 및 방법에 관한 것이다.
일반적으로 사람들은 오감인 시각, 청각, 촉각, 미각, 후각 중에서 대부분의 정보를 시각을 통해 받아들이고 있다.
대표적인 시각 정보로는 동영상이나 사진, 그림과 같은 이미지가 있는데, 시각을 이용할 수 없는 사람들이나, 시각을 이용할 수 없는 상황에 처해있는 사람들은 이러한 이미지들로부터 정보를 인식하는 데에 많은 어려움을 겪고 있다.
이러한 문제점은 시각 정보를 시각 이외의 다른 감각을 이용하여 인식할 수 있는 형태로 제공하는 수단이 있을 경우 해결가능할 것이다.
예를 들어, 시각 정보를 청각 정보의 형태로 변환시키는 수단을 고려해볼 수 있다.
이와 같이, 시각 정보를 청각 정보의 형태로 변환시키는 수단이 제공된다면, 상술한 문제점의 해결 이외에도 다른 유용한 활용예로서 이용될 수 있을 것이다.
예를 들어, 멋진 풍경을 담은 이미지를 음악으로 표현하여 새로운 음악 장르를 개척하는 데에 이용할 수 있고, 인물 사진 등의 이미지로부터 개성적인 벨소리를 제작하여 활용할 수도 있으며, 문자 이모티콘 대신에 음악 이모티콘을 첨부하여 문자 메시지 전송시에 개인의 감정을 색다르게 표현할 수도 있을 것이다.
하지만 이와 같이 시각 정보를 청각 정보의 형태로 제공해주는 수단은 현재까지 구현된 바 없는 실정이다.
본 발명은 이와 같은 종래의 문제점을 해결하기 위해 안출된 것으로서, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식할 수 있도록 하며, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공하는 것을 목적으로 한다.
상기 목적을 달성하기 위해 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 라인 레이어 생성부, 라인 추출부, 변곡점 추출부, 및 계명 설정부를 포함한다.
라인 레이어 생성부는 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하고, 라인 추출부는 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다.
또한, 변곡점 추출부는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하며, 계명 설정부는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다.
이로 인해, 시각 정보를 청각 정보로 변환시킴으로써, 시각으로 정보를 인식하지 못하는 사용자들이나, 시각으로 정보를 인식할 수 없는 상황에 처해 있는 사 용자들도 이미지에 대한 정보를 인식하도록 할 수 있다.
또한, 오선지 레이어는 사용자로부터 입력받은 오선지 정보에 따라 생성할 수 있다.
또한, 계명 설정부는 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 경계 범위에 포함되는 변곡점을 두 계명 사이의 반음 계명으로 설정할 수 있다.
또한, 계명 설정부는 서로 다른 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받을 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 미리 등록된 악기들 중에서 계명에 따라 연주할 악기를 설정하는 악기 설정부를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 미리 등록된 리듬들 중에서 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정부를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 미리 등록된 박자들 중에서 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정부를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 라인 레이어 생성 단계, 라인 추출 단계, 변곡점 추출 단계, 및 계명 설정 단계를 포함한다.
라인 레이어 생성 단계에서는 음원을 추출하고자 하는 이미지에서 미리 설정 된 방식에 따라 라인을 추출하여 라인 레이어를 생성하고, 라인 추출 단계에서는 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다.
또한, 변곡점 추출 단계에서는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하며, 계명 설정 단계에서는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다.
또한, 오선지 레이어는 사용자로부터 입력받은 오선지 정보에 따라 생성될 수 있다.
또한, 계명 설정 단계에서는 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 경계 범위 포함되는 변곡점을 두 계명 사이의 반음 계명으로 설정할 수 있다.
또한, 계명 설정 단계에서는 서로 다른 상기 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받을 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 계명 설정 단계 이후에 미리 등록된 악기들 중에서 계명에 따라 연주할 악기를 설정하는 악기 설정 단계를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 악기 설정 단계 이후에 미리 등록된 리듬들 중에서 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정 단계를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 리듬 설정 단계 이 후에 미리 등록된 박자들 중에서 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정 단계를 더 포함할 수 있다.
본 발명에 의해 이미지에서 추출한 라인으로부터 음원 정보를 추출하여 시각 정보를 청각 정보로 변환시킴으로써, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식하도록 할 수 있다.
또한, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공할 수 있다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 설명한다. 발명의 이해를 보다 명확하게 하기 위해 동일한 구성요소에 대해서는 상이한 도면에서도 동일한 부호를 사용하도록 한다.
도 1은 본 발명에 따른 이미지를 이용한 음원 생성 시스템(100) 구성의 일 실시예를 개략적으로 나타낸 블록도이다.
이미지를 이용한 음원 생성 시스템(100)은 라인 레이어 생성부(110), 라인 추출부(120), 변곡점 추출부(130), 계명 설정부(140), 악기 설정부(150), 리듬 설정부(160), 및 박자 설정부(170)를 포함하며, 이하에서는 북한산을 영상 촬영하여 생성된 이미지를 이용하여 본 발명에 따른 이미지를 이용한 음원 생성 시스템(100)을 설명하고자 한다.
라인 레이어 생성부(110)는 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성한다.
라인 레이어는 다수의 라인을 포함하고 있으며, 이러한 라인은 음원을 추출하고자 하는 이미지인 북한산 이미지에서 산맥 또는 구름과 같은 물체의 외각 형상을 라인으로 인식함으로써 생성할 수 있다.
이때, 라인을 인식하는 영상처리 기법으로는 이미지상에서 명암이 급격히 변화하는 부분을 라인으로 인식하는 영상처리 기법 등, 현재 사용되고 있는 다양한 영상처리 기법들 중 하나가 적용될 수 있다.
라인 추출부(120)는 라인 레이어 생성부(110)에서 생성된 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다.
이때, 오선지 레이어의 설정은 오선지 레이어에 포함되는 오선의 개수, 및 해당 오선이 높은음자리 오선인지, 낮은음자리 오선인지 여부 등의 오선지 정보를 설정하는 것이며, 사용자로부터 실시간으로 설정될 수 있다.
도 2는 라인 레이어에서 음원으로 변환하고자 하는 라인을 추출하는 일 실시예를 도시한 도면이며, 도 2를 참조하여 라인 추출부(120)를 상세히 설명하고자 한다.
라인을 추출하기 전에 라인 레이어와 오선지 레이어가 중첩되었을 경우, 도 2의 상부 첫 번째 오선 부분과 중첩된 라인 레이어에는 다수의 라인이 인식된다(추출된 라인 및 상부의 조그마한 구름의 형상으로부터 인식된 라인 등).
이러한 다수의 라인 중에서 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하는데, 예컨대, 오선의 최상위 선을 중심으로 한 상부 몇 cm, 및 오선의 최하부 선을 중심으로 한 하부 몇 cm 등을 범위로 설정할 수 있으며, 이 밖의 다른 조건들로 범위를 설정할 수 있다.
또한, 추가적으로, 사용자의 입력에 따라 설정된 범위에 포함되는 라인들 중에서 도 2에서와 같이 하나의 라인만을 추출하거나, 또는 두 개 이상의 라인을 추출하여 화음을 넣을 수도 있다.
변곡점 추출부(130)는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출한다.
이미지로부터 추출한 라인은 주로 곡선(무수히 많은 작은 변곡점)으로 이루어져 있기 때문에 설정 기준이 없을 경우 음원으로 생성하기 위한 변곡점(라인의 연속적인 각도가 변하는 지점)을 추출하기가 용이하지 않을 수 있다.
그러므로, 추출된 라인에서 음원을 생성하기에 적합하도록 샘플링 간격을 미리 지정하는 등 당업자가 고려할 수 있는 다양한 방법으로 변곡점 추출을 위한 기준을 미리 설정해야 할 것이다.
계명 설정부(140)는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다.
도 3은 추출한 라인에 자동으로 계명을 설정하는 일 실시예를 도시한 도면이고, 도 4는 도 3에서 계명 범위에 따라 계명을 설정하는 일 실시예를 도시한 도면이다.
도 3에서 추출한 라인의 일부를 확대한 이미지를 보면, 라인의 연속적인 각도가 변하는 부분(즉, 라인이 꺾이는 부분)인 변곡점에 자동적으로 계명이 설정되는 것을 볼 수 있다.
이때, 변곡점이 도 4와 같이 구분된 오선 상의 계명 범위에 위치한다면 해당 계명이 바로 설정되지만, 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함된다면, 경계 범위에 포함되는 변곡점을 두 계명 사이의 반음 계명으로 설정한다.
즉, 추출된 변곡점이 도 4의 ①, ③, 또는 ⑤ 구간인 '파, 미, 또는 레'의 계명 범위에 포함된다면 도 3의 하단 오선의 좌측에서와 같이 '파, 미, 또는 레'의 정확한 음계가 설정될 수 있다.
반면, 추출된 변곡점이 도 4의 ② 또는 ④ 구간인 '파, 미' 또는 '미, 레'의 경계 범위에 포함된다면 도 3의 하단 오선의 우측에서와 같이 정확하지 않은 음계가 설정될 수 있으므로, 두 계명 사이의 반음 계명을 설정한다.
변곡점이 경계 범위에 포함되는 경우를 도 4를 참조하여 자세히 살펴보면, 도 4에서 좌측은 오선에 나타내는 음표 머리의 중심점인 변곡점을 'A'라 나타낸 것이며, 우측은 오선에서 '파' 및 '레'를 나타내는 두 선을 확대하여 나타낸 것이다.
상술한 바와 같이 'A'가 '파' 라인에 정확히 위치하거나 ① 구간에 위치하면 '파' 계명으로 설정되며, 'A'가 '레' 라인에 정확히 위치하거나 ⑤ 구간에 위치하면 '레' 계명으로 설정되고, 'A'가 '파'와 '레' 라인의 정 중앙선(점선)에 정확히 위치하거나 ③ 구간에 위치하면 '미' 계명으로 설정된다.
하지만, 'A'가 '파'와 '미' 음계의 경계 범위인 ② 구간에 위치하거나, 또는 '미'와 '레' 음계의 경계 범위인 ④ 구간에 위치할 경우에는 ＃(샵) 또는 ♭(플렛)을 이용하여 반음 계명을 설정할 수 있다.
'A'가 ② 구간에 위치하면 '미＃' 또는 '파♭'의 반음으로 변곡점의 음계를 설정하는데 이때, '미＃' 또는 '파♭'은 같은 연주 음을 가지고 있으므로 부호의 차이가 음원 생성에 영향을 미치지는 않는다.
마찬가지로, A'가 ④ 구간에 위치하면 '레＃' 또는 '미♭'의 반음으로 변곡점의 음계를 설정할 수 있다.
또한, 계명 설정부(130)는 서로 다른 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받을 수 있다.
도 5는 도 3에서 서로 다른 변곡점 사이의 라인에서 수동으로 계명이 입력되는 일 실시예를 도시한 도면이다.
진한 색 음표 머리는 도 3에서 자동으로 설정된 계명에 해당하는 변곡점을 의미하며, 흐린 색 음표 머리는 수동으로 입력된(사용자로부터 입력) 음표 생성 지점을 의미한다.
수동으로 음표 생성 지점이 입력될 때 도 4에서와 같이 미리 설정된 계명 범위, 또는 경계 범위에 포함되는 계명을 적용하여 음표 생성 지점을 설정할 수 있다.
악기 설정부(150)는 미리 등록된 악기들 중에서 계명에 따라 연주할 악기를 설정한다.
미리 등록된 악기로는 현악기인 바이올린, 비올라, 첼로, 콘트라 베이스, 관 악기인 피리, 오카리나, 오보에, 클라리넷, 트럼펫, 트럼본, 튜바, 피콜로, 타악기인 피아노 이외에도 음을 낼 수 있는 모든 악기들이 등록될 수 있다.
이 중 사용자의 선택에 의해 연주할 악기가 설정된다.
리듬 설정부(160)는 미리 등록된 리듬들 중에서 악기가 설정된 계명에 부여할 리듬을 설정한다.
미리 등록된 리듬으로는 댄스, 힙합, 발라드, 탱고, 지루박, 차차차, 룸바 등이 있으며, 기타 모든 리듬들이 등록될 수 있다.
이 중 사용자의 선택에 의해 리듬이 설정되면, 설정된 리듬에 따라 도 6과 같이 음표(16분 음표, 8분 음표, 4분 음표, 2분 음표, 온음표 등) 및 장, 단조를 설정할 수 있다.
도 6은 설정된 계명에 리듬을 설정한 일 실시예를 도시한 도면이다.
박자 설정부(170)는 미리 등록된 박자들 중에서 리듬이 설정된 계명에 부여할 박자를 설정한다.
미리 등록된 박자로는 아주 느리게, 느리게, 보통 빠르기, 빠르게, 아주 빠르게 등이 있으며, 기타 모든 박자들이 등록될 수 있다.
이러한 박자의 설정은 도 7에서와 같이 라인 레이어의 화면을 좌우로 늘리거나, 줄임으로써 설정할 수 있는데, 화면을 늘리면 박자는 느려지고, 화면을 줄이면 박자는 빨라지게 된다.
도 7은 화면 조절을 통해 박자를 설정하는 일 실시예를 도시한 도면이다.
이와 같은 라인 레이어 생성부(110), 라인 추출부(120), 변곡점 추출 부(130), 계명 설정부(140), 악기 설정부(150), 리듬 설정부(160), 및 박자 설정부(170)의 구성으로 인해, 시각 정보를 청각 정보로 변환시킴으로써, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식하도록 할 수 있다.
또한, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공할 수 있다.
도 8은 본 발명에 따른 이미지를 이용한 음원 생성 방법의 일 실시예를 개략적으로 나타낸 흐름도이다.
먼저, 라인 레이어 생성부(110)에서 음원을 추출하고자 하는 이미지에 포함된 물체의 외각 형태를 라인으로 인식하는 등의 미리 설정된 방식에 따라 다수의 라인을 포함하는 라인 레이어를 생성한다.
다음으로, 라인 추출부(120)에서 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하고(S200), 추출한 라인에서 미리 설정된 기준(샘플링 간격 등)에 대응하는 변곡점을 추출한다(S300).
오선지 레이어는 오선의 개수 또는 높은음자리 오선인지, 낮은음자리 오선인지 여부 등이 미리 설정될 수 있다.
추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다(S400).
즉, 도 4에서 설명한 바와 같이 미리 설정된 계명 범위에 변곡점이 위치하면 해당 계명을 변곡점에 설정하고, 변곡점이 두 계명 사이의 경계 범위에 위치하는 경우에는 변곡점을 두 계명 사이의 반음 계명으로 설정한다.
그리고나서, 서로 다른 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받는다(S500).
사용자로부터 입력받은 음표 생성 지점도 단계 S400에서와 같이 계명 범위, 또는 경계 범위에 위치하는지에 따라 해당 계명을 설정한다.
라인에 따라 모든 음계가 설정되면, 다음으로 음계를 연주할 악기를 미리 등록되어 있는 악기들 중에서 하나를 선택하여 설정하고(S600), 미리 등록되어 있는 리듬들 중에서 하나를 선택하여 리듬을 설정하며(S700), 그 리듬에 따라 음표를 완성한다.
마지막으로 박자(빠르기)를 설정하는데(S800), 이는 화면의 좌우를 늘리거나 줄임으로써 설정될 수 있다.
이러한 방법으로 인해, 사용자가 인물 사진 등의 이미지로부터 벨소리나 컬러링과 같은 개성적인 멀티미디어 콘텐츠를 제작하여 이용하도록 할 수 있고, 새로운 음악 장르를 개척할 수 있으며, 문자 이모티콘 대신 음악 이모티콘을 첨부하여 문자 메시지 전송시에 개인의 감정을 색다르게 표현하도록 할 수 있다.
또한, 시각 장애인을 위한 명화, 사진 등의 이미지 인식 기록 태그로 활용할 수 있고, 바코드로 상품의 정보를 인식하는 것과 같이 상품을 촬영한 이미지로부터 음원을 생성하여 상품의 정보를 인식하도록 할 수 있으며, 직접 이미지를 촬영할 경우, 손금 또는 얼굴, 몸의 동작을 음악을 통해 기록할 수도 있다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
도 1은 본 발명에 따른 이미지를 이용한 음원 생성 시스템 구성의 일 실시예를 개략적으로 나타낸 블록도.
도 2는 라인 레이어에서 음원으로 변환하고자 하는 라인을 추출하는 일 실시예를 도시한 도면.
도 3은 추출한 라인에 자동으로 계명을 설정하는 일 실시예를 도시한 도면.
도 4는 도 3에서 계명 범위에 따라 계명을 설정하는 일 실시예를 도시한 도면.
도 5는 도 3에서 서로 다른 변곡점 사이의 라인에서 수동으로 계명이 입력되는 일 실시예를 도시한 도면.
도 6은 설정된 계명에 리듬을 설정한 일 실시예를 도시한 도면.
도 7은 화면 조절을 통해 박자를 설정하는 일 실시예를 도시한 도면.
도 8은 본 발명에 따른 이미지를 이용한 음원 생성 방법의 일 실시예를 개략적으로 나타낸 흐름도.

Claims (15)

  1. 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하는 라인 레이어 생성부;
    상기 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 상기 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하는 라인 추출부;
    상기 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하는 변곡점 추출부; 및
    상기 추출한 변곡점이 상기 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 상기 변곡점에 해당 계명을 설정하는 계명 설정부; 를 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  2. 제 1항에 있어서,
    상기 오선지 레이어는,
    사용자로부터 입력받은 오선지 정보에 따라 생성되는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  3. 제 1항에 있어서,
    상기 계명 설정부는,
    상기 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 상기 경계 범위에 포함되는 변곡점을 상기 두 계명 사이의 반음 계명으로 설정하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  4. 제 3항에 있어서,
    상기 계명 설정부는,
    서로 다른 상기 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  5. 제 1항에 있어서,
    미리 등록된 악기들 중에서 상기 계명에 따라 연주할 악기를 설정하는 악기 설정부; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  6. 제 5항에 있어서,
    미리 등록된 리듬들 중에서 상기 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정부; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  7. 제 6항에 있어서,
    미리 등록된 박자들 중에서 상기 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정부; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  8. 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하는 라인 레이어 생성 단계;
    상기 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 상기 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하는 라인 추출 단계;
    상기 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하는 변곡점 추출 단계; 및
    상기 추출한 변곡점이 상기 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 상기 변곡점에 해당 계명을 설정하는 계명 설정 단계; 를 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  9. 제 8항에 있어서,
    상기 오선지 레이어는,
    사용자로부터 입력받은 오선지 정보에 따라 생성되는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  10. 제 8항에 있어서,
    상기 계명 설정 단계에서는,
    상기 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 상기 경계 범위 포함되는 변곡점을 상기 두 계명 사이의 반음 계명으로 설정하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  11. 제 10항에 있어서,
    상기 계명 설정 단계에서는,
    서로 다른 상기 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  12. 제 8항에 있어서,
    상기 계명 설정 단계 이후에,
    미리 등록된 악기들 중에서 상기 계명에 따라 연주할 악기를 설정하는 악기 설정 단계; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  13. 제 12항에 있어서,
    상기 악기 설정 단계 이후에,
    미리 등록된 리듬들 중에서 상기 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정 단계; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  14. 제 13항에 있어서,
    상기 리듬 설정 단계 이후에,
    미리 등록된 박자들 중에서 상기 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정 단계; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  15. 제 8항 내지 제 14항 중 어느 한 항의 이미지를 이용한 음원 생성 방법을 컴퓨터에서 판독할 수 있고, 실행 가능한 프로그램 코드로 기록한 기록 매체.
KR1020090019158A 2009-03-06 2009-03-06 이미지를 이용한 음원 생성 시스템 및 방법 KR101007227B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090019158A KR101007227B1 (ko) 2009-03-06 2009-03-06 이미지를 이용한 음원 생성 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090019158A KR101007227B1 (ko) 2009-03-06 2009-03-06 이미지를 이용한 음원 생성 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20100100330A KR20100100330A (ko) 2010-09-15
KR101007227B1 true KR101007227B1 (ko) 2011-01-12

Family

ID=43006421

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090019158A KR101007227B1 (ko) 2009-03-06 2009-03-06 이미지를 이용한 음원 생성 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR101007227B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101718073B1 (ko) 2016-01-26 2017-03-20 주식회사 시그널웍스 이상 음원 감지 방법 및 이를 수행하기 위한 장치

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110121049A (ko) * 2010-04-30 2011-11-07 주식회사 지육공팔컨설팅그룹 이미지를 이용한 음원 생성 시스템 및 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001350473A (ja) * 2000-06-08 2001-12-21 Web Logic:Kk 画像情報を音声情報に変換するシステム及び画像情報を音声情報に変換する方法
JP2004205738A (ja) * 2002-12-25 2004-07-22 Shunsuke Nakamura 楽音生成装置、楽音生成プログラムおよび楽音生成方法
JP2007219393A (ja) * 2006-02-20 2007-08-30 Doshisha 画像から音楽を生成する音楽生成装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001350473A (ja) * 2000-06-08 2001-12-21 Web Logic:Kk 画像情報を音声情報に変換するシステム及び画像情報を音声情報に変換する方法
JP2004205738A (ja) * 2002-12-25 2004-07-22 Shunsuke Nakamura 楽音生成装置、楽音生成プログラムおよび楽音生成方法
JP2007219393A (ja) * 2006-02-20 2007-08-30 Doshisha 画像から音楽を生成する音楽生成装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101718073B1 (ko) 2016-01-26 2017-03-20 주식회사 시그널웍스 이상 음원 감지 방법 및 이를 수행하기 위한 장치

Also Published As

Publication number Publication date
KR20100100330A (ko) 2010-09-15

Similar Documents

Publication Publication Date Title
Akbari et al. Real-time piano music transcription based on computer vision
Shelemay Notation and oral tradition
US7504572B2 (en) Sound generating method
JP2007264569A (ja) 検索装置、制御方法及びプログラム
KR20110121049A (ko) 이미지를 이용한 음원 생성 시스템 및 방법
KR101007227B1 (ko) 이미지를 이용한 음원 생성 시스템 및 방법
CN111816148A (zh) 一种基于生成对抗网络的虚拟人声视唱方法和系统
Roxburgh Conducting for a new era
Liang Clarinet Multiphonics: A Catalog and Analysis of Their Production Strategies
KR102419843B1 (ko) 악보 변환 시스템
Lebon The Versatile Vocalist: Singing Authentically in Contrasting Styles and Idioms
JP2015060200A (ja) 演奏データファイル調整装置、方法、およびプログラム
Harrison An exploration into the uses of extended techniques in works for the saxophone, and how their application may be informed by a contextual understanding of the works themselves
JP2013210501A (ja) 素片登録装置，音声合成装置，及びプログラム
Fleming The Incorporated Hornist: Instruments, Embodiment, and the Performance of Music
Rees Collaboration in practice: developing a repertoire of extended techniques for the Kingma System alto and bass flute
Marx General Musical Instruction
JP2015060203A (ja) 演奏データとオーディオデータの同期装置、方法、およびプログラム
Everall A digital resource for navigating extended techniques on bass clarinet
JPWO2019003350A1 (ja) 歌唱音生成装置及び方法、プログラム
Flynn Traditional Irish Music: A path to new music
Hair et al. The rosegarden codicil: Rehearsing music in nineteen-tone equal temperament
RU2406162C1 (ru) Учебная гитара для вокалистов-любителей
WO2017150964A1 (en) Display for musical instrument using audio visual notation system
Allen E-flat and Bass Clarinet Doubling in Chamber and Orchestral Music: Implications for the 21st Century Clarinetist

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20131213

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150122

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160105

Year of fee payment: 6