KR20110121049A - 이미지를 이용한 음원 생성 시스템 및 방법 - Google Patents

이미지를 이용한 음원 생성 시스템 및 방법 Download PDF

Info

Publication number
KR20110121049A
KR20110121049A KR1020100040458A KR20100040458A KR20110121049A KR 20110121049 A KR20110121049 A KR 20110121049A KR 1020100040458 A KR1020100040458 A KR 1020100040458A KR 20100040458 A KR20100040458 A KR 20100040458A KR 20110121049 A KR20110121049 A KR 20110121049A
Authority
KR
South Korea
Prior art keywords
line
command
image
inflection point
sound source
Prior art date
Application number
KR1020100040458A
Other languages
English (en)
Inventor
노도영
Original Assignee
주식회사 지육공팔컨설팅그룹
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 지육공팔컨설팅그룹 filed Critical 주식회사 지육공팔컨설팅그룹
Priority to KR1020100040458A priority Critical patent/KR20110121049A/ko
Priority to PCT/KR2010/008973 priority patent/WO2011136454A1/ko
Publication of KR20110121049A publication Critical patent/KR20110121049A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/0008—Associated control or indicating means
    • G10H1/0025—Automatic or semi-automatic music composition, e.g. producing random music, applying rules from music theory or modifying a musical piece
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155—User input interfaces for electrophonic musical instruments
    • G10H2220/441—Image sensing, i.e. capturing images or optical patterns for musical purposes or musical control purposes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

이미지로부터 음원 정보를 추출하여 시각 정보를 청각 정보로 변환시키기 위한 이미지를 이용한 음원 생성 시스템은 라인 레이어 생성부, 라인 추출부, 변곡점 추출부, 계명 설정부, 악기 설정부, 리듬 설정부, 및 박자 설정부를 포함한다. 라인 레이어 생성부는 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하고, 라인 추출부는 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다. 또한, 변곡점 추출부는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하며, 계명 설정부는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다. 이로 인해, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식하도록 할 수 있으며, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공할 수 있다.

Description

이미지를 이용한 음원 생성 시스템 및 방법{System and method for creating a sound source using images}
본 발명은 이미지를 이용한 음원 생성 시스템 및 방법에 관한 것으로, 보다 상세하게는 이미지로부터 음원 정보를 추출하여 시각 정보를 청각 정보로 변환시키기 위한 시스템 및 방법에 관한 것이다.
일반적으로 사람들은 오감인 시각, 청각, 촉각, 미각, 후각 중에서 대부분의 정보를 시각을 통해 받아들이고 있다.
대표적인 시각 정보로는 동영상이나 사진, 그림과 같은 이미지가 있는데, 시각을 이용할 수 없는 사람들이나, 시각을 이용할 수 없는 상황에 처해있는 사람들은 이러한 이미지들로부터 정보를 인식하는 데에 많은 어려움을 겪고 있다.
이러한 문제점은 시각 정보를 시각 이외의 다른 감각을 이용하여 인식할 수 있는 형태로 제공하는 수단이 있을 경우 해결가능할 것이다.
예를 들어, 시각 정보를 청각 정보의 형태로 변환시키는 수단을 고려해볼 수 있다.
이와 같이, 시각 정보를 청각 정보의 형태로 변환시키는 수단이 제공된다면, 상술한 문제점의 해결 이외에도 다른 유용한 활용예로서 이용될 수 있을 것이다.
예를 들어, 멋진 풍경을 담은 이미지를 음악으로 표현하여 새로운 음악 장르를 개척하는 데에 이용할 수 있고, 인물 사진 등의 이미지로부터 개성적인 벨소리를 제작하여 활용할 수도 있으며, 문자 이모티콘 대신에 음악 이모티콘을 첨부하여 문자 메시지 전송시에 개인의 감정을 색다르게 표현할 수도 있을 것이다.
하지만 이와 같이 시각 정보를 청각 정보의 형태로 제공해주는 수단은 현재까지 구현된 바 없는 실정이다.
본 발명은 이와 같은 종래의 문제점을 해결하기 위해 안출된 것으로서, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식할 수 있도록 하며, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공하는 것을 목적으로 한다.
상기 목적을 달성하기 위해 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 라인 레이어 생성부, 라인 추출부, 변곡점 추출부, 및 계명 설정부를 포함한다.
라인 레이어 생성부는 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하고, 라인 추출부는 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다.
또한, 변곡점 추출부는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하며, 계명 설정부는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다.
이로 인해, 시각 정보를 청각 정보로 변환시킴으로써, 시각으로 정보를 인식하지 못하는 사용자들이나, 시각으로 정보를 인식할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식하도록 할 수 있다.
또한, 오선지 레이어는 사용자로부터 입력받은 오선지 정보에 따라 생성할 수 있다.
또한, 계명 설정부는 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 경계 범위에 포함되는 변곡점을 두 계명 사이의 반음 계명으로 설정할 수 있다.
또한, 계명 설정부는 서로 다른 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받을 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 미리 등록된 악기들 중에서 계명에 따라 연주할 악기를 설정하는 악기 설정부를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 미리 등록된 리듬들 중에서 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정부를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 시스템은 미리 등록된 박자들 중에서 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정부를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 라인 레이어 생성 단계, 라인 추출 단계, 변곡점 추출 단계, 및 계명 설정 단계를 포함한다.
라인 레이어 생성 단계에서는 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하고, 라인 추출 단계에서는 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다.
또한, 변곡점 추출 단계에서는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하며, 계명 설정 단계에서는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다.
또한, 오선지 레이어는 사용자로부터 입력받은 오선지 정보에 따라 생성될 수 있다.
또한, 계명 설정 단계에서는 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 경계 범위 포함되는 변곡점을 두 계명 사이의 반음 계명으로 설정할 수 있다.
또한, 계명 설정 단계에서는 서로 다른 상기 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받을 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 계명 설정 단계 이후에 미리 등록된 악기들 중에서 계명에 따라 연주할 악기를 설정하는 악기 설정 단계를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 악기 설정 단계 이후에 미리 등록된 리듬들 중에서 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정 단계를 더 포함할 수 있다.
또한, 본 발명에 따른 이미지를 이용한 음원 생성 방법은 리듬 설정 단계 이후에 미리 등록된 박자들 중에서 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정 단계를 더 포함할 수 있다.
본 발명에 의해 이미지에서 추출한 라인으로부터 음원 정보를 추출하여 시각 정보를 청각 정보로 변환시킴으로써, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식하도록 할 수 있다.
또한, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공할 수 있다.
도 1은 본 발명에 따른 이미지를 이용한 음원 생성 시스템 구성의 일 실시예를 개략적으로 나타낸 블록도.
도 2는 라인 레이어에서 음원으로 변환하고자 하는 라인을 추출하는 일 실시예를 도시한 도면.
도 3은 추출한 라인에 자동으로 계명을 설정하는 일 실시예를 도시한 도면.
도 4는 도 3에서 계명 범위에 따라 계명을 설정하는 일 실시예를 도시한 도면.
도 5는 도 3에서 서로 다른 변곡점 사이의 라인에서 수동으로 계명이 입력되는 일 실시예를 도시한 도면.
도 6은 설정된 계명에 리듬을 설정한 일 실시예를 도시한 도면.
도 7은 화면 조절을 통해 박자를 설정하는 일 실시예를 도시한 도면.
도 8은 본 발명에 따른 이미지를 이용한 음원 생성 방법의 일 실시예를 개략적으로 나타낸 흐름도.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 설명한다. 발명의 이해를 보다 명확하게 하기 위해 동일한 구성요소에 대해서는 상이한 도면에서도 동일한 부호를 사용하도록 한다.
도 1은 본 발명에 따른 이미지를 이용한 음원 생성 시스템(100) 구성의 일 실시예를 개략적으로 나타낸 블록도이다.
이미지를 이용한 음원 생성 시스템(100)은 라인 레이어 생성부(110), 라인 추출부(120), 변곡점 추출부(130), 계명 설정부(140), 악기 설정부(150), 리듬 설정부(160), 및 박자 설정부(170)를 포함하며, 이하에서는 북한산을 영상 촬영하여 생성된 이미지를 이용하여 본 발명에 따른 이미지를 이용한 음원 생성 시스템(100)을 설명하고자 한다.
라인 레이어 생성부(110)는 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성한다.
라인 레이어는 다수의 라인을 포함하고 있으며, 이러한 라인은 음원을 추출하고자 하는 이미지인 북한산 이미지에서 산맥 또는 구름과 같은 물체의 외각 형상을 라인으로 인식함으로써 생성할 수 있다.
이때, 라인을 인식하는 영상처리 기법으로는 이미지상에서 명암이 급격히 변화하는 부분을 라인으로 인식하는 영상처리 기법 등, 현재 사용되고 있는 다양한 영상처리 기법들 중 하나가 적용될 수 있다.
라인 추출부(120)는 라인 레이어 생성부(110)에서 생성된 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출한다.
이때, 오선지 레이어의 설정은 오선지 레이어에 포함되는 오선의 개수, 및 해당 오선이 높은음자리 오선인지, 낮은음자리 오선인지 여부 등의 오선지 정보를 설정하는 것이며, 사용자로부터 실시간으로 설정될 수 있다.
도 2는 라인 레이어에서 음원으로 변환하고자 하는 라인을 추출하는 일 실시예를 도시한 도면이며, 도 2를 참조하여 라인 추출부(120)를 상세히 설명하고자 한다.
라인을 추출하기 전에 라인 레이어와 오선지 레이어가 중첩되었을 경우, 도 2의 상부 첫 번째 오선 부분과 중첩된 라인 레이어에는 다수의 라인이 인식된다(추출된 라인 및 상부의 조그마한 구름의 형상으로부터 인식된 라인 등).
이러한 다수의 라인 중에서 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하는데, 예컨대, 오선의 최상위 선을 중심으로 한 상부 몇 cm, 및 오선의 최하부 선을 중심으로 한 하부 몇 cm 등을 범위로 설정할 수 있으며, 이 밖의 다른 조건들로 범위를 설정할 수 있다.
또한, 추가적으로, 사용자의 입력에 따라 설정된 범위에 포함되는 라인들 중에서 도 2에서와 같이 하나의 라인만을 추출하거나, 또는 두 개 이상의 라인을 추출하여 화음을 넣을 수도 있다.
변곡점 추출부(130)는 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출한다.
이미지로부터 추출한 라인은 주로 곡선(무수히 많은 작은 변곡점)으로 이루어져 있기 때문에 설정 기준이 없을 경우 음원으로 생성하기 위한 변곡점(라인의 연속적인 각도가 변하는 지점)을 추출하기가 용이하지 않을 수 있다.
그러므로, 추출된 라인에서 음원을 생성하기에 적합하도록 샘플링 간격을 미리 지정하는 등 당업자가 고려할 수 있는 다양한 방법으로 변곡점 추출을 위한 기준을 미리 설정해야 할 것이다.
계명 설정부(140)는 추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다.
도 3은 추출한 라인에 자동으로 계명을 설정하는 일 실시예를 도시한 도면이고, 도 4는 도 3에서 계명 범위에 따라 계명을 설정하는 일 실시예를 도시한 도면이다.
도 3에서 추출한 라인의 일부를 확대한 이미지를 보면, 라인의 연속적인 각도가 변하는 부분(즉, 라인이 꺾이는 부분)인 변곡점에 자동적으로 계명이 설정되는 것을 볼 수 있다.
이때, 변곡점이 도 4와 같이 구분된 오선 상의 계명 범위에 위치한다면 해당 계명이 바로 설정되지만, 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함된다면, 경계 범위에 포함되는 변곡점을 두 계명 사이의 반음 계명으로 설정한다.
즉, 추출된 변곡점이 도 4의 ①, ③, 또는 ⑤ 구간인 '파, 미, 또는 레'의 계명 범위에 포함된다면 도 3의 하단 오선의 좌측에서와 같이 '파, 미, 또는 레'의 정확한 음계가 설정될 수 있다.
반면, 추출된 변곡점이 도 4의 ② 또는 ④ 구간인 '파, 미' 또는 '미, 레'의 경계 범위에 포함된다면 도 3의 하단 오선의 우측에서와 같이 정확하지 않은 음계가 설정될 수 있으므로, 두 계명 사이의 반음 계명을 설정한다.
변곡점이 경계 범위에 포함되는 경우를 도 4를 참조하여 자세히 살펴보면, 도 4에서 좌측은 오선에 나타내는 음표 머리의 중심점인 변곡점을 'A'라 나타낸 것이며, 우측은 오선에서 '파' 및 '레'를 나타내는 두 선을 확대하여 나타낸 것이다.
상술한 바와 같이 'A'가 '파' 라인에 정확히 위치하거나 ① 구간에 위치하면 '파' 계명으로 설정되며, 'A'가 '레' 라인에 정확히 위치하거나 ⑤ 구간에 위치하면 '레' 계명으로 설정되고, 'A'가 '파'와 '레' 라인의 정 중앙선(점선)에 정확히 위치하거나 ③ 구간에 위치하면 '미' 계명으로 설정된다.
하지만, 'A'가 '파'와 '미' 음계의 경계 범위인 ② 구간에 위치하거나, 또는 '미'와 '레' 음계의 경계 범위인 ④ 구간에 위치할 경우에는 ＃(샵) 또는 ♭(플렛)을 이용하여 반음 계명을 설정할 수 있다.
'A'가 ② 구간에 위치하면 '미＃' 또는 '파♭'의 반음으로 변곡점의 음계를 설정하는데 이때, '미＃' 또는 '파♭'은 같은 연주 음을 가지고 있으므로 부호의 차이가 음원 생성에 영향을 미치지는 않는다.
*마찬가지로, A'가 ④ 구간에 위치하면 '레＃' 또는 '미♭'의 반음으로 변곡점의 음계를 설정할 수 있다.
또한, 계명 설정부(130)는 서로 다른 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받을 수 있다.
도 5는 도 3에서 서로 다른 변곡점 사이의 라인에서 수동으로 계명이 입력되는 일 실시예를 도시한 도면이다.
진한 색 음표 머리는 도 3에서 자동으로 설정된 계명에 해당하는 변곡점을 의미하며, 흐린 색 음표 머리는 수동으로 입력된(사용자로부터 입력) 음표 생성 지점을 의미한다.
수동으로 음표 생성 지점이 입력될 때 도 4에서와 같이 미리 설정된 계명 범위, 또는 경계 범위에 포함되는 계명을 적용하여 음표 생성 지점을 설정할 수 있다.
악기 설정부(150)는 미리 등록된 악기들 중에서 계명에 따라 연주할 악기를 설정한다.
미리 등록된 악기로는 현악기인 바이올린, 비올라, 첼로, 콘트라 베이스, 관악기인 피리, 오카리나, 오보에, 클라리넷, 트럼펫, 트럼본, 튜바, 피콜로, 타악기인 피아노 이외에도 음을 낼 수 있는 모든 악기들이 등록될 수 있다.
이 중 사용자의 선택에 의해 연주할 악기가 설정된다.
리듬 설정부(160)는 미리 등록된 리듬들 중에서 악기가 설정된 계명에 부여할 리듬을 설정한다.
미리 등록된 리듬으로는 댄스, 힙합, 발라드, 탱고, 지루박, 차차차, 룸바 등이 있으며, 기타 모든 리듬들이 등록될 수 있다.
이 중 사용자의 선택에 의해 리듬이 설정되면, 설정된 리듬에 따라 도 6과 같이 음표(16분 음표, 8분 음표, 4분 음표, 2분 음표, 온음표 등) 및 장, 단조를 설정할 수 있다.
도 6은 설정된 계명에 리듬을 설정한 일 실시예를 도시한 도면이다.
박자 설정부(170)는 미리 등록된 박자들 중에서 리듬이 설정된 계명에 부여할 박자를 설정한다.
미리 등록된 박자로는 아주 느리게, 느리게, 보통 빠르기, 빠르게, 아주 빠르게 등이 있으며, 기타 모든 박자들이 등록될 수 있다.
이러한 박자의 설정은 도 7에서와 같이 라인 레이어의 화면을 좌우로 늘리거나, 줄임으로써 설정할 수 있는데, 화면을 늘리면 박자는 느려지고, 화면을 줄이면 박자는 빨라지게 된다.
도 7은 화면 조절을 통해 박자를 설정하는 일 실시예를 도시한 도면이다.
이와 같은 라인 레이어 생성부(110), 라인 추출부(120), 변곡점 추출부(130), 계명 설정부(140), 악기 설정부(150), 리듬 설정부(160), 및 박자 설정부(170)의 구성으로 인해, 시각 정보를 청각 정보로 변환시킴으로써, 시각을 이용할 수 없는 사용자들이나, 시각을 이용할 수 없는 상황에 처해 있는 사용자들도 이미지에 대한 정보를 인식하도록 할 수 있다.
또한, 시각 정보로부터 생성된 청각 정보를 이용하여 새로운 음악 장르 개척 및 벨소리, 음악 이모티콘과 같은 새로운 형태의 콘텐츠를 제공할 수 있다.
도 8은 본 발명에 따른 이미지를 이용한 음원 생성 방법의 일 실시예를 개략적으로 나타낸 흐름도이다.
먼저, 라인 레이어 생성부(110)에서 음원을 추출하고자 하는 이미지에 포함된 물체의 외각 형태를 라인으로 인식하는 등의 미리 설정된 방식에 따라 다수의 라인을 포함하는 라인 레이어를 생성한다.
다음으로, 라인 추출부(120)에서 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하고(S200), 추출한 라인에서 미리 설정된 기준(샘플링 간격 등)에 대응하는 변곡점을 추출한다(S300).
오선지 레이어는 오선의 개수 또는 높은음자리 오선인지, 낮은음자리 오선인지 여부 등이 미리 설정될 수 있다.
추출한 변곡점이 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 변곡점에 해당 계명을 설정한다(S400).
즉, 도 4에서 설명한 바와 같이 미리 설정된 계명 범위에 변곡점이 위치하면 해당 계명을 변곡점에 설정하고, 변곡점이 두 계명 사이의 경계 범위에 위치하는 경우에는 변곡점을 두 계명 사이의 반음 계명으로 설정한다.
그리고나서, 서로 다른 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받는다(S500).
사용자로부터 입력받은 음표 생성 지점도 단계 S400에서와 같이 계명 범위, 또는 경계 범위에 위치하는지에 따라 해당 계명을 설정한다.
라인에 따라 모든 음계가 설정되면, 다음으로 음계를 연주할 악기를 미리 등록되어 있는 악기들 중에서 하나를 선택하여 설정하고(S600), 미리 등록되어 있는 리듬들 중에서 하나를 선택하여 리듬을 설정하며(S700), 그 리듬에 따라 음표를 완성한다.
마지막으로 박자(빠르기)를 설정하는데(S800), 이는 화면의 좌우를 늘리거나 줄임으로써 설정될 수 있다.
이러한 방법으로 인해, 사용자가 인물 사진 등의 이미지로부터 벨소리나 컬러링과 같은 개성적인 멀티미디어 콘텐츠를 제작하여 이용하도록 할 수 있고, 새로운 음악 장르를 개척할 수 있으며, 문자 이모티콘 대신 음악 이모티콘을 첨부하여 문자 메시지 전송시에 개인의 감정을 색다르게 표현하도록 할 수 있다.
또한, 시각 장애인을 위한 명화, 사진 등의 이미지 인식 기록 태그로 활용할 수 있고, 바코드로 상품의 정보를 인식하는 것과 같이 상품을 촬영한 이미지로부터 음원을 생성하여 상품의 정보를 인식하도록 할 수 있으며, 직접 이미지를 촬영할 경우, 손금 또는 얼굴, 몸의 동작을 음악을 통해 기록할 수도 있다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (15)

  1. 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하는 라인 레이어 생성부;
    상기 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 상기 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하는 라인 추출부;
    상기 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하는 변곡점 추출부; 및
    상기 추출한 변곡점이 상기 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 상기 변곡점에 해당 계명을 설정하는 계명 설정부; 를 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  2. 제 1항에 있어서,
    상기 오선지 레이어는,
    상기 사용자로부터 입력받은 오선지 정보에 따라 생성되는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  3. 제 1항에 있어서,
    상기 계명 설정부는,
    상기 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 상기 경계 범위에 포함되는 변곡점을 상기 두 계명 사이의 반음 계명으로 설정하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  4. 제 3항에 있어서,
    상기 계명 설정부는,
    서로 다른 상기 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  5. 제 1항에 있어서,
    미리 등록된 악기들 중에서 상기 계명에 따라 연주할 악기를 설정하는 악기 설정부; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  6. 제 5항에 있어서,
    미리 등록된 리듬들 중에서 상기 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정부; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  7. 제 6항에 있어서,
    미리 등록된 박자들 중에서 상기 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정부; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 시스템.
  8. 음원을 추출하고자 하는 이미지에서 미리 설정된 방식에 따라 라인을 추출하여 라인 레이어를 생성하는 라인 레이어 생성 단계;
    상기 라인 레이어에 미리 설정된 오선지 레이어를 중첩시켜, 상기 오선지 레이어의 미리 설정된 범위에 포함되는 라인을 추출하는 라인 추출 단계;
    상기 추출한 라인에서 미리 설정된 기준에 대응하는 변곡점을 추출하는 변곡점 추출 단계; 및
    상기 추출한 변곡점이 상기 오선지 레이어 상의 미리 설정된 계명 범위에 포함되는 경우, 상기 변곡점에 해당 계명을 설정하는 계명 설정 단계; 를 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  9. 제 8항에 있어서,
    상기 오선지 레이어는,
    상기 사용자로부터 입력받은 오선지 정보에 따라 생성되는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  10. 제 8항에 있어서,
    상기 계명 설정 단계에서는,
    상기 변곡점이 미리 설정된 두 계명 사이의 경계 범위에 포함될 경우, 상기 경계 범위 포함되는 변곡점을 상기 두 계명 사이의 반음 계명으로 설정하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  11. 제 10항에 있어서,
    상기 계명 설정 단계에서는,
    서로 다른 상기 변곡점 사이의 라인에서 음표가 생성되는 지점을 사용자로부터 입력받는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  12. 제 8항에 있어서,
    상기 계명 설정 단계 이후에,
    미리 등록된 악기들 중에서 상기 계명에 따라 연주할 악기를 설정하는 악기 설정 단계; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  13. 제 12항에 있어서,
    상기 악기 설정 단계 이후에,
    미리 등록된 리듬들 중에서 상기 악기가 설정된 계명에 부여할 리듬을 설정하는 리듬 설정 단계; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  14. 제 13항에 있어서,
    상기 리듬 설정 단계 이후에,
    미리 등록된 박자들 중에서 상기 리듬이 설정된 계명에 부여할 박자를 설정하는 박자 설정 단계; 를 더 포함하는 것을 특징으로 하는 이미지를 이용한 음원 생성 방법.
  15. 제 8항 내지 제 14항 중 어느 한 항의 이미지를 이용한 음원 생성 방법을 컴퓨터에서 판독할 수 있고, 실행 가능한 프로그램 코드로 기록한 기록 매체.
KR1020100040458A 2010-04-30 2010-04-30 이미지를 이용한 음원 생성 시스템 및 방법 KR20110121049A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020100040458A KR20110121049A (ko) 2010-04-30 2010-04-30 이미지를 이용한 음원 생성 시스템 및 방법
PCT/KR2010/008973 WO2011136454A1 (ko) 2010-04-30 2010-12-15 이미지를 이용한 음원 생성 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100040458A KR20110121049A (ko) 2010-04-30 2010-04-30 이미지를 이용한 음원 생성 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR20110121049A true KR20110121049A (ko) 2011-11-07

Family

ID=44861721

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100040458A KR20110121049A (ko) 2010-04-30 2010-04-30 이미지를 이용한 음원 생성 시스템 및 방법

Country Status (2)

Country Link
KR (1) KR20110121049A (ko)
WO (1) WO2011136454A1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104918059B (zh) 2015-05-19 2018-07-20 京东方科技集团股份有限公司 图像传输方法及装置、终端设备
WO2018187890A1 (zh) * 2017-04-09 2018-10-18 格兰比圣（深圳）科技有限公司 一种根据图片生成音乐的方法和装置
CN108665888A (zh) * 2018-05-11 2018-10-16 西安石油大学 一种将书面符号、图像转换成音频数据的系统及方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001350473A (ja) * 2000-06-08 2001-12-21 Web Logic:Kk 画像情報を音声情報に変換するシステム及び画像情報を音声情報に変換する方法
JP3643829B2 (ja) * 2002-12-25 2005-04-27 俊介 中村 楽音生成装置、楽音生成プログラムおよび楽音生成方法
JP4738203B2 (ja) * 2006-02-20 2011-08-03 学校法人同志社 画像から音楽を生成する音楽生成装置
KR101007227B1 (ko) * 2009-03-06 2011-01-12 (주)세가인정보기술 이미지를 이용한 음원 생성 시스템 및 방법

Also Published As

Publication number Publication date
WO2011136454A1 (ko) 2011-11-03

Similar Documents

Publication Publication Date Title
US20090114079A1 (en) Virtual Reality Composer Platform System
US20070234878A1 (en) Method of automated musical instrument finger finding
US10170090B2 (en) Music information generating device, music information generating method, and recording medium
US10991349B2 (en) Method and system for musical synthesis using hand-drawn patterns/text on digital and non-digital surfaces
Akbari et al. Real-time piano music transcription based on computer vision
US10553188B2 (en) Musical attribution in a two-dimensional digital representation
Shelemay Notation and oral tradition
US7504572B2 (en) Sound generating method
JP2007264569A (ja) 検索装置、制御方法及びプログラム
KR20110121049A (ko) 이미지를 이용한 음원 생성 시스템 및 방법
KR101007227B1 (ko) 이미지를 이용한 음원 생성 시스템 및 방법
KR102419843B1 (ko) 악보 변환 시스템
Liang Clarinet Multiphonics: A Catalog and Analysis of Their Production Strategies
TW201719628A (zh) 具有指法標示之樂譜產生方法及其系統
Brown The beautiful in strangeness: The extended vocal techniques of Joan La Barbara
Harrison An exploration into the uses of extended techniques in works for the saxophone, and how their application may be informed by a contextual understanding of the works themselves
JPH06332443A (ja) 楽譜認識装置
Fleming The Incorporated Hornist: Instruments, Embodiment, and the Performance of Music
Marx General Musical Instruction
KR102595763B1 (ko) 인공지능 기반의 전자 악보 변환 방법 및 장치
Everall A digital resource for navigating extended techniques on bass clarinet
JP2014191331A (ja) 楽器音出力装置及び楽器音出力プログラム
JPWO2019003350A1 (ja) 歌唱音生成装置及び方法、プログラム
Hair et al. The rosegarden codicil: Rehearsing music in nineteen-tone equal temperament
Allen E-flat and Bass Clarinet Doubling in Chamber and Orchestral Music: Implications for the 21st Century Clarinetist

Legal Events

Date Code Title Description
N231 Notification of change of applicant
WITN Withdrawal due to no request for examination