KR20160141070A - 영상이미지를 이용한 음악연주장치, 그 방법 및 영상이미지를 이용한 음악연주 프로그램을 저장하는 저장매체 - Google Patents
영상이미지를 이용한 음악연주장치, 그 방법 및 영상이미지를 이용한 음악연주 프로그램을 저장하는 저장매체 Download PDFInfo
- Publication number
- KR20160141070A KR20160141070A KR1020150074268A KR20150074268A KR20160141070A KR 20160141070 A KR20160141070 A KR 20160141070A KR 1020150074268 A KR1020150074268 A KR 1020150074268A KR 20150074268 A KR20150074268 A KR 20150074268A KR 20160141070 A KR20160141070 A KR 20160141070A
- Authority
- KR
- South Korea
- Prior art keywords
- color
- image
- value
- information
- video image
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/32—Constructional details
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
본 발명은 영상이미지의 컬러 수치 값을 활용하여 영상이미지를 이용한 음악연주장치, 그 방법 및 영상 이미지를 이용한 음악연주 프로그램을 저장하는 저장매체를 제공하기 위함이다.
이를 위해 본 발명은, 적어도 하나 이상의 영상이미지를 입력하는 입력모듈; 상기 적어도 하나 이상의 영상이미지에서 컬러에 관한 정보를 감지하는 센서모듈; 상기 감지된 컬러에 관한 정보를 분석하는 분석모듈; 상기 분석된 정보를 이용하여 음악연주를 위한 음을 생성하는 생성모듈을 포함한다.
이를 위해 본 발명은, 적어도 하나 이상의 영상이미지를 입력하는 입력모듈; 상기 적어도 하나 이상의 영상이미지에서 컬러에 관한 정보를 감지하는 센서모듈; 상기 감지된 컬러에 관한 정보를 분석하는 분석모듈; 상기 분석된 정보를 이용하여 음악연주를 위한 음을 생성하는 생성모듈을 포함한다.
Description
본 발명은 영상이미지를 이용한 음악연주장치, 그 방법 및 영상이미지를 이용한 음악연주 프로그램을 저장하는 저장매체 관한 것이다.
음악 연주는 악기를 활용한 연주 또는 컴퓨터프로그램을 통한 디지털 음악연주로 이루어진다. 하지만 영상이미지를 입력신호로 하여 음악적으로 표현해주는 기술은 존재하지 않는다.
본 발명은 상기한 바와 같은 문제점을 해결하기 위한 것으로서 영상이미지의 컬러 수치 값을 활용하여 영상이미지를 이용한 음악연주장치, 그 방법 및 영상 이미지를 이용한 음악연주 프로그램을 저장하는 저장매체를 제공하는데 목적이 있다.
이와 같은 목적을 달성하기 위한, 본 발명의 제 1 측면에 따르면, 본 발명에 따른 영상이미지를 이용한 음악연주장치는, 적어도 하나 이상의 영상이미지를 입력하는 입력모듈; 상기 적어도 하나 이상의 영상이미지에서 컬러에 관한 정보를 감지하는 센서모듈; 상기 감지된 컬러에 관한 정보를 분석하는 분석모듈; 상기 분석된 정보를 이용하여 음악연주를 위한 음을 생성하는 생성모듈을 포함하는 영상이미지를 이용한 음악연주장치를 포함한다.
본 발명의 제 2 측면에 따르면, 적어도 하나 이상의 영상이미지를 입력하는 단계; 상기 적어도 하나 이상의 영상이미지에서 컬러에 관한 정보를 감지하는 단계; 상기 감지된 컬러에 관한 정보를 분석하는 단계; 상기 분석된 정보를 이용하여 음악연주를 위한 음을 생성하는 단계를 포함하는 영상이미지를 이용한 음악연주방법을 포함한다.
또한 본 발명의 제 3 측면에 따르면, 적어도 하나 이상의 영상이미지를 입력하고, 상기 적어도 하나 이상의 영상이미지에서 컬러에 관한 정보를 감지하고, 상기 감지된 컬러에 관한 정보를 분석하고, 상기 분석된 정보를 이용하여 음악연주를 위한 음을 생성하는 프로그램을 포함하는 영상이미지를 이용한 음악연주 프로그램을 포함하는 저장매체를 포함한다.
이상에서 설명한 바와 같이 본 발명인 영상이미지를 이용한 음악연주장치, 그 방법 및 영상이미지를 이용한 음악연주 프로그램을 저장하는 저장매체를 제공함으로써 악기나 음악적 이론을 배운 적이 없더라도 음악연주가 가능하다.
영상이미지를 이용한 음악연주장치, 그 방법 및 영상이미지를 이용한 음악연주 프로그램을 저장하는 저장매체를 제공함으로써 영상을 통해서 자신이 표현하고자 하는 감정을 음악연주로 표현하는게 가능하다.
영상이미지를 이용한 음악연주장치, 그 방법 및 영상이미지를 이용한 음악연주 프로그램을 저장하는 저장매체를 제공함으로써 미술치료와 음악치료를 복합적으로 적용하기 위한 수단으로 활용될 수 있다.
또한, 영상이미지를 이용한 음악연주장치, 그 방법 및 영상이미지를 이용한 음악연주 프로그램을 저장하는 저장매체를 제공함으로써 시각적 신호를 음악적 신호로 변환하는 방식에 의해 시각 장애인들도 소리를 컬러로 인식하게 하는데 효과적인 방법이 될 수 있다.
도 1은 본 발명의 일 실시예에 따른 영상이미지를 이용한 음악연주장치를 설명하기 위한 모듈 구성도,
도 2은 본 발명의 일 실시예에 따른 영상이미지를 이용한 음악연주방법을 설명하기 위한 흐름도이다.
도 2은 본 발명의 일 실시예에 따른 영상이미지를 이용한 음악연주방법을 설명하기 위한 흐름도이다.
본 발명의 일 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다.
도 1은 본 발명의 일 실시예에 따른 영상이미지를 이용한 음악연주장치를 설명하기 위한 모듈 구성도이다.
도 1을 참조하면, 본 발명에 따른 영상이미지를 이용한 음악연주장치는 입력모듈(20), 센서모듈(21), 분석모듈(22), 생성모듈(23)을 포함한다. 입력모듈은(20)은 영상이미지를 입력신호로 사용한다. 따라서 센서가 설치되어 있는 일정한 공간이면 족하다. 센서모듈(21)은 영상이미지에서 해당 컬러의 수치 값, 해당 컬러 명도 값, 채도 값, 해당 컬러의 길이와 같은 영상이미지에서 추출할 수 있는 해당 컬러에 관한 정보를 감지하여 추출한다. 센서모듈로 감지하는 영상이미지에서 컬러 값에 대한 구체적인 정보는 사용자의 설계에 의해 얼마든지 변경이 가능하므로 반드시 전술한 구체적인 예에 한정되지 않는다. 분석모듈(22)은 추출된 컬러 값을 분석하는 기능을 수행한다. 구체적으로 해당 색상의 Red, Green, Blue 색상 수치 값 분석의 경우 컬러센서의 photodiode 타입을 지정하여 일정시간동안 입력된 빛의 수치 값을 측정하고, 이 결과로 출력된 펄스 값을 색상별로 카운트한다. 카운트 횟수를 최소값(0)과 최대값(255)을 기준으로 다시 정의 하여 해당 색에 대한 Red, Green, Blue 각각의 값을 추출할 수 있다. 한편, 영상이미지의 컬러 값들은 음으로 변환하기 위해 아래와 같이 음계 라이브러리 기설정 해놓을 수 있다. 하지만 음계라이브러리의 설정은 사용자의 설계에 따라 변경이 가능하므로 아래의 구체적인 예에 한정되지 않는다.
도 : 빨강 (R:255, G:0, B:0)
레 : 주황 (R:255, G:153, B:0)
미 : 노랑 (R:255, G:255, B:0)
파 : 초록 (R:0, G:255, B:0)
솔 : 파랑 (R:0, G:0, B:255)
라 : 남색 (R:0, G:0, B:102)
시 : 보라 (R:255, G:0, B:255)
생성모듈(23)은 분석모듈(22)에서 추출된 컬러 값과 기 설정된 음계라이브러리 매칭을 통해 연주를 하기 위한 음을 생성하는 기능을 한다. 구체적으로 분석모듈(22)에서 추출된 Red,Green,Blue 수치 값과 음계라이브러리에 등록되어 있는 음계별 컬러 수치 값을 비교하고, 일치하는 또는 가장 유사한 값을 지닌 데이터를 선별하여 해당 음으로 간주한다. 최종 판독된 음계정보를 미디 재생프로그램으로 전달하고 해당음계를 재생한다. 구체적으로는 전술한 정보 값을 받은 하드웨어 장치에서는 수치 값에 따른 음계와 음표의 길이를 조정하여 음악으로 구성한다.
도 2은 본 발명의 일 실시예에 따른 영상이미지를 이용한 음악연주방법을 설명하기 위한 흐름도이다.
도 2를 참조하면, 본 발명에 따라 영상이미지를 이용한 음악연주방법은 영상이미지를 입력을 받는 단계(S90), 입력받은 영상이미지에 컬러에 관한 정보를 감지하는 단계(S91), 영상이미지에서 감지된 컬러 값 정보를 분석하는 단계(S92), 분석된 영상이미지의 컬러 값을 이용하여 연주를 위한 음을 생성하는 단계(S93)를 포함한다.
입력 모듈(20)은 영상이미지를 입력을 받는 단계(S90)로 변환될 수 있으며 이에 대한 구체적인 설명은 도 1에서 전술한 바 있다. 센서모듈(21)은 입력받은 영상이미지에 컬러에 관한 정보를 감지하는 단계(S91)로 변환될 수 있고 이에 대한 구체적인 설명은 도 1에서 전술한 바 있다. 분석모듈(22)은 영상이미지에서 감지된 컬러 값 정보를 분석하는 단계(S92)로 변환 될 수 있으며 이에 대한 구체적인 설명은 도 1에서 전술한 바 있다. 생성모듈(23)은 분석된 영상이미지의 컬러 값을 이용하여 연주를 위한 음을 생성하는 단계(S93) 변환될 수 있으며 이에 대한 구체적인 설명은 도 1에서 전술한 바 있다.
본 발명의 명세서에 개시된 실시예들은 본 발명을 한정하는 것이 아니다. 본 발명의 범위는 아래의 특허청구범위에 의해 해석되어야 하며, 그와 균등한 범위 내에 있는 모든 기술도 본 발명의 범위에 포함되는 것으로 해석해야 할 것이다.
20 : 입력모듈
21 : 센서모듈
22 : 분석모듈
23 : 생성모듈
21 : 센서모듈
22 : 분석모듈
23 : 생성모듈
Claims (9)
- 적어도 하나 이상의 영상이미지를 입력하는 입력모듈;
상기 적어도 하나 이상의 영상이미지에서 컬러에 관한 정보를 감지하는 센서모듈;
상기 감지된 컬러에 관한 정보를 분석하는 분석모듈;
상기 분석된 정보를 이용하여 음악연주를 위한 음을 생성하는 생성모듈을 포함하는 영상이미지를 이용한 음악연주장치. - 제 1항에 있어서, 상기 적어도 하나 이상의 영상이미지에서 컬러에 관한 정보는,
컬러의 R, G, B 수치 값, 컬러의 명도 값, 컬러의 채도 값, 컬러의 길이 값 중 어느 하나 이상인 것을 특징으로 하는 영상이미지를 이용한 음악연주장치. - 제 1항에 있어서, 상기 분석모듈은,
해당 컬러의 Red, Green, Blue 색상 수치 값 분석의 경우 컬러센서의 photodiode 타입을 지정하여 일정시간동안 입력된 빛의 수치 값을 측정하고, 이 결과로 출력된 펄스 값을 색상별로 카운트하는 것을 특징으로 하는 영상이미지를 이용한 음악연주장치. - 제 1항에 있어서, 상기 생성모듈은,
상기 분석모듈에서 추출된 컬러 값과 기 설정된 음계라이브러리 매칭을 통해 연주를 하기 위한 음을 생성하는 것을 특징으로 하는 영상이미지를 이용한 음악연주장치. - 적어도 하나 이상의 영상이미지를 입력하는 단계;
상기 적어도 하나 이상의 영상이미지에서 컬러에 관한 정보를 감지하는 단계;
상기 감지된 컬러에 관한 정보를 분석하는 단계;
상기 분석된 정보를 이용하여 음악연주를 위한 음을 생성하는 단계를 포함하는 영상이미지를 이용한 음악연주방법. - 제 5항에 있어서, 상기 적어도 하나 이상의 영상이미지에서 컬러에 관한 정보는,
컬러의 R, G, B 수치 값, 컬러의 명도 값, 컬러의 채도 값, 컬러의 길이 값 중 어느 하나 이상인 것을 특징으로 하는 영상이미지를 이용한 음악연주방법. - 제 5항에 있어서, 상기 분석하는 단계는,
해당 컬러의 Red, Green, Blue 색상 수치 값 분석의 경우 컬러센서의 photodiode 타입을 지정하여 일정시간동안 입력된 빛의 수치 값을 측정하고, 이 결과로 출력된 펄스 값을 색상별로 카운트하는 것을 특징으로 하는 영상이미지를 이용한 음악연주방법. - 제 5항에 있어서, 상기 음을 생성하는 단계는,
상기 분석단계에서 추출된 컬러 값과 기 설정된 음계라이브러리 매칭을 통해 연주를 하기 위한 음을 생성하는 것을 특징으로 하는 영상이미지를 이용한 음악연주방법. - 적어도 하나 이상의 영상이미지를 입력하고, 상기 적어도 하나 이상의 영상이미지에서 컬러에 관한 정보를 감지하고, 상기 감지된 컬러에 관한 정보를 분석하고, 상기 분석된 정보를 이용하여 음악연주를 위한 음을 생성하는 프로그램을 포함하는 영상이미지를 이용한 음악연주 프로그램을 포함하는 저장매체.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020150074268A KR20160141070A (ko) | 2015-05-27 | 2015-05-27 | 영상이미지를 이용한 음악연주장치, 그 방법 및 영상이미지를 이용한 음악연주 프로그램을 저장하는 저장매체 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020150074268A KR20160141070A (ko) | 2015-05-27 | 2015-05-27 | 영상이미지를 이용한 음악연주장치, 그 방법 및 영상이미지를 이용한 음악연주 프로그램을 저장하는 저장매체 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20160141070A true KR20160141070A (ko) | 2016-12-08 |
Family
ID=57577032
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020150074268A KR20160141070A (ko) | 2015-05-27 | 2015-05-27 | 영상이미지를 이용한 음악연주장치, 그 방법 및 영상이미지를 이용한 음악연주 프로그램을 저장하는 저장매체 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20160141070A (ko) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019132126A1 (ko) * | 2017-12-28 | 2019-07-04 | 심재훈 | 그래픽 컨텐츠 기반 작곡서비스 운영장치 |
| WO2019194345A1 (ko) * | 2018-04-06 | 2019-10-10 | 심재훈 | 이미지 기반 악보 생성장치 및 악보 기반 이미지 생성장치 |
-
2015
- 2015-05-27 KR KR1020150074268A patent/KR20160141070A/ko unknown
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019132126A1 (ko) * | 2017-12-28 | 2019-07-04 | 심재훈 | 그래픽 컨텐츠 기반 작곡서비스 운영장치 |
| WO2019194345A1 (ko) * | 2018-04-06 | 2019-10-10 | 심재훈 | 이미지 기반 악보 생성장치 및 악보 기반 이미지 생성장치 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8461443B2 (en) | Control of light in response to an audio signal | |
| Mandal | Multimedia signals and systems | |
| CN101416562A (zh) | 组合的基于视频和音频的环境照明控制 | |
| Maali Amiri et al. | A strategy toward spectral and colorimetric color reproduction using ordinary digital cameras | |
| WO2020015411A1 (zh) | 一种训练改编水平评价模型、评价改编水平的方法及装置 | |
| JP2021101252A (ja) | 情報処理方法、情報処理装置およびプログラム | |
| Tordini et al. | Toward an improved model of auditory saliency | |
| Abdelnour et al. | Clear: A dataset for compositional language and elementary acoustic reasoning | |
| KR20160141070A (ko) | 영상이미지를 이용한 음악연주장치, 그 방법 및 영상이미지를 이용한 음악연주 프로그램을 저장하는 저장매체 | |
| Meyer-Kahlen et al. | Transfer-plausibility of binaural rendering with different real-world references | |
| Friedland et al. | Multimedia computing | |
| Sexton et al. | Automatic CNN-based enhancement of 360° video experience with multisensorial effects | |
| KR102028122B1 (ko) | 오디오 장치 및 그의 신호 처리 방법 그리고 그 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능 매체 | |
| WO2020171614A1 (ko) | 오디오 신호 패턴을 이용한 햅틱 신호 발생 방법 및 장치 | |
| KR20120082187A (ko) | 증강 현실을 이용한 노래방 시스템 및 장치, 이의 노래방 서비스 방법 | |
| CN112804510A (zh) | 深水图像的色彩还真处理方法、装置、存储介质及相机 | |
| US20200357407A1 (en) | Speech recognition with image signal | |
| KR20120114757A (ko) | 음악 분위기에 따른 감성 조명 시스템 및 그 제공방법 | |
| WO2019087331A1 (ja) | 基準位置検出装置および基準位置検出方法 | |
| US20150241766A1 (en) | Method and system for organising image recordings and sound recordings | |
| US20130106689A1 (en) | Methods of operating systems having optical input devices | |
| TWI640898B (zh) | 即時互動分析之擴增實境方法及系統 | |
| KR102241864B1 (ko) | 이미지 분석에 기반한 콘텐츠 제공 장치, 이를 포함하는 콘텐츠 제공 시스템 및 이의 콘텐츠 제공 방법 | |
| KR20160140037A (ko) | 감성 기반 색온도 제어를 위한 감성 매칭 모듈 및 이를 갖는 감성 발광 시스템 | |
| Zaveri et al. | Aero drums-augmented virtual drums |