KR101125218B1 - 음향 시각화 장치 및 방법 - Google Patents

음향 시각화 장치 및 방법 Download PDF

Info

Publication number
KR101125218B1
KR101125218B1 KR1020100051205A KR20100051205A KR101125218B1 KR 101125218 B1 KR101125218 B1 KR 101125218B1 KR 1020100051205 A KR1020100051205 A KR 1020100051205A KR 20100051205 A KR20100051205 A KR 20100051205A KR 101125218 B1 KR101125218 B1 KR 101125218B1
Authority
KR
South Korea
Prior art keywords
vortex
frequency
fluid
radius
group
Prior art date
Application number
KR1020100051205A
Other languages
English (en)
Other versions
KR20110131656A (ko
Inventor
홍정모
Original Assignee
동국대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 동국대학교 산학협력단 filed Critical 동국대학교 산학협력단
Priority to KR1020100051205A priority Critical patent/KR101125218B1/ko
Publication of KR20110131656A publication Critical patent/KR20110131656A/ko
Application granted granted Critical
Publication of KR101125218B1 publication Critical patent/KR101125218B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01R—MEASURING ELECTRIC VARIABLES; MEASURING MAGNETIC VARIABLES
    • G01R23/00—Arrangements for measuring frequencies; Arrangements for analysing frequency spectra
    • G01R23/16—Spectrum analysis; Fourier analysis
    • G01R23/17—Spectrum analysis; Fourier analysis with optical or acoustical auxiliary devices
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/091—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith
    • G10H2220/101—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters
    • G10H2220/131—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters for abstract geometric visualisation of music, e.g. for interactive editing of musical parameters linked to abstract geometric figures

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Processing Or Creating Images (AREA)

Abstract

음향 시각화 장치는 음향 파일을 복호화하여 음향 신호를 생성하는 복호화부, 음향 신호의 주파수 별 신호 세기를 검출하는 주파수 분석부, 주파수 별 신호 세기에 따라 증폭된 볼텍스 입자(vortex particle)를 이용한 유체의 움직임을 시뮬레이션하여 유체 움직임 정보를 생성하는 유체 시뮬레이션부, 유체 움직임 정보에 따라 영상을 생성하는 시각화부를 포함한다. 본 발명의 실시예에 의하면, 음향에 따라 유체가 움직이는 영상을 제공할 수 있다.

Description

음향 시각화 장치 및 방법{APPARATUS AND METHOD FOR VISULALIZING SOUND}
본 발명은 그래픽스에 관련된 것으로, 보다 자세하게는 음향을 시각화하는 기술에 관한 것이다.
최근 통신 기술이 발달하면서 미디어 컨텐츠의 이용이 늘어나고 있다. 특히 음향 컨텐츠를 MP3 등의 형식으로 사용자에게 보급되고, 사용자는 PC나 휴대 음향 재생 기기 등을 이용하여 음악 컨텐츠를 이용하고 있다.
음향을 재생하기 위해 PC 나 휴대 음향 재생 기기에는 음향 플레이어를 구비하고, 음향 플레이어를 통해 정해진 형식으로 인코딩된 음향 컨텐츠를 재생하여 사용자에게 음향 신호로 제공한다.
또한 PC에서는 음향을 재생할 때, 음향에 따라 움직이는 영상을 제공하여, 사용자에게 흥을 돋구어 주는 돋구어 줄 수 있다. 물론 디스플레이 모듈을 장착하여 재생 중인 음향에 따른 영상을 제공하는 음향 재생 기기도 등장하고 있다.
이러한 경향에 따라 음향에 따른 시각화 기술 개발의 필요성이 대두되고 있다.
본 발명의 일 실시예는 유체 시뮬레이션을 이용하여 음향을 시각화하는 장치 및 방법을 제공하고자 한다.
본 발명의 일 측면에 따르면, 음향 신호의 주파수 별 신호 세기를 검출하는 주파수 분석부; 상기 주파수 별 신호 세기에 따라 증폭된 볼텍스 입자(vortex particle)를 이용한 유체의 움직임을 시뮬레이션하여 유체 움직임 정보를 생성하는 유체 시뮬레이션부; 및 상기 유체 움직임 정보에 따라 영상을 생성하는 시각화부를 포함하는 음향 시각화 장치가 제공된다.
상기 유체 시뮬레이션부는 상기 음향 신호의 주파수와 상기 볼텍스 입자의 반경을 반비례 관계로 매칭할 수 있다.
상기 유체 시뮬레이션부는 상기 주파수에 매칭되는 반경을 갖는 볼텍스입자를 상기 주파수에 상응하는 신호 세기에 따라 증폭할 수 있다.
상기 유체 시뮬레이션부는 상기 볼텍스 입자를 단위 시간 별로 생성하되,상기 유체 시뮬레이션부는 이전 단위 시간 동안 움직임이 있는 지점들을 검출하고, 상기 검출된 지점 중 인접한 지점들로 구성되는 그룹을 생성하고, 상기 그룹의 외각선과 넓이의 스퀘어 루트(square root) 값의 비가 지정된 범위 내인 경우, 상기 그룹의 중심점에 상기 볼텍스 입자를 생성할 수 있다.
상기 유체 시뮬레이션부는 상기 중심점의 와도를 상기 볼텍스 입자의 와도로 설정하고, 상기 그룹의 외각선과 넓이의 스퀘어 루트(square root) 값의 비와, 원주와 면적의 비가 동일한 원의 반지름을 상기 볼텍스 입자의 반경으로 설정할 수 있다.
음향 파일을 복호화하여 상기 음향 신호를 생성하는 복호화부를 더 포함할 수 있다.
본 발명의 다른 측면에 따르면, 음향 신호의 주파수 별 신호 세기를 검출하는 단계; 상기 주파수 별 신호 세기에 따라 증폭된 볼텍스 입자(vortex particle)를 이용한 유체의 움직임을 시뮬레이션하여 유체 움직임 정보를 생성하는 단계; 및 상기 유체 움직임 정보에 따라 영상을 생성하는 단계를 포함하는 음향 시각화 방법이 제공된다.
상기 유체 움직임 정보를 생성하는 단계는 상기 상기 음향 신호의 주파수와 상기 볼텍스 입자의 반경을 반비례 관계로 매칭하는 단계; 및 상기 유체 시뮬레이션부는 상기 주파수에 매칭되는 반경을 갖는 볼텍스 입자를 상기 주파수에 상응하는 신호 세기에 따라 증폭하는 단계를 포함할 수 있다.
상기 유체 움직임 정보를 생성하는 단계 이전에, 상기 유체 시뮬레이션부는 이전 단위 시간 동안 움직임이 있는 지점들을 검출하는 단계; 상기 검출된 지점 중 인접한 지점들로 구성되는 그룹을 생성하는 단계; 및 상기 그룹의 외각선과 넓이의 스퀘어 루트(square root) 값의 비가 지정된 범위 내인 경우, 상기 그룹의 중심점에 상기 볼텍스 입자를 설정하는 단계가 포함될 수 있다.
상기 볼텍스 입자의 와도는 상기 중심점의 와도로 설정되고, 상기 볼텍스 입자의 반경은 상기 그룹의 외각선과 넓이의 스퀘어 루트(square root) 값의 비와, 원주와 면적의 비가 동일한 원의 반지름으로 설정될 수 있다.
상기 음향 시각화 방법은 음향 음향 파일을 복호화하여 상기 음향 신호를 생성하는 단계를 더 포함할 수 있다.
본 발명의 실시예에 의하면, 음향에 따라 유체가 움직이는 영상을 제공할 수 있다.
도 1은 음향 시각화 장치를 예시한 블록도.
도 2a는 음향 시각화 장치가 시뮬레이션한 유체의 움직임을 나타낸 도면.
도 2b는 도 2a의 유체가 움직이는 지점 중 원형에 근접한 지점들을 선별한 것을 예시한 도면.
도 2c는 도 2b에 선별된 지점에 상응하는 볼텍스 (vortex)을 예시한 도면.
도 3은 음향 시각화 장치가 음향 파일에 따른 영상을 생성하는 과정을 예시한 순서도.
도 4는 음향 시각화 장치가 생성한 영상을 예시한 도면.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 이를 상세한 설명을 통해 상세히 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
또한, 본 명세서에서, 일 구성요소가 다른 구성요소로 신호를 "연결된다"로 언급된 때에는, 상기 일 구성요소가 상기 다른 구성요소와 직접 연결되어 신호를 전송할 수 있지만, 특별히 반대되는 기재가 존재하지 않는 이상, 중간에 또 다른 구성요소를 매개하여 신호를 전송할 수도 있다고 이해되어야 할 것이다.
도 1은 음향 시각화 장치를 예시한 블록도이다.
도 1을 참조하면, 음향 시각화 장치는 입력부(110), 복호화부(120), 주파수 분석부(130), 유체 시뮬레이션부(140) 및 시각화부(150)를 포함한다.
입력부(110)는 외부 장치와 연결되어 외부 장치 또는 네트워크로부터 음향 파일을 입력 받는다. 또한 입력부(110)는 입력 장치를 구비하여 사용자로부터 음향 재생의 시작을 명령하는 입력을 받을 수 있다. 입력부(110)는 사용자로부터 음향 재생의 시작을 명령하는 입력을 받으면, 입력 받은 음향 파일을 복호화부(120)로 전송한다.
복호화부(120)는 지정된 형식으로 인코딩된 음향 파일을 디코딩하여 음향 신호를 생성한다. 복호화부(120)는 하나 이상의 방식으로 인코딩된 음향 파일을 복호하하기 위한 모듈을 구비하고, 수신한 음향 파일의 헤더를 참조하여 음향 파일의 인코딩 방식을 확인할 수 있다. 복호화부(120)는 확인된 인코딩 방식에 상응하는 디코딩 방식으로 음향 파일을 복호화하여 음향 신호를 생성한다. 이 때, 음향 신호는 음향의 주파수 및 진폭을 포함하는 정보이다. 예를 들어, 복호화부(120)는 MP3 형식으로 인코딩된 음향 파일의 헤더를 확인하여 MP3 방식임을 확인하고, 이에 상응하는 디코딩 모듈을 통해 음향 파일을 복호화하여 음향 신호를 생성한다. 복호화부(120)는 생성한 음향 신호를 주파수 분석부(130)로 전송한다.
주파수 분석부(130)는 음향 신호를 단위 시간마다 분석하여 주파수 별 신호 세기를 산출하는 스펙트럴 분석기(spectral analyzer)이다. 주파수 분석부(130)는 주파수 별 신호 세기를 유체 시뮬레이션부(140)로 전송한다.
유체 시뮬레이션부(140)는 주파수 별 신호 세기에 따른 유체의 움직임을 시뮬레이션한다. 유체 시뮬레이션부(140)는 시뮬레이션 결과인 유체의 움직임에 대한 정보인 유체 움직임 정보를 생성하여 시각화부(150)로 전송한다. 유체 움직임 정보는 전체 지점에 대한 와도를 포함한다. 이하 도 2를 참조하여 유체 시뮬레이션부(140)의 주파수 별 신호 세기에 따른 유체의 움직임을 시뮬레이션하는 과정을 상세히 설명하도록 한다.
시각화부(150)는 유체 움직임 정보에 따라 각 지점의 픽셀 값을 설정하여 영상을 생성한다. 예를 들어, 시각화부(150)는 유체 움직임 정보에 포함된 와도에 따라 각 픽셀의 명도를 설정하여 영상을 생성할 수 있다. 예를 들어, 시각화부(150)는 유체 움직임 정보에 포함된 와도가 높을수록 해당 지점의 명도가 높도록 설정할 수 있다. 또한 시각화부(150)는 유체 움직임 정보에 포함된 와도에 부호에 따라 각 픽셀의 색상을 설정할 수 있다. 시각화부(150)는 생성된 영상을 외부로 출력한다.
도 2a는 음향 시각화 장치가 시뮬레이션한 유체의 움직임을 나타낸 도면이고, 도 2b는 도 2a의 유체가 움직이는 지점 중 원형에 근접한 지점들을 선별한 것을 예시한 도면이고, 도 2c는 도 2b에 선별된 지점에 상응하는 볼텍스 (vortex)를 예시한 도면이다.
유체 시뮬레이션부(140)는 유체의 움직임을 시뮬레이션할 영역(이하 대상 영역이라 지칭)의 현재(예를 들어, n번째) 단위 시간 동안의 유체 움직임을 하기의 수학식 1과 같이 산출한다.
[수학식 1]
Figure 112010034989794-pat00001
이 때,
Figure 112010034989794-pat00002
는
Figure 112010034989794-pat00003
를 t(단위 시간)에 대해서 미분한 값이고,
Figure 112010034989794-pat00004
는 시뮬레이션노드에 위치한 유체의 속도,
Figure 112010034989794-pat00005
는 중력 등의 외부에서 가해지는 힘이다.
Figure 112010034989794-pat00006
는 유체의 압력,
Figure 112010034989794-pat00007
는 유체의 밀도이다. 유체 시뮬레이션부(140)는 대상 영역에 포함된 전 지점에 대해
Figure 112010034989794-pat00008
를 산출한다.
이 때,
Figure 112010034989794-pat00009
,
Figure 112010034989794-pat00010
및 대상 지역의 각 지점에 대한
Figure 112010034989794-pat00011
의 초기값은 미리 설정되거나, 입력부(110)를 통해 사용자로부터 입력 받을 수 있다. 수학식 1은 하기의 수학식 2 및 수학식 3으로 변형될 수 있다.
[수학식 2]
Figure 112010034989794-pat00012
Figure 112010034989794-pat00013
는 n번째 단위 시간 동안의 속도이고,
Figure 112010034989794-pat00014
는 단위 시간이다. 유체 시뮬레이션부(140)는 수학식 5을 통해
Figure 112010034989794-pat00015
를 산출한다.
유체 시뮬레이션부(140)는 수학식 6를 통해 n+1번째 단위 시간 동안의 속도
Figure 112010034989794-pat00016
를 산출한다.
[수학식 3]
Figure 112010034989794-pat00017
이 때, 유체 시뮬레이션부(140)는
Figure 112010034989794-pat00018
를 수학식 1 및 수학식 2의
Figure 112010034989794-pat00019
로 적용하여 n+1번째 단위 시간 동안의
Figure 112010034989794-pat00020
를 산출한다. 이 때,
Figure 112010034989794-pat00021
는 하기의 수학식 4와 같이 설정될 수 있다.
[수학식 4]
Figure 112010034989794-pat00022
Figure 112010034989794-pat00023
이 때,
Figure 112010034989794-pat00024
는 조정 계수, x는 좌표
Figure 112010034989794-pat00025
의 각 셀에 포함된 임의의 점을 나타내고, p는 좌표
Figure 112010034989794-pat00026
에 위치하는 볼텍스이고,
Figure 112010034989794-pat00027
및
Figure 112010034989794-pat00028
는 임의의 볼텍스의 x, y 좌표이고,
Figure 112010034989794-pat00029
은 볼텍스의 반경이다. 유체 시뮬레이션부(140)는
Figure 112010034989794-pat00030
의 초기값을 미리 설정된 값으로 설정할 수 있다.
유체 시뮬레이션부(140)는 수학식 5을 이용하여 n+1번째 단위 시간의 각 점에 대한 와도
Figure 112010034989794-pat00031
를 포함하는 유체 움직임 정보를 생성하여 시각화부(150)로 전송한다.
[수학식 5]
Figure 112010034989794-pat00032

유체 시뮬레이션부(140)는 조정 계수
Figure 112010034989794-pat00033
를 산출하기 위해 볼텍스 입자(vortex particle)을 생성한다. 볼텍스 입자는 시뮬레이션을 통해 생성된 가상의 입자로서 대상 지역 상을 이동하면서 각 지점의 속도 계산을 위해 사용되는 조정 계수
Figure 112010034989794-pat00034
에 영향을 준다.
이하, 유체 시뮬레이션부(140)가 볼텍스 입자를 산출하는 과정을 설명하도록 한다.
유체 시뮬레이션부(140)는 현재 임의의 지점 중
Figure 112010034989794-pat00035
의 값이 지정된 값 이상인 지점(이하 참조 지점이라 지칭)을 선정한다. 참조 지점을 색으로 표시하면 도 2a와 같이 나타낼 수 있다.
유체 시뮬레이션부(140)는 인접하는 참조 지점끼리 묶은 하나 이상의 그룹을 설정한다. 예를 들어, 유체 시뮬레이션부(140)는 도 2에 예시된 색이 칠해진 지점 중 인접하게 위치되어 하나의 덩어리를 구성하는 점들을 하나의 그룹으로 설정한다.
유체 시뮬레이션부(140)는 각 그룹의 외각선 길이 및 넓이(또는 픽셀의 수)의 스퀘어 루트(square root) 값를 산출한다. 유체 시뮬레이션부(140)는 넓이의 스퀘어 루트 값과 외각선 길이의 비율이 지정된 범위에 속하는 경우, 해당 그룹의 중심부에 볼텍스 입자가 위치하는 것으로 설정한다. 볼텍스 입자가 설정된 그룹을 진한 색으로 표시하면 도 2b와 같이 예시된다.
유체 시뮬레이션부(140)는 각 그룹의 중심부의 와도를 해당 볼텍스 입자의 와도로 설정하고, 수학식 6을 이용하여 해당 볼텍스 입자의 반경
Figure 112010034989794-pat00036
을 산출한다.
[수학식 6]
Figure 112010034989794-pat00037
이 때, k는 그룹의 외각선 길이이고, l은 넓이의 스퀘어 루트 값이다.
이 때, 유체 시뮬레이션부(140)는 전체 볼텍스 입자의 와도와 속도
Figure 112010034989794-pat00038
의 차가 지정된 값 이상인 경우, 해당 볼텍스 입자를 삭제한다.
유체 시뮬레이션부(140)는 각 볼텍스 입자의 반경 내에 포함된는 지점의 조정 계수
Figure 112010034989794-pat00039
를 주파수 별 신호 세기에 따라 조정한다. 즉, 유체 시뮬레이션부(140)는 주파수 별 신호 세기에 따라 조정 계수를 조정하여 볼텍스 입자를 증폭시킨다. 유체 시뮬레이션부(140)는 조정 계수의 설정을 위해 볼텍스 입자의 반경과 주파수 별 신호 세기를 매칭한다. 예를 들어, 유체 시뮬레이션부(140)는 저주파수를 반경이 큰 볼텍스 입자와 매칭하고, 고주파수를 반경이 작은 볼텍스 입자와 매칭한다. 즉, 유체 시뮬레이션부(140)는 주파수와 볼텍스의 반경이 반비례하도록 매칭할 수 있다. 유체 시뮬레이션부(140)는 조정 계수를 볼텍스 입자에 상응하는 주파수의 신호 세기에 따라 조정한다. 즉, 유체 시뮬레이션부(140)는 볼텍스 입자에 매칭된 주파수의 신호 세기를 지정된 상수와 곱하여 조정 계수를 산출할 수 있다.
도 3은 음향 시각화 장치가 음향 파일에 따른 영상을 생성하는 과정을 예시한 순서도이다.
도 3을 참조하면, 단계 310에서 음향 시각화 장치는 외부로부터 음향 파일을 입력 받는다.
단계 320에서 음향 시각화 장치는 입력 받은 음향 파일을 복호화하여 음향 신호를 생성한다.
단계 330에서 음향 시각화 장치는 음향 신호를 분석하여 주파수 별 신호 세기를 검출한다.
단계 340에서 음향 시각화 장치는 현재 대상 지역의 각 지점에 설정된 속도에 따라 볼텍스 입자를 생성한다. 음향 시각화 장치는 현재 대상 지역의 각 지점에 설정된 속도 및 수학식 3에 따라 와도를 산출한다. 음향 시각화 장치는 산출한 각 지점에 대한 와도에 따른 그룹을 설정하고, 각 그룹에 대한 넓이의 스퀘어 루트 값과 외각선 길이의 비율이 지정된 범위 이내 일 경우, 해당 그룹에 대한 볼텍스 입자를 생성한다. 볼텍스 입자를 과정은 수학식 6을 참조하여 상술하였으므로, 그 상세한 설명을 생략하기로 한다.
단계 350에서 음향 시각화 장치는 볼텍스 입자를 음향 신호의 주파수 별 신호 세기에 따라 증폭한다. 즉, 음향 시각화 장치는 주파수에 상응하는 반경의 볼텍스 입자를 해당 주파수의 신호 세기에 따라 증폭한다. 이 때, 음향 시각화 장치는 수학식 4의 조정 계수를 조정하여 볼텍스 입자를 증폭한다.
단계 360에서 음향 시각화 장치는 대상 지역에 대한 다음 단위 시간의 속도를 산출한다.
단계 370에서 음향 시각화 장치는 단계 360에서 산출된 속도에 따른 와도를 산출하고, 산출된 와도에 따라 영상을 생성한다.
단계 380에서 음향 시각화 장치는 단계 370에서 생성한 영상을 출력한다.
도 4은 음향 시각화 장치가 생성한 영상을 예시한 도면이다.
도 4를 참조하면, 음향 시각화 장치는 수신한 음향 파일을 디코딩한 음향 신호에 따라 볼텍스 입자를 증폭하여 유체의 움직임을 시뮬레이션함으로써, 음향 신호과 매칭되도록 움직이는 유체를 나타내는 영상을 생성할 수 있다. 도 4에 예시된 영상에서 푸른 지점은 양의 와도에 해당하는 지점이고, 붉은 지점은 음의 와도에 해당하는 지점이다.
이제까지 본 발명에 대하여 그 실시 예를 중심으로 살펴보았다. 전술한 실시 예 외의 많은 실시 예들이 본 발명의 특허청구범위 내에 존재한다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예는 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (11)

  1. 음향 신호의 주파수 별 신호 세기를 검출하는 주파수 분석부;
    상기 주파수 별 신호 세기에 따라 증폭된 볼텍스 입자(vortex particle)를 이용한 유체의 움직임을 시뮬레이션하여 유체 움직임 정보를 생성하는 유체 시뮬레이션부; 및
    상기 유체 움직임 정보에 따라 영상을 생성하는 시각화부
    를 포함하되,
    상기 유체 시뮬레이션부는 상기 음향 신호의 주파수와 상기 볼텍스 입자의 반경을 반비례 관계로 매칭하고,
    상기 유체 시뮬레이션부는 상기 주파수에 매칭되는 반경을 갖는 볼텍스 입자를 상기 주파수에 상응하는 신호 세기에 따라 증폭하는 것을 특징으로 하는 음향 시각화 장치.
  2. 삭제
  3. 삭제
  4. 제1 항에 있어서,
    상기 유체 시뮬레이션부는 상기 볼텍스 입자를 단위 시간 별로 생성하되,
    상기 유체 시뮬레이션부는 이전 단위 시간 동안 움직임이 있는 지점들을 검출하고,
    상기 검출된 지점 중 동일한 와도를 갖고 연속하여 위치하는 지점들로 구성되는 그룹을 생성하고,
    상기 그룹의 외각선과 넓이의 스퀘어 루트(square root) 값의 비가 지정된 범위 내인 경우, 상기 그룹의 중심점에 상기 볼텍스 입자를 생성하는 것을 특징으로 하는 음향 시각화 장치.
  5. 제4 항에 있어서,
    상기 유체 시뮬레이션부는 상기 중심점의 와도를 상기 볼텍스 입자의 와도로 설정하고,
    상기 그룹의 외각선과 넓이의 스퀘어 루트(square root) 값의 비와, 원주와 면적의 비가 동일한 원의 반지름을 상기 볼텍스 입자의 반경으로 설정하는 것을 특징으로 하는 음향 시각화 장치.
  6. 제1 항에 있어서,
    음향 파일을 복호화하여 상기 음향 신호를 생성하는 복호화부를 더 포함하는 음향 시각화 장치.
  7. 음향 신호의 주파수 별 신호 세기를 검출하는 단계;
    상기 주파수 별 신호 세기에 따라 증폭된 볼텍스 입자(vortex particle)를 이용한 유체의 움직임을 시뮬레이션하여 유체 움직임 정보를 생성하는 단계; 및
    상기 유체 움직임 정보에 따라 영상을 생성하는 단계
    를 포함하되,
    상기 유체 움직임 정보를 생성하는 단계는
    상기 상기 음향 신호의 주파수와 상기 볼텍스 입자의 반경을 반비례 관계로 매칭하는 단계; 및
    상기 유체 시뮬레이션부는 상기 주파수에 매칭되는 반경을 갖는 볼텍스입자를 상기 주파수에 상응하는 신호 세기에 따라 증폭하는 단계를 포함하는 음향 시각화 방법.
  8. 삭제
  9. 제7 항에 있어서,
    상기 유체 움직임 정보를 생성하는 단계 이전에,
    상기 유체 시뮬레이션부는 이전 단위 시간 동안 움직임이 있는 지점들을 검출하는 단계;
    상기 검출된 지점 중 동일한 와도를 갖고 연속하여 위치하는 지점들로 구성되는 그룹을 생성하는 단계; 및
    상기 그룹의 외각선과 넓이의 스퀘어 루트(square root) 값의 비가 지정된 범위 내인 경우, 상기 그룹의 중심점에 상기 볼텍스 입자를 설정하는 단계를 더 포함하는 음향 시각화 방법.
  10. 제9 항에 있어서,
    상기 볼텍스 입자의 와도는 상기 중심점의 와도로 설정되고,
    상기 볼텍스 입자의 반경은 상기 그룹의 외각선과 넓이의 스퀘어 루트(square root) 값의 비와, 원주와 면적의 비가 동일한 원의 반지름으로 설정되는 것을 특징으로 하는 음향 시각화 방법.
  11. 제7 항에 있어서,
    음향 파일을 복호화하여 상기 음향 신호를 생성하는 단계를 더 포함하는 음향 시각화 방법.
KR1020100051205A 2010-05-31 2010-05-31 음향 시각화 장치 및 방법 KR101125218B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100051205A KR101125218B1 (ko) 2010-05-31 2010-05-31 음향 시각화 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100051205A KR101125218B1 (ko) 2010-05-31 2010-05-31 음향 시각화 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20110131656A KR20110131656A (ko) 2011-12-07
KR101125218B1 true KR101125218B1 (ko) 2012-03-21

Family

ID=45499989

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100051205A KR101125218B1 (ko) 2010-05-31 2010-05-31 음향 시각화 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101125218B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101927069B1 (ko) * 2012-02-08 2018-12-11 삼성전자주식회사 유체 페인팅 효과를 제공하는 ｇｕｉ 제공 장치 및 그 제어 방법
KR101528426B1 (ko) * 2014-10-14 2015-06-15 삼성에스디에스 주식회사 온라인 콘텐츠의 상태를 표시하는 이미지를 생성하는 방법 및 장치

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100929856B1 (ko) 2009-07-01 2009-12-04 엠엠비 주식회사 오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100929856B1 (ko) 2009-07-01 2009-12-04 엠엠비 주식회사 오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
논문1:INTERACT'01, IOS
논문2:컴퓨터그래픽스학회
논문3:한국디자인학회

Also Published As

Publication number Publication date
KR20110131656A (ko) 2011-12-07

Similar Documents

Publication Publication Date Title
JP3521900B2 (ja) バーチャルスピーカアンプ
JP7436664B2 (ja) リスニングシーンを構築する方法及び関連装置
US20060281403A1 (en) Enhancing perceptions of the sensory content of audio and audio-visual media
Lebacq et al. Maximal ambient noise levels and type of voice material required for valid use of smartphones in clinical voice research
KR101125218B1 (ko) 음향 시각화 장치 및 방법
CN101516055B (zh) 一种能够模拟不同音响环境的三维回声音效方法和设备
KR102212409B1 (ko) 오디오 신호 및 오디오 신호를 기반으로 한 진동 신호를 생성하는 방법 및 장치
KR102028122B1 (ko) 오디오 장치 및 그의 신호 처리 방법 그리고 그 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능 매체
Balan et al. Developing a navigational 3D audio game with hierarchical levels of difficulty for the visually impaired players.
JP2006133521A (ja) 語学学習機
Woszczyk Physical and perceptual considerations for high-resolution audio
KR101218336B1 (ko) 오디오 신호의 시각화 장치
Olive Evaluation of five commercial stereo enhancement 3D audio software plug-ins
Yadav et al. Investigating auditory room size perception with autophonic stimuli
Jiang Visualisation and Auralisation for Perception-Driven Decision Supports in Planning: A Comparative Review
McKeeg et al. Using auralization techniques to render 5.1 surround to binaural and transaural playback
Wersenyi Localization in a HRTF-based minimum audible angle listening test on a 2D sound screen for GUIB applications
US12035123B2 (en) Impulse response generation system and method
Estrella et al. Motion-to-Sound Latency Measurement Procedure for VR Sound Reproduction
US20220345842A1 (en) Impulse response generation system and method
Arnold et al. Simulating large scale acoustic path benchmarking
SEKI et al. Study on Acoustical Training System of
US20230104111A1 (en) Determining a virtual listening environment
Frösler Immersive Audio in Virtual Reality
KR100390517B1 (ko) 통합 사운드 카드를 이용하여 전,후방 음향 출력을 동시에발생하는 음향 재생 시스템 및 음향 재생 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150302

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160303

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170303

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee