KR100929856B1 - 오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법 - Google Patents

오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법 Download PDF

Info

Publication number
KR100929856B1
KR100929856B1 KR1020090059852A KR20090059852A KR100929856B1 KR 100929856 B1 KR100929856 B1 KR 100929856B1 KR 1020090059852 A KR1020090059852 A KR 1020090059852A KR 20090059852 A KR20090059852 A KR 20090059852A KR 100929856 B1 KR100929856 B1 KR 100929856B1
Authority
KR
South Korea
Prior art keywords
factor
audio
average
value
instruction
Prior art date
Application number
KR1020090059852A
Other languages
English (en)
Inventor
주영주
Original Assignee
엠엠비 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엠엠비 주식회사 filed Critical 엠엠비 주식회사
Priority to KR1020090059852A priority Critical patent/KR100929856B1/ko
Application granted granted Critical
Publication of KR100929856B1 publication Critical patent/KR100929856B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/06Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • G11B2020/10546Audio or video recording specifically adapted for audio data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법이 개시된다. 본 발명에 따르면, 오디오 데이터를 오디오 블록 단위로 분석하여 얻어진 블록 음량 변화량 및 그 평균을 이용하여 출력 패턴을 제어하므로 오디오 데이터의 종류에 무관하게 시각화를 생성할 수 있으며, 사용자의 개입없이 컴퓨팅 장치가 재생 중인 오디오 데이터에 대응하는 시각화를 자동으로 생성할 수 있다.

Description

오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법{COMPUTING DEVICE CAPABLE OF PLAYING AUDIO FILE AND METHOD FOR CONTROLLING SCREEN THEREOF}
본 발명은 오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법에 관한 것으로, 특히 오디오 데이터를 오디오 블록 단위로 분석하여 얻어진 블록 음량 변화량 및 그 평균을 이용하여 출력 패턴을 제어하는 오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법에 관한 것이다.
디지털 오디오 기술이 발전함에 따라, PCM 파일 및 MP3(MPEG Layer-3) 파일 등과 같은 디지털 오디오 파일을 재생할 수 있는 다양한 재생 장치가 널리 보급되었다.
상기 재생 장치는 더욱 발전하여 디지털 오디오 파일의 청각적인 재생뿐만 아니라 시각적인 재생이 가능하게 되었다.
시각적인 재생이란 재생 장치의 LCD를 통해 다양한 형상의 도형 등을 표시하는 시각화(Visualization)를 의미한다.
종래 기술에 따른 시각화는 단순히 기하학적 또는 형이상학적 도형을 LCD에 표시하는 것에 불과할 뿐이며, 재생중인 디지털 오디오 파일의 청각적인 재생에 반응하지는 않는다.
디지털 오디오 파일의 청각적인 재생에 반응하는 시각화는 시각화의 제작자가 각각의 디지털 오디오 파일을 분석을 통해 얻어진 악기나 비트에 따라 반응하는 시각화를 수동적으로(manually) 제작할 수밖에 없다.
수동적으로 시각화를 제작하는 경우, 다수의 디지털 오디오 파일에 대응할 수 없을 뿐만 아니라, 제작 시간이 길어진다는 문제점이 있다.
상기 문제점을 해결하기 위하여, 본 발명은 오디오 데이터를 오디오 블록 단위로 분석하여 얻어진 블록 음량 변화량 및 그 평균을 이용하여 출력 패턴을 제어하는 오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법을 제공하는 것을 그 목적으로 한다.
상기 목적을 달성하기 위하여, 본 발명에 따른 컴퓨팅 장치는 출력 수단, 프로그램, 상기 프로그램 및 오디오 데이터가 저장되는 메모리 및 상기 프로그램을 실행하는 프로세서를 포함하되, 상기 프로그램은 상기 메모리로부터 판독한 상기 오디오 데이터를 하나 이상의 오디오 블록으로 구분하는 제1 인스트럭션; 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 및 상기 블록 음량 변화량의 평균을 계산하는 제2 인스트럭션; 상기 블록 음량 변화량의 상대값을 음량 인자로 할당하는 제3 인스트럭션; 상기 상대값이 제1 값을 초과하는 시점을 장면 전환 인자로 할당하는 제4 인스트럭션; 상기 상대값이 제2 값을 초과하는 시점을 변속 인자로 할당하는 제5 인스트럭션; 및 상기 음량 인자, 장면 전환 인자 및 변속 인자를 적용한 출력 패턴을 상기 출력 수단을 통해 출력하는 제6 인스트럭션을 포함하는 것을 특징으로 한다.
상기 하나 이상의 오디오 블록 각각의 지속 시간은 30ms 이하인 것이 바람직하다.
상기 제2 인스트럭션은 상기 하나 이상의 오디오 블록 각각에 포함된 하나 이상의 오디오 샘플 중 서로 인접한 오디오 샘플의 크기의 차이의 평균을 계산하여 상기 블록 음량 변화량으로 할당하는 제2-1 서브인스트럭션; 및 일정 시간 단위로 상기 블록 음량 변화량의 평균을 계산하는 제2-2 서브인스트럭션을 포함하는 것이 바람직하다.
상기 제3 인스트럭션은 상기 블록 음량 변화량의 평균을 50%, 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 중 최대값을 100%로 매핑하는 제3-1 서브인스트럭션; 및 상기 평균에 대한 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량의 %값인 상기 상대값을 구하여 음량 인자로 할당하는 제3-2 서브인스트럭션을 포함하는 것이 바람직하다.
제6 인스트럭션은 상기 음량 인자에 따라 상기 출력 패턴의 크기를 조절하는 제6-1 서브인스트럭션; 상기 장면 전환 인자에 따라 상기 출력 패턴이 표시되는 장 면을 전환하는 제6-2 서브인스트럭션; 및 상기 변속 인자에 따라 상기 출력 패턴의 이동 속도를 조절하는 제6-3 서브인스트럭션을 포함하는 것이 바람직하다.
상기 제6-1 서브인스트럭션은 상기 음량 인자에 따라 상기 출력 패턴의 길이 및 높낮이를 조절하는 인스트럭션을 포함하는 것이 바람직하다.
상기 제6-3 서브 인스트럭션은 상기 변속 인자에 따라 상기 출력 패턴의 수평 및 수직 이동 속도를 조절하는 인스트럭션을 포함하는 것이 바람직하다.
본 발명에 따른 컴퓨팅 장치의 출력 수단 제어 방법은 출력 수단, 오디오 데이터가 저장되는 메모리 및 상기 출력 수단 및 메모리를 제어하는 프로세서를 포함하는 컴퓨팅 장치의 출력 장치 제어 방법에 있어서, (a) 상기 메모리로부터 판독한 상기 오디오 데이터를 하나 이상의 오디오 블록으로 구분하는 단계; (b) 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 및 상기 블록 음량 변화량의 평균을 계산하는 단계; (c) 상기 블록 음량 변화량의 상대값을 음량 인자로 할당하는 단계; (d) 상기 상대값이 제1 값을 초과하는 시점을 장면 전환 인자로 할당하는 단계; (e) 상기 상대값이 제2 값을 초과하는 시점을 변속 인자로 할당하는 단계; 및 (f) 상기 음량 인자, 장면 전환 인자 및 변속 인자를 적용한 출력 패턴을 상기 출력 수단을 통해 출력하는 단계을 포함하는 것을 특징으로 한다.
상기 하나 이상의 오디오 블록 각각의 지속 시간은 30ms 이하인 것이 바람직하다.
상기 (b) 단계는 상기 하나 이상의 오디오 블록 각각에 포함된 하나 이상의 오디오 샘플 중 서로 인접한 오디오 샘플의 크기의 차이의 평균을 계산하여 상기 블록 음량 변화량으로 할당하는 단계; 및 일정 시간 단위로 상기 블록 음량 변화량의 평균을 계산하는 단계를 포함하는 것이 바람직하다.
상기 (c) 단계는 상기 블록 음량 변화량의 평균을 50%, 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 중 최대값을 100%로 매핑하는 단계; 및 상기 평균에 대한 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량의 %값인 상기 상대값을 구하여 음량 인자로 할당하는 단계를 포함하는 것이 바람직하다.
상기 (f) 단계는 (f-1) 상기 음량 인자에 따라 상기 출력 패턴의 크기를 조절하는 단계; (f-2) 상기 장면 전환 인자에 따라 상기 출력 패턴이 표시되는 장면을 전환하는 단계; 및 (f-3) 상기 변속 인자에 따라 상기 출력 패턴의 이동 속도를 조절하는 단계를 포함하는 것이 바람직하다.
상기 (f-1) 단계는 상기 음량 인자에 따라 상기 출력 패턴의 길이 및 높낮이를 조절하는 단계를 포함하는 것이 바람직하다.
상기 (f-3) 단계는 상기 변속 인자에 따라 상기 출력 패턴의 수평 및 수직 이동 속도를 조절하는 단계를 포함하는 것이 바람직하다.
상기 제1 값 및 제2 값은 각각 상기 평균의 2배 이하인 것이 바람직하다.
본 발명에 따른 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법은 다음과 같은 장점이 있다.
오디오 데이터를 오디오 블록 단위로 분석하여 얻어진 블록 음량 변화량 및 그 평균을 이용하여 출력 패턴을 제어하므로 오디오 데이터의 종류에 무관하게 시각화를 생성할 수 있다.
또한, 사용자의 개입없이 컴퓨팅 장치가 재생 중인 오디오 데이터에 대응하는 시각화를 자동으로 생성하므로 사용자는 용이하게 시각화를 구현할 수 있다.
또한, 본 발명에 따른 컴퓨팅 장치의 출력 장치 제어 방법은 PC, PDA, PMP 등과 같은 컴퓨팅 장치의 LCD뿐만 아니라, 모바일 통신 장치의 LED 매트릭스나 진동 수단에도 적용할 수 있다.
이하에서는, 첨부된 도면을 참조하여 본 발명에 따른 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법의 바람직한 실시예를 상세히 설명한다.
도 1은 본 발명에 따른 컴퓨팅 장치를 도시한 블록도이다.
본 발명에 따른 컴퓨팅 장치(100)는 모바일 통신 장치, PMP, PDA, PC, 게임기일 수 있으나 이에 한정되지는 않는다.
도 1을 참조하면, 본 발명에 따른 컴퓨팅 장치(100)는 출력 수단(120), 프로그램(140), 메모리(130) 및 프로세서(110)를 포함한다.
출력 수단(120)은 프로세서(110)의 제어에 따라 출력 패턴을 출력하는 장치이다. 바람직하게는, 출력 수단(120)은 LCD, OLED, LED 등 다양한 디스플레이를 포함한다. 예를 들어, 출력 수단(120)은 모바일 통신 장치의 LCD뿐만 아니라, 모바일 통신 장치의 표면에 설치된 LED 매트릭스일 수도 있다. 또한, 출력 수단(120)은 모바일 통신 장치에 포함된 진동 수단일 수 있다.
프로세서(110)는 프로그램(140)을 실행하며, 컴퓨팅 장치(100)의 각 구성 요소를 제어한다. 구체적으로는, 프로세서(110)는 메모리(130)에 저장된 오디오 데이터를 판독하여 디코딩 및 분석하며, 프로그램(140)에 포함된 인스트럭션을 실행한다. 오디오 데이터는 PCM 파일 및 MP3 파일일 수 있으나 이에 국한되지는 않는다.
메모리(130)는 오디오 데이터와 프로그램(140)을 저장하며, 프로세서(110)가 프로그램(140)을 실행하는데 필요한 리소스를 제공한다. 메모리(130)는 SDRAM, EEPROM, 비휘발성 메모리 등 다양한 메모리 소자를 포함할 수 있다.
프로그램(140)은, 도 2에 도시된 바와 같이, 제1 내지 제6 인스트럭션을 포함한다. 프로세서(110)는 프로그램(140)에 포함된 제1 내지 제6 인스트럭션을 실행한다.
이하에는, 프로세서(110)가 프로그램(140)을 실행하는 과정에 대하여 상세히 설명한다.
프로세서(110)는 제1 인스트럭션에 따라 메모리(130)로부터 판독한 오디오 데이터를 하나 이상의 오디오 블록으로 구분한다.
예를 들어, 프로세서(110)는 오디오 데이터를 30ms 이하의 지속 시간을 가지는 하나 이상의 오디오 블록으로 분할한다.
제1 인스트럭션의 실행이 완료되면, 프로세서(110)는 제2 인스트럭션에 따라 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 및 블록 음량 변화량의 평균을 계산한다.
블록 음량 변화량 및 블록 음량 변화량의 평균을 계산하기 위하여 제2 인스 트럭션은 제2-1 서브인스트럭션 및 제2-2 서브인스트럭션을 포함한다.
도 3을 참조하면, 제1 인스트럭션에 따라 분할된 하나 이상의 오디오 블록 각각은 하나 이상의 오디오 샘플을 포함한다.
프로세서(110)는 제2-1 서브인스트럭션에 따라 하나 이상의 오디오 블록 각각에 포함된 하나 이상의 오디오 샘플 중 서로 인접한 오디오 샘플의 크기의 차이를 구하고 그 평균을 계산하여 블록 음량 변화량으로 할당한다. 예를 들어, 각 오디오 블록이 100개의 오디오 샘플을 포함하는 경우, 인접한 오디오 샘플의 크기의 차이를 구하면, 99개의 값을 얻을 수 있다. 상기 99개의 값의 평균값이 블록 음량 변화량이 된다.
프로세서(110)는 제2-2 서브인스트럭션에 따라 제2-1 서브인스트럭션을 실행해 얻어진 블록 음량 변화량의 평균을 계산한다.
블록 음량 변화량의 평균은 일정 시간 단위에 대해서 계산될 수 있다. 예를 들어, 도 3에 도시된 바와 같이, 20초의 오디오 데이터를 20ms의 지속 시간을 가지는 1000개의 오디오 블록으로 분할하는 경우, 첫번째 500개의 오디오 블록에 대하여 블록 음량 변화량의 평균을 구하고, 두번째 500개의 오디오 블록에 대하여 블록 음량 변화량의 평균을 구할 수 있다.
제2 인스트럭션의 실행이 완료되면, 프로세서(110)는 제3 인스트럭션에 따라 블록 음량 변화량의 상대값을 음량 인자로 할당한다. 음량 인자는 출력 수단에 표시되는 출력 패턴의 크기를 조절하는 변수로 사용된다.
블록 음량 변화량의 상대값을 구하는 방법의 일례로써 제3 인스트럭션은 제 3-1 서브인스트럭션 및 제3-2 서브인스트럭션을 포함한다.
프로세서(110)는 제3-1 서브인스트럭션에 따라 블록 음량 변화량의 평균을 50%, 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 중 최대값을 100%로 매핑한다.
다음에는, 프로세서(110)는 제3-1 서브인스트럭션에 따라 평균에 대한 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량의 %값인 상대값을 구하여 음량 인자로 할당한다.
예를 들어, 제1 내지 제10 오디오 블록의 블록 음량 변화량이 각각 4, 3, 7, 10, 2, 5, 1, 6, 8, 9라면, 블록 음량 변화량의 평균은 5이고 최대값은 10이다. 평균과 최대값을 각각 50% 및 100%에 매핑할 수 있다. 이 경우, 각 오디오 블록에 대한 블록 음량 변화량의 %값은 각각 40%, 30%, 70%, 100%, 20%, 50%, 10%, 60%, 80%, 90%이며, 프로세서(110)는 상대값인 상기 %값을 음량 인자로 할당한다.
다음에는, 프로세서(110)는 제4 인스트럭션에 따라 상기 상대값이 제1 값을 초과하는 시점을 장면 전환 인자로 할당한다. 장면 전환 인자는 출력 수단에 표시되는 배경 화면과 같은 출력 패턴을 전환하기 위한 변수로 사용된다.
예를 들어, 제1 값이 70%인 경우, 상기 제1 내지 제10 오디오 블록 중 제1 값을 초과하는 제4 오디오 블록, 제9 오디오 블록 및 제10 오디오 블록의 재생 시점을 장면 전환 인자로 할당한다.
상기 제1 값은 상기 평균의 2배 미만인 것이 바람직하다.
다음에는, 프로세서(110)는 제5 인스트럭션에 따라 상대값이 제2 값을 초과 하는 시점을 변속 인자로 할당한다. 변속 인자는 출력 수단에 표시되는 출력 패턴의 이동 속도를 조절하기 위한 변수로 사용된다.
상기 제2 값은 상기 평균의 2배 미만인 것이 바람직하다.
예를 들어, 제2 값이 50%인 경우, 상기 제1 내지 제10 오디오 블록 중 제2 값을 초과하는 제3 오디오 블록, 제4 오디오 블록, 제8 오디오 블록, 제9 오디오 블록 및 제10 오디오 블록의 재생 시점을 변속 인자 인자로 할당한다.
다음에는, 프로세서(110)는 제6 인스트럭션에 따라 음량 인자, 장면 전환 인자 및 변속 인자를 적용한 출력 패턴을 출력 수단(120)을 통해 출력한다. 출력 패턴이란 출력 수단(120)을 통해 출력되는 기하학적 도형(예를 들면, 사각형, 원, 삼각형 등), 모노그램(도안화한 문자 등), 도안화한 각종 사물(도안화한 빌딩, 자동차, 동물 등) 등을 의미하지만, 이에 국한되지는 않는다.
구체적으로는, 프로세서(110)는 음량 인자에 따라 출력 수단(120)을 통해 표시되는 출력 패턴의 크기를 조절한다. 예를 들어, 출력 패턴이 이퀄라이저(equalizer)에서 사용되는 그래픽 바(graphic bar) 패턴인 경우, 프로세서(110)는 음량 인자에 따라 출력 패턴인 이퀄라이저(equalizer) 패턴의 높낮이를 조절할 수 있다. 만약, 제1 내지 제10 오디오 블록에 대한 블록 음량 변화량의 %값이 각각 40%, 30%, 70%, 100%, 20%, 50%, 10%, 60%, 80%, 90%라면, 프로세서(110)는 상기 %값에 대응되는 높이의 그래픽 바를 출력 수단(120)을 통해 표시할 수 있다. 또한, 출력 패턴이 빌딩의 모양을 형상화한 빌딩 패턴이라면, 프로세서(110)는 상기 %값에 대응되는 높이를 가지는 빌딩 패턴을 출력 수단(120)을 통해 표시할 수 있다. 또한, 출력 패턴의 높낮이뿐만 아니라 출력 패턴의 길이를 조절할 수도 있다.
일 실시예에 따르면, 프로세서(110)는 음량 인자에 따라 모바일 통신 장치의 LCD를 통해 표시되는 출력 패턴의 크기를 조절할 수 있다. 다른 실시예에 따르면, 프로세서(110)는 음량 인자에 따라 모바일 통신 장치의 표면에 설치된 LED 매트릭스의 LED를 점멸하여 출력 패턴의 크기를 조절할 수 있다. 또 다른 실시예에 따르면, 프로세서(110)는 음량 인자에 따라 모바일 통신 장치의 진동 수단의 강약을 제어하여 출력 패턴의 세기를 조절할 수 있다.
한편, 프로세서(110)는 장면 전환 인자에 따라 장면을 전환한다.
예를 들어, 제1 값을 초과하는 제4 오디오 블록, 제9 오디오 블록 및 제10 오디오 블록의 재생이 시작되면, 장면을 전환한다. 장면 전환이란 배경 화면의 전환, 예를 들면 배경 화면이 도시로부터 숲으로 전환되는 것을 의미할 수 있다.
또한, 프로세서(110)는 변속 인자에 따라 출력 패턴의 이동 속도를 조절한다.
예를 들어, 수평으로 이동하는 자동차 패턴이 출력 수단(120)을 통해 표시되고 있는 도중, 제2 값을 초과하는 제3 오디오 블록의 재생이 시작되는 경우, 프로세서(110)는 자동차 패턴의 이동 속도를 증가시킬 수 있다. 마찬가지로, 제4 오디오 블록, 제8 오디오 블록, 제9 오디오 블록 및 제10 오디오 블록의 재생이 각각 시작되면 프로세서(110)는 자동차 패턴의 이동 속도를 증가 또는 감소시킬 수 있다. 수평으로 이동하는 출력 패턴의 이동 속도뿐만 아니라 수직 또는 대각선으로 이동하는 출력 패턴의 이동 속도도 조절할 수 있다.
일 실시예에 따르면, 프로세서(110)는 변속 인자에 따라 모바일 통신 장치의 LCD를 통해 표시되는 출력 패턴의 이동 속도를 조절할 수 있다. 다른 실시예에 따르면, 프로세서(110)는 음량 인자에 따라 모바일 통신 장치의 표면에 설치된 LED 매트릭스의 LED를 점멸하여 출력 패턴의 스크롤 속도를 조절할 수 있다.
도 4는 본 발명에 따른 컴퓨팅 장치의 출력 장치 제어 방법을 도시한 흐름도이다.
본 발명에 따른 컴퓨팅 장치의 출력 장치 제어 방법은 도 1을 참조하여 설명한 컴퓨팅 장치에서 실행될 수 있다.
도 4를 참조하면, 컴퓨팅 장치의 메모리로부터 판독한 오디오 데이터를 하나 이상의 오디오 블록으로 구분한다(S100).
예를 들어, 프로세서는 오디오 데이터를 30ms 이하의 지속 시간을 가지는 하나 이상의 오디오 블록으로 분할한다.
다음에는, 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 및 블록 음량 변화량의 평균을 계산한다(S110).
이하에서는 블록 음량 변화량 및 블록 음량 변화량의 평균을 계산하는 일례를 도 5를 참조하여 설명한다.
도 3에 도시된 바와 같이, 제1 인스트럭션에 따라 분할된 하나 이상의 오디오 블록 각각은 하나 이상의 오디오 샘플을 포함한다.
먼저, 하나 이상의 오디오 블록 각각에 포함된 하나 이상의 오디오 샘플 중 서로 인접한 오디오 샘플의 크기의 차이를 구하고 그 평균을 계산하여 블록 음량 변화량으로 할당한다(S200). 예를 들어, 각 오디오 블록이 100개의 오디오 샘플을 포함하는 경우, 인접한 오디오 샘플의 크기의 차이를 구하면, 99개의 값을 얻을 수 있다. 상기 99개의 값의 평균값이 블록 음량 변화량이 된다.
다음에는, S200 단계에서 얻어진 블록 음량 변화량의 평균을 계산한다(S210).
상기 S200 단계 및 S210 단계를 통해 블록 음량 변화량 및 블록 음량 변화량의 평균을 계산할 수 있다.
블록 음량 변화량의 평균은 일정 시간 단위에 대해서 계산될 수 있다. 예를 들어, 도 3에 도시된 바와 같이, 20초의 오디오 데이터를 20ms의 지속 시간을 가지는 1000개의 오디오 블록으로 분할하는 경우, 첫번째 500개의 오디오 블록에 대하여 블록 음량 변화량의 평균을 구하고, 두번째 500개의 오디오 블록에 대하여 블록 음량 변화량의 평균을 구할 수 있다.
다음에는, 상기 블록 음량 변화량의 상대값을 음량 인자로 할당한다(S120). 음량 인자는 출력 수단에 표시되는 출력 패턴의 크기를 조절하는 변수로 사용된다.
이하에서는, 블록 음량 변화량의 상대값을 구하는 방법의 일례를 도 6을 참조하여 설명한다.
먼저, 블록 음량 변화량의 평균을 50%, 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 중 최대값을 100%로 매핑한다(S300).
다음에는, 상기 평균에 대한 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량의 %값인 상대값을 구하여 음량 인자로 할당한다(S310).
예를 들어, 제1 내지 제10 오디오 블록의 블록 음량 변화량이 각각 4, 3, 7, 10, 2, 5, 1, 6, 8, 9라면, 블록 음량 변화량의 평균은 5이고 최대값은 10이다. 평균과 최대값을 각각 50% 및 100%에 매핑할 수 있다. 이 경우, 각 오디오 블록에 대한 블록 음량 변화량의 %값은 각각 40%, 30%, 70%, 100%, 20%, 50%, 10%, 60%, 80%, 90%이며, 프로세서는 상대값인 상기 %값을 음량 인자로 할당한다.
상기 S300 단계 및 S310 단계를 통해 상대값을 음량 인자로 할당할 수 있다.
다음에는, 상대값이 제1 값을 초과하는 시점을 장면 전환 인자로 할당한다(S130). 장면 전환 인자는 출력 수단에 표시되는 배경 화면과 같은 출력 패턴을 전환하기 위한 변수로 사용된다.
예를 들어, 제1 값이 70%인 경우, 상기 제1 내지 제10 오디오 블록 중 제1 값을 초과하는 제4 오디오 블록, 제9 오디오 블록 및 제10 오디오 블록의 재생 시점을 장면 전환 인자로 할당한다.
상기 제1 값은 상기 평균의 2배 미만인 것이 바람직하다.
다음에는, 상대값이 제2 값을 초과하는 시점을 변속 인자로 할당한다(S140). 변속 인자는 출력 수단에 표시되는 출력 패턴의 이동 속도를 조절하기 위한 변수로 사용된다.
상기 제2 값은 상기 평균의 2배 미만인 것이 바람직하다.
예를 들어, 제2 값이 50%인 경우, 상기 제1 내지 제10 오디오 블록 중 제2 값을 초과하는 제3 오디오 블록, 제4 오디오 블록, 제8 오디오 블록, 제9 오디오 블록 및 제10 오디오 블록의 재생 시점을 변속 인자 인자로 할당한다.
다음에는, 음량 인자, 장면 전환 인자 및 변속 인자를 적용한 출력 패턴을 출력 수단을 통해 출력한다(S150). 출력 패턴이란 출력 수단을 통해 출력되는 기하학적 도형(예를 들면, 사각형, 원, 삼각형 등), 모노그램(도안화한 문자 등), 도안화한 각종 사물(도안화한 빌딩, 자동차, 동물 등) 등을 의미하지만, 이에 국한되지는 않는다.
이하에서는, 음량 인자, 장면 전환 인자 및 변속 인자를 출력 패턴에 적용하는 방법의 일례를 도 7을 참조하여 설명한다.
먼저, 음량 인자에 따라 출력 수단을 통해 표시되는 출력 패턴의 크기를 조절한다(S400). 예를 들어, 출력 패턴이 이퀄라이저(equalizer)에서 사용되는 그래픽 바(graphic bar) 패턴인 경우, 프로세서는 음량 인자에 따라 출력 패턴인 이퀄라이저(equalizer) 패턴의 높낮이를 조절할 수 있다. 만약, 제1 내지 제10 오디오 블록에 대한 블록 음량 변화량의 %값이 각각 40%, 30%, 70%, 100%, 20%, 50%, 10%, 60%, 80%, 90%라면, 프로세서는 상기 %값에 대응되는 높이의 그래픽 바를 출력 수단을 통해 표시할 수 있다. 또한, 출력 패턴이 빌딩의 모양을 형상화한 빌딩 패턴이라면, 프로세서는 상기 %값에 대응되는 높이를 가지는 빌딩 패턴을 출력 수단을 통해 표시할 수 있다. 또한, 출력 패턴의 높낮이뿐만 아니라 출력 패턴의 길이를 조절할 수도 있다.
한편, 장면 전환 인자에 따라 장면을 전환한다(S410).
예를 들어, 제1 값을 초과하는 제4 오디오 블록, 제9 오디오 블록 및 제10 오디오 블록의 재생이 시작되면, 장면을 전환한다. 장면 전환이란 배경 화면의 전 환, 예를 들면 배경 화면이 도시로부터 숲으로 전환되는 것을 의미할 수 있다.
또한, 변속 인자에 따라 출력 패턴의 이동 속도를 조절한다(S420).
예를 들어, 수평으로 이동하는 자동차 패턴이 출력 수단을 통해 표시되고 있는 도중, 제2 값을 초과하는 제3 오디오 블록의 재생이 시작되는 경우, 프로세서는 자동차 패턴의 이동 속도를 증가시킬 수 있다. 마찬가지로, 제4 오디오 블록, 제8 오디오 블록, 제9 오디오 블록 및 제10 오디오 블록의 재생이 각각 시작되면 프로세서는 자동차 패턴의 이동 속도를 증가 또는 감소시킬 수 있다. 수평으로 이동하는 출력 패턴의 이동 속도뿐만 아니라 수직 또는 대각선으로 이동하는 출력 패턴의 이동 속도도 조절할 수 있다.
비록 본 발명의 구성이 구체적으로 설명되었지만 이는 단지 본 발명을 예시적으로 설명한 것에 불과한 것으로, 본 발명이 속하는 기술분야에서 통상의 지식을 가지는 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 변형이 가능할 것이다.
따라서 본 명세서에 개시된 실시예들은 본 발명을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 사상과 범위가 한정되는 것은 아니다. 본 발명의 범위는 아래의 청구범위에 의해 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
도 1은 본 발명에 따른 컴퓨팅 장치를 도시한 블록도.
도 2는 본 발명에 따른 컴퓨팅 장치에 포함된 프로그램을 도시한 블록도.
도 3은 본 발명에 따른 오디오 블록을 도시한 개략도.
도 4는 본 발명에 따른 컴퓨팅 장치의 출력 장치 제어 방법을 도시한 흐름도.
도 5는 본 발명에 따른 S110 단계의 일례를 도시한 흐름도.
도 6은 본 발명에 따른 S120 단계의 일례를 도시한 흐름도.
도 7은 본 발명에 따른 S150 단계의 일례를 도시한 흐름도.

Claims (16)

  1. 출력 수단, 프로그램, 상기 프로그램 및 오디오 데이터가 저장되는 메모리 및 상기 프로그램을 실행하는 프로세서를 포함하되,
    상기 프로그램은
    상기 메모리로부터 판독한 상기 오디오 데이터를 하나 이상의 오디오 블록으로 구분하는 제1 인스트럭션;
    상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 및 상기 블록 음량 변화량의 평균을 계산하는 제2 인스트럭션;
    상기 블록 음량 변화량의 상대값을 음량 인자로 할당하는 제3 인스트럭션;
    상기 상대값이 제1 값을 초과하는 시점을 장면 전환 인자로 할당하는 제4 인스트럭션;
    상기 상대값이 제2 값을 초과하는 시점을 변속 인자로 할당하는 제5 인스트럭션; 및
    상기 음량 인자, 장면 전환 인자 및 변속 인자를 적용한 출력 패턴을 상기 출력 수단을 통해 출력하는 제6 인스트럭션
    을 포함하는 것을 특징으로 하는 컴퓨팅 장치.
  2. 제1항에 있어서,
    상기 하나 이상의 오디오 블록 각각의 지속 시간은 30ms 이하인 것을 특징으 로 하는 컴퓨팅 장치.
  3. 제1항에 있어서,
    상기 제2 인스트럭션은
    상기 하나 이상의 오디오 블록 각각에 포함된 하나 이상의 오디오 샘플 중 서로 인접한 오디오 샘플의 크기의 차이의 평균을 계산하여 상기 블록 음량 변화량으로 할당하는 제2-1 서브인스트럭션; 및
    일정 시간 단위로 상기 블록 음량 변화량의 평균을 계산하는 제2-2 서브인스트럭션
    을 포함하는 것을 특징으로 하는 컴퓨팅 장치.
  4. 제1항에 있어서,
    상기 제3 인스트럭션은
    상기 블록 음량 변화량의 평균을 50%, 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 중 최대값을 100%로 매핑하는 제3-1 서브인스트럭션; 및
    상기 평균에 대한 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량의 %값인 상기 상대값을 구하여 음량 인자로 할당하는 제3-2 서브인스트럭션
    을 포함하는 것을 특징으로 하는 컴퓨팅 장치.
  5. 제1항에 있어서,
    상기 제1 값 및 제2 값은 각각 상기 평균의 2배 이하인 것을 특징으로 하는 컴퓨팅 장치.
  6. 제1항에 있어서,
    제6 인스트럭션은
    상기 음량 인자에 따라 상기 출력 패턴의 크기를 조절하는 제6-1 서브인스트럭션;
    상기 장면 전환 인자에 따라 상기 출력 패턴이 표시되는 장면을 전환하는 제6-2 서브인스트럭션; 및
    상기 변속 인자에 따라 상기 출력 패턴의 이동 속도를 조절하는 제6-3 서브인스트럭션
    을 포함하는 것을 특징으로 하는 컴퓨팅 장치.
  7. 제6항에 있어서,
    상기 제6-1 서브인스트럭션은 상기 음량 인자에 따라 상기 출력 패턴의 길이 및 높낮이를 조절하는 인스트럭션을 포함하는 것을 특징으로 하는 컴퓨팅 장치.
  8. 제6항에 있어서,
    상기 제6-3 서브 인스트럭션은 상기 변속 인자에 따라 상기 출력 패턴의 수평 및 수직 이동 속도를 조절하는 인스트럭션을 포함하는 것을 특징으로 하는 컴퓨 팅 장치.
  9. 출력 수단, 오디오 데이터가 저장되는 메모리 및 상기 출력 수단 및 메모리를 제어하는 프로세서를 포함하는 컴퓨팅 장치의 출력 장치 제어 방법에 있어서,
    (a) 상기 메모리로부터 판독한 상기 오디오 데이터를 하나 이상의 오디오 블록으로 구분하는 단계;
    (b) 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 및 상기 블록 음량 변화량의 평균을 계산하는 단계;
    (c) 상기 블록 음량 변화량의 상대값을 음량 인자로 할당하는 단계;
    (d) 상기 상대값이 제1 값을 초과하는 시점을 장면 전환 인자로 할당하는 단계;
    (e) 상기 상대값이 제2 값을 초과하는 시점을 변속 인자로 할당하는 단계; 및
    (f) 상기 음량 인자, 장면 전환 인자 및 변속 인자를 적용한 출력 패턴을 상기 출력 수단을 통해 출력하는 단계
    을 포함하는 것을 특징으로 하는 출력 장치 제어 방법.
  10. 제9항에 있어서,
    상기 하나 이상의 오디오 블록 각각의 지속 시간은 30ms 이하인 것을 특징으로 하는 출력 장치 제어 방법.
  11. 제9항에 있어서,
    상기 (b) 단계는
    상기 하나 이상의 오디오 블록 각각에 포함된 하나 이상의 오디오 샘플 중 서로 인접한 오디오 샘플의 크기의 차이의 평균을 계산하여 상기 블록 음량 변화량으로 할당하는 단계; 및
    일정 시간 단위로 상기 블록 음량 변화량의 평균을 계산하는 단계
    를 포함하는 것을 특징으로 하는 출력 장치 제어 방법.
  12. 제9항에 있어서,
    상기 (c) 단계는
    상기 블록 음량 변화량의 평균을 50%, 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량 중 최대값을 100%로 매핑하는 단계; 및
    상기 평균에 대한 상기 하나 이상의 오디오 블록 각각에 대한 블록 음량 변화량의 %값인 상기 상대값을 구하여 음량 인자로 할당하는 단계
    를 포함하는 것을 특징으로 하는 출력 장치 제어 방법.
  13. 제9항에 있어서,
    상기 제1 값 및 제2 값은 각각 상기 평균의 2배 이하인 것을 특징으로 하는 출력 장치 제어 방법.
  14. 제9항에 있어서,
    상기 (f) 단계는
    (f-1) 상기 음량 인자에 따라 상기 출력 패턴의 크기를 조절하는 단계;
    (f-2) 상기 장면 전환 인자에 따라 상기 출력 패턴이 표시되는 장면을 전환하는 단계; 및
    (f-3) 상기 변속 인자에 따라 상기 출력 패턴의 이동 속도를 조절하는 단계
    를 포함하는 것을 특징으로 하는 출력 장치 제어 방법.
  15. 제14항에 있어서,
    상기 (f-1) 단계는 상기 음량 인자에 따라 상기 출력 패턴의 길이 및 높낮이를 조절하는 단계를 포함하는 것을 특징으로 하는 출력 장치 제어 방법.
  16. 제14항에 있어서,
    상기 (f-3) 단계는 상기 변속 인자에 따라 상기 출력 패턴의 수평 및 수직 이동 속도를 조절하는 단계를 포함하는 것을 특징으로 하는 출력 장치 제어 방법.
KR1020090059852A 2009-07-01 2009-07-01 오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법 KR100929856B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090059852A KR100929856B1 (ko) 2009-07-01 2009-07-01 오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090059852A KR100929856B1 (ko) 2009-07-01 2009-07-01 오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법

Publications (1)

Publication Number Publication Date
KR100929856B1 true KR100929856B1 (ko) 2009-12-04

Family

ID=41683823

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090059852A KR100929856B1 (ko) 2009-07-01 2009-07-01 오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법

Country Status (1)

Country Link
KR (1) KR100929856B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101005303B1 (ko) * 2010-06-08 2011-01-04 이상권 오디오 데이터의 성격과 어울리는 출력 패턴 자동 생성 방법 및 출력 패턴 자동 생성 장치
KR101125218B1 (ko) 2010-05-31 2012-03-21 동국대학교 산학협력단 음향 시각화 장치 및 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1152949A (ja) 1997-07-30 1999-02-26 Yamaha Corp 音階表示シートおよび音階表示装置
KR20010047468A (ko) * 1999-11-20 2001-06-15 최두일 실시간 음악 분석 및 시각화 장치
JP2005241901A (ja) * 2004-02-26 2005-09-08 Dainippon Printing Co Ltd 音響信号の表示装置
KR20090038898A (ko) * 2006-07-12 2009-04-21 마스터 키, 엘엘씨 음악 및 다른 소리를 시각화하기 위한 장치 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1152949A (ja) 1997-07-30 1999-02-26 Yamaha Corp 音階表示シートおよび音階表示装置
KR20010047468A (ko) * 1999-11-20 2001-06-15 최두일 실시간 음악 분석 및 시각화 장치
JP2005241901A (ja) * 2004-02-26 2005-09-08 Dainippon Printing Co Ltd 音響信号の表示装置
KR20090038898A (ko) * 2006-07-12 2009-04-21 마스터 키, 엘엘씨 음악 및 다른 소리를 시각화하기 위한 장치 및 방법

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101125218B1 (ko) 2010-05-31 2012-03-21 동국대학교 산학협력단 음향 시각화 장치 및 방법
KR101005303B1 (ko) * 2010-06-08 2011-01-04 이상권 오디오 데이터의 성격과 어울리는 출력 패턴 자동 생성 방법 및 출력 패턴 자동 생성 장치
WO2011155696A2 (ko) * 2010-06-08 2011-12-15 Lee Sang-Kwon 오디오 데이터의 성격과 어울리는 출력 패턴 자동 생성 방법 및 출력 패턴 자동 생성 장치
WO2011155696A3 (ko) * 2010-06-08 2012-02-16 Lee Sang-Kwon 오디오 데이터의 성격과 어울리는 출력 패턴 자동 생성 방법 및 출력 패턴 자동 생성 장치

Similar Documents

Publication Publication Date Title
CN108874144B (zh) 使用映射的声音-触觉效应转换系统
KR100842733B1 (ko) 터치스크린을 구비한 멀티미디어 재생장치의 사용자인터페이스 방법
JP5036797B2 (ja) 発音処理装置、発音処理方法、及び発音処理プログラム
RU2015109613A (ru) Система и инструментальные средства для усовершенствованной авторской разработки и представления трехмерных аудиоданных
CN104484895B (zh) 一种数据显示方法及装置
JP2017138737A (ja) 入力装置、表示装置および入力装置の制御方法
WO2016143907A1 (ja) 楽曲再生システム、データ出力装置、及び楽曲再生方法
US20130163794A1 (en) Dynamic control of audio on a mobile device with respect to orientation of the mobile device
JP6027314B2 (ja) 音響装置、パラメータ変更方法及びプログラム
KR20080093185A (ko) 이동통신단말기의 동적 커서 표시방법 및 그이동통신단말기
KR100929856B1 (ko) 오디오 파일의 재생이 가능한 컴퓨팅 장치 및 컴퓨팅 장치의 출력 장치 제어 방법
JP5703807B2 (ja) 信号処理装置
CN103559875A (zh) 音准抖动修正方法、装置、系统及音视频设备和移动终端
US10347004B2 (en) Musical sonification of three dimensional data
JP4513578B2 (ja) 音響再生装置、音響再生方法、プログラム、及びテレビジョン装置
JP5440395B2 (ja) 表示装置
JP6330325B2 (ja) ユーザインタフェース装置及び音響制御装置
JP5569543B2 (ja) ギターコード表示装置及びプログラム
JP2023133721A (ja) 情報処理装置、及び情報処理方法
JP5875219B2 (ja) ビデオゲーム処理装置、およびビデオゲーム処理プログラム
JP2018164543A5 (ko)
JP6100874B1 (ja) プログラム、コンピュータ装置、及び、プログラム実行方法
JP6028489B2 (ja) 動画再生装置、動画再生方法、及びプログラム
JP2012164225A (ja) ユーザーインターフェイス装置
JP2017215695A (ja) 表示方法、プログラム、および記録媒体

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee