KR100931843B1 - 멀티미디어 프로세서 칩 및 오디오 신호 처리 방법 - Google Patents

멀티미디어 프로세서 칩 및 오디오 신호 처리 방법 Download PDF

Info

Publication number
KR100931843B1
KR100931843B1 KR1020080008836A KR20080008836A KR100931843B1 KR 100931843 B1 KR100931843 B1 KR 100931843B1 KR 1020080008836 A KR1020080008836 A KR 1020080008836A KR 20080008836 A KR20080008836 A KR 20080008836A KR 100931843 B1 KR100931843 B1 KR 100931843B1
Authority
KR
South Korea
Prior art keywords
audio
audio signal
output buffer
input
communication unit
Prior art date
Application number
KR1020080008836A
Other languages
English (en)
Other versions
KR20090082951A (ko
Inventor
정종식
정윤형
Original Assignee
엠텍비젼 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엠텍비젼 주식회사 filed Critical 엠텍비젼 주식회사
Priority to KR1020080008836A priority Critical patent/KR100931843B1/ko
Priority to US12/361,082 priority patent/US20090196438A1/en
Publication of KR20090082951A publication Critical patent/KR20090082951A/ko
Application granted granted Critical
Publication of KR100931843B1 publication Critical patent/KR100931843B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/036—Insert-editing
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/568—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities audio processing specific to telephonic conferencing, e.g. spatial distribution, mixing of participants

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Telephone Function (AREA)

Abstract

멀티미디어 프로세서 칩 및 오디오 신호 처리 방법이 개시된다. 본 발명에 따른 멀티미디어 프로세서 칩은, 디코딩된 제1 오디오 신호를 입력받아 제1 샘플 레이트로 변환하여 제1 출력 버퍼로 입력하는 제1 리샘플러; 디코딩된 제2 오디오 신호를 입력받아 제1 샘플 레이트로 변환하여 제2 출력 버퍼로 입력하는 제2 리샘플러; 및 상기 제1 출력 버퍼 및 상기 제2 출력 버퍼로부터 입력되는 복수의 오디오 신호를 믹싱하여 통신부를 통해 오디오 변환부로 출력하는 믹서를 포함할 수 있다. 본 발명에 의하여, 멀티미디어 프로세서 코어의 처리 부하를 감소시켜 저전력 구동이 가능하며, 다양한 오디오 효과의 구현이 용이하다.
Figure R1020080008836
오디오, 샘플 레이트, 멀티미디어

Description

멀티미디어 프로세서 칩 및 오디오 신호 처리 방법{Multimedia processor chip and method for processing audio signals}
본 발명은 오디오 신호 처리에 관한 것으로, 특히 멀티미디어 프로세서 칩 및 오디오 신호 처리 방법에 관한 것이다.
알려진 바와 같이, 휴대형(핸드헬드) 디지털 오디오 시스템들이 매우 대중적으로 되어 가고 있다. 이러한 시스템들에는 MP3 파일들, WMA 파일들 등을 저장한 후 이를 재생하는 디지털 오디오 플레이어/리코더들이 포함된다. 디지털 오디오 플레이어/리코더들은 디지털 녹음장치 및 파일 전송 장치로도 이용될 수 있으며, 주파수 변조(FM) 라디오 수신기, DMB 방송 수신기 등을 포함하기도 한다.
상술한 휴대형 디지털 오디오 시스템에는 오디오 플레이어/리코더로서 전용되도록 하기 위한 MP3 플레이어 등의 전자기기뿐 아니라. 오디오 플레이어/리코더로서의 기능을 부가 기능으로 구비한 이동통신 단말기, 휴대형 동영상 플레이어/리코더 등이 포함될 수 있다.
종래의 휴대형 디지털 오디오 시스템에 포함되는 멀티미디어 프로세서 칩은 1개의 오디오 인터페이스 포트(Audio interface port)를 구비하고, 오디오 인터페이스 포트를 통해 오디오 변환 칩과 연동하여 동작한다. 오디오 변환 칩은 멀티미디어 프로세서 칩으로부터 입력되는 오디오 신호를 아날로그 신호로 변환하여 스피커를 통해 출력되도록 하고, 마이크로부터 입력되는 오디오 신호를 디지털 신호로 변환하여 멀티미디어 프로세서 칩으로 입력한다.
그러나, 종래의 휴대형 디지털 오디오 시스템은 1개의 오디오 인터페이스 포트를 구비하고 있어, 2개 이상의 오디오 신호들을 혼합(mix)하거나, 오디오 신호를 출력하면서 동시에 녹음을 수행하는 등의 경우에 많은 불편함이 야기되었다.
아울러, 멀티미디어 프로세서 칩에 구비된 멀티미디어 프로세서 코어(CPU)가 많은 일을 수행하여야 하므로 저전력 동작의 구현이 어려운 문제점도 있었다.
상술한 문제점을 해결하기 위하여, 본 발명은 멀티미디어 프로세서 코어(CPU)의 처리 부하를 감소시킴으로써 멀티미디어 프로세서 코어의 동작 클럭(clock)을 감소시킬 수 있어 저전력 구동이 가능한 멀티미디어 프로세서 칩 및 오디오 신호 처리 방법을 제공하기 위한 것이다.
본 발명은 샘플 레이트(Sample rate)가 상이한 복수의 오디오 신호들을 용 이하게 혼합할 수 있어 다양한 오디오 효과(audio effect) 구현이 가능한 멀티미디어 프로세서 칩 및 오디오 신호 처리 방법을 제공하기 위한 것이다.
본 발명의 일 실시예에 따른 멀티미디어 프로세서 칩은, 디코딩된 제1 오디오 신호를 입력받아 제1 샘플 레이트로 변환하여 제1 출력 버퍼로 입력하는 제1 리샘플러; 디코딩된 제2 오디오 신호를 입력받아 제1 샘플 레이트로 변환하여 제2 출력 버퍼로 입력하는 제2 리샘플러; 및 상기 제1 출력 버퍼 및 상기 제2 출력 버퍼로부터 입력되는 복수의 오디오 신호를 믹싱하여 통신부를 통해 오디오 변환부로 출력하는 믹서를 포함할 수 있다.
상기 멀티미디어 프로세서 칩은, 상기 통신부를 통해 상기 오디오 변환부로부터 입력되는 오디오 신호를 일시적으로 저장하는 입력 버퍼; 및 상기 입력 버퍼로부터 출력되는 오디오 신호를 제2 샘플 레이트로 변환하여 출력하는 제3 리샘플러를 더 포함할 수 있다.
상기 제1 샘플 레이트와 상기 제2 샘플 레이트는 동일하거나 상이할 수 있다.
상기 믹서는 상기 제1 출력 버퍼 및 상기 제2 출력 버퍼로부터 각각 오디오 신호가 입력되면 오디오 신호의 믹싱을 개시할 수 있다.
상기 오디오 변환부는 오디오 신호를 출력하기 위한 스피커 및 오디오 신호를 입력받기 위한 마이크와 각각 결합될 수 있다.
상기 멀티미디어 프로세서 칩은, 상기 통신부와 상기 오디오 변환부는 2개의 채널을 통해 결합되고, 상기 통신부는 상기 믹서로부터 입력되는 오디오 신호를 제1 채널을 통해 상기 오디오 변환부로 출력하는 제1 통신부와 상기 오디오 변환부로부터 제2 채널을 통해 오디오 신호를 입력받는 제2 통신부를 포함할 수 있다.
본 발명의 다른 실시예에 따른 멀티미디어 프로세서 칩은, 디코딩된 오디오 신호를 입력받아 제1 샘플 레이트로 변환하여 제1 출력 버퍼로 입력하는 제1 리샘플러; 상기 제1 출력 버퍼로부터 입력되는 오디오 신호를 오디오 변환부로 출력하는 제1 통신부; 상기 오디오 변환부로부터 입력되는 오디오 신호를 입력받아 입력 버퍼로 출력하는 제2 통신부; 및 상기 입력 버퍼로부터 출력되는 오디오 신호를 제2 샘플 레이트로 변환하여 출력하는 제2 리샘플러를 포함할 수 있다. 여기서, 상기 제1 통신부 및 상기 제2 통신부는 독립된 채널로서 상기 오디오 변환부에 접속될 수 있다.
상기 멀티미디어 프로세서 칩은, 디코딩된 오디오 신호를 입력받아 제1 샘플 레이트로 변환하여 제2 출력 버퍼로 입력하는 제3 리샘플러; 및 상기 제1 출력 버퍼 및 상기 제2 출력 버퍼로부터 입력되는 복수의 오디오 신호를 믹싱하여 상기 제1 통신부로 출력하는 믹서를 더 포함할 수 있다.
상기 믹서는 상기 제1 출력 버퍼 및 상기 제2 출력 버퍼로부터 각각 오디오 신호가 입력되면 오디오 신호의 믹싱을 개시할 수 있다.
상기 제1 샘플 레이트와 상기 제2 샘플 레이트는 동일할 수 있다.
상기 오디오 변환부는 오디오 신호를 출력하기 위한 스피커 및 오디오 신호 를 입력받기 위한 마이크와 각각 결합될 수 있다.
본 발명은 멀티미디어 프로세서 코어(CPU)의 처리 부하를 감소시킴으로써 멀티미디어 프로세서 코어의 동작 클럭(clock)을 감소시킬 수 있어 저전력 구동이 가능한 효과가 있다.
본 발명은 샘플 레이트(Sample rate)가 상이한 복수의 오디오 신호들을 용이하게 혼합할 수 있어 다양한 오디오 효과(audio effect) 구현이 가능한 효과도 있다.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나 의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 본 발명의 실시예에 대해 관련 도면들을 참조하여 상세히 설명하기로 한다. 또한, 본 명세서에서는 멀티미디어 프로세서 칩이 탑재된 이동 통신 단말기를 중심으로 설명하지만, 본 발명이 이동 통신 단말기에 제한되지 않고, 멀티미디어 칩이 탑재될 수 있는 모든 디지털 처리 장치에 적용될 수 있음은 자명하다.
도 1은 일반적인 멀티미디어 프로세서 칩의 구성을 예시한 도면이고, 도 2는 종래 기술에 따른 입출력 버퍼부의 구성을 예시한 도면이다.
도 1을 참조하면, 이동 통신 단말기에 탑재되는 멀티미디어 프로세서 칩(110)은 호스트 인터페이스(120), 버퍼 메모리(122), SDRAM 컨트롤러(124), 비디오 코딩부(128), 오디오 인터페이스(130), 제어부(132), 입출력 버퍼부(140) 및 통신부(145)를 포함할 수 있다.
호스트 인터페이스(120)는 이동 통신 시스템에 탑재된 메인 프로세서 칩(도 시되지 않음)과의 통신 기능을 수행한다. 이동 통신 단말기에는 복수의 프로세서 칩이 탑재됨이 일반적이다. 이는 이동 통신 단말기가 전화 기능 및 이동 통신 단말기의 전반적인 제어를 수행하는 메인 프로세서 칩뿐 아니라 멀티미디어 데이터 재생, 네비게이션 기능 등의 부가 기능을 수행하기 위한 부가 프로세서 칩들이 더 탑재될 필요가 있기 때문이다. 여기서, 멀티미디어 프로세서 칩은 멀티미디어 데이터의 재생/출력을 위한 처리 또는 마이크를 통해 입력되는 오디오 신호를 처리하기 위한 일종의 부가 프로세서 칩일 수 있다.
버퍼 메모리(122)는 멀티미디어 프로세서 칩(110) 내에서 처리될 데이터가 임시로 저장되는 저장 공간이다.
SDRAM 컨트롤러(124)는 멀티미디어 프로세서 칩(110)에 결합된 SDRAM(126)을 제어하기 위한 구성 요소이다. SDRAM(126)은 멀티미디어 프로세서 칩(110)이 처리한 데이터를 저장하거나, 멀티미디어 프로세서 칩(110)이 처리할 데이터가 저장되는 저장 공간이다. 멀티미디어 프로세서 칩(110)에 결합되는 저장 공간이 SDRAM으로 제한되지 않음은 당업자에게 자명하다.
비디오 코딩부(128)는 표시 장치(예를 들어, 액정 화면 등)를 통해 출력될 비디오 데이터를 디코딩 처리하여 출력하거나, 입력 장치(예를 들어, 이미지 센서 등을 통해 입력된 이미지 데이터 등)를 인코딩 처리하여 SDRAM(126)에 저장되도록 하는 등의 이미지 처리를 수행하는 구성 요소이다.
오디오 인터페이스(130)는 오디오 신호를 오디오 변환부(150)로 전달하여 스피커(155)를 통해 출력되도록 하거나, 마이크(160)를 통해 입력된 오디오 신호를 오디오 변환부(150)로부터 전달받는 인터페이스 수단이다. 오디오 인터페이스(130)는 오디오 신호를 디코딩 처리하여 오디오 변환부(150)로 출력하고, 오디오 변환부(150)로부터 입력된 오디오 신호를 인코딩 처리하는 등의 오디오 처리 기능을 포함할 수 있다. 물론, 상술한 오디오 처리 기능은 제어부(132)에 의해 수행될 수도 있을 것이다.
오디오 변환부(150)는 오디오 인터페이스(130)로부터 제공받은 오디오 신호를 아날로그 신호로 변환하여 스피커(155)를 통해 출력되도록 하고, 마이크(160)로부터 입력받은 오디오 신호를 디지털 신호로 변환하여 오디오 인터페이스(130)로 전달한다.
제어부(132)는 멀티미디어 프로세서 칩(110)에 포함된 각 구성 요소가 지정된 기능을 수행할 수 있도록 직접적 또는 간접적으로 제어한다. 제어부(132)는 예를 들어, CPU 프로세서일 수 있다. 제어부(132)는 오디오 신호의 인코딩/디코딩 등의 오디오 처리 기능을 수행할 수도 있다.
입출력 버퍼부(140)는 오디오 변환부(150)로부터 입력되는 오디오 신호를 오디오 인터페이스(130)로 전달하거나, 오디오 인터페이스(130)로부터 입력되는 오디오 신호를 오디오 변환부(150)로 전달한다.
종래 기술에 따른 입출력 버퍼부(140)의 세부 구성이 도 2에 예시되어 있다.
도 2를 참조하면, 입출력 버퍼부(140)는 출력 버퍼(210), 입력 버퍼(215), 먹스(MUX, Multiplexer)(220)를 포함한다.
출력 버퍼(210)는 오디오 인터페이스(130)로부터 입력되는 오디오 신호(즉, 제어부(132) 또는 오디오 인터페이스(130)에 의해 디코딩된 오디오 신호)를 일시적으로 저장하였다가 출력하는 저장 매체이고, 입력 버퍼(215)는 오디오 변환부(150)로부터 입력되는 오디오 신호를 일시적으로 저장하였다가 출력하는 저장 매체이다. 입력 버퍼(215)에 필요한 만큼의 데이터가 축적되면, 축적된 데이터는 오디오 인터페이스(130)로 전달되고(또는 버퍼 메모리(122)에 저장되고), 오디오 인터페이스(130)의 통지에 의해 이를 인식한 제어부(132)는 필요한 동작을 수행하게 된다. 오디오 인터페이스(130)가 오디오 신호 처리 기능을 구비한 경우라면 필요한 동작은 오디오 인터페이스(130)에 의해 수행될 수도 있다.
먹스(220)는 오디오 인터페이스(130)의 제어에 의해 데이터 전달 경로를 형성한다. 예를 들어, 출력 버퍼(210)로부터 오디오 신호가 입력되고 또한 오디오 변환부(150)로부터도 오디오 신호가 입력되는 경우, 오디오 인터페이스(130)의 제어에 의해 하나의 오디오 신호만 수신단으로 전달되도록 한다. 제어부(132)는 이동 통신 단말기의 현재 처리 동작이 무엇인지를 알 수 있기 때문에 먹스(220)가 어떤 오디오 신호를 수신단으로 전달해야 하는지 알 수 있으며, 이를 참조하여 오디오 인터페이스(130)가 먹스를 제어하도록 한다. 예를 들어, 이동 통신 단말기가 현재 MP3 데이터 재생 기능을 수행하는 도중이라면 먹스(220)는 출력 버퍼(210)에 기록된 데이터를 오디오 변환부(150)로 전달하도록 제어될 것이다.
통신부(145)는 1개의 포트를 통해 오디오 변환부(150)로 직렬(serial) 방식으로 오디오 신호를 송수신한다.
상술한 바와 같이, 종래 기술에 따른 멀티미디어 프로세서 칩은 2개 이상의 오디오 신호를 혼합(mix)할 수 없고, 오디오 변환부(150)와 하나의 포트만으로 결합되어 있어 오디오 신호의 출력과 녹음을 동시에 수행할 수 없는 구조적 제한을 가지고 있다.
도 3은 본 발명의 일 실시예에 따른 입출력 버퍼부의 구성을 나타낸 도면이다. 입출력 버퍼부(140)의 내부 구성을 제외한 멀티미디어 프로세서 칩(110)은 앞서 설명한 도 1과 동일하게 구현될 수 있으므로 이에 대한 설명은 생략한다.
도 3을 참조하면, 입출력 버퍼부(140)는 제1 리샘플러(Re-sampler, 310), 제2 리샘플러(315), 제3 리샘플러(320), 제1 출력 버퍼(330), 제2 출력 버퍼(335), 입력 버퍼(340) 및 믹서(mixer, 345)를 포함할 수 있다.
오디오 신호는 기본적으로 아날로그 신호를 디지털 신호로 변환할 때 정해진 샘플링 주파수로 샘플링을 하게 되어 있어 원래의 샘플링 주파수가 아닌 다른 주파수로 재생을 하게 되면, 원음과 다르게 들리고 속도 또한 다르게 재생이 된다. 즉, 샘플 레이트(sample rate)는 아날로그 신호를 디지털 신호로 변환할 때 1초 동안 나타낼 수 있는 음의 샘플링 비율 단위이며, 수치가 높을 수록 원음에 가깝다.
제1 리샘플러(310)와 제2 리샘플러(315)는 혼합하고자 하는 두 개의 오디오 신호의 샘플 레이트(sample rate)를 동일하게 맞추도록 하는 기능을 수행한다.
제1 출력 버퍼(330)는 제1 리샘플러(310)에 의해 리샘플링된 데이터를 입력받아 일시적으로 축적한 후 믹서(345)로 출력한다. 제2 출력 버퍼(335)는 제2 리샘 플러(315)에 의해 리샘플링된 데이터를 입력받아 일시적으로 축적한 후 믹서(345)로 출력한다.
물론, 제1 리샘플러(310)와 제1 출력 버퍼(330), 제2 리샘플러(315)와 제2 출력 버퍼(335)가 모든 경우에 각각 동작되는 것은 아닐 수 있다. 즉, 둘 이상의 오디오 신호가 믹싱되어 출력될 필요가 없다면 제1 리샘플러(310)와 제1 출력 버퍼(330), 제2 리샘플러(315)와 제2 출력 버퍼(335) 중 하나의 출력 경로만이 이용될 수도 있다. 또한, 셋 이상의 오디오 신호가 믹싱될 필요가 있는 경우라면 제3 리샘플러(도시되지 않음)와 제3 출력 버퍼(도시되지 않음) 등이 더 부가될 수도 있음은 자명하다.
이하, 멀티미디어 프로세서 칩(110)이 둘 이상의 오디오 신호를 통신부(145)로 출력하는 과정을 예를 들어 간략히 설명한다. 예를 들어, 제어부(132)가 샘플 레이트 64를 가지는 오디오 신호를 디코딩하여 버퍼 메모리(122)에 저장하고, 또한 32fs에 해당하는 오디오 신호도 디코딩하여 버퍼 메모리(122)에 저장한다. 이후 제어부(132)는 오디오 인터페이스(130)를 제어하여, 오디오 인터페이스(130)가 각 오디오 신호(즉, 오디오 데이터)를 독출하여 각각 제1 리샘플러(310)와 제2 리샘플러(315)에 전달하여 모두 64fs로 리샘플링되도록 하고, 리샘플링된 오디오 신호들이 각각 상응하는 출력 버퍼로 입력되어 믹서(345)로 출력되며, 믹서(345)가 입력된 각 오디오 신호를 믹싱하여 통신부(145)로 출력한다.
즉, 제어부(132)는 두 개의 오디오 신호를 시간차를 두어 각각 디코딩 한 후, 디코딩된 오디오 신호들이 각 출력 버퍼에 축적되도록 한 후, 출력 버퍼에서 축적된 오디오 데이터를 동일한 시간에 각각 출력되도록 할 수 있다.
이를 위해 제어부(132) 또는 오디오 인터페이스(130)가 각 출력 버퍼에 출력할 데이터들이 모두 축적되었는지를 인식한 후, 각 출력 버퍼에 데이터 출력을 지시하거나 믹서(345)로 데이터 독출을 개시하도록 지시할 수 있을 것이다. 또는, 각 출력 버퍼가 데이터 축적이 완료되면 데이터를 출력하도록 지정되었다면, 오디오 신호의 믹싱 처리가 필요함을 감지(예를 들어, 제어부(132) 또는 오디오 인터페이스(130)로부터 전송된 제어 신호에 의해 감지될 수 있음)한 믹서가 모든 출력 버퍼로부터 데이터가 입력되는 시점에서 믹싱 처리를 개시할 수도 있을 것이다.
이때, 각 출력 버퍼에 축적된 데이터는 선입선출(FIFO) 방식으로 출력될 수 있으며, 각 출력 버퍼에서 출력되는 데이터 양은 매 시간당 동일하게 제한될 수 있을 것이다.
입력 버퍼(340)는 통신부(145)를 통해 입력되는 오디오 신호를 입력받아 일시적으로 축적한 후 제3 리샘플러(320)로 출력한다.
제3 리샘플러(320)는 입력된 오디오 신호를 지정된 샘플 레이트(sample rate)로 변환하는 기능을 수행한다. 여기서, 제1 리샘플러(310), 제2 리샘플러(315) 및 제3 리샘플러(320)에 지정된 샘플 레이트는 각각 일치하거나 필요에 따라 상이하도록 지정될 수 있다.
예를 들어, 마이크(160)로부터 입력되는 오디오 신호를 제어부(132)에 의해 디코딩된 오디오 신호와 혼합하여 녹음(recording) 처리하는 경우라면 각 샘플 레이트는 동일하게 지정될 수도 있을 것이다.
또한, 마이크(160)로부터 입력되는 오디오 신호를 제어부(132)에 의해 디코딩된 오디오 신호와 혼합하여 녹음할 때, 제어부(132)에 의해 디코딩된 오디오 신호의 샘플 레이트를 달리 적용함으로써 동일한 음원을 배경 음악으로 활용할 때 다양한 효과가 구현되도록 할 수도 있을 것이다.
상술한 바와 같이, 믹서(345)에 의해 믹싱되는 소스 데이터들로서의 둘 이상의 오디오 신호들은 이동통신 단말기에 미리 저장된 데이터들일 수도 있고, 마이크(160)로부터 실시간 입력되는 오디오 신호와 미리 저장된 데이터가 함께 이용될 수도 있을 것이다. 후자의 경우 실시간 입력되어 입력 버퍼를 통해 출력되는 오디오 신호가 다시 출력 버퍼를 통해 믹서(345)로 제공되도록 할 수 있을 것이다.
마찬가지로, 입력 버퍼가 둘 이상으로 구비되는 경우 상이한 소스 오디오 데이터들(예를 들어, 사용자 음성과 음향 기기의 출력 등)만을 이용하여 오디오 믹싱이 수행될 수도 있고, 실시간 입력되는 다양한 소스 오디오 신호들과 미리 저장된 데이터들이 함께 이용되어 오디오 믹싱이 수행될 수도 있다.
도 4는 본 발명의 다른 실시예에 따른 멀티미디어 프로세서 칩의 구성을 예시한 도면이고, 도 5는 본 발명의 다른 실시예에 따른 입출력 버퍼 및 통신부의 구성을 예시한 도면이며, 도 6은 본 발명의 또 다른 실시예에 따른 입출력 버퍼 및 통신부의 구성을 예시한 도면이다.
도 4를 참조하면, 이동 통신 단말기에 탑재되는 멀티미디어 프로세서 칩(110)은 호스트 인터페이스(120), 버퍼 메모리(122), SDRAM 컨트롤러(124), 비디 오 코딩부(128), 오디오 인터페이스(130), 제어부(132), 입출력 버퍼 및 통신부(410)를 포함할 수 있다.
도 4에 도시된 대부분의 구성요소에 대한 설명은 앞서 도 1을 참조하여 설명한 바와 동일하므로 이에 대한 설명을 생략하기로 하고, 입출력 버퍼 및 통신부(410)에 대해서만 도 5 및 도 6을 참조하여 설명하기로 한다.
먼저, 도 5를 참조하면, 입출력 버퍼 및 통신부(410)는 제1 리샘플러(510), 제2 리샘플러(515), 출력 버퍼(520), 입력 버퍼(525), 제1 통신부(530), 제2 통신부(535)를 포함한다.
제1 리샘플러(510)는 오디오 변환부(150)로 출력될 오디오 신호를 지정된 샘플 레이트로 변환하여 출력한다. 제1 리샘플러(510)에 의해 변환된 오디오 신호는 출력 버퍼(520)에 일시적으로 저장된 후 제1 통신부(530)를 통해 오디오 변환부(150)로 입력된다. 제1 통신부(530)는 직렬 통신 방식으로 오디오 신호를 오디오 변환부(150)로 전달한다.
입력 버퍼(525)는 제2 통신부(535)를 통해 오디오 변환부(150)로부터 입력되는 오디오 신호를 일시적으로 저장한 후 제2 리샘플러(515)로 출력한다. 제2 리샘플러(515)는 입력 버퍼(525)로부터 입력되는 오디오 신호를 미리 지정된 샘플 레이트로 변환하여 오디오 인터페이스(130)로 입력한다.
상술한 바와 같이 입출력 버퍼 및 통신부(410)와 오디오 변환부(150)는 입력 라인과 출력 라인이 독립적으로 구현된 2개의 채널에 의해 결합된다. 이를 통해 오디오 변환부(150)가 입력과 출력에 대한 샘플 레이트를 별도로 가지는 경우 최대 의 효과를 낼 수 있게 된다. 즉, 샘플 레이트 64fs를 가지는 오디오 신호를 출력함과 동시에 샘플 레이트 32fs를 가지는 오디오 신호를 입력으로 받을 수 있기 때문에 직렬 포트(serial port)가 하나인 경우보다 어플리케이션에서의 응용이 용이해질 수 있다.
다음으로, 도 6을 참조하면 입출력 버퍼 및 통신부(410)는 제1 리샘플러(310), 제2 리샘플러(315), 제3 리샘플러(320), 제1 출력 버퍼(330), 제2 출력 버퍼(335), 입력 버퍼(340), 제1 통신부(530), 제2 통신부(535)를 포함한다.
즉, 도 6의 실시예는 앞서 설명한 도 4의 실시예와 같이 복수의 리샘플러, 복수의 출력 버퍼 및 믹서를 구비하여 복수의 오디오 신호에 대한 믹싱을 용이하게 할 수 있을 뿐 아니라 믹싱을 위한 오디오 신호들의 샘플 레이트 변환도 용이한 장점을 가진다.
또한, 입출력 버퍼 및 통신부(410)와 오디오 변환부(150)는 입력 라인과 출력 라인이 독립적으로 구현된 2개의 채널에 의해 결합됨으로써 샘플 레이트를 달리하는 오디오 신호들 각각에 대한 입출력이 용이한 장점을 가진다.
한편, 상술한 오디오 신호 처리 방법은 컴퓨터 프로그램으로 작성 가능하다. 상기 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 상기 프로그램은 컴퓨터가 읽을 수 있는 정보저장매체(computer readable media)에 저장되고, 컴퓨터에 의하여 읽혀지고 실행됨으로써 오디오 신호 처리 방법을 구현한다. 상기 정보저장매체는 자기 기록매체, 광 기록매체, 및 캐리어 웨이브 매체를 포함한다.
상기에서는 본 발명의 실시예를 참조하여 설명하였지만, 해당 기술 분야에서 통상의 지식을 가진 자라면 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
도 1은 일반적인 멀티미디어 프로세서 칩의 구성을 예시한 도면.
도 2는 종래 기술에 따른 입출력 버퍼부의 구성을 예시한 도면.
도 3은 본 발명의 일 실시예에 따른 입출력 버퍼부의 구성을 나타낸 도면.
도 4는 본 발명의 다른 실시예에 따른 멀티미디어 프로세서 칩의 구성을 예시한 도면.
도 5는 본 발명의 다른 실시예에 따른 입출력 버퍼 및 통신부의 구성을 예시한 도면.
도 6은 본 발명의 또 다른 실시예에 따른 입출력 버퍼 및 통신부의 구성을 예시한 도면.

Claims (7)

  1. 멀티미디어 프로세서 칩에 있어서,
    디코딩된 제1 오디오 신호를 입력받아 제1 샘플 레이트로 변환하여 제1 출력 버퍼로 입력하는 제1 리샘플러;
    디코딩된 제2 오디오 신호를 입력받아 제1 샘플 레이트로 변환하여 제2 출력 버퍼로 입력하는 제2 리샘플러;
    상기 제1 출력 버퍼 및 상기 제2 출력 버퍼로부터 입력되는 복수의 오디오 신호를 믹싱하여 통신부를 통해 오디오 변환부로 출력하는 믹서;
    상기 통신부를 통해 상기 오디오 변환부로부터 입력되는 오디오 신호를 일시적으로 저장하는 입력 버퍼; 및
    상기 입력 버퍼로부터 출력되는 오디오 신호를 제2 샘플 레이트로 변환하여 출력하는 제3 리샘플러를 더 포함하는 멀티미디어 프로세서 칩.
  2. 삭제
  3. 제1항에 있어서,
    상기 제1 샘플 레이트와 상기 제2 샘플 레이트는 동일한 것을 특징으로 하는 멀티미디어 프로세서 칩.
  4. 제1항에 있어서,
    상기 통신부와 상기 오디오 변환부는 2개의 채널을 통해 결합되고,
    상기 통신부는,
    상기 믹서로부터 입력되는 오디오 신호를 제1 채널을 통해 상기 오디오 변환부로 출력하는 제1 통신부; 및
    상기 오디오 변환부로부터 제2 채널을 통해 오디오 신호를 입력받는 제2 통신부를 포함하는 멀티미디어 프로세서 칩.
  5. 멀티미디어 프로세서 칩에 있어서,
    디코딩된 오디오 신호를 입력받아 제1 샘플 레이트로 변환하여 제1 출력 버퍼로 입력하는 제1 리샘플러;
    상기 제1 출력 버퍼로부터 입력되는 오디오 신호를 오디오 변환부로 출력하는 제1 통신부;
    상기 오디오 변환부로부터 입력되는 오디오 신호를 입력받아 입력 버퍼로 출력하는 제2 통신부;
    상기 입력 버퍼로부터 출력되는 오디오 신호를 제2 샘플 레이트로 변환하여 출력하는 제2 리샘플러; 및
    디코딩된 오디오 신호를 입력받아 제1 샘플 레이트로 변환하여 제2 출력 버퍼로 입력하는 제3 리샘플러를 포함하되,
    상기 제1 출력 버퍼 및 상기 제2 출력 버퍼로부터 입력되는 오디오 신호들은 믹싱되어 상기 제1 통신부로 출력되고, 상기 제1 통신부 및 상기 제2 통신부는 독립된 채널로서 상기 오디오 변환부에 접속되는 것을 특징으로 하는 멀티미디어 프로세서 칩.
  6. 삭제
  7. 제5항에 있어서,
    상기 제1 샘플 레이트와 상기 제2 샘플 레이트는 동일한 것을 특징으로 하는 멀티미디어 프로세서 칩.
KR1020080008836A 2008-01-29 2008-01-29 멀티미디어 프로세서 칩 및 오디오 신호 처리 방법 KR100931843B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080008836A KR100931843B1 (ko) 2008-01-29 2008-01-29 멀티미디어 프로세서 칩 및 오디오 신호 처리 방법
US12/361,082 US20090196438A1 (en) 2008-01-29 2009-01-28 Multimedia processor chip and method for processing audio signals

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080008836A KR100931843B1 (ko) 2008-01-29 2008-01-29 멀티미디어 프로세서 칩 및 오디오 신호 처리 방법

Publications (2)

Publication Number Publication Date
KR20090082951A KR20090082951A (ko) 2009-08-03
KR100931843B1 true KR100931843B1 (ko) 2009-12-15

Family

ID=40931709

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080008836A KR100931843B1 (ko) 2008-01-29 2008-01-29 멀티미디어 프로세서 칩 및 오디오 신호 처리 방법

Country Status (2)

Country Link
US (1) US20090196438A1 (ko)
KR (1) KR100931843B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109413492A (zh) * 2017-08-18 2019-03-01 武汉斗鱼网络科技有限公司 一种直播过程中音频数据混响处理方法及系统
WO2021162254A1 (ko) * 2020-02-13 2021-08-19 삼성전자주식회사 오디오 장치 및 그 제어방법

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8605564B2 (en) * 2011-04-28 2013-12-10 Mediatek Inc. Audio mixing method and audio mixing apparatus capable of processing and/or mixing audio inputs individually
US10490459B2 (en) 2017-08-25 2019-11-26 Taiwan Semiconductor Manufacturing Co., Ltd. Method for source/drain contact formation in semiconductor devices
GB201109012D0 (en) * 2011-05-27 2011-07-13 Wolfson Microelectronics Plc Digital signal routing circuit
US20120300960A1 (en) * 2011-05-27 2012-11-29 Graeme Gordon Mackay Digital signal routing circuit
GB2524984B (en) 2014-04-08 2018-02-07 Acano (Uk) Ltd Audio mixer
US20220225048A1 (en) * 2021-01-14 2022-07-14 Onanoff Limited Company (Ltd.) System and method for managing a headphones users sound exposure

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001256730A (ja) 2000-03-10 2001-09-21 Yamaha Corp デジタルミキシング回路
KR20050095933A (ko) * 2004-03-29 2005-10-05 삼성전자주식회사 샘플링 레이트 변환 방법, 샘플링 레이트 변환 장치, 및그 장치를 포함하는 오디오 재생 시스템

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7187948B2 (en) * 2002-04-09 2007-03-06 Skullcandy, Inc. Personal portable integrator for music player and mobile phone
US7278119B2 (en) * 2002-11-29 2007-10-02 Sigmatel, Inc. Battery-optimized system-on-a-chip and applications thereof
US6946982B1 (en) * 2004-07-27 2005-09-20 Arcsoft, Inc. Multi-standard audio player
US20070150082A1 (en) * 2005-12-27 2007-06-28 Avera Technology Ltd. Method, mechanism, implementation, and system of real time listen-sing-record STAR karaoke entertainment (STAR "Sing Through And Record")
US20080165989A1 (en) * 2007-01-05 2008-07-10 Belkin International, Inc. Mixing system for portable media device
US20090024234A1 (en) * 2007-07-19 2009-01-22 Archibald Fitzgerald J Apparatus and method for coupling two independent audio streams

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001256730A (ja) 2000-03-10 2001-09-21 Yamaha Corp デジタルミキシング回路
KR20050095933A (ko) * 2004-03-29 2005-10-05 삼성전자주식회사 샘플링 레이트 변환 방법, 샘플링 레이트 변환 장치, 및그 장치를 포함하는 오디오 재생 시스템

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109413492A (zh) * 2017-08-18 2019-03-01 武汉斗鱼网络科技有限公司 一种直播过程中音频数据混响处理方法及系统
CN109413492B (zh) * 2017-08-18 2021-05-28 武汉斗鱼网络科技有限公司 一种直播过程中音频数据混响处理方法及系统
WO2021162254A1 (ko) * 2020-02-13 2021-08-19 삼성전자주식회사 오디오 장치 및 그 제어방법
KR20210103114A (ko) * 2020-02-13 2021-08-23 삼성전자주식회사 오디오 장치 및 그 제어방법
KR102660576B1 (ko) 2020-02-13 2024-04-26 삼성전자주식회사 오디오 장치 및 그 제어방법

Also Published As

Publication number Publication date
US20090196438A1 (en) 2009-08-06
KR20090082951A (ko) 2009-08-03

Similar Documents

Publication Publication Date Title
KR100931843B1 (ko) 멀티미디어 프로세서 칩 및 오디오 신호 처리 방법
KR100547820B1 (ko) 디지털 오디오 데이터 기록 및 재생이 가능한 이동무선 단말기및 그 제어방법
KR100367000B1 (ko) 멀티미디어 처리용 가속 기능 및 입출력 기능을 갖는 피씨용 멀티채널 오디오/음성 및 데이터 코덱장치
RU2008107745A (ru) Дополнительное устройство мобильного терминала для приема и воспроизведения данных dmb, и способ для этого
US20050108462A1 (en) Memory expansion pack for providing content to portable terminal
JP2005062880A (ja) テキスト表示機能を有する音声プレイヤー及び表示方法
KR101351585B1 (ko) Ａ／ｖ 시스템과 휴대형 기기 간의 인터페이스를 위한 장치및 방법
CN115248657A (zh) 音频处理方法、装置及计算机可读存储介质
US20190296785A1 (en) Radio device
KR100575818B1 (ko) 카 오디오 시스템의 디지털 오디오 데이터 재생 장치
WO2005104125A1 (ja) 記録再生装置、同時記録再生制御方法、および同時記録再生制御プログラム
TW578095B (en) The wireless broadcast device
US20080282010A1 (en) Apparatus for digital/analog audio storage and playback
KR100339100B1 (ko) 복합 이동 전화 단말기 장치
KR20070019082A (ko) 휴대용 다기능 디지털 개인영상녹화장치
JP2000276195A (ja) 会議録音システムおよび装置
CN101282125A (zh) 一种具有fm录音功能的移动终端及其录音方法
JP2008140434A (ja) ディジタルオーディオ装置及びそのサンプルレート切り替え方法
US20030058560A1 (en) Apparatus and method for processing content information capable of time-divisionally carrying out recording and reproducing operations
KR100600353B1 (ko) 카 오디오 시스템
US20070265998A1 (en) Information Processing Device
CN100448500C (zh) 使用无线mp3播放器的游戏系统
KR20050122259A (ko) 정보처리장치 및 정보처리방법
KR101162214B1 (ko) 방송 수신 단말기 및 그 단말기의 기능 표출 방법
CN115249490A (zh) 多轨音频处理方法、装置及计算机存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121011

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20131127

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20151127

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20171128

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20181126

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20191125

Year of fee payment: 11