KR101636592B1 - 양이간 시간 지연 복원 시스템 및 방법 - Google Patents

양이간 시간 지연 복원 시스템 및 방법 Download PDF

Info

Publication number
KR101636592B1
KR101636592B1 KR1020117007537A KR20117007537A KR101636592B1 KR 101636592 B1 KR101636592 B1 KR 101636592B1 KR 1020117007537 A KR1020117007537 A KR 1020117007537A KR 20117007537 A KR20117007537 A KR 20117007537A KR 101636592 B1 KR101636592 B1 KR 101636592B1
Authority
KR
South Korea
Prior art keywords
audio data
channel audio
delay
correction factor
inter
Prior art date
Application number
KR1020117007537A
Other languages
English (en)
Other versions
KR20110063807A (ko
Inventor
제임스 디 존스톤
Original Assignee
디티에스, 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 디티에스, 인코포레이티드 filed Critical 디티에스, 인코포레이티드
Publication of KR20110063807A publication Critical patent/KR20110063807A/ko
Application granted granted Critical
Publication of KR101636592B1 publication Critical patent/KR101636592B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H04S1/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/07—Synergistic effects of band splitting and sub-band processing

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Stereophonic System (AREA)

Abstract

오디오 데이터의 복수의 채널들을 수신하고, 양이간 시간 지연 보정 인자를 생성하기 위한 양이간 시간 지연 보정 인자 유닛을 포함한 오디오 데이터를 처리하기 위한 장치가 제공된다. 양이간 시간 지연 보정 인자 삽입 유닛은 양이간 시간 지연 보정 인자의 함수로서 오디오 데이터의 복수의 채널들을 수정한다.

Description

양이간 시간 지연 복원 시스템 및 방법{INTERAURAL TIME DELAY RESTORATION SYSTEM AND METHOD}
본 발명은 오디오 데이터를 처리하는 시스템에 관한 것이며, 보다 구체적으로는 스테레오 또는 이와 다른 멀티 채널 오디오 데이터에서의 양이간(interaural) 시간 지연을 복원시키기 위한 시스템 및 방법에 관한 것이다.
오디오 제작물을 생성하기 위해 오디오 데이터를 처리할 때, 패닝 전위차계(panning potentiometer), 또는 패닝 전위차계의 기능을 시뮬레이팅하는 다른 시스템 또는 디바이스를 활용하는 혼합기를 이용하여 이러한 오디오 데이터를 혼합하는 것은 흔한 일이다. 청취자에 대한 극좌 위치와 극우 위치간의 공간적 포지션을 시뮬레이팅하는 것과 같이, 좌우측 스테레오 출력과 같은 두 개 이상의 출력 채널들에 단일 입력 채널을 할당하는데 이러한 패닝 전위차계가 이용될 수 있다.
하지만, 이와 같은 패닝 전위차계는 일반적으로 라이브 공연으로부터 통상 제공될 양이간 시간 차이를 추가하지 않는다.
본 발명에 따르면, 오디오 데이터의 채널들의 상대적 진폭(magnitude)들에 기초하여, 추정된 양이간 지연에 대응하는 오디오 데이터의 두 개 이상의 채널들간의 시간 지연을 추가하는 양이간 시간 지연 복원을 위한 시스템 및 방법이 제공된다.
본 발명의 예시적인 실시예에 따르면, 오디오 데이터를 처리하는 장치가 제공된다. 본 장치는 오디오 데이터의 복수의 채널들을 수신하고 양이간 시간 지연 보정 인자를 생성하기 위한 양이간 시간 지연 보정 인자 유닛을 포함하며, 여기서 오디오 데이터의 복수의 채널들은 연관된 양이간 시간 지연이 없는 패닝 데이터를 포함한다. 양이간 시간 지연 보정 인자 삽입 유닛은 오디오 퀄리티를 향상시키기 위해 추정된 양이간 시간 지연을 추가하는 것과 같이, 양이간 시간 지연 보정 인자의 함수로서 오디오 데이터의 복수의 채널들을 수정한다.
오디오 데이터의 채널들의 상대적 진폭(magnitude)들에 기초하여, 추정된 양이간 지연에 대응하는 오디오 데이터의 두 개 이상의 채널들간의 시간 지연을 추가하는 양이간 시간지연 복원을 위한 시스템 및 방법이 제공될 수 있다.
본 발명분야의 당업자는 도면과 함께 아래의 상세한 설명을 읽음으로써 본 발명의 다른 중요한 양태들과 함께 본 발명의 장점들 및 우수한 특징들을 한층 이해할 것이다.
도 1은 본 발명의 예시적인 실시예에 따른 양이간 시간 보정을 위한 시스템의 도면이다.
도 2는 본 발명의 예시적인 실시예에 따라, 특정 주파수 대역들에 대한 좌우측 채널 오디오 데이터의 피크들의 차이들을 검출하기 위한 시스템의 도면이다.
도 3은 본 발명의 예시적인 실시예에 따른 양이간 시간 및 레벨 차이들을 평활화하기 위한 시스템의 도면이다.
도 4는 본 발명의 예시적인 실시예에 따른 양이간 시간 또는 레벨 차이를 도입시키기 위해 오디오 데이터를 처리하기 위한 방법의 도면이다.
도 5는 본 발명의 예시적인 실시예에 따른 양이간 시간 지연 보정을 위한 시스템의 도면이다.
도 6은 본 발명의 예시적인 실시예에 따른 패닝 제어 세팅과 연관된 양이간 시간 지연을 제어하기 위한 방법의 흐름도이다.
이하의 상세한 설명에서는, 명세서 및 도면에 걸쳐서 동일한 부분들은 각각 동일한 참조번호들로 표시된다. 도면내의 도형들은 실척도가 아닐 수 있고 어떠한 컴포넌트들은 명료함과 간결함을 도모하기 위해 대략화 또는 개략화 형태로 도시될 수 있고 상업적 명칭에 의해 식별될 수 있다.
도 1은 본 발명의 예시적인 실시예에 따른 양이간 시간 보정을 위한 시스템(100)의 도면이다. 시스템(100)은 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 적절한 조합으로 구현될 수 있고, 이것은 디지털 신호 프로세싱 플랫폼상에서 동작하는 하나 이상의 소프트웨어 시스템들일 수 있다. 본 명세서에서 이용될 때, "하드웨어"는 이산적 컴포넌트들, 집적 회로, 응용 특정 집적 회로, 필드 프래그램가능 게이트 어레이, 또는 기타의 적절한 하드웨어의 조합을 포함할 수 있다. 본 명세서에서 이용될 때, "소프트웨어"는 두 개 이상의 소프트웨어 애플리케이션들 또는 두 개 이상의 프로세서들, 또는 기타의 적절한 소프트웨어 구조들에서 동작하는 하나 이상의 오브젝트들, 에이전트들, 쓰레드들, 코드 라인들, 서브루틴들, 별개의 소프트 애플리케이션들, 두 개 이상의 코드 라인들 또는 기타 적절한 소프트웨어 구조들을 포함할 수 있다. 하나의 예시적인 실시예에서, 소프트웨어는 운영 시스템과 같은, 범용 소프트웨어 애플리케이션에서 동작하는 하나 이상의 코드 라인들 또는 기타의 적절한 소프트웨어 구조들, 및 특정 목적용 소프트웨어 애플리케이션에서 동작하는 하나 이상의 코드 라인들 또는 기타의 적절한 소프트웨어 구조들을 포함할 수 있다.
시스템(100)은 좌우측 채널 오디오 시간 신호를 각각 수신하는 로우 지연 필터 뱅크들(102, 104)을 포함한다. 하나의 예시적인 실시예에서, 로우 지연 필터 뱅크들(102, 104)은 샘플링 주파수로 오디오 데이터의 일련의 샘플들을 수신할 수 있고, 미리결정된 갯수의 샘플들에 기초하여 샘플링된 오디오 데이터를 처리할 수 있다. 로우 지연 필터 뱅크들(102, 104)은 복수의 주파수 대역들에 대한 시구간 동안의 피크 진폭들간의 시간 지연을 결정하는데 이용된다. 하나의 예시적인 실시예에서, 주파수 대역들의 갯수는 로우 지연 필터 뱅크들(102, 104)로부터의 출력들의 총 갯수가 입력 샘플 당 바크(bark)들 또는 등직사각형 대역폭(equivalent rectangular bandwidth; ERB)들의 갯수와 동일하도록, 바크들의 갯수, ERB들의 갯수, 또는 오디오 데이터의 다른 적절한 심리음향 대역들의 갯수과 관련이 있을 수 있다. 마찬가지로, 오디오 인공물의 생성 가능성을 감소시키기 위해, 각각의 주파수 대역의 다수의 대응 서브대역들 중의 하나의 서브대역마다의 필터들을 갖는 다수의 필터들을 이용하는 것(이에 따라 각각의 연관된 대역에 대한 복수의 서브대역들을 생성함), 또는 다른 적절한 방법으로, 오버 샘플링이 이용될 수 있다.
채널 지연 검출기(106)는 로우 지연 필터 뱅크들(102, 104)로부터 입력을 수신하고, 복수의 주파수 대역들 각각에 대한 차이 보정 인자를 결정한다. 하나의 예시적인 실시예에서, 패닝이 이용되었지만, 연관된 시간 지연을 병합하고 있지 않는 신호내로 양이간 시간 지연을 삽입하기 위해, 채널 지연 검출기(106)는 좌우측 채널간의 시간 차이를 생성하기 위해 주파주 영역 신호들에 추가될 위상 차이의 양을 생성할 수 있다. 하나의 예시적인 실시예에서, 두 개 보다 많은 채널들이 제공되는 경우를 포함하여, 스테레오 데이터에 대한 극좌채널 및 극우채널에 대한 중간의 뚜렷한 공간적 위치를 입력 채널이 갖도록 하기 위해 패닝 전위차계를 이용하거나, 또는 다른 적절한 방식을 통해 오디오 데이터는 혼합될 수 있다. 이와 같은 패닝은 공간적 위치, 모션 또는 기타 효과를 시뮬레이팅하는데 이용될 수 있지만, 라이브 오디오 데이터와 연관된 양이간 시간 지연은 이러한 패닝에 의해 재생성되지 않는다. 예를 들어, 음원이 청취자의 좌측에 제공될 때에는, 음원으로부터의 오디오 신호가 청취자의 좌측 귀에서 수신된 시간과 오디오 신호가 청취자의 우측 귀에서 수신된 시간 사이의 시간 지연이 존재할 것이다. 마찬가지로, 음원이 청취자의 좌측으로부터 청취자의 우측으로 이동할 때에는, 연관된 시간 지연은 음원이 청취자 바로 앞에 있을 때에는 제로로 감소할 것이며 그 후 우측 귀쪽으로 갈수록 비례하여 증가할 것이다. 공간적 위치 또는 모션을 시뮬레이팅하기 위해 단순한 패닝 전위차계를 이용하는 것은 이러한 연관된 시간 지연을 생성하지 못하는데, 이러한 시간 지연은 모델링되어 채널 지연 검출기(106)를 이용하여 스테레오 또는 다른 멀티 채널 오디오 신호내에 삽입될 수 있다.
마찬가지로, 채널 지연 검출기(106)는 또한, 좌우측 채널간에 시간 지연은 존재하지만 연관된 진폭 차이는 존재하지 않는 경우, 양이간 레벨 차이를 보정하는데 이용될 수 있다. 예를 들어, 오디오 처리는 패닝된 오디오 신호와 연관된 레벨들을 변경시킬 수 있으며, 이로써 좌우측 채널들간의 연관된 시간 지연들을 갖고 오디오 신호가 정확하게 기록되었더라도 라이브 오디오 신호를 반영하지 못한 좌우측 채널 사운드 레벨들을 불러일으킨다. 채널 지연 검출기(106)는 추가적으로 또는 양자택일적으로, 연관된 레벨 보정 인자들을 모델링하여 스테레오 또는 이와 다른 멀티 채널 오디오 신호내에 삽입하는데 이용될 수 있다.
채널 지연 검출기(106)는 양이간 시간 차이 또는 레벨 차이를 복수의 오디오 데이터 채널들내에 삽입하는데 이용되는 복수의 M개 보정 인자들을 출력한다. 보정 인자들의 갯수는 인지 대역들내에서의 변동들을 평활화시키는데 오버 샘플링이 이용되는 로우 지연 필터 뱅크(102 또는 104) 출력들의 갯수보다 적을 수 있다. 하나의 예시적인 실시예에서, 인지 대역들은 대역폭의 세 배로 샘플링되며, N은 M의 세 배일 것이다.
시스템(100)은 지연 유닛들(108, 110)을 포함하며, 이 지연 유닛들은 좌우 시변적 오디오 채널 신호들을 수신하고, 로우 지연 필터 뱅크들(102, 104) 및 채널 지연 검출기(106)를 통한 지연 마이너스 제로 패딩된 한(Hann) 윈도우들(112, 114) 및 고속 푸리에 변환기들(116, 118)에 의해 생성된 지연에 대응하는 양만큼 신호들을 지연시킨다.
제로 패딩된 한(Hann) 윈도우들(112,114)은 한(Hann) 윈도우잉 수정 신호를 생성하기 위한 양만큼 좌우측 채널을 위한 시변적 오디오 신호들을 수정한다. 제로 패딩된 한(Hann) 윈도우들(112,114)은, 처리된 오디오 데이터에서 생성될 오디오 인공물을 불러일으키는 위상 쉬프트 변동을 생성시킬 수 있는 불연속성이 처리된 신호들에서 생성되는 것을 방지하는데 이용될 수 있다. 다른 종류의 한(Hann) 윈도우 또는 불연속성을 방지하기 위한 다른 적절한 처리들이 또한 이용될 수 있거나, 또는 양자택일적으로 이용될 수 있다.
고속 푸리에 변환기들(116, 118)은 시간 영역 좌우채널 오디오 데이터를 주파수 영역 데이터로 전환시킨다. 하나의 예시적인 실시예에서, 고속 푸리에 변환기들(116, 118)은 미리결정된 갯수의 시간 영역 신호의 시간 샘플들을 수신하고(이 샘플들은 샘플들의 갯수를 증가시키기 위한 제로 패딩 한(Hann) 윈도우들(112, 114)에 의해 수정됨), 시간 영역 신호의 대응하는 갯수의 주파수 성분들을 생성한다.
위상 쉬프트 삽입기(120)는 고속 푸리에 변환기들(116, 118)로부터 고속 푸리에 변환 데이터를 수신하고, 각각의 주파수 빈 또는 빈들의 그룹에 대한 연관된 진폭의 수정 없이 개별적인 주파수 빈 또는 주파수 빈들의 그룹에 대한 푸리에 변환 데이터의 실수 성분 및 허수 성분을 수정함으로써, 채널 지연 검출기(106)로부터 수신된 보정 인자에 기초하여 신호들에 위상 쉬프트를 삽입한다. 하나의 예시적인 실시예에서, 주 채널은 각도 차이의 절반만큼 위상이 앞서가고 2차 채널은 각도 차이의 절반만큼 위상이 늦춰지도록, 위상 쉬프트는 채널 지연 검출기(106)에 의해 결정된 전자 채널들간의 각도 차이에 상관될 수 있다.
역 고속 푸리에 변환기들(122, 124)은 위상 쉬프트 삽입기(120)로부터 위상 쉬프트된 주파수 영역 신호들을 수신하고, 시변적 신호를 생성하기 위해 신호들에 대해 역 고속 푸리에 변환을 수행한다. 그런 후 좌우측 채널 시변적 신호들은 오버랩 가산기들(126, 128)에 각각 제공되고, 제로 패딩된 한(Hann) 윈도우들(112, 114)에 의한 처리를 위해 이 가산기들은 신호에 대해 오버랩 가산 연산을 수행한다. 오버랩 가산기들(126, 128)은 쉬프트 및 가산 레지스터들(130, 132)에 신호를 출력하고, 이 레지스터들은 쉬프트된 시간 신호를 Lidc(t) 및 Ridc(t)로서 출력한다.
동작시, 시스템(100)은 양이간 시간 차이를 삽입하기 위해 연관된 양이간 시간 차이를 갖지 않는 패닝을 포함한 신호가 보상될 수 있도록 해준다. 따라서, 시스템(100)은 오디오 신호들에서 통상적으로 발생할 양이간 시간 차이들을 복원하고 이에 따라 오디오 퀄리티를 향상시킨다.
도 2는 본 발명의 예시적인 실시예에 따라, 특정 주파수 대역들에 대한 좌우측 채널 오디오 데이터의 피크들의 차이들을 검출하기 위한 시스템(200)의 도면이다. 시스템(200)은 오디오 데이터의 분리된 주파수 대역들에 대한 좌우측 채널 데이터간의 피크들을 검출하고, 각각의 주파수 대역에 대한 보정 인자를 생성하기 위해 이용될 수 있다.
시스템(200)은 좌우측 시간 영역 신호를 수신하고 신호들의 미리결정된 주파수 대역에 대한 힐버트 엔벨로프(Hilbert envelope)를 생성하는 힐버트 엔벨로프 유닛들(202, 204)을 포함한다. 하나의 예시적인 실시예에서, 시스템(200)이 보정 인자를 신속하게 생성할 수 있도록 하고, 연관된 보정 인자들의 생성을 위해 시간 채널 시간 영역 데이터를 주파수 영역 데이터로 변환하는 것으로부터 생성될 수 있는 추가적인 지연을 회피할 수 있도록 하기 위해, 힐버트 엔벨로프 유닛(202)은 시스템(100)의 고속 푸리에 변환기들(116, 118)에 의해 처리된 것 보다 작은 갯수의 시간 영역 샘플들에 대해 동작할 수 있다.
피크 검출기들(206, 208)은 좌우측 채널 힐버트 엔벨로프들을 각각 수신하고, 각각의 신호에 대한 피크 진폭에 대한 연관된 시간 및 피크 진폭을 결정한다. 그런 후 피크 및 시간 데이터는 시간 차이가 대응하는 피크 진폭에 대해 존재하는지 여부를 결정하는 진폭 및 시간 차이 검출기(210)에 제공된다. 만약 진폭 및 시간 차이 검출기(210)가 피크 진폭 시간들간에 대응하는 차이가 없다라고 결정하면, 좌우측 채널 피크 진폭들의 진폭 값들을 비교함으로써 주파수 영역 오디오 데이터내에 삽입될 보정 인자 각도 TCOR를 결정하는데 양이간 시간 차이 보정 유닛(214)이 이용될 수 있다. 하나의 예시적인 실시예에서, 보정 인자 각도 TCOR은 각도 atan2(좌측 채널 진폭, 우측 채널 진폭) - 45도(degree)를 결정함으로써 결정될 수 있다. 마찬가지로, 다른 적절한 처리들이 보정 인자 각도를 결정하는데 이용될 수 있다. 피크 진폭들간에 작은 시간 차이가 존재할 때 보정 인자 각도들의 생성을 제공하기 위해, 적절한 문턱값이 또한 적용될 수 있다.
좌우측 채널 데이터에 대한 피크들간의 시간 차이가 존재하지만 이와 달리 피크 진폭들은 동일한 경우, 양이간 레벨차이 보정 유닛(212)이 이용될 수 있다. 이 예시적인 실시예에서, 지상(lagging) 채널로부터 보정 인자(LCOR)를 감산하고, 0.5*LCOR를 진상(leading) 채널에 추가하며 지상 채널로부터 0.5*LCOR를 감산하거나, 또는 이와 다른 적절한 방식으로, 진상 오디오 피크를 갖는 채널에 보다 높은 값을 제공하고 뒤쳐진 오디오 피크를 갖는 채널에게는 보다 낮은 값을 제공하기 위해, 피크 진폭들은 보정 인자(LCOR)에 의해 조정될 수 있다. 문턱값 시간 차이(이 값 이상에서는 레벨 보정이 적용되고, 이 값 미만에서는 레벨 보정이 적용되지 않을 것임)를 확인하기 위해, 문턱값이 또한 양이간 레벨 차이 보정 유닛(212)을 위해 이용될 수 있다.
동작시, 좌측 또는 우측 패닝을 갖지만 연관된 시간 차이가 없는 신호들에 대한 양이간 시간 차이 보정 인자들을 생성하고, 양이간 시간 차이가 존재하지만 연관된 패닝 진폭들이 존재하지 않는 신호들에 대한 레벨 보정들을 생성하기 위해, 시스템(200)은 좌우측 신호들에 대한 시간 및 레벨 차이 보정 인자들을 생성하는데 이용될 수 있다.
도 3은 본 발명의 예시적인 실시예에 따른 양이간 시간 및 레벨 차이를 평활화하기 위한 시스템(300)의 도면이다. 시스템(300)은 상이한 주파수 대역에 대한 양이간 시간 및/또는 레벨 차이 보정 인자를 각각 생성하는 양이간 시간 및 레벨 차이 보정 유닛들(302, 304, 306)을 포함한다. 하나의 예시적인 실시예에서, 시스템(300)이 해당 주파수 대역의 하위성분들에 기초하여 심리음향 주파수 대역을 위한 단일 보정 인자를 생성하기 위해 이용될 수 있도록, 주파수 대역들은 바크, ERB, 또는 다른 적절한 심리음향 주파수 대역들의 부분일 수 있다.
양이간 시간 또는 레벨 차이 보정 시스템들(302, 304, 306)로부터의 출력들에 대해 각각 시간 평활화를 수행하기 위해 시간 평활화 유닛(308, 210, 312)이 이용된다. 하나의 예시적인 실시예에서, 연속된 샘플들간의 변동이 평균화되도록 하거나, 또는 다른 수단을 통해 평활화될 수 있도록 하기 위해, 시간 평활화 유닛(308, 310, 312)은 양이간 시간 및 레벨 차이 보정 유닛들(302, 304, 306)로부터의 출력들의 시퀀스를 수신할 수 있고, 미리결정된 갯수의 샘플들에 대한 시퀀스를 저장할 수 있다.
주파수 대역 평활화 유닛(314)은 양이간 시간 또는 레벨 차이 보정 유닛들(302, 304, 306)로부터의 양이간 시간 또는 레벨 차이 보정 인자들 각각을 수신하고, 양이간 시간 또는 레벨 차이 보정 인자들에 대해 평활화를 수행한다. 하나의 예시적인 실시예에서, 바크 또는 ERB 주파수 대역은 세 개로 분할되며, 주파수 대역 평활화 유닛(314)은 연관된 주파수 대역에 대한 세 개의 주파수 보정 인자들을 평균화할 수 있고, 가중 평균을 결정할 수 있고, 시간적 평활화된 인자들을 이용할 수 있거나, 또는 이와 다른 적절한 평활화 처리들을 수행할 수 있다. 주파수 대역 평활화 유닛(314)은 각각의 주파수 대역에 대한 단일 위상 보정 인자를 생성한다.
동작시, 시스템(300)은 시간, 주파수, 시간 및 주파수, 또는 연관된 레벨 또는 시간 차이 없이 패닝 세팅을 검출하기 위해 좌우측 채널 오디오 데이터를 분석함으로써 생성된 양이간 시간 또는 레벨 차이 보정 인자들을 위한 이와 다른 적절한 베이스에 대해 평활화를 수행한다. 따라서 시스템(300)은 양이간 시간 또는 레벨 차이 보정 인자들간의 변경들이 급속히 변경되지 않도록 보장함으로써 오디오 인공물의 생성을 막는 것을 도와준다.
도 4는 본 발명의 예시적인 실시예에 따른 양이간 시간 또는 레벨 차이를 도입시키기 위해 오디오 데이터를 처리하기 위한 방법(400)의 도면이다. 방법(400)은 좌우측 진폭 엔벨로프들이 결정되는 것(단계 402)으로 시작한다. 하나의 예시적인 실시예에서, 힐버트 엔벨로프 검출기 또는 이와 다른 적절한 시스템들이 주파수 대역에 대한 피크 진폭, 피크와 연관된 시간, 및 이와 다른 적절한 데이터를 결정하는데 이용될 수 있다. 그런 후, 본 방법은 단계 404로 진행한다.
단계 404에서, 피크들에 대한 연관된 시간에 더하여, 진폭 엔벨로프에서의 피크들이 검출된다. 하나의 예시적인 실시예에서, 피크가 발생할 때의 연관된 시간 간격을 검출하는, 진폭 검출기와 같은 단순한 피크 검출기기 이용될 수 있다. 본 방법은 단계 406으로 진행한다.
단계 406에서, 좌우측 채널 데이터에 대한 피크들간의 시간 차이가 존재하는지가 결정된다. 하나의 예시적인 실시예에서, 피크들간의 시간이 미리결정된 양보다 작다면 시간 차이가 존재하지 않은 것으로 결정되도록, 시간 차이는 연관된 버퍼를 포함할 수 있다. 만약 시간 차이가 존재한다라고 결정되면, 양이간 시간 지연 복원이 필요하지 않도록, 본 방법은 두 개의 신호들의 진폭들간에 레벨 차이가 존재하는지 여부가 결정되는 단계 408로 진행한다. 만약 레벨 차이가 존재한다라고 결정되면, 본 방법은 단계 410로 진행한다. 만약 그렇지 않은 경우, 본 방법은 좌우측 채널 오디오 데이터간의 레벨이 보정되는 단계 412로 진행한다. 하나의 예시적인 실시예에서, 진상 채널 진폭은 변경되지 않은 채로 남겨지는 반면에, 지상 채널 진폭은 진상 및 지상 채널들간의 차이에 관련된 인자만큼 감소될 수 있거나, 또는 이와 다른 적절한 처리들이 이용될 수 있다.
만약 좌우측 채널 진폭 피크들간에 시간 차이가 존재하지 않다라고 결정되면, 본 방법은 레벨 차이가 위상 보정 각도로 변환되는 단계 414로 진행한다. 하나의 예시적인 실시예에서, 위상 보정 각도는 atan2(좌측 채널 진폭, 우측 채널 진폭) - 45도(degree)로부터 결정될 수 있거나, 또는 이와 다른 적절한 관계식이 이용될 수 있다. 그 다음, 본 방법은 위상 차이가 좌우측 채널들에 할당되는 단계 416으로 진행한다. 하나의 예시적인 실시예에서, 채널들을 동일한 양만큼 앞서게 하고 늦추도록 하기 위해, 위상 차이를 동일하게 분할함으로써 이러한 할당이 수행될 수 있다. 마찬가지로, 적절한 처리 또는 이와 다른 적절한 처리들이 이용될 수 있는, 가중된 차이들이 이용될 수 있다. 그런 후, 본 방법은 단계 418로 진행한다.
단계 418에서, 좌우측 채널 위상 보정 각도들간의 차이는 평활화된다. 하나의 예시적인 실시예에서, 이러한 차이는, 인접한 채널들의 위상 보정 각도들에 기초하여 평활화되거나, 또는 이와 다른 적절한 방식으로, 시간에 걸쳐 평활화될 수 있다. 그런 후, 본 방법은 단계 420으로 진행한다.
단계 420에서, 차이 보정 인자가 오디오 신호에 적용된다. 하나의 예시적인 실시예에서, 주파수 영역에서 연관된 위상 쉬프트를 추가하거나 감산함으로써 주파수 영역에서의 시간 신호의 시간 차이들을 추가하거나 감산하는 잘 알려진 방법을 이용하여, 시간 차이에 대응하는 위상 차이가 주파수 영역에 추가될 수 있다. 마찬가지로, 이와 다른 적절한 처리들이 이용될 수 있다.
동작시, 방법(400)은 양이간 위상 또는 진폭 보정 인자가 결정될 수 있도록 하고, 이것이 복수의 오디오 데이터 채널들에 적용될 수 있도록 해준다. 비록 두 개의 예시적인 채널들이 도시되지만, 양이간 위상 또는 진폭 보정 인자를 5.1 사운드 시스템, 7.1 사운드 시스템, 또는 이와 다른 적절한 사운드 시스템에서의 오디오 데이터에 적절히 추가하는, 오디오 데이터의 추가적인 채널들이 또한 처리될 수 있다.
도 5는 본 발명의 예시적인 실시예에 따른 양이간 시간 지연 보정을 위한 시스템(500)의 도면이다. 연관된 물리적 위치들에서 생성된 음원들과 연관된 양이간 시간 지연들을 보다 정확하게 반영한 패닝 제어 출력을 생성하기 위해, 시스템(500)은 혼합 이전에 양이간 시간 지연이 보상되도록 해준다.
시스템(500)은 좌측 채널 가변 지연 유닛(502), 우측 채널 가변 지연 유닛(504) 및 패닝 제어 유닛(506)을 포함하며, 이들 각각은 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 적절한 조합으로 구현될 수 있고, 이들은 디지털 신호 프로세싱 플랫폼상에서 동작하는 하나 이상의 소프트웨어 시스템들일 수 있다. 패닝 제어 유닛(506)은 사용자로 하여금 좌측 채널 신호 및 우측 채널 신호에 시변적 오디오 데이터 입력을 할당하도록 패닝 세팅을 선택할 수 있도록 해준다. 하나의 예시적인 실시예에서, 패닝 제어 유닛(506)은 가상 좌측 위치와 가상 우측 위치간의 복수의 연관된 위치 세팅들 각각에 대한 연관된 시간 지연 값들을 포함할 수 있다. 이 예시적인 실시예에서는, 이와 같은 세팅에 대해 지연이 필요하지 않기 때문에, 패닝 제어 유닛(506)은 좌측 풀, 중심, 또는 우측 풀 포지션이 선택되는 가변 지연 제어 유닛을 디스에이블시킨다. 패닝 제어 유닛(506)의 좌측 풀, 중심, 또는 우측 풀 포지션간의 세팅을 위해, 연관된 위치에서 위치한 음원에 대해 생성될 양이간 시간 지연에 대응하는 지연값이 생성될 수 있다.
패닝 제어 유닛(506)은 또한 사용자가 좌측에서 우측으로 또는 우측에서 좌측으로 패닝할 의도를 갖는 경우에 능동적 패닝을 선택할 수 있게 해주는 능동적 패닝 특징부를 포함할 수 있다. 이 예시적인 실시예에서, 패닝 제어 유닛(506) 세팅이 좌측 풀 또는 우측 풀 세팅으로부터 이동될 때 오디오 인공물의 생성 없이 사용자가 오디오 입력을 패닝할 수 있도록 하기 위해, 시간 지연이 좌측 풀 또는 우측 풀 패닝 제어 유닛(506) 세팅을 위해 제공될 수 있는데, 이렇지 않은 경우엔 시간 지연은 좌측 풀 또는 우측 풀 세팅에 대한 제로 지연으로부터 좌측 풀 또는 우측 풀 세팅에 인접한 패닝 제어 유닛(506) 세팅을 위한 최대 지연 값들로 점프할 것이다.
좌측 채널 가변 지연 유닛(502)과 우측 채널 가변 지연 유닛(504)은 시스템(100)의 양이간 시간 지연 보정 인자 삽입 유닛 또는 이와 다른 적절한 수단을 이용하여 구현될 수 있다.
동작시, 두 개의 출력 채널들, 즉 좌측 채널과 우측 채널 또는 이와 다른 적절한 채널들간에 오디오 채널이 패닝될 때, 시스템(500)은 양이간 시간 지연들이 추가될 수 있도록 해준다. 시스템(500)은 시간 지연이 필요하지 않은 경우에 세팅을 위한 시간 지연 유닛을 디스에이블시킬 수 있다.
도 6은 본 발명의 예시적인 실시예에 따른 패닝 제어 세팅과 연관된 양이간 시간을 제어하기 위한 방법(600)의 흐름도이다. 방법(600)은 사용자 선택된 채널과 같은, 시간 영역 오디오 채널 데이터가 수신되는 단계 602에서 시작한다. 그 다음, 본 방법은 패닝 제어 세팅이 검출되는 단계 604로 진행한다. 패닝 제어 유닛은 전위차계, 가상 패닝 제어 유닛, 또는 이와 다른 적절한 제어 유닛들일 수 있다. 그런 후, 본 방법은 단계 606으로 진행한다.
단계 606에서, 패닝 지연 세팅이 필요한지 여부를 결정한다. 하나의 예시적인 실시예에서, 패닝 지연은 좌측 풀, 우측 풀 또는 중심 포지션과 같은 미리결정된 패닝 제어 포지션들에 대해 디스에이블될 수 있다. 또다른 예시적인 실시예에서, 패닝 제어 세팅이 우측 풀 또는 좌측 풀 포지션으로부터 이동되어 나갈 때 시간 지연들의 생성에서의 불연속성을 막기 위해, 사용자가 우측 풀 및 좌측 풀 포지션 사이에서 정확히 패닝할 수 있도록 사용자가 패닝 제어 세팅을 선택하는 경우에서와 같이, 좌측 풀 또는 우측 풀 포지션들에 대해 패닝 지연이 생성될 수 있다. 만약 패닝 지연이 필요하지 않다라고 결정되면, 본 방법은 단계 612로 진행하고, 그렇지 않은 경우에는 본 방법은 단계 608로 진행한다.
단계 608에서, 패닝 제어 세팅에 기초하여 지연양이 계산된다. 하나의 예시적인 실시예에서, 능동적 패닝이 선택된 경우 패닝 제어가 풀 좌측 또는 풀 우측 포지션에 있을 때에 최대 시간 지연이 생성될 수 있다. 마찬가지로, 정지형 패닝 세팅이 선택된 경우, (반대 채널에 대해 연관된 신호가 생성되지 않으므로) 좌측 풀 또는 우측 풀 세팅에 대해 시간 지연이 필요하지 않다. 좌측 풀 및 우측 풀 포지션 세팅들간의 패닝 제어 세팅들의 경우, 중간 포지션에서의 시간 지연에 대응하는 시간 지연이 계산되며, 여기서 패닝 제어 포지션이 중심 포지션에 도달됨에 따라 시간 지연은 감소된다. 그런 후, 본 방법은 단계 610으로 진행한다.
단계 610에서, 계산된 지연이 하나 이상의 가변적 지연들에 적용된다. 하나의 예시적인 실시예에서, 지연은 좌측 또는 우측 채널들 중 하나의 채널에 추가될 수 있거나, 또는 이와 다른 적절한 지연 세팅들이 이용될 수 있다. 또다른 예시적인 실시예에서, 시스템(100)의 양이간 시간 지연 보정 인자 삽입 유닛 또는 이와 다른 적절한 수단을 활용하여 지연이 추가될 수 있다. 그런 후, 본 방법은 단계 612로 진행한다.
단계 612에서, 추가적인 데이터 샘플들이 데이터 버퍼내 또는 이와 다른 적절한 수단내에 존재하는지 여부를 결정하는 것과 같이, 추가적인 오디오 채널 데이터가 처리를 필요한지 여부를 결정한다. 만약 추가적인 데이터 처리가 필요하면, 본 방법은 단계 602로 진행하고, 그렇지 않은 경우에는 본 방법은 단계 614로 진행한다.
동작시, 본 방법(600)은 패닝 제어 세팅에 기초하여 양이간 시간 지연이 생성될 수 있도록 해준다. 방법(600)은 시간 보정없이 좌우측 채널간의 단순한 패닝보다 실제의 음원의 위치를 보다 가깝게 근사화하는 방식으로 패닝 제어의 이용에 의해 사운드 위치가 시뮬레이팅되도록 해준다.
본 발명의 시스템 및 방법의 예시적인 실시예들이 본 명세서에서 상세하게 설명되었지만, 본 발명분야의 당업자는 또한 첨부된 청구항들의 범위와 사상으로부터 이탈하지 않고서 다양한 대체구성과 변경이 본 시스템과 방법에 행해질 수 있다는 것을 알 것이다.
102, 104: 로우 지연 필터 뱅크, 106: 채널 지연 검출기
108, 110: 지연 유닛, 112, 114: Hann 윈도우
120: 위상 쉬프트 삽입기, 126, 128: 오버랩 가산기
130, 132: 쉬프트 유닛,
202, 204: 힐버트 엔벨로프 유닛, 206, 208: 피크 검출기
210: 진폭 및 시간 차이 검출기,
212, 214: 양이간 레벨 차이 보정 유닛
302, 304, 306: 양이간 시간/레벨 차이 보정 유닛
308, 310, 312: 시간 평활화 유닛, 314: 주파수 대역 평활화 유닛
502: 좌측 채널 가변 지연 유닛, 506: 패닝 제어 유닛
504: 우측 채널 가변 지연 유닛

Claims (21)

  1. 오디오 데이터를 처리하기 위한 장치에 있어서,
    좌측 채널 오디오 데이터와 우측 채널 오디오 데이터를 수신하고, 양이간(interaural) 시간 지연 보정 인자를 생성하기 위한 양이간 시간 지연 보정 인자 유닛; 및
    만약 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 간에 시간 차이가 존재하지 않고 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 간에 레벨 차이가 존재하는 경우, 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 간에 양이간 시간 지연을 삽입하여 상기 좌측 채널 오디오 데이터 및 상기 우측 채널 오디오 데이터를 상기 양이간 시간 지연 보정 인자의 함수로 수정하기 위한 양이간 시간 지연 보정 인자 삽입 유닛
    을 포함하는, 오디오 데이터 처리 장치.
  2. 제1항에 있어서, 상기 양이간 시간 지연 보정 인자 유닛은, 채널 오디오 데이터를 수신하고 미리 결정된 주파수 대역에 대한 시간 함수로서 진폭 엔벨로프(magnitude envelope)를 생성하기 위한 로우 지연 필터 뱅크를 포함하는 것인, 오디오 데이터 처리 장치.
  3. 제1항에 있어서, 상기 양이간 시간 지연 보정 인자 유닛은, 채널 오디오 데이터를 수신하고 미리 결정된 주파수 대역에 대한 피크 진폭 값 및 연관된 시간을 생성하기 위한 피크 검출기를 포함하는 것인, 오디오 데이터 처리 장치.
  4. 제1항에 있어서, 상기 양이간 시간 지연 보정 인자 유닛은, 미리 결정된 주파수 대역에 대한 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 각각에 대한 피크 진폭값 및 연관된 시간을 수신하고 양이간 차이 보정 데이터를 생성하기 위한 시간 차이 검출기를 포함하는 것인, 오디오 데이터 처리 장치.
  5. 제4항에 있어서, 상기 양이간 시간 지연 보정 인자 유닛은, 상기 양이간 차이 보정 데이터를 수신하고 상기 양이간 시간 지연 보정 인자 삽입 유닛을 위한 시간 보정 인자를 생성하기 위한 양이간 시간 차이 보정 유닛을 포함하는 것인, 오디오 데이터 처리 장치.
  6. 제1항에 있어서, 상기 양이간 시간 지연 보정 인자 삽입 유닛은, 상기 양이간 시간 지연 보정 인자 유닛의 지연에 관련된 양만큼 채널 오디오 데이터를 지연시키기 위한 지연 유닛을 포함하는 것인, 오디오 데이터 처리 장치.
  7. 제1항에 있어서, 상기 양이간 시간 지연 보정 인자 삽입 유닛은, 채널 오디오 데이터를 수신하고, 오디오 데이터의 채널에 한(Hann) 윈도우를 적용하기 위한 한(Hann) 윈도우 유닛을 포함하는 것인, 오디오 데이터 처리 장치.
  8. 제1항에 있어서, 상기 양이간 시간 지연 보정 인자 삽입 유닛은, 복수의 주파수 영역 오디오 채널 신호들 내에 위상 쉬프트를 삽입하기 위한 위상 쉬프트 삽입 유닛을 포함하는 것인, 오디오 데이터 처리 장치.
  9. 오디오 데이터를 처리하기 위한 방법에 있어서,
    좌측 채널 오디오 데이터와 우측 채널 오디오 데이터 각각에 대한 진폭 엔벨로프에서의 피크를 결정하는 단계;
    각각의 진폭 엔벨로프에서의 피크와 연관된 지연을 검출하는 단계; 및
    만약 상기 검출된 지연이 문턱값 미만이고 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 간에 레벨 차이가 존재하는 경우, 상기 좌측 채널 오디오 데이터 및 상기 우측 채널 오디오 데이터 간에 지연을 삽입하는 단계
    를 포함하는, 오디오 데이터 처리 방법.
  10. 제9항에 있어서, 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 각각에 대한 진폭 엔벨로프에서의 피크를 결정하는 단계는 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 각각의 미리 결정된 주파수 대역에 대한 진폭 엔벨로프를 결정하는 단계를 포함하는 것인, 오디오 데이터 처리 방법.
  11. 제9항에 있어서, 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 각각에 대한 진폭 엔벨로프에서의 피크를 결정하는 단계는 힐버트(Hilbert) 엔벨로프 유닛을 통해 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 각각에 대한 미리 결정된 주파수 대역을 처리하는 단계를 포함하는 것인, 오디오 데이터 처리 방법.
  12. 제9항에 있어서, 상기 진폭 엔벨로프 각각의 피크와 연관된 지연을 검출하는 단계는 하나의 채널의 피크 진폭과 연관된 시간과 제2 채널의 피크 진폭과 연관된 시간을 비교하는 단계를 포함하는 것인, 오디오 데이터 처리 방법.
  13. 제9항에 있어서, 상기 진폭 엔벨로프 각각의 피크에 기초하여 상기 삽입된 지연을 생성하는 단계를 더 포함하는, 오디오 데이터 처리 방법.
  14. 제9항에 있어서, atan2(peakl, peak2) - 45도(degree)를 결정함으로써 상기 삽입된 지연을 생성하는 단계를 더 포함하며, 상기 atan2는 출력을 도(degree) 단위로 발생시키는 2변수 아크탄젠트 함수이며, 상기 peakl는 제1 피크 진폭의 값이며, 상기 peak2는 제2 피크 진폭의 값인 것인, 오디오 데이터 처리 방법.
  15. 제9항에 있어서, 만약 상기 검출된 지연이 문턱값 미만이면 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 간에 상기 지연을 삽입하는 단계는,
    오디오 데이터의 채널들을 시간 영역에서 주파수 영역으로 변환시키는 단계;
    상기 삽입된 지연을 위상 쉬프트 값으로 변환시키는 단계;
    상기 주파수 영역에서 오디오 데이터의 제1 채널에 상기 위상 쉬프트 값의 제1 부분을 추가하는 단계; 및
    상기 주파수 영역에서 오디오 데이터의 제2 채널로부터 상기 위상 쉬프트 값의 제2 부분을 감산하는 단계
    를 포함하는 것인, 오디오 데이터 처리 방법.
  16. 오디오 데이터를 처리하기 위한 장치에 있어서,
    좌측 채널 오디오 데이터와 우측 채널 오디오 데이터를 수신하여 양이간(interaural) 시간 지연 보정 인자를 생성하기 위한 수단; 및
    만약 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 간에 시간 차이가 존재하지 않고 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 간에 레벨 차이가 존재하는 경우, 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 간에 양이간 시간 지연을 삽입하여 상기 좌측 채널 오디오 데이터 및 상기 우측 채널 오디오 데이터를 상기 양이간 시간 지연 보정 인자의 함수로 수정하기 위한 양이간 시간 지연 보정 인자 삽입 유닛
    을 포함하는, 오디오 데이터 처리 장치.
  17. 제16항에 있어서, 상기 양이간 시간 지연 보정 인자 삽입 유닛은, 상기 양이간 시간 지연 보정 인자의 함수로서 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터를 수정하기 위한 수단을 포함하는 것인, 오디오 데이터 처리 장치.
  18. 제16항에 있어서, 상기 양이간 시간 지연 보정 인자 삽입 유닛은, 상기 양이간 시간 지연 보정 인자 유닛의 지연에 관련된 양만큼 채널 오디오 데이터를 지연시키기 위한 수단을 포함하는 것인, 오디오 데이터 처리 장치.
  19. 제16항에 있어서, 상기 양이간 시간 지연 보정 인자 삽입 유닛은, 채널 오디오 데이터를 수신하고, 오디오 데이터의 채널에 한(Hann) 윈도우를 적용하기 위한 수단을 포함하는 것인, 오디오 데이터 처리 장치.
  20. 제16항에 있어서, 상기 양이간 시간 지연 보정 인자 삽입 유닛은 복수의 주파수 영역 오디오 채널 신호들 내에 위상 쉬프트를 삽입하기 위한 수단을 포함하는 것인, 오디오 데이터 처리 장치.
  21. 제1항 또는 제20항에 있어서, 상기 양이간 시간 지연 보정 인자 삽입 유닛은, 만약 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 사이에 시간 차이가 존재하고, 상기 좌측 채널 오디오 데이터와 상기 우측 채널 오디오 데이터 간의 레벨 차이가 존재하지 않는 경우, 상기 좌측 채널과 상기 우측 채널 사이에 레벨의 보정하여 상기 좌측 채널 오디오 데이터 및 상기 우측 채널 오디오 데이터를 상기 양이간 시간 지연 보정 인자의 함수로 수정하는 것인 오디오 데이터 처리 장치.
KR1020117007537A 2008-09-04 2009-08-14 양이간 시간 지연 복원 시스템 및 방법 KR101636592B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/204,471 2008-09-04
US12/204,471 US8233629B2 (en) 2008-09-04 2008-09-04 Interaural time delay restoration system and method

Publications (2)

Publication Number Publication Date
KR20110063807A KR20110063807A (ko) 2011-06-14
KR101636592B1 true KR101636592B1 (ko) 2016-07-05

Family

ID=41725480

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020117007537A KR101636592B1 (ko) 2008-09-04 2009-08-14 양이간 시간 지연 복원 시스템 및 방법

Country Status (8)

Country Link
US (1) US8233629B2 (ko)
EP (1) EP2321977B1 (ko)
JP (1) JP5662318B2 (ko)
KR (1) KR101636592B1 (ko)
CN (1) CN102144405B (ko)
HK (1) HK1156171A1 (ko)
TW (1) TWI533718B (ko)
WO (1) WO2010027403A1 (ko)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8971551B2 (en) * 2009-09-18 2015-03-03 Dolby International Ab Virtual bass synthesis using harmonic transposition
US8848925B2 (en) * 2009-09-11 2014-09-30 Nokia Corporation Method, apparatus and computer program product for audio coding
US8571232B2 (en) * 2009-09-11 2013-10-29 Barry Stephen Goldfarb Apparatus and method for a complete audio signal
WO2011129655A2 (en) * 2010-04-16 2011-10-20 Jeong-Hun Seo Method, apparatus, and program-containing medium for assessment of audio quality
FR2966634A1 (fr) * 2010-10-22 2012-04-27 France Telecom Codage/decodage parametrique stereo ameliore pour les canaux en opposition de phase
CN103796150B (zh) * 2012-10-30 2017-02-15 华为技术有限公司 音频信号的处理方法、装置及系统
JP6216553B2 (ja) * 2013-06-27 2017-10-18 クラリオン株式会社 伝搬遅延補正装置及び伝搬遅延補正方法
US9432792B2 (en) * 2013-09-05 2016-08-30 AmOS DM, LLC System and methods for acoustic priming of recorded sounds
WO2016089936A1 (en) 2014-12-03 2016-06-09 Med-El Elektromedizinische Geraete Gmbh Hearing implant bilateral matching of ild based on measured itd
CN108877815B (zh) 2017-05-16 2021-02-23 华为技术有限公司 一种立体声信号处理方法及装置
TWI689708B (zh) * 2018-12-24 2020-04-01 財團法人工業技術研究院 具監測功能的振動感測器及其振動訊號監測方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050254446A1 (en) * 2002-04-22 2005-11-17 Breebaart Dirk J Signal synthesizing

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4890065A (en) 1987-03-26 1989-12-26 Howe Technologies Corporation Relative time delay correction system utilizing window of zero correction
US5136650A (en) * 1991-01-09 1992-08-04 Lexicon, Inc. Sound reproduction
JPH0522798A (ja) * 1991-07-10 1993-01-29 Toshiba Corp 位相補正装置
JP2973764B2 (ja) * 1992-04-03 1999-11-08 ヤマハ株式会社 音像定位制御装置
US5652770A (en) * 1992-09-21 1997-07-29 Noise Cancellation Technologies, Inc. Sampled-data filter with low delay
JP2893563B2 (ja) * 1992-12-11 1999-05-24 松下電器産業株式会社 音像定位係数算出装置
JP2900985B2 (ja) * 1994-05-31 1999-06-02 日本ビクター株式会社 ヘッドホン再生装置
JP3276528B2 (ja) * 1994-08-24 2002-04-22 シャープ株式会社 音像拡大装置
US5796844A (en) * 1996-07-19 1998-08-18 Lexicon Multichannel active matrix sound reproduction with maximum lateral separation
JPH10126898A (ja) * 1996-10-22 1998-05-15 Kawai Musical Instr Mfg Co Ltd 音像定位装置及び音像定位方法
DE19730130C2 (de) * 1997-07-14 2002-02-28 Fraunhofer Ges Forschung Verfahren zum Codieren eines Audiosignals
US7027601B1 (en) * 1999-09-28 2006-04-11 At&T Corp. Perceptual speaker directivity
JP4463905B2 (ja) * 1999-09-28 2010-05-19 隆行 荒井 音声処理方法、装置及び拡声システム
JP4021124B2 (ja) * 2000-05-30 2007-12-12 株式会社リコー デジタル音響信号符号化装置、方法及び記録媒体
CN1647156B (zh) * 2002-04-22 2010-05-26 皇家飞利浦电子股份有限公司 参数编码方法、参数编码器、用于提供音频信号的设备、解码方法、解码器、用于提供解码后的多声道音频信号的设备
NO318401B1 (no) * 2003-03-10 2005-03-14 Tandberg Telecom As Et audio-ekkokanselleringssystem og en fremgangsmate for a tilveiebringe et ekkodempet utgangssignal fra et ekkotillagt signal
US7508947B2 (en) * 2004-08-03 2009-03-24 Dolby Laboratories Licensing Corporation Method for combining audio signals using auditory scene analysis
CN101093661B (zh) * 2006-06-23 2011-04-13 凌阳科技股份有限公司 一种音高跟踪和播放方法及其系统
KR20090013178A (ko) * 2006-09-29 2009-02-04 엘지전자 주식회사 오브젝트 기반 오디오 신호를 인코딩 및 디코딩하는 방법 및 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050254446A1 (en) * 2002-04-22 2005-11-17 Breebaart Dirk J Signal synthesizing

Also Published As

Publication number Publication date
EP2321977B1 (en) 2017-10-04
US8233629B2 (en) 2012-07-31
TWI533718B (zh) 2016-05-11
JP2012502550A (ja) 2012-01-26
US20100054482A1 (en) 2010-03-04
EP2321977A1 (en) 2011-05-18
KR20110063807A (ko) 2011-06-14
HK1156171A1 (zh) 2012-06-01
EP2321977A4 (en) 2013-10-09
CN102144405A (zh) 2011-08-03
WO2010027403A8 (en) 2011-01-06
JP5662318B2 (ja) 2015-01-28
TW201014372A (en) 2010-04-01
CN102144405B (zh) 2014-12-31
WO2010027403A1 (en) 2010-03-11

Similar Documents

Publication Publication Date Title
KR101636592B1 (ko) 양이간 시간 지연 복원 시스템 및 방법
CA2566992C (en) Apparatus and method for generating multi-channel synthesizer control signal and apparatus and method for multi-channel synthesizing
KR101283741B1 (ko) N채널 오디오 시스템으로부터 m채널 오디오 시스템으로 변환하는 오디오 공간 환경 엔진 및 그 방법
Avendano et al. Ambience extraction and synthesis from stereo signals for multi-channel audio up-mix
DK2265041T3 (en) Advanced processing based on a complex exponential modulated filter bank and adaptive time signaling methods
JP5607626B2 (ja) パラメトリックステレオ変換システム及び方法
KR20070049146A (ko) 청각 장면 분석을 사용한 오디오 신호의 결합
MXPA05001413A (es) Conversion espacial de canales de audio.
WO2011151771A1 (en) System and method for sound processing
JP2017526265A (ja) オーディオ信号の強化のための装置と方法及び音響強化システム
US8407059B2 (en) Method and apparatus of audio matrix encoding/decoding
US20220060824A1 (en) An Audio Capturing Arrangement
US9913036B2 (en) Apparatus and method and computer program for generating a stereo output signal for providing additional output channels
CN113273225B (zh) 音频处理
US9877134B2 (en) Techniques for optimizing the fidelity of a remote recording
US20150163614A1 (en) Embedding data in stereo audio using saturation parameter modulation
WO2021252795A2 (en) Perceptual optimization of magnitude and phase for time-frequency and softmask source separation systems
WO2021209683A1 (en) Audio processing

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant