KR101725952B1 - 사용자의 hrtf 정보를 이용하여 n채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템 - Google Patents

사용자의 hrtf 정보를 이용하여 n채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템 Download PDF

Info

Publication number
KR101725952B1
KR101725952B1 KR1020150183238A KR20150183238A KR101725952B1 KR 101725952 B1 KR101725952 B1 KR 101725952B1 KR 1020150183238 A KR1020150183238 A KR 1020150183238A KR 20150183238 A KR20150183238 A KR 20150183238A KR 101725952 B1 KR101725952 B1 KR 101725952B1
Authority
KR
South Korea
Prior art keywords
user
sound source
hrtf information
signal
channel
Prior art date
Application number
KR1020150183238A
Other languages
English (en)
Inventor
김남수
박경수
김정훈
천성준
Original Assignee
서울대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 서울대학교산학협력단 filed Critical 서울대학교산학협력단
Priority to KR1020150183238A priority Critical patent/KR101725952B1/ko
Application granted granted Critical
Publication of KR101725952B1 publication Critical patent/KR101725952B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/033—Headphones for stereophonic communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H04S3/004—For headphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Stereophonic System (AREA)
  • Stereophonic Arrangements (AREA)

Abstract

본 발명은 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법에 관한 것으로서, 보다 구체적으로는 (1) 사인 스윕 신호를 N채널의 스피커를 통해 재생시키고, 상기 재생된 신호가 사용자의 양쪽 귀에 장착된 마이크에 녹음되는 단계(S100), (2) 상기 단계 (1)에서 녹음된 신호로부터 양쪽 각각의 귀마다 N개의 사용자 HRTF 정보가 추출되는 단계(S200), 및 (3) 상기 단계 (2)로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호가 합성되어 바이노럴 음원이 생성되는 단계(S300)를 포함하는 것을 그 구성상의 특징으로 한다.
본 발명에서 제안하고 있는 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템에 따르면, 사용자의 HRTF 정보를 이용하여 바이노럴 음원을 생성함으로써, 사용자의 청각 특성을 반영하여 사용자에게 최적화된 바이노럴 음원을 만들 수 있다.

Description

사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템{THE METHOD AND SYSTEM REGARDING DOWN MIX SOUND SOURCE OF N CHANEL TO OPTIMIZED BINAURAL SOUND SOURCE FOR USER BY USING USER'S HEAD RELATED TRANSFER FUNCTION INFORMATION}
본 발명은 다채널 음원의 바이노럴 다운 믹스에 관한 것으로서, 보다 구체적으로는 사용자의 머리전달함수(Head Related Transfer Function, 이하 ‘HRTF’라 함) 정보를 이용하여 다채널의 음원을 사용자에게 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템에 관한 것이다.
최근 MP3 플레이어, PMP(Portable Multimedia Player), 핸드폰, 및 DMB 플레이어 등과 같은 다양한 멀티미디어 재생 시스템을 통하여 음악, 영화 등을 시청 및 청취하는 경우가 급속히 증가하고 있다. 또한, 이와 더불어 음악, 영화 등의 멀티미디어 음원을 보다 자연스럽고 현장감 있게 느끼며 청취할 수 있도록 하기 위한 오디오 기술에 대한 연구가 활발히 진행 중이며, 그 중에서도 바이노럴 방식에 대한 관심이 높아지고 있다.
일반적으로 바이노럴이란, 머리 모양을 한 모형의 양쪽 귀에 마이크를 설치하고 녹음하는 방법이다. 이러한 바이노럴 녹음은 듣는 이를 중심으로 주위 음의 움직임을 필요로 하는 경우에 효과가 크며, 콘서트 장소 등과 같이 복잡한 음의 재생을 리얼하게 녹음할 때 사용된다.
이와 같은 바이노럴과 관련하여, 등록특허 제10-0656957호(발명의 명칭: 최적 청취범위를 확장하는 바이노럴 시스템의 동작방법 및 그 방법을 채용한 바이노럴 시스템, 등록일자: 2006년 12월 06일) 등이 개시된 바 있다.
하지만, 종래의 방법에서는 바이노럴 음원을 만들 때 더미 헤드 마이크를 이용함으로써 사용자에게 완벽하게 맞춰진 음원을 만들 수 없다는 한계가 있었다.
본 발명은 기존에 제안된 방법들의 상기와 같은 문제점들을 해결하기 위해 제안된 것으로서, 사용자의 HRTF 정보를 이용하여 바이노럴 음원을 생성함으로써, 사용자의 청각 특성을 반영하여 사용자에게 최적화된 바이노럴 음원을 만들 수 있는, 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템을 제공하는 것을 그 목적으로 한다.
상기한 목적을 달성하기 위한 본 발명의 특징에 따른, 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법은,
(1) 사인 스윕 신호를 N채널의 스피커를 통해 재생시키고, 상기 재생된 신호가 사용자의 양쪽 귀에 장착된 마이크에 녹음되는 단계(S100);
(2) 상기 단계 (1)에서 녹음된 신호로부터 양쪽 각각의 귀마다 N개의 사용자 HRTF 정보가 추출되는 단계(S200); 및
(3) 상기 단계 (2)로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호가 합성되어 바이노럴 음원이 생성되는 단계(S300)를 포함하는 것을 그 구성상의 특징으로 한다.
바람직하게는, 상기 단계 (1)에서,
상기 마이크에 녹음된 신호는 사용자의 HRTF 정보와 사인 스윕 신호가 컨볼루션(convolution)된 상태일 수 있다.
바람직하게는, 상기 단계 (2)에서,
상기 단계 (1)에서 녹음된 신호와 사인 스윕 신호의 역신호와의 필터링을 통해 상기 사용자의 HRTF 정보가 추출될 수 있다.
바람직하게는, 상기 단계 (3)에서,
상기 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호는 하기 수학식을 이용하여 바이노럴 음원으로 합성될 수 있다.
Figure 112015125473664-pat00001
여기서, Y는 합성된 바이노럴 음원, X는 원 음원 신호, H는 사용자의 HRTF 정보, L은 왼쪽 귀, R은 오른쪽 귀, i는 채널번호를 각각 나타낸다.
상기한 목적을 달성하기 위한 본 발명의 또 다른 특징에 따른, 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 시스템은,
사인 스윕 신호를 재생시키는 N채널의 스피커;
사용자의 양쪽 귀에 장착되며, 상기 스피커에서 재생된 신호를 녹음하는 마이크;
상기 마이크에서 녹음된 신호로부터 양쪽 각각의 귀마다 N개의 사용자 HRTF 정보를 추출하는 사용자 HRTF 정보 추출 모듈; 및
상기 사용자 HRTF 정보 추출 모듈로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호를 합성하여 바이노럴 음원을 생성하는 바이노럴 음원 생성 모듈을 포함하는 것을 그 구성상의 특징으로 한다.
바람직하게는, 상기 사용자 HRTF 정보 추출 모듈은,
상기 마이크에 녹음된 신호와 사인 스윕 신호의 역신호와의 필터링을 통해 사용자의 HRTF 정보를 추출할 수 있다.
바람직하게는, 상기 바이노럴 음원 생성 모듈은,
상기 사용자 HRTF 정보 추출 모듈로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호를 하기 수학식을 이용하여 바이노럴 음원으로 합성할 수 있다.
Figure 112015125473664-pat00002
여기서, Y는 합성된 바이노럴 음원, X는 원 음원 신호, H는 사용자의 HRTF 정보, L은 왼쪽 귀, R은 오른쪽 귀, i는 채널번호를 각각 나타낸다.
본 발명에서 제안하고 있는 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템에 따르면, 사용자의 HRTF 정보를 이용하여 바이노럴 음원을 생성함으로써, 사용자의 청각 특성을 반영하여 사용자에게 최적화된 바이노럴 음원을 만들 수 있다.
도 1은 종래에 더미헤드를 사용하여 HRTF를 측정하는 장면을 도시한 도면.
도 2는 본 발명의 일실시예에 따른 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법의 흐름을 도시한 흐름도.
도 3은 본 발명의 일실시예에 따른 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법에서, 사용자의 귀에 마이크가 장착된 장면을 도시한 도면.
도 4는 본 발명의 일실시예에 따른 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법에서, 스피커에서 재생된 신호가 사용자의 양쪽 귀에 장착된 마이크에 녹음되고 있는 장면을 도시한 도면.
도 5는 본 발명의 일실시예에 따른 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 시스템의 구성을 도시한 도면.
이하에서는 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예를 상세하게 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 또한, 유사한 기능 및 작용을 하는 부분에 대해서는 도면 전체에 걸쳐 동일 또는 유사한 부호를 사용한다.
덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 ‘연결’되어 있다고 할 때, 이는 ‘직접적으로 연결’되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 ‘간접적으로 연결’되어 있는 경우도 포함한다. 또한, 어떤 구성요소를 ‘포함’한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.
도 1은 종래에 더미헤드를 사용하여 HRTF를 측정하는 장면을 도시한 도면이다. 도 1에 도시된 바와 같이, 종래에는 더미헤드를 사용하여 HRTF를 측정하였고, 더미헤드로부터 측정된 HRTF를 바탕으로 바이노럴 음원을 만들었다. 그 결과 음원을 듣는 사용자의 청각 특성이 고려되지 않았고, 사용자에게 최적화된 음원을 만들 수 없는 문제가 있었다.
이하에서는, 상술한 종래 발명의 문제점을 해결하기 위해 제안된, 사용자의 실제 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템에 대해 도면을 참조하여 상세히 설명하기로 한다.
도 2는 본 발명의 일실시예에 따른 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법의 흐름을 도시한 흐름도이다. 도 2에 도시된 바와 같이, 본 발명의 일실시예에 따른 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법은, (1) 사인 스윕 신호를 N채널의 스피커를 통해 재생시키고, 재생된 신호가 사용자의 양쪽 귀에 장착된 마이크에 녹음되는 단계(S100), (2) 단계 (1)에서 녹음된 신호로부터 양쪽 각각의 귀마다 N개의 사용자 HRTF 정보가 추출되는 단계(S200); 및 (3) 단계 (2)로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호가 합성되어 바이노럴 음원이 생성되는 단계(S300)를 포함하여 구성될 수 있다.
이하에서는, 본 발명에서 제안하고 있는 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법의 각 단계에 대하여 상세하게 설명하기로 한다.
단계 S100에서는 사인 스윕 신호를 N채널의 스피커를 통해 재생시키고, 재생된 신호가 사용자의 양쪽 귀에 장착된 마이크에 녹음될 수 있다. 여기서, 사인 스윕 신호는 시간에 따라 주파수가 순차적으로 증가하는 신호로서, 기존에 HRTF를 측정하는데 사용되던 MLS(Maximum-Length Sequence) 방법에 비해 고주파 영역에서 왜곡이 적으며, 하모닉스 성분에 의해서 일어나는 왜곡도 제거할 수 있는 장점이 있다.
도 3은 본 발명의 일실시예에 따른 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법에서, 사용자의 귀에 마이크가 장착된 장면을 도시한 도면이다. 여기에서, 마이크는 사용자의 양쪽 귀에 장착될 수 있다.
도 4는 본 발명의 일실시예에 따른 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법에서, 스피커에서 재생된 신호가 사용자의 양쪽 귀에 장착된 마이크에 녹음되고 있는 장면을 도시한 도면이다.
본 발명의 단계 S100에서는, 사인 스윕 신호를 N채널의 스피커를 통해 재생시키고, 스피커에서 재생된 신호가 도 3 및 도 4에 도시된 바와 같이, 사용자의 양쪽 귀에 장착된 마이크에 녹음될 수 있다. 여기에서, 마이크에 녹음된 신호는 사용자의 HRTF 정보와 사인 스윕 신호가 컨볼루션(convolution)된 상태일 수 있다.
단계 S200에서는 단계 S100에서 녹음된 신호로부터 양쪽 각각의 귀마다 N개의 사용자 HRTF 정보가 추출될 수 있다. N채널의 스피커를 통해 재생되는 사인 스윕 신호는 양쪽 각 귀의 N개의 사용자 HRTF 정보와 컨볼루션(convolution)되어 사용자의 양쪽 귀에 장착된 마이크에 녹음되고, 마이크에서 녹음된 신호와 사인 스윕 신호의 역신호와 필터링하여 양쪽 각각의 귀마다 N개의 사용자 HRTF 정보가 추출될 수 있다. 실시예에 따라, 5.1채널의 스피커에서 재생되어 사용자의 양쪽 귀에 장착된 마이크에 녹음 신호의 경우, 각각의 귀마다 5개(H1,L, H2,L, H3,L, H4,L, H5,L, H1,R, H2,R, H3,R, H4,R, H5,R)의 사용자 HRTF 정보가 추출될 수 있다. 여기에서, 서브 우퍼의 소리는 HRTF를 거치지 않고 더해질 수 있다.
단계 S300에서는 단계 S200으로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원신호가 합성되어 바이노럴 음원이 생성될 수 있다. 여기에서, 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호는 하기의 수학식 1을 이용하여 바이노럴 음원으로 합성될 수 있다.
Figure 112015125473664-pat00003
여기서, Y는 합성된 바이노럴 음원, X는 원 음원 신호, H는 사용자의 HRTF 정보, L은 왼쪽 귀, R은 오른쪽 귀, i는 채널번호를 각각 나타낸다.
상술한 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법은, 도 5에 도시된 바와 같이, 사인 스윕 신호를 재생시키는 N채널의 스피커(100), 사용자의 양쪽 귀에 장착되며, 스피커(100)에서 재생된 신호를 녹음하는 마이크(200), 마이크(200)에서 녹음된 신호로부터 양쪽 각각의 귀마다 N개의 사용자 HRTF 정보를 추출하는 사용자 HRTF 정보 추출 모듈(300), 및 사용자 HRTF 정보 추출 모듈(300)로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호를 합성하여 바이노럴 음원을 생성하는 바이노럴 음원 생성 모듈(400)을 포함하여 구성되는, 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 시스템(10)으로 구현될 수 있다.
사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 시스템(10)에서 스피커(100)는 사인 스윕 신호를 재생시키는 역할을 하고, 마이크(200)는 사용자의 양쪽 귀에 장착되어 스피커(100)에서 재생된 신호를 녹음하는 역할을 한다.
또한, 사용자 HRTF 정보 추출 모듈(300)은 마이크(200)에서 녹음된 신호로부터 양쪽 각각의 귀마다 N개의 사용자 HRTF 정보를 추출하는 역할을 한다. 여기에서, 사용자 HRTF 정보 추출 모듈(300)은 마이크(100)에 녹음된 신호와 사인 스윕 신호의 역신호와의 필터링을 통해 사용자의 HRTF 정보를 추출할 수 있다.
마지막으로 바이노럴 음원 생성 모듈(400)은 사용자 HRTF 정보 추출 모듈(300)로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호를 합성하여 바이노럴 음원을 생성하는 역할을 한다. 여기에서, 바이노럴 음원 생성 모듈(400)은 사용자 HRTF 정보 추출 모듈(300)로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호를 앞서 설명한 수학식 1을 이용하여 바이노럴 음원으로 합성할 수 있다.
이상 설명한 바와 같이, 본 발명에서 제안하고 있는 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템에 따르면, 종래에 더미헤드를 이용하여 HRTF를 추출하여 바이노럴 음원을 만들었던 것과 달리, 사용자의 HRTF 정보를 이용하여 바이노럴 음원을 생성함으로써, 사용자의 청각 특성을 반영하여 사용자에게 최적화된 바이노럴 음원을 만들 수 있다.
이상 설명한 본 발명은 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의하여 다양한 변형이나 응용이 가능하며, 본 발명에 따른 기술적 사상의 범위는 아래의 특허청구범위에 의하여 정해져야 할 것이다.
S100: 사인 스윕 신호를 N채널의 스피커를 통해 재생시키고, 재생된 신호가 사용자의 양쪽 귀에 장착된 마이크에 녹음되는 단계
S200: 단계 S100에서 녹음된 신호로부터 양쪽 각각의 귀마다 N개의 사용자 HRTF 정보가 추출되는 단계
S300: 단계 S200으로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호가 합성되어 바이노럴 음원이 생성되는 단계
10: 본 발명의 일실시예에 따른 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 시스템
100: 스피커 200: 마이크
300: 사용자 HRTF 정보 추출 모듈 400: 바이노럴 음원 생성 모듈

Claims (7)

  1. 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법으로서,
    (1) 사인 스윕 신호를 N채널의 스피커를 통해 재생시키고, 상기 재생된 신호가 사용자의 양쪽 귀에 장착된 마이크에 녹음되는 단계(S100);
    (2) 상기 단계 (1)에서 녹음된 신호로부터 양쪽 각각의 귀마다 N개의 사용자 HRTF 정보가 추출되는 단계(S200); 및
    (3) 상기 단계 (2)로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호가 합성되어 바이노럴 음원이 생성되는 단계(S300)를 포함하되,
    상기 단계 (1)에서,
    상기 마이크에 녹음된 신호는 사용자의 HRTF 정보와 사인 스윕 신호가 컨볼루션(convolution)된 상태이고,
    상기 단계 (2)에서,
    상기 단계 (1)에서 녹음된 신호와 사인 스윕 신호의 역신호와의 필터링을 통해 상기 사용자의 HRTF 정보가 추출되며,
    상기 단계 (3)에서,
    상기 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호는 하기 수학식을 이용하여 바이노럴 음원으로 합성되는 것을 특징으로 하는, 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용 자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법.
    Figure 112016122536820-pat00011

    여기서, Y는 합성된 바이노럴 음원, X는 원 음원 신호, H는 사용자의 HRTF 정보, L은 왼쪽 귀, R은 오른쪽 귀, i는 채널번호를 각각 나타낸다.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 시스템으로서,
    사인 스윕 신호를 재생시키는 N채널의 스피커(100);
    사용자의 양쪽 귀에 장착되며, 상기 스피커(100)에서 재생된 신호를 녹음하는 마이크(200);
    상기 마이크(200)에서 녹음된 신호로부터 양쪽 각각의 귀마다 N개의 사용자 HRTF 정보를 추출하는 사용자 HRTF 정보 추출 모듈(300); 및
    상기 사용자 HRTF 정보 추출 모듈(300)로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호를 합성하여 바이노럴 음원을 생성하는 바이노럴 음원 생성 모듈(400)을 포함하되,
    상기 마이크(200)에 녹음된 신호는 사용자의 HRTF 정보와 사인 스윕 신호가 컨볼루션(convolution)된 상태이고,
    상기 사용자 HRTF 정보 추출 모듈(300)은,
    상기 마이크(200)에 녹음된 신호와 사인 스윕 신호의 역신호와의 필터링을 통해 사용자의 HRTF 정보를 추출하며,
    상기 바이노럴 음원 생성 모듈(400)은,
    상기 사용자 HRTF 정보 추출 모듈(300)로부터 양쪽 각각의 귀마다 추출된 N개의 사용자 HRTF 정보와 N채널의 원 음원 신호를 하기 수학식을 이용하여 바이노럴 음원으로 합성하는 것을 특징으로 하는, 사용자의 HRTF 정보를 이용하여 N채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 시스템(10).
    Figure 112016122536820-pat00012

    여기서, Y는 합성된 바이노럴 음원, X는 원 음원 신호, H는 사용자의 HRTF 정보, L은 왼쪽 귀, R은 오른쪽 귀, i는 채널번호를 각각 나타낸다.
  6. 삭제
  7. 삭제
KR1020150183238A 2015-12-21 2015-12-21 사용자의 hrtf 정보를 이용하여 n채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템 KR101725952B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150183238A KR101725952B1 (ko) 2015-12-21 2015-12-21 사용자의 hrtf 정보를 이용하여 n채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150183238A KR101725952B1 (ko) 2015-12-21 2015-12-21 사용자의 hrtf 정보를 이용하여 n채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템

Publications (1)

Publication Number Publication Date
KR101725952B1 true KR101725952B1 (ko) 2017-04-11

Family

ID=58580772

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150183238A KR101725952B1 (ko) 2015-12-21 2015-12-21 사용자의 hrtf 정보를 이용하여 n채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템

Country Status (1)

Country Link
KR (1) KR101725952B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109410912A (zh) * 2018-11-22 2019-03-01 深圳市腾讯信息技术有限公司 音频处理的方法、装置、电子设备及计算机可读存储介质
WO2020032991A1 (en) * 2018-08-06 2020-02-13 Facebook Technologies, Llc Customizing head-related transfer functions based on monitored responses to audio content

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090110220A1 (en) * 2007-10-26 2009-04-30 Siemens Medical Instruments Pte. Ltd. Method for processing a multi-channel audio signal for a binaural hearing apparatus and a corresponding hearing apparatus

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090110220A1 (en) * 2007-10-26 2009-04-30 Siemens Medical Instruments Pte. Ltd. Method for processing a multi-channel audio signal for a binaural hearing apparatus and a corresponding hearing apparatus

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020032991A1 (en) * 2018-08-06 2020-02-13 Facebook Technologies, Llc Customizing head-related transfer functions based on monitored responses to audio content
US10638251B2 (en) 2018-08-06 2020-04-28 Facebook Technologies, Llc Customizing head-related transfer functions based on monitored responses to audio content
CN109410912A (zh) * 2018-11-22 2019-03-01 深圳市腾讯信息技术有限公司 音频处理的方法、装置、电子设备及计算机可读存储介质
CN109410912B (zh) * 2018-11-22 2021-12-10 深圳市腾讯信息技术有限公司 音频处理的方法、装置、电子设备及计算机可读存储介质

Similar Documents

Publication Publication Date Title
JP4588945B2 (ja) ２チャネル・ステレオ・フォーマットの左及び右のチャネル入力信号を左及び右のチャネル出力信号に変換する方法及び信号処理装置
CN1658709B (zh) 声音再现设备和声音再现方法
US7715568B2 (en) Binaural sound reproduction apparatus and method, and recording medium
Valimaki et al. Assisted listening using a headset: Enhancing audio perception in real, augmented, and virtual environments
US20060060070A1 (en) Reproduction apparatus and reproduction system
KR100954385B1 (ko) 개인화된 머리전달함수를 이용한 3차원 오디오 신호 처리장치 및 그 방법과, 그를 이용한 고현장감 멀티미디어 재생시스템
ES2862750T3 (es) Método de grabación, método y aparato de reproducción de la grabación y terminal
CN1937854A (zh) 用于再现双声道虚拟声音的装置和方法
CN102972047A (zh) 用于再现立体声的方法和设备
CN1681359A (zh) 拾音装置，拾音方法及记录介质
CN102550048A (zh) 一种装置
KR102527336B1 (ko) 가상 공간에서 사용자의 이동에 따른 오디오 신호 재생 방법 및 장치
CN106792365A (zh) 一种音频播放方法及装置
JP5338053B2 (ja) 波面合成信号変換装置および波面合成信号変換方法
KR101725952B1 (ko) 사용자의 hrtf 정보를 이용하여 n채널의 음원을 사용자에 최적화된 바이노럴 음원으로 다운 믹스하는 방법 및 시스템
WO2017154378A1 (ja) 測定装置、フィルタ生成装置、測定方法、及びフィルタ生成方法
US20200059750A1 (en) Sound spatialization method
JP2005157278A (ja) 全周囲音場創生装置、全周囲音場創生方法、及び全周囲音場創生プログラム
CN203206451U (zh) 一种3d音频处理系统
CN108605197B (zh) 滤波器生成装置、滤波器生成方法以及声像定位处理方法
JP2008219562A (ja) 音声信号生成装置、音場再生装置、音声信号生成方法およびコンピュータプログラム
KR100942143B1 (ko) 기존 오디오 포맷의 오디오 장면 정보를 유지하는 ｗｆｓ재생 방법 및 그 장치
KR100566131B1 (ko) 음상 정위 기능을 가진 입체 음향을 생성하는 장치 및 방법
JP5743003B2 (ja) 波面合成信号変換装置および波面合成信号変換方法
JP5590169B2 (ja) 波面合成信号変換装置および波面合成信号変換方法

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant