KR100733965B1 - 객체기반 오디오 전송/수신 시스템 및 그 방법 - Google Patents
객체기반 오디오 전송/수신 시스템 및 그 방법 Download PDFInfo
- Publication number
- KR100733965B1 KR100733965B1 KR1020050123816A KR20050123816A KR100733965B1 KR 100733965 B1 KR100733965 B1 KR 100733965B1 KR 1020050123816 A KR1020050123816 A KR 1020050123816A KR 20050123816 A KR20050123816 A KR 20050123816A KR 100733965 B1 KR100733965 B1 KR 100733965B1
- Authority
- KR
- South Korea
- Prior art keywords
- audio
- scene
- signal
- audio signal
- block
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 31
- 230000005236 sound signal Effects 0.000 claims abstract description 242
- 230000005540 biological transmission Effects 0.000 claims abstract description 47
- 238000007781 pre-processing Methods 0.000 claims abstract description 22
- 239000000203 mixture Substances 0.000 claims abstract description 11
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims description 10
- 238000010521 absorption reaction Methods 0.000 claims description 9
- 230000015572 biosynthetic process Effects 0.000 claims description 9
- 238000003786 synthesis reaction Methods 0.000 claims description 9
- 238000010276 construction Methods 0.000 claims description 6
- 230000000694 effects Effects 0.000 claims description 4
- 230000002194 synthesizing effect Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 16
- 238000000926 separation method Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Stereophonic System (AREA)
Abstract
1. 청구범위에 기재된 발명이 속한 기술분야
본 발명은 객체기반의 오디오를 서비스하기 위한 객체기반 오디오 전송/수신 시스템 및 그 방법에 관한 것임.
2. 발명이 해결하려고 하는 기술적 과제
본 발명은 사용자에게 편집자가 의도하는 객체기반의 오디오 장면을 제공하고, 사용자가 자신의 취향에 따라 오디오 장면을 변경할 수 있도록 하기 위한, 객체기반 오디오 전송/수신 시스템 및 그 방법을 제공하는데 그 목적이 있음.
3. 발명의 해결방법의 요지
본 발명은, 객체기반 오디오 전송 시스템에 있어서, 외부의 다양한 소스로부터 오디오신호를 입력받아 전처리 과정을 통해 객체 오디오신호를 생성하기 위한 전처리 수단; 상기 전처리 수단으로부터의 객체 오디오신호를 편집하여 오디오 장면을 구성하기 위한 객체기반 오디오 편집 수단; 상기 객체기반 오디오 편집 수단으로부터의 객체 오디오신호와 오디오 장면에 관한 정보를 부호화하고 다중화하여 객체기반 오디오 콘텐츠를 생성하기 위한 객체기반 오디오 부호화 수단; 및 상기 객체기반 오디오 부호화 수단으로부터의 객체기반 오디오 콘텐츠를 전송하기 위한 전송 수단을 포함함.
4. 발명의 중요한 용도
본 발명은 객체기반의 오디오 서비스 등에 이용됨.
객체기반 오디오, 오디오 장면구성, 오디오 장면합성, 사용자 제어
Description
도 1은 본 발명에 따른 객체기반 오디오 전송/수신 시스템의 일실시예 전체 구성도,
도 2는 도 1의 전처리부의 일실시예 상세 구성도,
도 3은 도 1의 객체기반 오디오 편집부의 일실시예 상세 구성도,
도 4는 도 1의 객체기반 오디오 부호화부의 일실시예 상세 구성도,
도 5는 도 1의 객체기반 오디오 복호화부의 일실시예 상세 구성도,
도 6은 도 1의 객체기반 오디오 장면합성부의 일실시예 상세 구성도,
도 7은 도 1의 재생부의 일실시예 상세 구성도,
도 8은 도 1의 사용자 제어부의 일실시예 상세 구성도,
도 9는 본 발명에 따른 객체기반 오디오 전송 방법에 대한 일실시예 흐름도,
도 10은 본 발명에 따른 객체기반 오디오 수신 방법에 대한 일실시예 흐름도이다.
* 도면의 주요 부분에 대한 부호의 설명
100 : 전처리부 110 : 오디오신호 입력블록
120 : 음원분리블록 200 : 객체기반 오디오 편집부
210 : 오디오 편집블록 220 : 오디오 장면구성블록
230 : 역다중화 및 복호화블록 240 : 비디오신호 입력블록
250 : 멀티채널 오디오 부호화블록 300 : 객체기반 오디오 부호화부
310 : 오디오 부호화블록 320 : 부가데이터 부호화블록
330 : 다중화블록 400 : 전송부
500 : 수신부 600 : 객체기반 오디오 복호화부
610 : 복호화블록 620 : 부가데이터 복호화블록
630 : 멀티채널 오디오 복호화블록 640 : 역다중화블록
700 : 객체기반 오디오 장면합성부 710 : 객체 오디오신호 위치 제어블록
720 : 객체 오디오신호 공간 제어블록
730 : 객체 오디오신호 기타 제어블록
740 : 오디오 장면생성블록 800 : 재생부
810 : 재생공간 제어블록 820 : 오디오 출력블록
830 : 비디오 출력블록 900 : 사용자 제어부
910 : GUI 블록 920 : 오디오 장면제어신호 생성블록
930 : 오디오 재생제어신호 생성블록
본 발명은 객체기반의 오디오를 서비스하기 위한 객체기반 오디오 전송/수신 시스템 및 그 방법에 관한 것으로, 더욱 상세하게는 오디오신호를 객체별로 제어하여 오디오 장면을 구성할 수 있는 대화형 오디오 서비스를 위한 객체기반 오디오 전송/수신 시스템 및 그 방법에 관한 것이다.
본 발명에서 오디오 장면은 공간에 대한 정보와 음원의 공간상의 위치정보를 포함하여 이루어진다. 여기서, 공간에 대한 정보는 음원이 속해 있는 공간의 음향학적 특성을 나타내는 것으로, 공간의 크기, 형태, 내부의 음에 대한 반사, 흡수, 및 투과 등의 특성을 의미한다. 그리고 공간상의 위치정보는 사용자의 가상 위치를 중심으로 음원과의 거리, 수평/수직 면상의 각도 등의 특성을 의미한다.
한편, 종래의 스테레오나 멀티채널 기반의 오디오기술에 있어서, 사용자는 편집자가 편집한 의도에 따른 오디오신호만을 청취할 수 있었다. 즉, 종래의 스테레오나 멀티채널 기반의 오디오 전송 시스템에서는 다양한 마이크를 이용하여 획득한 오디오신호를 스테레오나 멀티채널로 다운믹스하여 사용자에게 전달하고, 사용자는 편집자가 의도한 오디오 신호만을 수동적으로 청취할 수밖에 없었다.
기존 스테레오나 멀티채널 음원에 방향성이나 거리/공간감 등을 추가한 3차원 오디오 기술은 청취자에게 좀 더 사실적인 오디오신호를 제공하고 있다. 그러나 이때 역시 사용자는 수동적인 입장에서 청취할 수밖에 없었다.
본 발명은 상기 문제점을 해결하기 위하여 제안된 것으로, 편집자가 의도하는 객체기반의 다양한 오디오 장면을 사용자에게 전달할 수 있도록 하기 위한, 객체기반 오디오 전송 시스템 및 그 방법을 제공하는데 그 목적이 있다.
또한, 본 발명은 사용자가 편집자의 다양한 객체기반 오디오 장면 중 자신의 취향에 따른 오디오 장면을 선택할 수 있고, 사용자가 자신의 취향에 따라 오디오 장면을 변경하여 임의의 오디오 장면을 구성할 수 있도록 하기 위한, 객체기반 오디오 수신 시스템 및 그 방법을 제공하는데 다른 목적이 있다.
본 발명의 또 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
상기 목적을 달성하기 위한 본 발명의 시스템은, 객체 오디오신호를 생성하기 위한 전처리 수단과, 상기 객체 오디오신호를 편집하여 오디오 장면을 구성하기 위한 객체기반 오디오 편집 수단과, 객체기반 오디오 부호화 수단과, 전송 수단을 포함하는 오디오 전송 시스템에 있어서, 상기 객체기반 오디오 편집 수단은, 객체기반 오디오 콘텐츠에 편집자의 다양한 오디오 장면 구성에 관한 장면 부가데이터를 추가하기 위해, 상기 전처리 수단으로부터의 객체 오디오신호를 편집하기 위한 오디오 편집블록; 상기 오디오 편집블록으로부터의 객체 오디오신호를 이용하여 오디오 장면을 구성하기 위한 오디오 장면구성블록; 및 상기 전처리 수단으로부터의 멀티채널 오디오신호를 입력받아 부호화하기 위한 멀티채널 오디오 부호화블록을 포함하되, 상기 오디오 장면구성블록에 의해 구성된 오디오 장면은, 가상의 사용자 위치에서 각 객체별 오디오까지의 거리 정보와 가상 사용자 위치에서의 객체별 오디오신호의 수평 및 수직 각도에 대한 정보와 같은 객체 오디오신호의 위치정보와, 공간의 크기, 형태, 잔향 시간, 내부의 음에 대한 반사, 흡수, 및 투과와 같은 특성과 같은 오디오 장면의 공간정보와, 객체별 음원의 레벨 및 형태 정보와 같은 기타정보를 포함하는 것을 특징으로 한다.
상기 다른 목적을 달성하기 위한 본 발명의 시스템은, 객체기반 오디오 콘텐츠를 수신하기 위한 수신 수단과, 객체기반 오디오 복호화 수단과, 사용자로부터의 제어에 따라 오디오 장면 구성을 위한 장면 사용자 제어신호 및 재생 환경 설정을 위한 재생 사용자 제어신호를 출력하기 위한 사용자 제어 수단과, 객체기반 오디오 장면합성 수단과, 재생 수단을 포함하는 객체기반 오디오 수신 시스템에 있어서, 상기 사용자 제어 수단은, 다양한 오디오 장면에 관한 정보를 사용자에게 제공하여 사용자가 원하는 장면을 선택할 수 있도록 하기 위해, 오디오 장면의 구성을 위해 각각의 객체를 제어하기 위한 사용자 인터페이스를 제공하기 위한 인터페이스 블록; 상기 인터페이스 블록으로부터의 장면 사용자 제어정보에 따라 오디오 장면에 관한 장면 사용자 제어신호를 생성하기 위한 오디오 장면제어신호 생성블록; 및 상기 인터페이스 블록으로부터의 재생 사용자 제어정보에 따라 재생환경에 대한 재생 사용자 제어신호를 생성하기 위한 오디오 재생제어신호 생성블록을 포함하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 본 발명의 방법은, 다양한 소스로부터 오디오신호를 입력받아 전처리 과정을 통해 객체 오디오신호를 생성하는 단계; 상기 생성한 객체 오디오신호를 편집하여 오디오 장면을 구성하는 객체기반 오디오 편집 단계; 상기 편집한 객체 오디오신호와 상기 구성한 오디오 장면에 관한 정보를 부호화하고 다중화하여 객체기반 오디오 콘텐츠를 생성하는 단계; 및 상기 생성한 객체기반 오디오 콘텐츠를 전송하는 단계를 포함하되, 상기 객체기반 오디오 편집 단계는, 객체기반 오디오 콘텐츠에 편집자의 다양한 오디오 장면 구성에 관한 장면 부가데이터가 추가되는데, 상기 장면 부가데이터는, 가상의 사용자 위치에서 각 객체별 오디오까지의 거리 정보와 가상 사용자 위치에서의 객체별 오디오신호의 수평 및 수직 각도에 대한 정보와 같은 객체 오디오신호의 위치정보와, 공간의 크기, 형태, 잔향 시간, 내부의 음에 대한 반사, 흡수, 및 투과와 같은 특성과 같은 오디오 장면의 공간정보와, 객체별 음원의 레벨 및 형태 정보와 같은 기타정보를 포함하는 것을 특징으로 한다.
삭제
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명하기로 한다.
도 1은 본 발명에 따른 객체기반 오디오 전송/수신 시스템의 일실시예 전체 구성도이다.
도 1에 도시된 바와 같이, 본 발명에 따른 객체기반 오디오 전송 시스템은 전처리부(100), 객체기반 오디오 편집부(200), 객체기반 오디오 부호화부(300), 및 전송부(400)를 포함하고 있으며, 오디오신호를 입력받아 객체기반으로 편집한 후 비디오신호 및 부가데이터를 이용하여 다중화한 후 매체(예 : 유/무선 통신시스템)를 통해 객체기반 오디오 수신 시스템 측으로 전송한다.
이를 좀 더 구체적으로 살펴보면, 본 발명에 따른 객체기반 오디오 전송 시스템은 외부의 다양한 소스로부터 오디오신호를 입력받아 전처리 과정을 통해 객체 오디오신호를 생성하기 위한 전처리부(100), 상기 전처리부(100)로부터의 객체 오디오신호를 편집하여 오디오 장면을 구성하기 위한 객체기반 오디오 편집부(200), 상기 객체기반 오디오 편집부(200)로부터의 객체 오디오신호와 오디오 장면에 관한 정보를 부호화하고 다중화하여 객체기반 오디오 콘텐츠를 생성하기 위한 객체기반 오디오 부호화부(300), 및 상기 객체기반 오디오 부호화부(300)로부터의 객체기반 오디오 콘텐츠를 다양한 매체를 통해 전송하기 위한 전송부(400)를 포함한다. 이에 대한 구체적인 실시예는 도 2 내지 도 4를 참조하여 후술하기로 한다.
한편, 본 발명에 따른 객체기반 오디오 수신 시스템은 수신부(500), 객체기반 오디오 복호화부(600), 객체기반 오디오 장면합성부(700), 재생부(800), 및 사용자 제어부(900)를 포함하고 있으며, 상기 매체(예 : 유/무선 통신시스템)를 통해 객체기반 오디오 전송 시스템 측으로부터 객체기반 오디오 콘텐츠를 수신한 후에, 사용자 제어에 따라 오디오 장면을 구성하여 출력한다.
이를 좀 더 구체적으로 살펴보면, 본 발명에 따른 객체기반 오디오 수신 시스템은 상기 객체기반 오디오 전송 시스템 측으로부터 매체를 통하여 전송된 객체기반 오디오 콘텐츠를 수신하기 위한 수신부(500), 상기 수신부(500)로부터의 객체 기반 오디오 콘텐츠(예 : 객체 오디오신호 및 오디오 장면에 관한 부가데이터 등)를 복호화하기 위한 객체기반 오디오 복호화부(600), 사용자로부터의 제어에 따라 오디오 장면 구성을 위한 장면 사용자 제어신호 및 재생 환경 설정을 위한 재생 사용자 제어신호를 출력하기 위한 사용자 제어부(900), 상기 사용자 제어부(900)로부터의 장면 사용자 제어신호에 따라 상기 객체기반 오디오 복호화부(600)로부터의 객체기반 오디오 콘텐츠(예 : 객체 오디오신호 및 오디오 장면에 관한 부가데이터 등)를 이용하여 오디오 장면을 구성하기 위한 객체기반 오디오 장면합성부(700), 및 상기 사용자 제어부(900)로부터의 재생 사용자 제어신호에 따라 객체기반 오디오 장면합성부(700)로부터의 객체기반 오디오 콘텐츠(예 : 객체 오디오신호 및 오디오 장면에 관한 부가데이터 등)를 재생하기 위한 재생부(800)를 포함한다. 이에 대한 구체적인 실시예는 도 5 내지 도 8을 참조하여 후술하기로 한다.
한편, 외부로부터 상기 객체기반 오디오 편집부(200)로 입력되는 비디오신호, 객체기반 오디오 콘텐츠, 및 멀티채널 오디오신호는 본 발명의 부가 구성요소로서, 이에 대해서는 도 3을 참조하여 상세히 후술하기로 한다. 또한, 외부로부터 상기 객체기반 오디오 복호화부(600)로 입력되는 객체기반 오디오 콘텐츠도 본 발명의 부가 구성요소로서, 이에 대해서는 도 5를 참조하여 상세히 후술하기로 한다.
도 2는 도 1의 전처리부의 일실시예 상세 구성도이다.
도 2에 도시된 바와 같이, 상기 전처리부(100)는 외부로부터 객체 오디오신호와 멀티채널 오디오신호를 입력받기 위한 오디오신호 입력블록(110)과, 외부로부터 혼합 오디오신호를 입력받아 음원 분리 과정을 통해 객체 오디오신호를 생성하 기 위한 음원분리블록(120)을 포함한다.
여기서, 상기 오디오신호 입력블록(110)은 외부의 다양한 음원 소스로부터 객체 오디오신호와 멀티채널 오디오신호를 입력받아 객체기반 오디오 편집부(200)로 전달한다.
그리고 상기 음원분리블록(120)은 다양한 오디오신호가 혼합되어있는 음원(혼합 오디오신호)이 입력된 경우, 혼합 오디오신호를 객체별로 분리하여 객체 오디오신호를 생성하여 객체기반 오디오 편집부(200)로 출력한다. 예를 들어, 상기 음원분리블록(120)은 지향성 마이크로폰 등을 이용하여 획득한 오디오신호가 입력된 경우, 각 오디오신호의 음원분리도를 향상시킨 객체 오디오신호를 생성한다.
도 3은 도 1의 객체기반 오디오 편집부의 일실시예 상세 구성도이다.
도 3에 도시된 바와 같이, 상기 객체기반 오디오 편집부(200)는 상기 전처리부(100)의 오디오신호 입력블록(110)과 음원분리블록(120)으로부터의 객체 오디오신호를 편집하기 위한 오디오 편집블록(210), 상기 오디오 편집블록(210)으로부터의 객체 오디오신호를 이용하여 오디오 장면을 구성하기 위한 오디오 장면구성블록(220), 및 상기 전처리부(100)의 오디오신호 입력블록(110)으로부터의 멀티채널 오디오신호를 입력받아 부호화하기 위한 멀티채널 오디오 부호화블록(250)을 포함한다. 또한, 부가적으로 역다중화 및 복호화블록(230)이나 비디오신호 입력블록(240)을 더 포함하여 구현할 수도 있다. 이에 대한 구성 및 동작을 구체적으로 살펴보면 다음과 같다.
예를 들어, 상기 객체기반 오디오 편집부(200)는 외부로부터 입력되는 기 제작한 객체기반 오디오 콘텐츠를 역다중화 및 복호화하기 위한 역다중화 및 복호화블록(230), 외부로부터 비디오신호를 입력받기 위한 비디오신호 입력블록(240), 상기 전처리부(100)의 오디오신호 입력블록(110)과 음원분리블록(120)으로부터의 객체 오디오신호 및 상기 역다중화 및 복호화블록(230)으로부터의 객체 오디오신호를 편집하기 위한 오디오 편집블록(210), 상기 오디오 편집블록(210)으로부터의 객체 오디오신호 및 상기 역다중화 및 복호화블록(230)으로부터의 장면 부가데이터를 이용하여 오디오 장면을 구성하기 위한 오디오 장면구성블록(220), 및 상기 전처리부(100)의 오디오신호 입력블록(110)으로부터의 멀티채널 오디오신호 및 외부로부터의 멀티채널 오디오신호를 입력받아 부호화하기 위한 멀티채널 오디오 부호화블록(250)을 포함한다.
여기서, 상기 오디오 편집블록(210)은 상기 전처리부(100)의 오디오신호 입력블록(110)과 음원분리블록(120)으로부터 객체 오디오신호를 입력받거나 부가적으로 상기 역다중화 및 복호화블록(230)으로부터 객체 오디오신호를 더 입력받아 오디오신호에 따라 믹싱과 음향효과 편집을 추가한 객체 오디오신호를 생성하여 상기 오디오 장면구성블록(220)으로 출력한다. 여기서, 음향효과 편집은 음원의 레벨, 잔향 추가, 변조 등의 다양한 음향효과 편집을 의미한다. 즉, 상기 오디오 편집블록(210)은 객체 오디오신호를 믹싱하여 시스템에서 처리 가능한 수만큼의 오디오 객체를 생성하고, 그 오디오 객체에 대해 잔향, 변조 등 다양한 음향 신호처리를 수행하여 객체 오디오신호를 생성한다.
그리고 오디오 장면구성블록(220)은 상기 오디오 편집블록(210)으로부터 객 체 오디오신호를 입력받거나 부가적으로 상기 역다중화 및 복호화블록(230)으로부터 장면 부가데이터를 더 입력받아 편집자가 객체 오디오신호를 오디오 장면 상에 배치하여 오디오 장면을 구성할 수 있도록 한다. 여기서, 오디오 장면은 객체 오디오신호의 위치정보와 오디오 장면의 공간정보 및 기타정보 등을 포함한다. 상기 객체 오디오신호의 위치정보는 가상의 사용자 위치에서 각 객체별 오디오까지의 거리 정보와 가상 사용자 위치에서의 객체별 오디오신호의 수평 및 수직 각도에 대한 정보를 포함한다. 그리고 오디오 장면의 공간정보는 각 객체별 오디오신호가 존재하는 공간에 대한 정보를 의미하는 것으로, 공간의 크기, 형태, 잔향 시간, 내부의 음에 대한 반사, 흡수, 및 투과 등의 특성을 포함한다. 그리고 기타정보는 객체별 음원의 레벨 및 형태 정보를 포함한다. 이때, 오디오 장면구성블록(220)은 편집자가 객체 오디오신호를 이용하여 구성한 오디오 장면에 관한 정보를 장면 부가데이터 형태로 객체기반 오디오 부호화부(300)로 객체 오디오신호와 함께 출력한다. 이처럼, 편집자가 오디오 장면구성블록(220)에서 객체 오디오신호를 이용하여 다양한 오디오 장면을 구성할 수 있도록 한다. 그에 따라, 사용자는 편집자가 구성한 다양한 오디오 장면 중 자신의 취향에 따른 오디오 장면을 선택하여 청취하게 된다.
즉, 편집자가 하나의 객체기반 오디오 콘텐츠에 다양한 오디오 장면을 구성하여 전송함으로써 수신 시스템에서 사용자가 편집자가 의도한 다양한 장면 중 자신의 취향에 따른 오디오 장면을 선택하여 청취할 수 있도록, 객체기반 오디오 콘텐츠에 편집자의 다양한 오디오 장면 구성에 관한 장면 부가데이터를 추가한다.
그리고 상기 역다중화 및 복호화블록(230)은 이전에 제작한 객체기반 오디 오 콘텐츠를 편집자가 다시 편집할 수 있도록 하기 위해, 외부로부터 입력되는 객체기반 오디오 콘텐츠를 역다중화 및 복호화하여 객체 오디오신호/비디오신호/장면 부가데이터/부호화된 멀티채널 다운믹스신호/멀티채널 부가데이터를 생성하여 각 블록으로 출력한다.
그리고 상기 비디오신호 입력블록(240)은 부가 구성요소로서, 오디오 장면의 배경이 되는 비디오신호를 외부로부터 입력받아 객체기반 오디오 부호화부(300)로 출력하는 기능을 수행한다.
그리고 상기 멀티채널 오디오 부호화블록(250)은 상기 전처리부(100)의 오디오신호 입력블록(110)으로부터 멀티채널 오디오신호를 입력받거나 부가적으로 외부로부터의 멀티채널 오디오신호를 더 입력받아 모노나 스테레오로 다운믹스하고, 다시 멀티채널로 확장하기 위한 멀티채널 부가데이터를 추출한다. 즉, 상기 멀티채널 오디오 부호화블록(250)은 배경음으로 멀티채널 오디오신호가 입력된 경우, 멀티채널 오디오신호를 모노나 스테레오 형태로 다운믹스하여 객체기반 오디오 부호화부(300)로 출력하고, 멀티채널 오디오에 관한 정보를 멀티채널 부가데이터 형태로 객체기반 오디오 부호화부(300)로 출력하는 기능을 수행한다. 여기서, 멀티채널 부가데이터는 다운믹스한 모노나 스테레오신호를 다시 멀티채널로 확장하기 위한 정보이고, 배경음은 출력 시스템에서 사용자가 제어할 수 있는 객체 오디오신호를 제외한 오디오신호를 의미한다.
도 4는 도 1의 객체기반 오디오 부호화부의 일실시예 상세 구성도이다.
도 4에 도시된 바와 같이, 상기 객체기반 오디오 부호화부(300)는 상기 객 체기반 오디오 편집부(200)로부터의 객체 오디오신호를 부호화하기 위한 오디오 부호화블록(310), 상기 객체기반 오디오 편집부(200)로부터의 오디오 장면에 관한 정보인 장면 부가데이터를 부호화하기 위한 부가데이터 부호화블록(320), 및 상기 오디오 부호화블록(310)에서 부호화한 오디오신호, 상기 부가데이터 부호화블록(320)에서 부호화한 장면 부가데이터, 상기 객체기반 오디오 편집부(200)로부터의 부호화된 멀티채널 다운믹스신호와 멀티채널 부가데이터를 다중화하여 객체기반 오디오 콘텐츠를 생성하기 위한 다중화 블록(330)을 포함한다. 또한, 부가적으로 상기 다중화 블록(330)이 비디오신호를 더 입력받도록 구현할 수도 있다. 이에 대한 구성 및 동작을 구체적으로 살펴보면 다음과 같다.
예를 들어, 상기 객체기반 오디오 부호화부(300)는 상기 객체기반 오디오 편집부(200)로부터의 객체 오디오신호를 부호화하기 위한 오디오 부호화블록(310), 상기 객체기반 오디오 편집부(200)로부터의 오디오 장면에 관한 정보인 장면 부가데이터를 부호화하기 위한 부가데이터 부호화블록(320), 및 상기 오디오 부호화블록(310)에서 부호화한 오디오신호, 상기 부가데이터 부호화블록(320)에서 부호화한 장면 부가데이터, 상기 객체기반 오디오 편집부(200)로부터의 부호화된 멀티채널 다운믹스신호와 멀티채널 부가데이터와 비디오신호를 다중화하여 객체기반 오디오 콘텐츠를 생성하기 위한 다중화 블록(330)을 포함한다.
한편, 상기 전송부(400)는 상기 다중화 블록(330)으로부터의 객체기반 오디오 콘텐츠를 다양한 매체(예 : 유/무선 통신시스템)를 통해 사용자에게 전달하기 위한 변환을 수행한다. 이때, 상기 전송부(400)는 상기 다중화 블록(330)에서 생성 한 객체기반 오디오 콘텐츠를 역다중화하여 각 데이터별로 객체기반 오디오 수신 시스템 측으로 전송하거나, 상기 다중화 블록(330)에서 생성한 객체기반 오디오 콘텐츠를 객체기반 오디오 수신 시스템 측으로 전송하여 수신부(500)에서 역다중화하도록 하는 등의 다양한 방식으로 구현할 수 있다.
한편, 상기 수신부(500)는 상기 객체기반 오디오 전송 시스템 측으로부터 다양한 매체를 통하여 전송된 객체기반 오디오 콘텐츠에서 부호화된 객체 오디오신호/장면 부가데이터/멀티채널 다운믹스신호/멀티채널 부가데이터를 추출하여 객체기반 오디오 복호화부(600)로 전달한다. 또는, 상기 수신부(500)는 전술한 예에 상응하여 동작하도록 하기 위해, 상기 객체기반 오디오 전송 시스템 측으로부터 다양한 매체를 통하여 전송된 객체기반 오디오 콘텐츠에서 부호화된 객체 오디오신호/비디오신호/장면 부가데이터/멀티채널 다운믹스신호/멀티채널 부가데이터를 객체기반 오디오 복호화부(600)로 전달하도록 구현할 수도 있다. 이때, 상기 수신부(500)는 상기 객체기반 오디오 전송 시스템 측으로부터 수신한 객체기반 오디오 콘텐츠가 다중화되어 있는 경우에, 이를 역다중화하여 상기 각 데이터를 추출하는 방식으로 구현할 수도 있다.
도 5는 도 1의 객체기반 오디오 복호화부의 일실시예 상세 구성도이다.
도 5에 도시된 바와 같이, 상기 객체기반 오디오 복호화부(600)는 상기 수신부(500)로부터의 부호화된 객체 오디오신호를 복호화하기 위한 복호화블록(610), 상기 수신부(500)로부터의 부호화된 장면 부가데이터를 복호화하기 위한 부가데이터 복호화블록(620), 및 상기 수신부(500)로부터의 부호화된 멀티채널 다운믹스신 호와 멀티채널 부가데이터를 이용하여 멀티채널 오디오신호로 복호화하기 위한 멀티채널 오디오 복호화블록(630)을 포함한다. 또한, 부가적으로 역다중화블록(640)을 더 포함하여 구현할 수도 있다. 이에 대한 구성 및 동작을 구체적으로 살펴보면 다음과 같다.
예를 들어, 상기 객체기반 오디오 복호화부(600)는 외부로부터 입력된 기 제작한 객체기반 오디오 콘텐츠를 역다중화하여 부호화된 객체 오디오신호/비디오신호/장면 부가데이터/멀티채널 다운믹스신호/멀티채널 부가데이터를 생성하기 위한 역다중화블록(640), 상기 수신부(500)로부터의 부호화된 객체 오디오신호/비디오신호와 상기 역다중화블록(640)으로부터의 부호화된 객체 오디오신호/비디오신호를 복호화하기 위한 복호화블록(610), 상기 수신부(500)로부터의 부호화된 장면 부가데이터와 상기 역다중화블록(640)으로부터의 부호화된 장면 부가데이터를 복호화하기 위한 부가데이터 복호화블록(620), 및 상기 수신부(500)로부터의 부호화된 멀티채널 다운믹스신호와 멀티채널 부가데이터 및 상기 역다중화블록(640)으로부터의 부호화된 멀티채널 다운믹스신호와 멀티채널 부가데이터를 이용하여 멀티채널 오디오신호로 복호화하기 위한 멀티채널 오디오 복호화블록(630)을 포함한다.
즉, 상기 복호화블록(610)은 상기 수신부(500)로부터 부호화된 객체 오디오신호/비디오신호를 입력받거나 부가적으로 상기 역다중화블록(640)으로부터 부호화된 객체 오디오신호/비디오신호를 더 입력받아 상기 부호화된 객체 오디오신호와 비디오신호를 복호화하여 객체 오디오신호 및 비디오신호를 생성하여 객체기반 오디오 장면합성부(700)로 출력한다.
그리고 상기 부가 데이터 복호화블록(620)은 상기 수신부(500)로부터의 부호화된 장면 부가데이터를 입력받거나 부가적으로 상기 역다중화블록(640)으로부터의 부호화된 장면 부가데이터를 더 입력받아 상기 부호화된 오디오 장면에 관한 장면 부가데이터를 복호화하여 장면 부가데이터를 생성하여 객체기반 오디오 장면합성부(700)로 출력한다.
그리고 상기 멀티채널 오디오 복호화블록(630)은 상기 수신부(500)로부터의 부호화된 멀티채널 다운믹스신호와 멀티채널 부가데이터를 입력받거나 부가적으로 상기 역다중화블록(640)으로부터의 부호화된 멀티채널 다운믹스신호와 멀티채널 부가데이터를 더 입력받아 상기 부호화된 멀티채널 다운믹스신호와 멀티채널 부가데이터를 이용하여 멀티채널 오디오신호를 생성하여 객체기반 오디오 장면합성부(700)로 출력한다.
그리고 상기 역다중화블록(640)은 외부로부터 기 제작되어 있는 객체기반 오디오 콘텐츠를 입력받아 역다중화하여 부호화된 객체 오디오신호/비디오신호/장면 부가데이터/멀티채널 다운믹스신호/멀티채널 부가데이터를 추출하여 해당 복호화블록으로 출력한다.
도 6은 도 1의 객체기반 오디오 장면합성부의 일실시예 상세 구성도이다.
도 6에 도시된 바와 같이, 상기 객체기반 오디오 장면합성부(700)는 상기 객체기반 오디오 복호화부(600)로부터의 객체 오디오신호와 장면 부가데이터 및 사용자 제어부(900)로부터의 장면 사용자 제어신호를 이용하여 객체 오디오신호의 위치를 제어하기 위한 객체 오디오신호 위치제어블록(710), 상기 객체기반 오디오 복 호화부(600)로부터의 객체 오디오신호와 장면 부가데이터 및 사용자 제어부(900)로부터의 장면 사용자 제어신호를 이용하여 오디오 장면의 공간을 제어하기 위한 객체 오디오신호 공간 제어블록(720), 상기 객체기반 오디오 복호화부(600)로부터의 객체 오디오신호와 장면 부가데이터 및 사용자 제어부(900)로부터의 장면 사용자 제어신호를 이용하여 객체 오디오신호의 레벨(크기)이나 형태 등을 변경하기 위한 객체 오디오신호 기타 제어블록(730), 및 상기 객체 오디오신호 위치제어블록(710)으로부터의 객체 오디오신호와 위치 제어신호, 상기 객체 오디오신호 공간 제어블록(720)으로부터의 객체 오디오신호와 공간 제어신호, 상기 객체 오디오신호 기타 제어블록(730)으로부터의 객체 오디오신호와 기타 제어신호 및 상기 객체기반 오디오 복호화부(600)로부터의 멀티채널 오디오신호를 이용하여 오디오 장면을 생성하기 위한 오디오 장면생성블록(740)을 포함한다. 이때, 상기 오디오 장면생성블록(740)은 부가적으로 상기 객체기반 오디오 복호화부(600)로부터 비디오신호를 더 입력받아 재생부(800)로 출력하는 기능을 더 수행할 수도 있다.
즉, 상기 객체 오디오신호 위치 제어블록(710)은 상기 객체기반 오디오 복호화부(600)로부터의 객체 오디오신호와 장면 부가데이터 및 사용자 제어부(900)로부터의 장면 사용자 제어신호 중에서 객체 오디오신호의 위치 제어에 관한 정보를 이용하여 객체 오디오신호의 위치를 제어하여 객체 오디오신호와 위치 제어신호를 오디오 장면생성블록(740)으로 출력한다. 여기서, 객체 오디오신호의 위치는 가상의 사용자 위치를 중심으로 각각의 객체 오디오신호와의 거리 및 수평/수직 각도 정보를 포함한다.
그리고 상기 객체 오디오신호 공간 제어블록(720)은 상기 객체기반 오디오 복호화부(600)로부터의 객체 오디오신호와 장면 부가데이터 및 사용자 제어부(900)로부터의 장면 사용자 제어신호 중에서 오디오 장면의 공간 특성에 관한 정보를 이용하여 객체 오디오신호의 공간에 대한 특성을 제어하여 객체 오디오신호와 공간 제어신호를 오디오 장면생성블록(740)으로 출력한다. 여기서, 공간 특성에 관한 정보는 공간의 크기, 형태, 잔향 시간, 내부의 음에 대한 반사, 흡수, 투과 등의 특성을 포함한다.
그리고 상기 객체 오디오신호 기타 제어블록(730)은 상기 객체기반 오디오 복호화부(600)로부터의 객체 오디오신호와 장면 부가데이터 및 사용자 제어부(900)로부터의 장면 사용자 제어신호 중에서 객체 오디오 신호에 대한 기타 제어정보(오디오 객체의 레벨이나 형태에 관한 정보)를 이용하여 객체 오디오신호의 기타 특성(오디오 객체의 레벨이나 형태)을 제어하여 객체 오디오신호와 기타 제어신호를 오디오 장면생성블록(740)으로 출력한다. 여기서, 기타 제어정보는 객체 오디오신호의 크기(레벨) 및 형태에 관한 정보를 포함한다.
그리고 상기 오디오 장면생성블록(740)은 상기 객체 오디오신호 위치제어블록(710)으로부터의 객체 오디오신호와 위치 제어신호, 상기 객체 오디오신호 공간 제어블록(720)으로부터의 객체 오디오신호와 공간 제어신호, 상기 객체 오디오신호 기타 제어블록(730)으로부터의 객체 오디오신호와 기타 제어신호 및 상기 객체기반 오디오 복호화부(600)로부터의 멀티채널 오디오신호를 이용하여 오디오 장면을 생성하여 오디오신호를 재생부(800)로 출력한다.
도 7은 도 1의 재생부의 일실시예 상세 구성도이다.
도 7에 도시된 바와 같이, 상기 재생부(800)는 객체기반 오디오 장면합성부(700)로부터의 오디오신호와 사용자 제어부(900)로부터의 재생 사용자 제어신호를 이용하여 재생공간을 등화하기 위한 재생공간 제어블록(810), 및 상기 재생공간 제어블록(810)으로부터의 오디오신호를 출력하기 위한 오디오 출력블록(820)을 포함한다. 이때, 상기 재생부(800)는 객체기반 오디오 장면합성부(700)로부터의 비디오신호를 출력하기 위한 비디오출력블록(830)을 더 구비할 수도 있다.
즉, 상기 재생공간 제어블록(810)은 객체기반 오디오 장면합성부(700)로부터의 오디오신호와 사용자 제어부(900)로부터의 재생 사용자 제어신호(오디오신호를 재생하기 위한 재생환경에 대한 정보)를 이용하여 재생공간의 특성을 등화시키는 기능을 수행한다. 여기서, 재생공간의 등화는 사용자로부터의 재생환경의 크기/형태/특성 및 스피커 위치 등에 관한 정보를 이용하여 이 특성을 제거하는 것으로, 재생환경이 다르더라도 동일한 오디오신호를 출력시키기 위한 것이다. 즉, 재생환경 등화는 재생공간의 스피커 배치나 재생공간의 크기 등의 특성 정보를 등화시켜서 재생공간의 특성이 다른 환경에서도 동일한 오디오신호를 사용자가 청취할 수 있도록 처리하는 과정이다.
그리고 상기 오디오 출력블록(820)과 비디오 출력블록(830)은 최종 출력장치를 통해 오디오신호와 비디오신호를 출력한다.
도 8은 도 1의 사용자 제어부의 일실시예 상세 구성도이다.
도 8에 도시된 바와 같이, 상기 사용자 제어부(900)는 오디오 장면의 구성 을 위해 각각의 객체를 제어하기 위한 사용자 인터페이스를 제공하기 위한 GUI(Graphic User Interface) 블록(910), 상기 GUI 블록(910)으로부터의 장면 사용자 제어정보에 따라 오디오 장면에 관한 장면 사용자 제어신호를 생성하기 위한 오디오 장면제어신호 생성블록(920), 및 상기 GUI 블록(910)으로부터의 재생 사용자 제어정보에 따라 재생환경에 대한 재생 사용자 제어신호를 생성하기 위한 오디오 재생제어신호 생성블록(930)을 포함한다.
즉, 상기 GUI 블록(910)은 사용자 인터페이스를 통해 사용자가 오디오 장면을 제어하거나 재생공간의 특성을 설정하기 위한 인터페이스로서, 그래픽 사용자 인터페이스(Graphic User Interface) 형태로 사용자가 오디오 객체의 위치나 크기/형태 등 기타 속성을 제어하거나, 오디오 장면의 특성 및 재생환경의 특성을 제어할 수 있도록 인터페이스를 제공한다.
또한, 본 발명에서는 편집자가 하나의 객체기반 오디오 콘텐츠에 다양한 오디오 장면에 대한 정보를 다중화한 경우, 다양한 오디오 장면에 관한 정보를 예를 들어 그래픽 사용자 인터페이스 등을 통하여 사용자에게 제공하여 사용자가 원하는 장면을 선택할 수 있도록 한다(도면에 도시되지 않음).
그리고 상기 오디오 장면제어신호 생성블록(920)은 사용자가 그래픽 사용자 인터페이스(Graphic User Interface)를 통해 오디오 장면에 관한 정보를 변경하는 경우, 상기 GUI 블록(910)으로부터의 장면 사용자 제어정보에 따라 장면 사용자 제어신호를 생성하여 객체기반 오디오 장면합성부(700)로 출력한다. 여기서, 장면 사용자 제어신호는 객체 오디오신호의 위치에 관한 정보, 공간에 관한 정보, 및 기타 제어정보를 포함한다.
그리고 상기 오디오 재생제어신호 생성블록(930)은 사용자가 그래픽 사용자 인터페이스(Graphic User Interface)를 통해 재생환경에 대한 설정을 변경하는 경우, 상기 GUI 블록(910)으로부터의 재생 사용자 제어정보에 따라 재생환경에 대한 재생 사용자 제어신호를 생성하여 재생부(800)로 출력한다. 여기서, 재생 사용자 제어신호는 재생환경의 크기/형태 및 스피커 배치 등에 관한 정보를 포함한다.
다음으로, 도 9 및 도 10을 참조하여 객체기반 오디오 전송/수신 시스템의 동작 과정을 살펴보기로 한다. 전술한 바와 같이, 상기 객체기반 오디오 전송/수신 시스템의 구체적인 실시예에 대해서는 상세히 설명하였으므로, 여기서는 그 동작 과정의 요지만을 설명하기로 한다.
도 9는 본 발명에 따른 객체기반 오디오 전송 방법에 대한 일실시예 흐름도이다.
먼저, 다양한 소스(다양한 장치)로부터 오디오신호를 입력받아 전처리 과정을 통해 객체 오디오신호를 생성한다(1010, 1020). 예를 들어, 외부의 다양한 소스로부터 객체 오디오신호 및 멀티채널 오디오신호를 입력받아 전처리 과정을 통해 객체 오디오신호 및 멀티채널 오디오신호를 생성하고, 오디오신호에 다양한 음원이 혼합되어 있는 경우 음원 분리를 통해 객체 오디오신호를 생성할 수도 있다.
이후, 상기 생성한 객체 오디오신호를 편집하여 오디오 장면을 구성한다(1030). 예를 들어, 상기 생성한 객체 오디오신호/멀티채널 오디오신호, 및 외부로부터 입력받은 비디오신호를 이용하여 편집자가 다양한 오디오 장면을 구성하도록 할 수 있다.
이후, 상기 객체 오디오신호와 오디오 장면에 관한 정보를 부호화하고 다중화하여 객체기반 오디오 콘텐츠를 생성한다(1040). 예를 들어, 상기 객체 오디오신호와 오디오 장면에 관한 정보를 부호화하고 비디오신호와 다중화하여 객체기반 오디오 콘텐츠를 생성할 수도 있다. 또는, 상기 객체 오디오신호와 오디오 장면에 관한 정보를 부호화하고 비디오신호/멀티채널 오디오신호/멀티채널 부가데이터와 다중화하여 객체기반 오디오 콘텐츠를 생성할 수도 있다.
이후, 상기 생성한 객체기반 오디오 콘텐츠를 다양한 매체를 통해 전송한다(1050). 즉, 편집자가 제작한 객체기반 오디오 콘텐츠는 다양한 전송매체를 통해 전송하기 위해 전송매체에 따른 변환이 수행된 후 수신 시스템 측으로 전송된다.
도 10은 본 발명에 따른 객체기반 오디오 수신 방법에 대한 일실시예 흐름도이다.
먼저, 상기 객체기반 오디오 전송 시스템 측으로부터 매체를 통하여 전송된 객체기반 오디오 콘텐츠를 수신한다(1110).
이후, 상기 수신한 객체기반 오디오 콘텐츠(예 : 객체 오디오신호 및 오디오 장면에 관한 부가데이터 등)를 복호화한다(1120). 예를 들어, 외부로부터 입력되는 객체기반 오디오 콘텐츠를 역다중화하여 상기 수신한 객체기반 오디오 콘텐츠(예 : 객체 오디오신호 및 오디오 장면에 관한 부가데이터 등)와 함께 복호화하여 객체 오디오신호/비디오신호/멀티채널 오디오신호 및 장면 부가데이터/멀티채널 부가데이터를 생성할 수도 있다.
이후, 장면 사용자 제어신호에 따라 상기 복호화한 객체기반 오디오 콘텐츠(예 : 객체 오디오신호 및 오디오 장면에 관한 부가데이터 등)를 이용하여 오디오 장면을 구성한다(1130, 1140). 일예로, 사용자에게 편집자가 제작한 다양한 오디오 장면 중 하나를 선택하도록 하거나, 사용자가 객체 오디오신호를 제어하여 새로운 오디오 장면을 구성하도록 할 수 있다. 또는, 사용자로부터의 장면 사용자 제어정보에 따라 객체 오디오신호/멀티채널 오디오신호/비디오신호와 오디오 장면에 관한 부가데이터를 이용하여 오디오 장면을 구성할 수도 있다.
이후, 상기 새로 장면을 구성한 객체기반 오디오 콘텐츠(예 : 객체 오디오신호 및 오디오 장면에 관한 부가데이터 등)를 재생 사용자 제어신호에 따라 재생한다(1150, 1160). 일예로, 사용자로부터의 재생환경 제어에 대한 정보를 이용하여 재생환경을 등화시킨 다음에 재생환경에 따른 오디오/비디오 신호를 재생하여 출력한다.
이와 같이, 객체기반 오디오 전송/수신 시스템을 이용하여 사용자는 오디오신호의 객체별 속성을 편집하고, 재생환경에 따른 정보를 제어함으로써 입체감과 사실감을 줄 수 있는 새로운 오디오를 서비스받을 수 있게 된다.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 롬, 램, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
상기와 같은 본 발명은, 편집자가 자신의 의도에 따른 다양한 오디오 장면을 생성하여 사용자에게 제공할 수 있도록 하고, 사용자가 편집자가 의도한 다양한 오디오 장면을 선택하거나, 자신만의 오디오 장면을 구성하여, 사실감과 현실감이 향상된 대화형 오디오 서비스를 제공받을 수 있도록 한다.
또한, 본 발명은 가수의 콘서트 현장을 객체기반 오디오 콘텐츠로 제작한 경우, 사용자가 가수의 목소리나 각각의 악기의 위치 및 크기를 제어할 수 있고, 콘서트 현장의 잔향 시간/크기/형태에 관한 정보를 제어하여 자신만의 오디오 장면을 구성하여 청취할 수 있도록 한다.
또한, 본 발명은 스포츠 중계를 객체기반 오디오 콘텐츠로 제작한 경우, 해설자나 아나운서의 목소리, 관중의 함성 및 선수들의 소리를 각각의 객체로 제어하여 해설자나 아나운서의 목소리만을 크게 하거나 제거할 수 있고, 관중의 함성을 크게 하거나 제거할 수 있도록 한다. 또한, 선수들의 소리를 크게 하거나 제거하여, 자신의 취향에 맞는 오디오 장면을 구성하여 청취할 수 있도록 한다.
또한, 본 발명은 현악 사중주인 경우, 편집자가 각각의 악기소리를 객체 오 디오신호로 편집하고, 각각의 악기가 중심이 되거나, 공연장의 특성을 변경시킨 여러 개의 오디오 장면을 구성하여 객체기반 오디오 콘텐츠를 제작할 수 있도록 하고, 사용자가 편집자가 의도한 다양한 오디오 장면 중 자신의 취향에 맞는 오디오 장면을 선택하여 서비스받을 수 있도록 한다.
Claims (29)
- 삭제
- 삭제
- 객체 오디오신호를 생성하기 위한 전처리 수단과, 상기 객체 오디오신호를 편집하여 오디오 장면을 구성하기 위한 객체기반 오디오 편집 수단과, 객체기반 오디오 부호화 수단과, 전송 수단을 포함하는 오디오 전송 시스템에 있어서,상기 객체기반 오디오 편집 수단은, 객체기반 오디오 콘텐츠에 편집자의 다양한 오디오 장면 구성에 관한 장면 부가데이터를 추가하기 위해,상기 전처리 수단으로부터의 객체 오디오신호를 편집하기 위한 오디오 편집블록;상기 오디오 편집블록으로부터의 객체 오디오신호를 이용하여 오디오 장면을 구성하기 위한 오디오 장면구성블록; 및상기 전처리 수단으로부터의 멀티채널 오디오신호를 입력받아 부호화하기 위한 멀티채널 오디오 부호화블록을 포함하되,상기 오디오 장면구성블록에 의해 구성된 오디오 장면은,가상의 사용자 위치에서 각 객체별 오디오까지의 거리 정보와 가상 사용자 위치에서의 객체별 오디오신호의 수평 및 수직 각도에 대한 정보와 같은 객체 오디오신호의 위치정보와,공간의 크기, 형태, 잔향 시간, 내부의 음에 대한 반사, 흡수, 및 투과와 같은 특성과 같은 오디오 장면의 공간정보와,객체별 음원의 레벨 및 형태 정보와 같은 기타정보를 포함하는 것을 특징으로 하는 객체기반 오디오 전송 시스템.
- 제 3 항에 있어서,상기 오디오 편집블록은,상기 전처리 수단으로부터 객체 오디오신호를 입력받아 오디오신호에 따라 믹싱과 음향효과 편집(음원의 레벨, 잔향 추가, 변조 등)을 추가한 객체 오디오신호를 생성하여 상기 오디오 장면구성블록으로 출력하는 것을 특징으로 하는 객체기 반 오디오 전송 시스템.
- 삭제
- 객체 오디오신호를 생성하기 위한 전처리 수단과, 상기 객체 오디오신호를 편집하여 오디오 장면을 구성하기 위한 객체기반 오디오 편집 수단과, 객체기반 오디오 부호화 수단과, 전송 수단을 포함하는 오디오 전송 시스템에 있어서,상기 객체기반 오디오 편집 수단은, 객체기반 오디오 콘텐츠에 편집자의 다양한 오디오 장면 구성에 관한 장면 부가데이터를 추가하기 위해,객체기반 오디오 콘텐츠를 역다중화 및 복호화하기 위한 역다중화 및 복호화블록;외부로부터 비디오신호를 입력받기 위한 비디오신호 입력블록;상기 전처리 수단으로부터의 객체 오디오신호 및 상기 역다중화 및 복호화블록으로부터의 객체 오디오신호를 편집하기 위한 오디오 편집블록;상기 오디오 편집블록으로부터의 객체 오디오신호 및 상기 역다중화 및 복호화블록으로부터의 장면 부가데이터를 이용하여 오디오 장면을 구성하기 위한 오디오 장면구성블록; 및상기 전처리 수단으로부터의 멀티채널 오디오신호 및 외부로부터의 멀티채널 오디오신호를 입력받아 부호화하기 위한 멀티채널 오디오 부호화블록을 포함하되,상기 오디오 장면구성블록에 의해 구성된 오디오 장면은,가상의 사용자 위치에서 각 객체별 오디오까지의 거리 정보와 가상 사용자 위치에서의 객체별 오디오신호의 수평 및 수직 각도에 대한 정보와 같은 객체 오디오신호의 위치정보와,공간의 크기, 형태, 잔향 시간, 내부의 음에 대한 반사, 흡수, 및 투과와 같은 특성과 같은 오디오 장면의 공간정보와,객체별 음원의 레벨 및 형태 정보와 같은 기타정보를 포함하는 것을 특징으로 하는 객체기반 오디오 전송 시스템.
- 제 6 항에 있어서,상기 오디오 편집블록은,상기 전처리 수단으로부터 객체 오디오신호를 입력받고 상기 역다중화 및 복호화블록으로부터 객체 오디오신호를 입력받아 오디오신호에 따라 믹싱과 음향효과 편집(음원의 레벨, 잔향 추가, 변조 등)을 추가한 객체 오디오신호를 생성하여 상기 오디오 장면구성블록으로 출력하는 것을 특징으로 하는 객체기반 오디오 전송 시스템.
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 객체기반 오디오 콘텐츠를 수신하기 위한 수신 수단과, 객체기반 오디오 복호화 수단과, 사용자로부터의 제어에 따라 오디오 장면 구성을 위한 장면 사용자 제어신호 및 재생 환경 설정을 위한 재생 사용자 제어신호를 출력하기 위한 사용자 제어 수단과, 객체기반 오디오 장면합성 수단과, 재생 수단을 포함하는 객체기반 오디오 수신 시스템에 있어서,상기 사용자 제어 수단은, 다양한 오디오 장면에 관한 정보를 사용자에게 제공하여 사용자가 원하는 장면을 선택할 수 있도록 하기 위해,오디오 장면의 구성을 위해 각각의 객체를 제어하기 위한 사용자 인터페이스를 제공하기 위한 인터페이스 블록;상기 인터페이스 블록으로부터의 장면 사용자 제어정보에 따라 오디오 장면에 관한 장면 사용자 제어신호를 생성하기 위한 오디오 장면제어신호 생성블록; 및상기 인터페이스 블록으로부터의 재생 사용자 제어정보에 따라 재생환경에 대한 재생 사용자 제어신호를 생성하기 위한 오디오 재생제어신호 생성블록을 포함하는 것을 특징으로 하는 객체기반 오디오 수신 시스템.
- 제 14 항에 있어서,상기 장면 사용자 제어신호는 객체 오디오신호의 위치에 관한 정보, 공간에 관한 정보, 및 기타 제어정보를 포함하고,상기 재생 사용자 제어신호는 재생환경의 크기/형태 및 스피커 배치에 관한 정보를 포함하는 것을 특징으로 하는 객체기반 오디오 수신 시스템.
- 삭제
- 제 15 항에 있어서,상기 객체기반 오디오 장면합성 수단은,상기 객체기반 오디오 복호화 수단으로부터의 객체 오디오신호와 장면 부가데이터 및 상기 사용자 제어 수단으로부터의 장면 사용자 제어신호를 이용하여 객체 오디오신호의 위치를 제어하기 위한 객체 오디오신호 위치제어블록;상기 객체기반 오디오 복호화 수단으로부터의 객체 오디오신호와 장면 부가데이터 및 상기 사용자 제어 수단으로부터의 장면 사용자 제어신호를 이용하여 오디오 장면의 공간을 제어하기 위한 객체 오디오신호 공간 제어블록;상기 객체기반 오디오 복호화 수단으로부터의 객체 오디오신호와 장면 부가데이터 및 상기 사용자 제어 수단으로부터의 장면 사용자 제어신호를 이용하여 객체 오디오신호의 레벨(크기)이나 형태를 변경하기 위한 객체 오디오신호 기타 제어블록; 및상기 객체 오디오신호 위치제어블록으로부터의 객체 오디오신호와 위치 제어신호, 상기 객체 오디오신호 공간 제어블록으로부터의 객체 오디오신호와 공간 제어신호, 상기 객체 오디오신호 기타 제어블록으로부터의 객체 오디오신호와 기타 제어신호 및 상기 객체기반 오디오 복호화 수단으로부터의 멀티채널 오디오신호를 이용하여 오디오 장면을 생성하기 위한 오디오 장면생성블록을 포함하는 것을 특징으로 하는 객체기반 오디오 수신 시스템.
- 제 17 항에 있어서,상기 객체 오디오신호의 위치는 가상의 사용자 위치에서 각 객체별 오디오까지의 거리 정보와 가상 사용자 위치에서의 객체별 오디오신호의 수평 및 수직 각도에 대한 정보를 포함하고,상기 공간 특성에 관한 정보는 공간의 크기, 형태, 잔향 시간, 내부의 음에 대한 반사, 흡수, 및 투과와 같은 특성을 포함하며,상기 기타 제어정보는 객체별 음원의 레벨 및 형태 정보를 포함하는 것을 특징으로 하는 객체기반 오디오 수신 시스템.
- 삭제
- 삭제
- 제 18 항에 있어서,상기 객체기반 오디오 장면합성 수단은,상기 객체기반 오디오 복호화 수단으로부터의 객체 오디오신호와 장면 부가데이터 및 상기 사용자 제어 수단으로부터의 장면 사용자 제어신호를 이용하여 객체 오디오신호의 위치를 제어하기 위한 객체 오디오신호 위치제어블록;상기 객체기반 오디오 복호화 수단으로부터의 객체 오디오신호와 장면 부가데이터 및 상기 사용자 제어 수단으로부터의 장면 사용자 제어신호를 이용하여 오디오 장면의 공간을 제어하기 위한 객체 오디오신호 공간 제어블록;상기 객체기반 오디오 복호화 수단으로부터의 객체 오디오신호와 장면 부가데이터 및 상기 사용자 제어 수단으로부터의 장면 사용자 제어신호를 이용하여 객체 오디오신호의 레벨(크기)이나 형태를 변경하기 위한 객체 오디오신호 기타 제어블록; 및상기 객체 오디오신호 위치제어블록으로부터의 객체 오디오신호와 위치 제어신호, 상기 객체 오디오신호 공간 제어블록으로부터의 객체 오디오신호와 공간 제어신호, 상기 객체 오디오신호 기타 제어블록으로부터의 객체 오디오신호와 기타 제어신호 및 상기 객체기반 오디오 복호화 수단으로부터의 멀티채널 오디오신호와 비디오신호를 이용하여 오디오 장면을 생성하기 위한 오디오 장면생성블록을 포함하는 객체기반 오디오 수신 시스템.
- 삭제
- 삭제
- 삭제
- 삭제
- 객체기반 오디오 전송 방법에 있어서,다양한 소스로부터 오디오신호를 입력받아 전처리 과정을 통해 객체 오디오신호를 생성하는 단계;상기 생성한 객체 오디오신호를 편집하여 오디오 장면을 구성하는 객체기반 오디오 편집 단계;상기 편집한 객체 오디오신호와 상기 구성한 오디오 장면에 관한 정보를 부호화하고 다중화하여 객체기반 오디오 콘텐츠를 생성하는 단계; 및상기 생성한 객체기반 오디오 콘텐츠를 전송하는 단계를 포함하되,상기 객체기반 오디오 편집 단계는,객체기반 오디오 콘텐츠에 편집자의 다양한 오디오 장면 구성에 관한 장면 부가데이터가 추가되는데,상기 장면 부가데이터는,가상의 사용자 위치에서 각 객체별 오디오까지의 거리 정보와 가상 사용자 위치에서의 객체별 오디오신호의 수평 및 수직 각도에 대한 정보와 같은 객체 오디오신호의 위치정보와,공간의 크기, 형태, 잔향 시간, 내부의 음에 대한 반사, 흡수, 및 투과와 같은 특성과 같은 오디오 장면의 공간정보와,객체별 음원의 레벨 및 형태 정보와 같은 기타정보를 포함하는 것을 특징으로 하는 객체기반 오디오 전송 방법.
- 삭제
- 삭제
- 삭제
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020050123816A KR100733965B1 (ko) | 2005-11-01 | 2005-12-15 | 객체기반 오디오 전송/수신 시스템 및 그 방법 |
| US11/591,157 US7912566B2 (en) | 2005-11-01 | 2006-11-01 | System and method for transmitting/receiving object-based audio |
| US13/049,188 US9271101B2 (en) | 2005-11-01 | 2011-03-16 | System and method for transmitting/receiving object-based audio |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020050103733 | 2005-11-01 | ||
| KR20050103733 | 2005-11-01 | ||
| KR1020050123816A KR100733965B1 (ko) | 2005-11-01 | 2005-12-15 | 객체기반 오디오 전송/수신 시스템 및 그 방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20070047192A KR20070047192A (ko) | 2007-05-04 |
| KR100733965B1 true KR100733965B1 (ko) | 2007-06-29 |
Family
ID=37998064
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020050123816A KR100733965B1 (ko) | 2005-11-01 | 2005-12-15 | 객체기반 오디오 전송/수신 시스템 및 그 방법 |
Country Status (2)
| Country | Link |
|---|---|
| US (2) | US7912566B2 (ko) |
| KR (1) | KR100733965B1 (ko) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100963005B1 (ko) * | 2008-07-09 | 2010-06-10 | 한국전자통신연구원 | 자유시점 ａｖ 서비스에 따른 파일 생성 방법 |
| KR101235832B1 (ko) | 2008-12-08 | 2013-02-21 | 한국전자통신연구원 | 실감 멀티미디어 서비스 제공 방법 및 장치 |
Families Citing this family (39)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3999812B2 (ja) * | 2005-01-25 | 2007-10-31 | 松下電器産業株式会社 | 音復元装置および音復元方法 |
| KR100802179B1 (ko) * | 2005-12-08 | 2008-02-12 | 한국전자통신연구원 | 프리셋 오디오 장면을 이용한 객체기반 3차원 오디오서비스 시스템 및 그 방법 |
| CN101473645B (zh) * | 2005-12-08 | 2011-09-21 | 韩国电子通信研究院 | 使用预设音频场景的基于对象的三维音频服务系统 |
| JP5161893B2 (ja) * | 2007-03-16 | 2013-03-13 | エルジー エレクトロニクス インコーポレイティド | オーディオ信号の処理方法及び装置 |
| US8339458B2 (en) | 2007-09-24 | 2012-12-25 | International Business Machines Corporation | Technique for allowing the modification of the audio characteristics of items appearing in an interactive video using RFID tags |
| US8917972B2 (en) | 2007-09-24 | 2014-12-23 | International Business Machines Corporation | Modifying audio in an interactive video using RFID tags |
| KR100942142B1 (ko) * | 2007-10-11 | 2010-02-16 | 한국전자통신연구원 | 객체기반 오디오 콘텐츠 송수신 방법 및 그 장치 |
| US8515257B2 (en) * | 2007-10-17 | 2013-08-20 | International Business Machines Corporation | Automatic announcer voice attenuation in a presentation of a televised sporting event |
| KR101596504B1 (ko) | 2008-04-23 | 2016-02-23 | 한국전자통신연구원 | 객체기반 오디오 컨텐츠의 생성/재생 방법 및 객체기반 오디오 서비스를 위한 파일 포맷 구조를 가진 데이터를 기록한 컴퓨터 판독 가능 기록 매체 |
| CN102113314B (zh) * | 2008-07-29 | 2013-08-07 | Lg电子株式会社 | 用于处理音频信号的方法和设备 |
| US8255821B2 (en) * | 2009-01-28 | 2012-08-28 | Lg Electronics Inc. | Method and an apparatus for decoding an audio signal |
| WO2010147442A1 (ko) * | 2009-06-19 | 2010-12-23 | 한국전자통신연구원 | 프리셋을 이용한 객체기반 오디오 시스템, 객체기반 오디오 제공 방법 및 객체기반 오디오 재생 방법 |
| KR101473035B1 (ko) | 2009-06-19 | 2014-12-16 | 한국전자통신연구원 | 프리셋을 이용한 객체기반 오디오 시스템, 객체기반 오디오 제공 방법 및 객체기반 오디오 재생 방법 |
| DE102010030534A1 (de) | 2010-06-25 | 2011-12-29 | Iosono Gmbh | Vorrichtung zum Veränderung einer Audio-Szene und Vorrichtung zum Erzeugen einer Richtungsfunktion |
| KR20120071072A (ko) | 2010-12-22 | 2012-07-02 | 한국전자통신연구원 | 객체 기반 오디오를 제공하는 방송 송신 장치 및 방법, 그리고 방송 재생 장치 및 방법 |
| KR102185941B1 (ko) | 2011-07-01 | 2020-12-03 | 돌비 레버러토리즈 라이쎈싱 코오포레이션 | 적응형 오디오 신호 생성， 코딩 및 렌더링을 위한 시스템 및 방법 |
| KR101744361B1 (ko) * | 2012-01-04 | 2017-06-09 | 한국전자통신연구원 | 다채널 오디오 신호 편집 장치 및 방법 |
| KR101915258B1 (ko) * | 2012-04-13 | 2018-11-05 | 한국전자통신연구원 | 오디오 메타데이터 제공 장치 및 방법, 오디오 데이터 제공 장치 및 방법, 오디오 데이터 재생 장치 및 방법 |
| KR101935020B1 (ko) * | 2012-05-14 | 2019-01-03 | 한국전자통신연구원 | 오디오 데이터 제공 방법 및 장치, 오디오 메타데이터 제공 방법 및 장치, 오디오 데이터 재생 방법 및 장치 |
| KR101421793B1 (ko) * | 2012-06-29 | 2014-07-24 | 인텔렉추얼디스커버리 주식회사 | 하이브리드 음원 서비스 장치 및 방법 |
| WO2014058138A1 (ko) * | 2012-10-12 | 2014-04-17 | 한국전자통신연구원 | 객체 오디오 신호의 잔향 신호를 이용한 오디오 부/복호화 장치 |
| KR20140047509A (ko) * | 2012-10-12 | 2014-04-22 | 한국전자통신연구원 | 객체 오디오 신호의 잔향 신호를 이용한 오디오 부/복호화 장치 |
| US10038957B2 (en) * | 2013-03-19 | 2018-07-31 | Nokia Technologies Oy | Audio mixing based upon playing device location |
| CN104683933A (zh) | 2013-11-29 | 2015-06-03 | 杜比实验室特许公司 | 音频对象提取 |
| US10425764B2 (en) | 2015-08-14 | 2019-09-24 | Dts, Inc. | Bass management for object-based audio |
| US10027994B2 (en) * | 2016-03-23 | 2018-07-17 | Dts, Inc. | Interactive audio metadata handling |
| US10349196B2 (en) * | 2016-10-03 | 2019-07-09 | Nokia Technologies Oy | Method of editing audio signals using separated objects and associated apparatus |
| US11096004B2 (en) | 2017-01-23 | 2021-08-17 | Nokia Technologies Oy | Spatial audio rendering point extension |
| US10531219B2 (en) | 2017-03-20 | 2020-01-07 | Nokia Technologies Oy | Smooth rendering of overlapping audio-object interactions |
| US11074036B2 (en) | 2017-05-05 | 2021-07-27 | Nokia Technologies Oy | Metadata-free audio-object interactions |
| US10165386B2 (en) | 2017-05-16 | 2018-12-25 | Nokia Technologies Oy | VR audio superzoom |
| US10602296B2 (en) * | 2017-06-09 | 2020-03-24 | Nokia Technologies Oy | Audio object adjustment for phase compensation in 6 degrees of freedom audio |
| US11395087B2 (en) | 2017-09-29 | 2022-07-19 | Nokia Technologies Oy | Level-based audio-object interactions |
| US10542368B2 (en) | 2018-03-27 | 2020-01-21 | Nokia Technologies Oy | Audio content modification for playback audio |
| US11115765B2 (en) | 2019-04-16 | 2021-09-07 | Biamp Systems, LLC | Centrally controlling communication at a venue |
| KR102220521B1 (ko) * | 2019-11-21 | 2021-02-25 | 한국전자통신연구원 | 오디오 메타데이터 제공 장치 및 방법, 오디오 데이터 제공 장치 및 방법, 오디오 데이터 재생 장치 및 방법 |
| KR102370348B1 (ko) * | 2019-11-21 | 2022-03-04 | 한국전자통신연구원 | 오디오 메타데이터 제공 장치 및 방법, 오디오 데이터 제공 장치 및 방법, 오디오 데이터 재생 장치 및 방법 |
| JP2022017880A (ja) * | 2020-07-14 | 2022-01-26 | ソニーグループ株式会社 | 信号処理装置および方法、並びにプログラム |
| KR102529400B1 (ko) * | 2021-02-19 | 2023-05-10 | 한국전자통신연구원 | 오디오 메타데이터 제공 장치 및 방법, 오디오 데이터 제공 장치 및 방법, 오디오 데이터 재생 장치 및 방법 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20030022773A (ko) * | 2000-01-26 | 2003-03-17 | 디지맥 코포레이션 | 접속된 오디오 및 다른 미디어 객체들 |
| KR20030065002A (ko) * | 2002-01-29 | 2003-08-06 | 주식회사 리코시스 | 무선망을 통한 멀티미디어 스트리밍 데이터 송수신 방법및 수신장치 |
| KR20040037437A (ko) * | 2002-10-28 | 2004-05-07 | 한국전자통신연구원 | 객체기반 3차원 오디오 시스템 및 그 제어 방법 |
| KR20050019630A (ko) * | 2003-08-20 | 2005-03-03 | 한국전자통신연구원 | 디지털 멀티미디어 방송 시스템 및 그 방법 |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA2153964A1 (en) * | 1993-09-13 | 1995-03-23 | Steven H. Milne | Object-oriented audio record/playback system |
| US5390138A (en) * | 1993-09-13 | 1995-02-14 | Taligent, Inc. | Object-oriented audio system |
| US5943427A (en) * | 1995-04-21 | 1999-08-24 | Creative Technology Ltd. | Method and apparatus for three dimensional audio spatialization |
| ATE331390T1 (de) | 1997-02-14 | 2006-07-15 | Univ Columbia | Objektbasiertes audiovisuelles endgerät und entsprechende bitstromstruktur |
| US7199836B1 (en) * | 1998-02-13 | 2007-04-03 | The Trustees Of Columbia University In The City Of New York | Object-based audio-visual terminal and bitstream structure |
| JP3593883B2 (ja) * | 1998-05-15 | 2004-11-24 | 株式会社日立製作所 | 映像ストリーム送受信システム |
| KR20000042559A (ko) | 1998-12-26 | 2000-07-15 | 전주범 | 오디오 편집 장치 |
| JP2003513538A (ja) | 1999-10-22 | 2003-04-08 | アクティブスカイ，インコーポレイテッド | オブジェクト指向ビデオシステム |
| JP3520010B2 (ja) | 1999-12-28 | 2004-04-19 | 三洋電機株式会社 | 録画装置 |
| CN1717955B (zh) | 2002-12-02 | 2013-10-23 | 汤姆森许可贸易公司 | 用于描述音频信号的合成的方法 |
| KR100697440B1 (ko) * | 2004-03-11 | 2007-03-20 | 엘지전자 주식회사 | 방송정보 등급별 송수신 장치 및 방법 |
-
2005
- 2005-12-15 KR KR1020050123816A patent/KR100733965B1/ko active IP Right Grant
-
2006
- 2006-11-01 US US11/591,157 patent/US7912566B2/en active Active
-
2011
- 2011-03-16 US US13/049,188 patent/US9271101B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20030022773A (ko) * | 2000-01-26 | 2003-03-17 | 디지맥 코포레이션 | 접속된 오디오 및 다른 미디어 객체들 |
| KR20030065002A (ko) * | 2002-01-29 | 2003-08-06 | 주식회사 리코시스 | 무선망을 통한 멀티미디어 스트리밍 데이터 송수신 방법및 수신장치 |
| KR20040037437A (ko) * | 2002-10-28 | 2004-05-07 | 한국전자통신연구원 | 객체기반 3차원 오디오 시스템 및 그 제어 방법 |
| KR20050019630A (ko) * | 2003-08-20 | 2005-03-03 | 한국전자통신연구원 | 디지털 멀티미디어 방송 시스템 및 그 방법 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100963005B1 (ko) * | 2008-07-09 | 2010-06-10 | 한국전자통신연구원 | 자유시점 ａｖ 서비스에 따른 파일 생성 방법 |
| KR101235832B1 (ko) | 2008-12-08 | 2013-02-21 | 한국전자통신연구원 | 실감 멀티미디어 서비스 제공 방법 및 장치 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20110166681A1 (en) | 2011-07-07 |
| US20070101249A1 (en) | 2007-05-03 |
| US7912566B2 (en) | 2011-03-22 |
| KR20070047192A (ko) | 2007-05-04 |
| US9271101B2 (en) | 2016-02-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100733965B1 (ko) | 객체기반 오디오 전송/수신 시스템 및 그 방법 | |
| JP5646699B2 (ja) | マルチチャネル・パラメータ変換のための装置および方法 | |
| CN104054126B (zh) | 空间音频渲染和编码 | |
| KR101461685B1 (ko) | 다객체 오디오 신호의 부가정보 비트스트림 생성 방법 및 장치 | |
| JP6088444B2 (ja) | ３次元オーディオサウンドトラックの符号化及び復号 | |
| US7590249B2 (en) | Object-based three-dimensional audio system and method of controlling the same | |
| EP2382803B1 (en) | Method and apparatus for three-dimensional acoustic field encoding and optimal reconstruction | |
| KR101685447B1 (ko) | 적응형 오디오 신호 생성， 코딩 및 렌더링을 위한 시스템 및 방법 | |
| TWI442789B (zh) | 使用物件式元資料來產生音訊輸出信號之裝置與方法 | |
| KR100802179B1 (ko) | 프리셋 오디오 장면을 이용한 객체기반 3차원 오디오서비스 시스템 및 그 방법 | |
| JP2009537876A5 (ko) | ||
| CN104428835A (zh) | 音频信号的编码和解码 | |
| CN104756524A (zh) | 用于创造音频系统中的邻近音响效果的设备和方法 | |
| WO2007136187A9 (en) | Object-based 3-dimensional audio service system using preset audio scenes | |
| KR102149411B1 (ko) | 오디오 데이터 생성 장치 및 방법, 오디오 데이터 재생 장치 및 방법 | |
| KR101682105B1 (ko) | 입체음향 조절 방법 및 장치 | |
| JP7102024B2 (ja) | メタデータを利用するオーディオ信号処理装置 | |
| US8838460B2 (en) | Apparatus for playing and producing realistic object audio | |
| KR101114431B1 (ko) | 실시간 스트리밍을 위한 오디오 생성장치, 오디오 재생장치 및 그 방법 | |
| JP6204684B2 (ja) | 音響信号再生装置 | |
| KR102191260B1 (ko) | 다채널 오디오 코덱과 다객체 오디오 코덱을 이용한 오디오 부호화/복호화 장치 및 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| G170 | Publication of correction | ||
| FPAY | Annual fee payment |
Payment date: 20130527 Year of fee payment: 7 |
|
| FPAY | Annual fee payment |
Payment date: 20140529 Year of fee payment: 8 |
|
| FPAY | Annual fee payment |
Payment date: 20150527 Year of fee payment: 9 |
|
| FPAY | Annual fee payment |
Payment date: 20160527 Year of fee payment: 10 |
|
| FPAY | Annual fee payment |
Payment date: 20170529 Year of fee payment: 11 |
|
| FPAY | Annual fee payment |
Payment date: 20190527 Year of fee payment: 13 |