KR101342294B1 - 3ｄ ｔｖ를 위한 스테레오뷰들의 사이멀캐스트 - Google Patents

3ｄ ｔｖ를 위한 스테레오뷰들의 사이멀캐스트 Download PDF

Info

Publication number
KR101342294B1
KR101342294B1 KR1020127003916A KR20127003916A KR101342294B1 KR 101342294 B1 KR101342294 B1 KR 101342294B1 KR 1020127003916 A KR1020127003916 A KR 1020127003916A KR 20127003916 A KR20127003916 A KR 20127003916A KR 101342294 B1 KR101342294 B1 KR 101342294B1
Authority
KR
South Korea
Prior art keywords
video
base
transport stream
indicates
independently compressed
Prior art date
Application number
KR1020127003916A
Other languages
English (en)
Other versions
KR20120041764A (ko
Inventor
아제이 루쓰라
만다이암 에이. 나라심한
Original Assignee
제너럴 인스트루먼트 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 제너럴 인스트루먼트 코포레이션 filed Critical 제너럴 인스트루먼트 코포레이션
Publication of KR20120041764A publication Critical patent/KR20120041764A/ko
Application granted granted Critical
Publication of KR101342294B1 publication Critical patent/KR101342294B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

3차원(3D) 비디오 인코더는 제1 인코더, 제2 인코더 및 멀티플렉서를 포함한다. 제1 인코더는 베이스 뷰를 인코딩하여 비디오 컨텐트와 연관된 제1 독립적으로 압축된 비디오 스트림을 형성하도록 구성된다. 제2 인코더는 비베이스 뷰를 인코딩하여 비디오 컨텐트와 연관된 제2 독립적으로 압축된 비디오 스트림을 형성하도록 구성된다. 멀티플렉서는 비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들을 멀티플렉싱하여 트랜스포트 스트림을 형성하도록 구성된다. 트랜스포트 스트림은 베이스 및 비베이스 뷰들을 이용하여 3D 비디오를 렌더링하도록 처리되는 것이 동작가능하다.

Description

3Ｄ ＴＶ를 위한 스테레오뷰들의 사이멀캐스트{SIMULCAST OF STEREOVIEWS FOR 3D TV}
[우선권 주장]
본 출원서는 그 공보가 전체적으로 참고로 여기에 포함되어 있고, 발명의 명칭이 "Simulcast of Stereoviews For 3D TV"이며 2009년 7월 15일에 출원된 미합중국 예비 특허출원서 일련번호 61/225,792에 대한 우선권의 잇점을 청구한다.
본원발명은 3D TV를 위한 스테레오뷰들의 사이멀캐스트에 관한 것이다.
3차원(3D) TV에 대한 깊이 인지(depth perception)는 2개의 뷰들, 좌측 눈에 대해 하나의 뷰 및 우측 눈에 대해 다른 하나의 뷰를 캡쳐함으로써 제공된다. 이들 2개의 뷰들은 압축되어 다양한 네트워크들을 통해 전송되거나 저장 매체에 저장된다. 디코더는 2개의 뷰들을 디코딩하고 디코딩된 비디오를 표시를 위한 3D TV에 전송한다. 2개의 뷰들은 단일 비디오 프레임으로 병합되거나 분리되어 유지되는 것으로 알려져 있다. 분리되어 유지되는 경우에, 2개의 뷰들은 다양한 방법들을 이용하여 압축되고 배포되는 것으로 알려져 있다. 이들 방법들 중 2개가 멀티-뷰 코딩(MVC) 방법 및 사이멀캐스트 방법이다. MVC 방법에서, 2개의 뷰들 사이의 상관이 활용되도록 2개의 뷰들이 압축되어 코딩 효율을 증가시킨다. 사이멀캐스트 방법에서, 2개의 뷰들은 2개의 독립적인 비디오 스트림들로 압축되어 배포되는 것으로 알려져 있다.
MPEG 표준들(예를 들면, 진보된 비디오 코딩(AVC) 또는 H.264 MPEG-4 및 MPEG-2 시스템들)은 이러한 압축된 데이터를 다양한 방식으로 이동시킬 뿐만 아니라 하나 보다 많은 뷰를 표현하고 압축하는 방법들 및 구문(syntax)을 제공한다. 그러나, MPEG 표준들의 현재 버전들은 2개의 뷰들이 디코딩되고 적절하게 조합되어 3D 표시를 제공하도록 2개의 뷰들을 사이멀캐스팅하는 방법을 지정하지 않는다. 결과적으로, 현재 사이멀캐스팅은 비디오 시스템들 및 다른 타입의 시스템들에 대한 MPEG 표준들을 이용하여 수행될 수 없다.
또한, 다양한 범위의 서비스 제공자들 및 제조자들이 따르는 다수의 브로드캐스트 센트릭 표준들(즉, 케이블 통신 엔지니어들의 모임(SCTE) 및 진보된 텔레비젼 시스템 위원회(ATSC))은 동일한 프로그램 또는 채널 내에서 동일한 코딩 방법으로 압축된 2개의 비디오 컴포넌트들을 전송하는 것을 허용하지 않는다(즉, 동일한 "스트림 타입"을 가지는 2개의 비디오 컴포넌트들은 프로그램 맵 테이블에서 허용되지 않는다). 이러한 제한은 동일한 프로그램에서 동일한 압축 표준을 이용한 2개의 아이 뷰들(eye views)에 대응하는 2개의 비디오 스트림들의 사이멀캐스팅을 배제한다. 예를 들면, 그 제한은 동일한 프로그램에서 2개의 독립적인 MPEG-2 또는 MPEG-4 스트림들을 사이멀캐스팅하는 것(즉, 3D TV에 대해 좌측 눈에 대해 하나, 그리고 우측 눈에 하나)을 배제한다. 분리된 프로그램들에서 2개의 뷰들을 전송하는 것은 가능하지만, 추가적인 튜너 및 2개의 프로그램들 사이의 시간 기반 동기화를 요구하는 복잡성을 추가시킨다.
또한, MPEG 및 산업계에서 의논되고 있는 다수의 현재의 제안들에서, 양쪽 아이 뷰들은 동일한 인코딩 표준을 이용하여 압축된다. 2개의 지배적인 인코딩 표준들, MPEG-2 및 MPEG-4가 있기 때문에, 이것은 MPEG-2 및 MPEG-4 디코더들의 혼합을 가지고 있는 디지털 TV 시스템들에서 사이멀캐스트 방법들에 대한 하위 호환성 문제를 발생시킨다. 예를 들면, MPEG-2 디코더들은 2개의 뷰들이 MPEG-4 표준을 이용하여 압축되어 있다면 어느 뷰도 디코딩할 수 없을 것이다.
하나의 실시예에 따르면, 3차원(3D) 비디오 인코더는 제1 인코더, 제2 인코더 및 멀티플렉서를 포함한다. 제1 인코더는 베이스 뷰를 인코딩하여 비디오 컨텐트와 연관된 제1 독립적으로 압축된 비디오 스트림을 형성하도록 구성된다. 제2 인코더는 비베이스 뷰(nonbase view)를 인코딩하여 비디오 컨텐트와 연관된 제2 독립적으로 압축된 비디오 스트림을 형성하도록 구성된다. 멀티플렉서는 비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들을 멀티플렉싱하여 트랜스포트 스트림을 형성하도록 구성된다. 트랜스포트 스트림은 베이스 및 비베이스 뷰들을 이용하여 3D 비디오를 렌더링하도록 처리되는 것이 동작가능하다.
또 하나의 실시예에 따르면, 3D 비디오 디코더는 입력 모듈, 디코딩 모듈 및 3D 조합 모듈을 포함한다. 입력 모듈은 트랜스포트 스트림을 수신하도록 구성된다. 트랜스포트 스트림은 트랜스포트 스트림에서 동일한 브로드캐스트 프로그램에 포함된, 비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들을 포함한다. 디코딩 모듈은 트랜스포트 스트림을 디코딩하여 비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들로부터인 각각 베이스 및 비베이스 뷰들을 형성한다. 3D 조합 모듈은 베이스 및 비베이스 뷰들을 이용하여 3D 비디오를 렌더링하도록 구성된다.
또 하나의 실시예에 따르면, 트랜스포트 스트림을 인코딩하는 방법이 개시된다. 방법은 비디오 컨텐트를 수신하는 단계를 포함한다. 그리고나서, 베이스 뷰가 인코딩되어 비디오 컨텐트와 연관된 제1 독립적으로 압축된 비디오 스트림을 형성한다. 비베이스 뷰가 인코딩되어 비디오 컨텐트와 연관된 제2 독립적으로 압축된 비디오 스트림을 형성한다. 비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들이 멀티플렉싱되어 트랜스포트 스트림을 형성한다. 트랜스포트 스트림은 베이스 및 비베이스 뷰들을 이용하여 3D 비디오를 렌더링하도록 처리되는 것이 동작가능하다.
또 하나의 실시예에 따르면, 트랜스포트 스트림을 3D 비디오로 렌더링하는 방법이 개시된다. 방법은 트랜스포트 스트림에서 동일한 브로드캐스트 프로그램에 포함된, 비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들을 포함하는 트랜스포트 스트림을 수신하는 단계를 포함한다. 그리고나서, 트랜스포트 스트림이 디코딩되어 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들로부터 각각 형성된 베이스 및 비베이스 뷰들을 형성한다. 그런 후에, 베이스 및 비베이스 뷰들을 이용하여 3D 비디오가 렌더링된다.
또 다른 실시예에서, 하나 이상의 컴퓨터 프로그램들이 내장되는 컴퓨터 판독가능 저장 매체는 트랜스포트 스트림을 3D 비디오로 렌더링하는 상기 개시된 방법을 구현한다.
본 발명의 실시예들은 3D TV 배분 시스템들에 대해 동일한 프로그램에서 압축된 비디오 스트림들을 독립적으로 사이멀캐스팅하는 단계를 포함한다. 압축된 비디오 스트림들은 MPEG 2 또는 MPEG 4와 같은 상이한 표준들를 가질 수 있으므로 하위 호환성을 허용한다. 또 하나의 실시예에서, 압축된 비디오 스트림들은 양쪽 모두 MPEG 4와 같은 동일한 표준들을 가지고 있으므로, 호환가능한 디코더들을 가지고 있는 시스템들에서 최고 해상도 및 품질 3D 이미지를 제공한다. 또한, 하나의 실시예에서, 독립적으로 압축된 비디오 스트림들은 스트림들을 상이한 타입들로서 전송함으로써 동일한 프로그램에서 사이멀캐스팅된다. 2개의 상이한 프로그램들에서보다 동일한 프로그램에서 스트림들을 전송함으로써, 스트림들 사이의 동기화는 3D 비디오를 생성하기에 훨씬 더 용이하다.
본 발명의 특징들은 도면들을 참조한 이하의 설명으로부터 본 기술분야의 숙련자들에게 명백하게 될 것이다.
도 1은 본 발명의 하나의 실시예에 따른 네트워크 아키텍쳐를 예시하고 있다.
도 2는 본 발명의 하나의 실시예에 따라 비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들을 멀티플렉싱하여 트랜스포트 스트림을 형성하는 기능적 블록도를 예시하고 있다.
도 3은 본 발명의 하나의 실시예에 따라, 3D 비디오 디코더의 단순화된 블록도를 예시하고 있다.
도 4는 본 발명의 하나의 실시예에 따라, 트랜스포트 스트림을 인코딩하는 방법의 흐름도를 예시하고 있다.
도 5는 본 발명의 하나의 실시예에 따라, 트랜스포트 스트림을 3D 비디오로 렌더링하는 방법의 흐름도를 예시하고 있다.
도 6은 본 발명의 하나의 실시예에 따라, 트랜스포트 스트림을 3D 비디오로 렌더링하는 방법의 흐름도를 예시하고 있다.
도 7은 본 발명의 하나의 실시예에 따라, 3D 비디오 디코더에 이용될 수 있는 컴퓨터 시스템의 블록도를 도시하고 있다.
단순성 및 예시의 목적을 위해, 본 발명은 주로 그 예로 든 실시예들을 참조하여 설명된다. 이하의 설명에서, 다수의 특정 세부사항들은 본 발명의 철저한 이해를 제공하기 위해 제시되어 있다. 그러나, 본 기술분야의 통상의 기술자라면, 본 발명은 이들 특정 세부사항들에 대한 제한없이도 실시될 수 있다는 것을 잘 알고 있을 것이다. 다른 예들에서, 공지된 방법들 및 구조들은 본 발명을 불필요하게 모호하게 하는 것을 피하도록 상세하게 설명되지 않았다.
도 1은 하나의 실시예에 따라, 3D 비디오 디코더(130)가 이용될 수 있는 시스템의 네트워크 아키텍쳐(100)를 예시하고 있다. 도 1에 도시된 바와 같이, 네트워크 아키텍쳐(100)는 케이블 헤드-엔드 유닛(110) 및 케이블 네트워크(111)를 포함하는 케이블 텔레비전(CATV) 네트워크 아키텍쳐로서 예시되어 있다. 복수의 서버들(101), 인터넷(102), 라디오 신호들, 또는 컨텐트 제공자(103)를 통해 수신되는 텔레비젼 신호들을 포함하고 결코 이들로 제한되지 않는 다수의 데이터 소스들(101, 102, 103)은 케이블 헤드-엔드 유닛(110)에 통신가능하게 결합될 수 있다. 케이블 헤드-엔드(110)는 또한 케이블 네트워크(111)를 통해 하나 이상의 가입자들(150a-n)에 통신가능하게 결합된다. 도 1에 도시된 네트워크 아키텍쳐(100)는 추가적인 컴포넌트들을 포함할 수 있고 여기에 기재된 컴포넌트들의 일부는 네트워크 아키텍쳐(100)의 범주에서 벗어나지 않고서도 제거되거나 변형될 수 있다는 것은 자명하다.
케이블 헤드-엔드(110)는 트랜스포트 스트림(131)을 출력하도록 구성된다. 트랜스포트 스트림(131)은 위성 송신, 인터넷 또는 예를 들면 고정된 광섬유 또는 동축 케이블을 이용하는 다른 네트워크를 이용하여 셋탑 박스들(STB, 120a-n)에게 출력될 수 있다. 트랜스포트 스트림(131)은 STB들(120a-n)에 의해 이용될 수 있는 3D 비디오 디코더들 및 2D 디코더들(121)의 혼합에 대해 교차 표준 호환성을 제공하도록 구성된다. 가입자들(150a-n)의 각각은 STB들(120a-n)에서 트랜스포트 스트림(131)을 수신할 수 있다. STB들(120a-n)은 TV들이 디지털 텔레비전(DTV) 브로캐스트들을 수신할 수 있게 하는 디바이스들이다. 하나의 실시예에서, STB들(120a-n)은 여기에 기재된 STB들(120a-n)의 기능들을 수행할 수 있는 단지 종래의 STB들이 아니라, 임의의 디바이스를 포함한다.
STB들(120a-n)은 2D 디코더(121)에 대해 설명된 바와 같은 2D 성능 또는 3D 성능 중 어느 하나를 가지는 디코더들을 구비할 수 있다. STB들(120a-n)은 2D TV(123) 또는 3D-레디(ready) TV(122) 중 어느 하나에 접속될 수 있다. 3D 비디오를 수신하여 표시하기 위해, 3D 성능을 가지는 STB는 3D-레디 TV(122)에 접속될 수 있다.
3D 비디오 디코더(130) 및 그것이 로케이팅되는 STB(120c)는 다른 네트워크들에서 이용될 수 있고 케이블 네트워크 아키텍쳐(100)는 단순성 및 예시의 목적상 도시되어 있다는 것은 자명하다. 3D 비디오 디코더(130)는 다른 아키텍쳐들에서 이용될 수 있다.
도 2는 3D 비디오 인코더(200)의 기능적 블록도를 예시하고 있다. 도 2에 도시된 바와 같이, 3D 비디오 인코더(200)는 제1 인코더(202), 제2 인코더(204), 디스크립터 프로세서(208) 및 멀티플렉서(206)를 포함한다. 도 2에 도시된 3D 비디오 인코더(200)는 추가 컴포넌트들을 포함할 수 있고, 여기에 기재된 컴포넌트들의 일부는 3D 비디오 인코더(200)의 범주에서 벗어나지 않고서도 제거되거나 변형될 수 있다는 것은 자명하다.
제1 인코더(202)는 베이스 뷰를 압축하여 비디오 컨텐트와 연관된 제1 독립적으로 압축된 비디오 스트림(132a)을 형성하도록 구성된다. 베이스 뷰는 2차원(2D) 시스템에서 풀 뷰로서 이용될 수 있는 3D 비디오에 대한 아이 뷰(eye view)이다. 예를 들면, 베이스 뷰는 3D 비디오 시스템의 좌측 아이 뷰, 및 2D 비디오 시스템의 풀 뷰를 포함할 수 있다. 비디오 컨텐트는 예를 들면 브로드캐스트 프로그램들, 인터넷 프로토콜 TV(IPTV), 스위칭된 비디오(SDV), 주문형 비디오(VOD) 또는 다른 비디오 소스로부터 수신될 수 있다. 제2 인코더는 비베이스 뷰를 압축하여 비디오 컨텐트와 연관된 제2 독립적으로 압축된 비디오 스트림(132b)을 형성하도록 구성된다. 이하에 설명된 바와 같이, 비베이스 뷰는 베이스 뷰와 함께 3D 비디오를 렌더링하는데 이용되고, 2D 시스템들에 의해 드롭될 수 있다. 예를 들면 컴포넌트들이 서로에 대해 코딩되는 MVC 코딩된 비디오 컴포넌트들에 비해, 비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)은 다른 컴포넌트들을 참조하여 압축되지 않는다. 비디오 압축의 예는 종래의 MPEG 표준들을 포함할 수 있다. "MPEG"은 여기에 이용된 바와 같이, 동화상 전문가 그룹에 의해 정의된 트랜스포트 스트림들을 인코딩하고 디코딩하기 위한 표준들의 그룹을 지칭한다. MPEG은 MPEG-2 및 MPEG-4 파트 10/H.264와 같이 트랜스포트 스트림들에 대한 수 개의 포맷들을 포함한다.
디스크립터 프로세서(208)는 연관된 디스크립터(209)를 생성하여 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)에 추가하도록 구성된다. 디스크립터 프로세서(208)는 제1 인코더(202) 및 제2 인코더(204)로부터 각각 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)을 기술하는 정보를 수신할 수 있고, 디스크립터(209)를 생성할 때 이러한 정보를 이용한다. 디스크립터(209)는 트랜스포트 스트림(131)을 수신한 디코더가 디코딩하고(비디오 해상도들의 임의의 조정을 포함함) 디코딩된 베이스 및 비베이스 뷰들로부터 3D 비디오를 렌더링할 수 있도록 구성되고, 양쪽 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)에 포함된다.
멀티플렉서(206)는 제1 인코더(202) 및 제2 인코더(204)로부터 비디오 컨텐트(132a-b)와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들을 수신하도록 구성된다. 그런 후에, 멀티플렉서(206)는 연관된 디스크립터(209)와 함께 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)을 멀티플렉싱하여 트랜스포트 스트림(131)을 형성한다. 트랜스포트 스트림(131)은 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)을 포함하는 비디오 스트림이다. 독립적으로 압축된 비디오 스트림들(132a-b)은 트랜스포트 스트림(131)에서 동일한 프로그램에 포함될 수 있다. 동일한 프로그램은 예를 들면 브로드캐스팅에서 단일 채널에 대응할 수 있다. 트랜스포트 스트림(131)은 인터넷 프로토콜(IP) 패킷들 또는 트랜스포트 스트림(131)을 송신하도록 구성된 임의의 패킷화 스킴을 포함할 수 있다. 예를 들면, 트랜스포트 스트림(131)은 MPEG 스트림, IP 패킷들 또는 3D 비디오를 소스로부터 엔드 사용자에게 트랜스포트하기 위한 임의의 적합한 매체를 포함할 수 있다.
제1 압축 포맷으로 된 베이스 뷰(예를 들면, 비디오 컴포넌트(132a)에 대함)는 2D 디코더, 예를 들면 동일한 트랜스포트 스트림(131)을 수신하는 도 1에 도시된 2D 디코더(121)에 의해 수신되어 디코딩될 수 있는 풀 해상도 2D 호환가능 스트림이라는 점에 유의하라. 비베이스 뷰는 2D 디코더(121), 예를 들면 종래의 2D 디코더에 의해 폐기될 수 있다. 따라서, 트랜스포트 스트림(131)은 종래의 2D 디코더들을 구비하는 STB들과 3D 디코더들을 구비하는 STB들의 혼합을 가지고 있는 네트워크 아키텍쳐, STB(120c)로 3D 성능을 허용하면서도 종래의 디코더들을 구비하는 네트워크 아키텍쳐(100)에서 하위 호환성을 제공하는데 이용될 수 있다.
하나의 실시예에 따르면, 제1 독립적으로 압축된 비디오 스트림(132a)은 제1 압축 포맷, 예를 들면 MPEG-2로 구성된다. 제2 독립적으로 압축된 비디오 스트림(132b)은 제1 압축 포맷과 상이한 제2 압축 포맷, 예를 들면 MPEG-4로 구성된다. 2개의 뷰들이 상이한 코딩 표준들(예를 들면, MPEG-2 및 MPEG-4)을 이용하여 압축되는 경우에, 브로드캐스트-센트릭 제한들은 동일한 프로그램내에서 상이한 스트림_타입을 가지는 2개의 비디오 컴포넌트들을 허용한다(즉, MPEG-2 비디오(0x02) 및 MPEG-4(0x1B)에 대한 현재의 스트림_타입 값들이 이용될 수 있다).
또 하나의 실시예에 따르면, 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)은 공통 압축 포맷, 예를 들면 양쪽 모두 MPEG-2 또는 MPEG-4로 구성된다. 제2 독립적으로 압축된 비디오 스트림(132b)은 제1 독립적으로 압축된 비디오 스트림(132a)보다 더 낮은 해상도로 되어 있을 수 있다. 제2 독립적으로 압축된 비디오 스트림(132b)은 트랜스포트 스트림(131)에 대한 프로그램 맵 테이블에서 제1 독립적으로 압축된 비디오 스트림(132a)과는 상이한 새로운 스트림 타입이 할당된다. 프로그램과 연관된 기본 스트림들을 포함하는 프로그램 맵 테이블은 각 단일 프로그램을 기술하는데 이용된다. 스트림 타입은 프로그램 맵 테이블에서 지정될 수 있다. 비베이스 뷰에 대한 새로운 스트림 타입은 트랜스포트 시스템, 예를 들면 MPEG-2에 의해 할당될 수 있다. MPEG-2 시스템들에 의해 할당되는 새로운 스트림 타입은 MPEG-4에 대해 0x21과 동일하고 MPEG-2에 대해 0x22와 동일하다. 다르게는, 새로운 스트림 타입은 다음으로 가용한 스트림 타입, 예를 들면 MPEG-2 시스템들(표준화를 위한 국제 기구(ISO) 13818-1)) 스트림 타입 테이블에서 다음으로 가용한 "예비된"스트림 타입 값들을 이용하여 결정될 수 있다.
독립적으로 압축된 2개의 뷰들은 2개의 상이한 스트림 타입들로서 전송되는 경우에, 트랜스포트 스트림(131)에서 동일한 브로드캐스트 프로그램의 일부로서 전송될 수 있다(MPEG-4와 같은 동일한 압축 표준을 이용함). 트랜스포트 스트림(131)은 또한 2개의 분리되어 디코딩된 이미지들을 조합하여 적절한 디스플레이에 렌더링하는데 도움을 주는 정보를 제공하는 디스크립터(209)를 포함한다. 디스크립터(209)는 베이스 뷰 및 비베이스 뷰로부터의 2개의 분리되어 디코딩된 이미지들을 조합하여 3D-레디 TV(122)에서 표시될 3D 이미지로 렌더링하는데 도움을 주는 정보를 제공한다. 디스크립터(209)는 독립적으로 압축된 비디오 스트림이 특정 뷰를 위한 것이라는 것을 지정할 수 있다. 그러므로, 비디오 스트림에 대한 스트림 타입이 예비되거나 일부 다른 스트림 타입일지라도, 디코더, 예를 들면 상기 도 1의 3D 디코더(130)는 스트림이 또 하나의 뷰를 위해 또 하나의 스트림과 조합되어야 된다는 것을 디스크립터(209)로부터 결정할 수 있다. 디스크립터(209)는 또한 뷰의 식별(예를 들면, 좌측 또는 우측), 뷰 해상도가 상이한 경우들에서의 업샘플링 규칙들, 뷰들을 조합하기 위한 정보(예를 들면, 필드 인터리빙 또는 프레임 인터리빙) 및 추가 표시 관련 요소들을 포함할 수 있다.
하나의 실시예에 따르면, 디스크립터(209)는 단일 스트림의 이용, 동일한 비디오 시퀀스에서의 2개의 필드들 또는 2개의 프레임들의 조합 및 렌더링, 및 트랜스포트 스트림(131)이 MPEG-4 부합 스트림인 경우들의 추가 표시 관련 요소들에 관한 정보를 제공하도록 구성될 수 있다. 2개의 스트림들에 비해, 단일 스트림이 베이스 및 비베이스 뷰들을 반송하는데 이용된다.
하나의 실시예에 따르면, 시스템 레벨에서 디스크립터(209)에 제공된 정보는 3D 렌더링 정보 디스크립터를 포함한다. 3D 렌더링 정보 디스크립터는 디스크립터 태그, 디스크립터 길이, 및 3D 비디오에서 각 픽쳐를 렌더링하는 명령을 포함한다. 테이블 형태로 된 3D 렌더링 정보 디스크립터의 예는 이하와 같다.
[표 1]
3D 렌더링 정보 디스크립터의 예
Figure 112012011923249-pct00001
표 1에 도시된 바와 같이, j, k, l, m, n, p 및 q는 테이블에서 각 연관된 요소에 의해 이용되는 비트들의 개수를 지정하는 상수들을 나타낸다. 3D 렌더링 정보 디스크립터는 field_parity, top_field_first_in_composition, frame_order, 및 left_or_right_view, up_sample_horizontal, up_sample_vertical 및 field_or_frame_interleaving을 포함하는 display_specific_info와 같은 정보를 제공한다. 예를 들면, 디스크립터 상수 k를 결정함으로써, 디코더는 3D 비디오가 조합 시에 처음으로 렌더링되는 최상부 필드인지 여부를 결정한다. 표시 특정 정보는 3D 비디오(222)의 해상도를 포함할 수 있다. 3D 렌더링 정보 디스크립터는 수신기, 예를 들면 STB(120c)에 의해 이용되어, 수신된 트랜스포트 스트림(131)을 렌더링하여 3D 비디오(222)를 형성한다.
도 3은 하나의 실시예에 따라 3D 컨텐트를 수신하여 표시하도록 구성된 시스템(300)의 단순화된 블록도를 예시하고 있다. 시스템(300)은 3D 디코더(130)를 포함하는 STB(120c), 및 도 1로부터의 3D-레디 TV(122)를 포함한다. 시스템(300)의 모듈들의 하나 이상은 STB 이외의 디바이스들, 예를 들면 수신기에 제공될 수 있다는 것은 자명하다. STB(120c)는 입출력 모듈(210), 디멀티플렉싱 모듈(212), 및 3D 디코딩 모듈(214) 및 3D 조합 모듈(220)을 포함하는 3D 비디오 인코더(130)를 포함한다. 도 3에 도시된 시스템(300)은 추가적인 컴포넌트들을 포함할 수 있고 여기에 기재된 컴포넌트들 중 일부는 시스템(300)의 범주에서 벗어나지 않고서도 제거되거나 변형될 수 있다는 것은 자명하다.
입출력 모듈(210)은 트랜스포트 스트림(131)을 수신하도록 구성된다. 입출력 모듈(210)은 범용 직렬 버스(USB), 이더넷 인터페이스 또는 또 하나의 타입의 인터페이스를 포함할 수 있다. 이러한 예에서 입출력 모듈(210)에서 수신된 트랜스포트 스트림(131)은 QAM 변조된 스트림일 수 있다.
그 후에, 디멀티플렉싱 모듈(212)은 주파수를 선택하고, 주파수를 복조하여 멀티 프로그램 트랜스포트 스트림(MPTS)을 획득할 수 있다. 디멀티플렉싱 모듈(212)은 MPTS를 디멀티플렉싱하여, 가입자가 선택할 수 있는 복수의 프로그램들 각각에 대응하는 단일 프로그램 트랜스포트 스트림들(SPTSs)을 추출하도록 구성된다. 예를 들면, 가입자(150n)는 STB(120)를 이용하여 3D 컨텐트를 가지는 프로그램을 선택한다. 그리고나서, 디멀티플렉싱 모듈(212)은 MPTS를 디멀티플렉싱하여, 비디오 컨텐트(132a-b)와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들을 형성한다. 비디오 컨텐트(132a-b)와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들 각각은 상이한 코덱을 가지고 있다.
3D 디코딩 모듈(214)은 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)을 디코딩하여, 제공된 제1 아이 뷰에 대응하는 베이스 뷰(2D 뷰) 및 제2 아이 뷰에 대응하는 비베이스 뷰를 형성한다. 베이스 뷰 및 비베이스 뷰는 STB(120c)에 의해 이용되어, 3D 비디오(222)를 렌더링하고 3D-레디 TV(122)에서 표시를 위해 출력한다.
3D 조합 모듈(220)은 트랜스포트 스트림(131)에서 3D 렌더링 정보 디스크립터를 액세스하고, 그 내부의 명령을 이용하여 3D 비디오(222)를 렌더링하도록 구성될 수 있다. 디코딩 모듈(214)에 의한 비디오 컨텐트(132a-b)와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들의 디코딩 이후에, 베이스 및 비베이스 뷰들은 3D 조합 모듈(220)에 의해 조합되어, 3D(스테레오스코픽 또는 복수) 뷰들을 표시할 수 있는 3D-레디 TV(122) 상에 표시될 수 있는 3D 비디오(222)를 형성한다. 3D 조합 모듈(220)은 베이스 및 비베이스 뷰들을 조합할 때 트랜스포트 스트림(131)에 포함된 디스크립터(209)를 이용하여, 3D 비디오(222)를 렌더링할 수 있다. 디스크립터(209)는 추가 인핸스먼트 정보(SEI)를 포함하여 3D 비디오(222)를 형성할 수 있다. 입출력 모듈(210)은 그 후에 3D 비디오(222)를 예를 들면 3D-레디 TV에 출력하도록 구성된다.
그 후에, 3D 조합 모듈(220)은 3D 렌더링 정보 디스크립터에서 제공된 정보에 따라 베이스 뷰 및 비베이스 뷰의 픽쳐들을 렌더링할 수 있다. 3D 렌더링 정보 디스크립터는 트랜스포트 스트림(131)으로부터 3D 비디오(222)를 렌더링하도록 수행되는 오퍼레이션들을 지정한다. 예를 들면, 2개의 뷰들이 동일한 스트림에서 수신되는 경우에, 3D 조합 모듈(220)은 필드 픽쳐들이 수신되어 있는지 여부를 결정할 수 있다. 유사하게, 필드 픽쳐들이 베이스 뷰에서 수신되는 경우에, 3D 조합 모듈(220)은 상기 표 1의 구문에 따라 트랜스포트 스트림(131)으로부터 3D 비디오(222)를 렌더링한다.
또 하나의 실시예에 따르면, 트랜스포트 스트림(131)이 MPEG-2 부합 스트림인 경우들에서, 디스크립터(209)로부터의 일부 렌더링 및 조합 정보는 압축된 비디오 스트림(예를 들면, 픽쳐 사용자-데이터)에 포함될 수 있다. 이것은 단일 스트림의 이용, 동일한 비디오 시퀀스에서 2개의 필드들 또는 2개의 프레임들의 조합 및 렌더링, 및 추가적인 표시 관련 요소들에 관한 정보를 제공한다.
또 하나의 실시예에 따르면, 디스크립터(209)로부터의 MPEG-4 비디오 기반 렌더링 및 조합 정보는 픽쳐 레벨 또는 슬라이스 레벨에서 그러한 정보를 제공하는 SEI 메시지를 포함하고, 여기에서 값들은 픽쳐 크기, 베이스 뷰 픽쳐 크기, 샘플 어스펙트 비율(SAR), 수평 방향으로의 재-샘플링 폴리-페이즈 필터의 레그(leg)들의 개수(Lh), 이들 레그들 각각에서의 필터 계수들의 개수(N), 수직 방향으로의 재-샘플링 폴리-페이즈 필터에서의 레그들의 개수(Lv) 및 이들 레그들 각각에서의 필터 계수들의 개수(M)를 나타낸다. 픽쳐 크기에 대해, 제1 소정값은 비베이스 뷰의 픽쳐 크기가 베이스 뷰의 픽쳐 크기와 동일하다는 것을 나타낸다. SAR은 3D 비디오에서 이미지의 단일 픽셀의 높이에 대한 폭의 비율이다. Lh는 수평 방향으로의 재-샘플링 폴리-페이즈 필터의 레그들의 개수이다. Lh에 대한 '0'의 값은 수평 재-샘플링이 요구되지 않는다는 것을 3D 조합 모듈(220)에게 나타내고, '1'의 값은 수평 라인들이 업샘플링을 위해 반복되어야 된다는 것을 3D 조합 모듈(220)에게 나타낸다. 2보다 크거나 같은 값은 3D 조합 모듈(220)에게, 폴리-페이즈 필터의, i=0 내지 Lh-1 및 j=0 내지 N-1에 대한 계수들(i, j)을 나타낸다. Lv는 수직 방향으로의 재-샘플링 폴리-페이즈 필터의 레그들의 개수이다. '0'의 값은 수직 재-샘플링이 요구되지 않는다는 것을 3D 조합 모듈(220)에게 나타내고, '1'의 값은 그 수직 라인들이 업샘플링을 위해 반복되어야 되는 것을 나타낸다. 2보다 크거나 같은 값에 대해, 디스크립터(209)는 i=0 내지 Lv-1 및 j=0 내지 M-1에 대한 폴리-페이즈 필터의 계수들(i, j)을 제공한다.
또 하나의 실시예에 따르면, MPEG-2 압축된 비디오 스트림의 정보는 픽쳐 레벨에서 정보를 제공하는 사용자-데이터 요소를 포함한다. 사용자-데이터 요소의 값들은 사용자-데이터 타입 코드, 길이 데이터, 픽쳐 크기, 베이스 뷰 픽쳐 크기, SAR, Lh, N, Lv 및 M을 나타낸다. 사용자-데이터 타입 코드는 등록 디스크립터에 의해 시그널링된 4-바이트 값으로 설정된다. '0'의 값은 비베이스 뷰에 대한 픽쳐 사이즈가 베이스 뷰와 동일하다는 것을 3D 조합 모듈(220)에게 나타낸다.
컴포넌트들(210-220)은 소프트웨어, 하드웨어, 또는 소프트웨어와 하드웨어의 조합을 포함할 수 있다. 그러므로, 하나의 실시예에서, 모듈들(210-220)의 하나 이상은 회로 컴포넌트들을 포함한다. 또 하나의 실시예에서, 모듈들(210-220)의 하나 이상은 컴퓨터 판독가능한 저장 매체에 저장된 소프트웨어 코드를 포함하고, 이는 프로세서에 의해 실행가능하다. 도 3에 도시된 시스템(300)은 추가 컴포넌트들을 포함할 수 있고 여기에 기재된 일부 컴포넌트들은 시스템(300)의 범주에서 벗어나지 않고서도 제거되거나 변형될 수 있다는 것은 자명하다.
이제, 3D 비디오 인코더(200) 및 디코더(300)가 3D TV에서 스테레오뷰들의 사이멀캐스트를 위해 채용될 수 있는 방법들의 예들이 도 4-6에 도시된 방법들(400-600)의 이하의 흐름도들과 관련하여 설명된다. 본 기술분야의 통상의 기술자들에게는, 방법들(400-600)이 일반화된 예시를 표현하고 있고 방법들(400-600)의 범주에서 벗어나지 않고서도 다른 단계들이 추가되거나 현재의 단계들이 제거되거나, 변형되거나 재배열될 수 있다는 것이 자명하다. 뿐만 아니라, 방법들(400-600)은 제한이 아니라 예로서 3D 비디오 인코더(200) 및 디코더(300)와 관련하여 설명되고, 방법들(400-600)은 다른 시스템들에서 이용될 수도 있다.
방법들(400-600)에 제시된 오퍼레이션들의 일부 또는 모두는 임의의 원하는 컴퓨터 판독가능 매체에 저장되고 컴퓨터 시스템 상의 프로세서에 의해 실행되는 하나 이상의 컴퓨터 프로그램들로서 포함될 수 있다. 본 발명을 구현하도록 동작가능한 소프트웨어를 저장하는데 이용될 수 있는 예로 든 컴퓨터 판독가능한 매체는 종래의 컴퓨터 시스템 RAM, ROM, EPROM, EEPROM, 하드 디스크들, 또는 다른 데이터 저장 디바이스들을 포함하고 이들로 제한되지 않는다.
도 4는 베이스 뷰 및 비베이스 뷰를 인코딩하여 트랜스포트 스트림(131)을 형성하는 방법(400)을 도시하고 있다. 방법(400)은 상기 도 2를 참조하여 설명된 바와 같이 3D 비디오 인코더(200)에 의해 수행될 수 있다.
도 4에 도시된 바와 같이, 단계 402에서, 3D 비디오 인코더(200)는 비디오 컨텐트를 수신한다. 3D 비디오 인코더(200)는 예를 들면 브로드캐스트 프로그램들, 인터넷 프로토콜 TV(IPTV), 스위칭된 비디오(SDV), 주문형 비디오(VOD) 또는 다른 비디오 소스들로부터 비디오 컨텐트를 수신할 수 있다. 비디오 컨텐트는 베이스 뷰 및 비베이스 뷰를 포함할 수 있다.
단계 404에서, 제1 인코더(202)는 베이스 뷰를 인코딩하여, 비디오 컨텐트와 연관된 제1 독립적으로 압축된 비디오 스트림(132a)을 형성한다. 단계 406에서, 제2 인코더(204)는 동시에 비베이스 뷰를 인코딩하여 제2 독립적으로 압축된 비디오 스트림(132b)을 형성한다. 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)은 공통 압축 포맷으로, 또는 다르게는 상이한 압축 포맷들로 압축될 수 있다.
단계 408에서, 디스크립터 프로세서(208)는 베이스 및 비베이스 뷰들을 조합하여 3D 비디오(222)를 형성하는 정보를 포함하는 디스크립터(209)를 생성한다. 예를 들면, 상기 도 2에 대해 도시된 바와 같이, 디스크립터 프로세서(208)는 상기 표 1에 도시된 바와 같은 정보를 포함하는 3D 렌더링 정보 디스크립터를 생성할 수 있다.
단계 410에서, 멀티플렉서(206)는 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)을 멀티플렉싱하여, 트랜스포트 스트림(131)을 형성한다. 트랜스포트 스트림(131)은 베이스 및 비베이스 뷰들을 이용하여 3D 비디오를 렌더링하도록 처리되는 것이 동작가능하다. 멀티플렉서(206)는 트랜스포트 스트림(131)에 디스크립터 프로세서(208)로부터 수신된 디스크립터(209)를 포함할 수 있다. 다르게는, 멀티플렉서(206)는 디스크립터(209)를 추가하도록 구성될 수 있다. 그 후에, 트랜스포트 스트림(131)은 예를 들면 도 1에 도시된 바와 같이, 네트워크를 통해 가입자들에게 출력될 수 있다.
이제, 도 5를 참조하면, 트랜스포트 스트림(131)을 3D 비디오(222)로 렌더링하는 방법(600)이 도시되어 있다. 방법(500)은 상기 도 3에 대해 설명된 바와 같이 STB(120c)에 의해 수행될 수 있다.
도 5에 도시된 바와 같이, 단계 502에서, STB(120)는 입출력 모듈(210)에서 트랜스포트 스트림(131)을 수신한다. 3D 비디오 디코더(130)의 입출력 모듈(131)은 트랜스포트 스트림(131)을 수신하고 트랜스포트 스트림(131)을 디코딩 모듈(214)에 전송하도록 구성된다. 트랜스포트 스트림(131)은 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)을 포함한다.
단계 504에서, 디코딩 모듈(214)은 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)을 디코딩하여, 베이스 뷰 및 비베이스 뷰를 형성한다. 베이스 뷰 및 비베이스 뷰는 동일한 프로그램에 포함된다. 그리고나서, 디코딩 모듈(214)은 베이스 뷰 및 비베이스 뷰를 3D 조합 모듈(220)에게 전송한다. 디코딩 모듈(214)은 또한 디스크립터(209)를 3D 조합 모듈(220)에게 전송한다.
단계 506에서, 3D 조합 모듈(220)은 베이스 뷰 및 비베이스 뷰를 이용하여 3D 비디오(222)를 형성한다. 디스크립터(209)는 3D 조합 모듈(220)에게 베이스 및 비베이스 뷰들의 오리엔테이션들, 및 베이스 뷰의 해상도가 비베이스 뷰의 해상도와 동일하게 만들도록 적용가능한 업샘플 규칙들을 나타낸다. 그런 후, 3D 비디오(222)는 예를 들면 HDMI 인터페이스를 통해 3D-레디 TV(122)에 출력될 수 있다.
이제, 도 6을 참조하면, 트랜스포트 스트림(131)을 3D 비디오(222)로 렌더링하는 방법(600)이 도시되어 있다. 방법(600)은 베이스 뷰 및 비베이스 뷰가 공통 압축 포맷으로 압축되는 트랜스포트 스트림(131)에 방법(500)의 적용을 포함한다.
도 6에 도시된 바와 같이, 단계 602에서, STB(120)는 입출력 모듈(210)에서 트랜스포트 스트림(131)을 수신한다. 3D 비디오 디코더(130)의 입출력 모듈(131)은 트랜스포트 스트림(131)을 수신하고, 일부 경우들에서의 디멀티플렉싱 이후에, 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)을 디코딩 모듈(214)에 전송하도록 구성된다.
단계 604에서, 디코딩 모듈(214)은 제1 및 제2 독립적으로 압축된 비디오 스트림들(132a-b)을 디코딩하여 베이스 뷰 및 비베이스 뷰를 형성한다. 베이스 뷰 및 비베이스 뷰는 독립적으로 압축되고 동일한 브로드캐스트 프로그램에 포함된다. 그리고나서, 디코딩 모듈(214)은 기본 스트림을 3D 조합 모듈(220)에게 전송한다.
단계 606에서, 디코딩 모듈(214)은 예를 들면 도 2에 대해 상기 설명된 바와 같이, 디스크립터(209)로부터 3D 비디오 렌더링 정보를 결정한다. 디스크립터(209)는 베이스 뷰 및 비베이스 뷰를 이용하여 3D 비디오를 렌더링하는데 이용될 수 있는 값들 및 정보를 제공한다.
하나의 실시예에 따르면, 비디오 기반 정보는 픽쳐 또는 슬라이스 레벨에서 제공된 SEI 메시지를 포함한다. SEI는 베이스 뷰의 오리엔테이션, 비베이스 뷰의 오리엔테이션, 및 업샘플 규칙을 포함한다. 업샘플 규칙은 베이스 뷰의 해상도가 비베이스 뷰의 해상도와 동일하게 하도록 적용가능하다.
단계 608에서, 3D 조합 모듈(220)은 베이스 뷰, 비베이스 뷰, 및 디스크립터(209)에 포함된 3D 렌더링 정보를 이용하여 3D 비디오를 렌더링한다. 그런 후에, 3D 비디오는 3D-레디 TV(122)에 출력될 수 있다.
본 개시의 전체에 걸쳐 구체적으로 기재되어 있지만, 본 발명의 대표적 실시예들은 넓은 범위의 어플리케이션들에 걸쳐 유틸리티를 가지고 있고, 상기 설명은 제한하는 것으로 의도되거나 해석되어서는 안 되고, 본 발명의 양태들의 예시적 설명으로서 제공되어 있다.
도 7은 하나의 실시예에 따라 도 1-6에 도시된 프로세스들의 하나 이상을 구현하거나 실행하는 컴퓨팅 장치(700)의 블록도를 예시하고 있다. 컴퓨팅 장치(700)의 예시는 일반화된 예시이고 컴퓨팅 장치(700)는 추가적인 컴포넌트들을 포함할 수 있으며 기재된 컴포넌트들의 일부는 컴퓨팅 장치(700)의 범주에서 벗어나지 않고서도 제거되거나 변형될 수 있다는 것은 자명하다. 하나의 실시예에 따르면, 컴퓨팅 장치(700)는 도 2에 도시된 3D 비디오 인코더(200)를 포함한다. 또 하나의 실시예에 따르면, 컴퓨팅 장치(700)는 도 3에 도시된 STB(120c)를 포함한다.
컴퓨팅 장치(700)는 도 4-6에 도시된 프로세스들의 하나 이상에서 기재된 단계들의 일부 또는 모두를 구현하거나 실행할 수 있는 프로세서(702)를 포함한다. 프로세서(702)로부터의 명령들 및 데이터는 통신 버스(704)를 통해 통신된다. 컴퓨팅 장치(700)는 또한 프로세서(702)를 위한 프로그램 코드가 런타임 동안에 실행될 수 있는 랜덤 액세스 메모리(RAM)와 같은 메인 메모리(706), 및 도 4-6에 도시된 프로세스들의 하나 이상에 대한 프로그램 코드의 복사본이 저장될 수 있는 하드 디스크(도시되지 않음)를 포함한다. 다르게는, 컴퓨팅 장치(700)는 비휘발성 메모리를 포함할 수 있다. 뿐만 아니라, 컴퓨팅 장치(700)는 동축 케이블, HDMI, USB 또는 다른 네트워크 인터페이스들과 같은 인터페이스들(714)을 포함한다.
본 발명의 실시예들은 트랜스포트 스트림을 3D 비디오로 렌더링하는 방식을 제공한다. 여기에 개시된 방법 및 시스템은 멀티-뷰 코딩(MVC)보다 잠재적인 잇점들을 제공하는 비디오 컴포넌트들의 사이멀캐스트를 허용한다. MVC에서, 3D 송신에서 양쪽 뷰들의 해상도는 동일하게 유지되어야 된다. 현재의 MPEG-4 또는 MPEG-2 디코더들은 MPEG-4 또는 MPEG-2를 이용하여 압축된 2개의 비디오들을 디코딩하고 디코딩된 스테레오 뷰들을 3D 표시를 위해 프리젠팅할 수 있다. 깊이 인지를 생성하는데 이용되는 비베이스 뷰는 3D 비디오의 인지 품질에 크게 영향을 미치지 않으면서도 잠재적으로 베이스 뷰보다 더 낮은 시각적 품질을 가질 수 있다. 이것은 비베이스 뷰에 대응하는 비트 레이트를 낮추거나 비베이스 뷰의 해상도를 낮춤으로써 달성될 수 있다. 비베이스는 또한 제1 뷰와 상이한 비디오 표준으로 압축될 수 있고, 예를 들면 MPEG-2를 이용하여 뷰들 중 하나를 압축하며 - 이는 다수의 전개된 디코더들에 의해 디코딩될 수 있음 -, MPEG-4를 이용하여 비베이스를 압축한다. 추가적으로, 방법 및 시스템은 이종 압축 표준들, 예를 들면 MPEG-2 및 MPEG-4 디코더들의 혼합을 가지는 디코더들을 이용하여 시스템들에서 교차 표준 및 하위 호환성을 제공한다.
여기에 기재되고 예시되어 있는 것은 그 변동들의 일부와 함께 본 발명의 실시예들이다. 여기에 이용된 용어들, 설명들 및 도면들은 단시 예시로서만 제시되어 있고 제한으로서 의미되는 것은 아니다. 본 기술분야의 숙련자들이라면, 다수의 변동들이 본 발명의 사상 및 범주 내에 가능하다는 것을 잘 알고 있을 것이고, 여기에서 본 발명은 모든 용어들이 달리 지시되지 않는 한 가장 넓은 합리적인 의미로 받아들여지는 이하의 청구항들 - 및 그 등가물들 -에 의해 정의된다고 할 것이다.

Claims (23)

  1. 3차원(3D) 비디오 인코더로서,
    베이스 뷰(base view)를 인코딩하여 비디오 컨텐트와 연관된 제1 독립적으로 압축된 비디오 스트림을 형성하도록 구성된 제1 인코더;
    비베이스 뷰(nonbase view)를 인코딩하여 상기 비디오 컨텐트와 연관된 제2 독립적으로 압축된 비디오 스트림을 형성하도록 구성된 제2 인코더; 및
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들을 멀티플렉싱하여 트랜스포트 스트림(transport stream)을 형성하도록 구성된 멀티플렉서
    를 포함하고,
    상기 트랜스포트 스트림은 상기 베이스 및 비베이스 뷰들을 이용하여 3D 비디오를 렌더링하도록 처리되는 것이 동작가능한
    3D 비디오 인코더.
  2. 제1항에 있어서,
    상기 제1 및 제2 독립적으로 압축된 비디오 스트림들과 연관된 디스크립터(descriptor)를 생성하도록 구성된 디스크립터 프로세서를 더 포함하고,
    상기 디스크립터는 상기 베이스 및 비베이스 뷰들을 조합하여 3D 비디오를 형성하는데 이용하기 위한 정보를 포함하며, 상기 멀티플렉서는 상기 트랜스포트 스트림에서 상기 디스크립터를 포함하도록 구성되는 3D 비디오 인코더.
  3. 제2항에 있어서,
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들은 공통 압축 포맷 하에서 인코딩되고, 상이한 스트림 타입들이 할당되며, 상기 공통 압축 포맷은 MPEG-4 및 MPEG-2 포맷 중 하나이고, 상기 디스크립터는 공통 비디오 시퀀스에서 적어도 2개의 필드들을 렌더링할 때 이용하기 위한 정보를 포함하며, 상기 적어도 2개의 필드들은 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들 모두로부터 렌더링되는 3D 비디오 인코더.
  4. 제2항에 있어서,
    상기 디스크립터에 포함된 정보는 상기 베이스 및 비베이스 뷰들의 오리엔테이션들(orientations), 및 상기 베이스 뷰의 해상도가 상기 비베이스 뷰의 해상도와 동일하게 만드는데 적용가능한 업샘플 규칙(upsample rule)을 포함하는 3D 비디오 인코더.
  5. 제2항에 있어서,
    상기 제1 독립적으로 압축된 비디오 스트림은 2D 디코더에 의해 처리되어 풀 해상도 2D 호환가능한 스트림을 형성하도록 동작가능하고, 상기 2D 디코더는 상기 제2 압축된 비디오 스트림을 드롭(drop)하도록 동작가능한 3D 비디오 인코더.
  6. 제2항에 있어서,
    상기 트랜스포트 스트림은 픽쳐 레벨 또는 슬라이스 레벨에서,
    값들이,
    픽쳐 크기 - 제1 소정 값은 상기 비베이스 뷰의 픽쳐 크기가 상기 베이스 뷰의 픽쳐 크기와 동일하다는 것을 나타냄 -;
    베이스 뷰 픽쳐 크기;
    샘플 어스펙트 비율(Sample Aspect Ratio;SAR);
    Lh - 여기에서 Lh는 수평 방향으로 재-샘플링 폴리-페이즈 필터(re-sampling poly-phase filter)의 레그들의 개수이고, 여기에서 '0'의 값은 수평 재-샘플링이 요구되지 않다는 것을 나타내며 '1'의 값은 수평 라인들이 업샘플링을 위해 반복되어야 된다는 것을 나타내고, 2 이상의 값은 재-샘플링 폴리-페이즈 필터의 계수들(i,j)이 i=0 내지 Lh-1 및 j=0 내지 N-1에 대해 설정되어야 된다는 것을 나타내며, N은 상기 폴리-페이즈 레그들의 각각에서 계수들의 개수를 나타냄 -; 및
    Lv - 여기에서 Lv는 수직 방향으로 재-샘플링 폴리-페이즈 필터의 레그들의 개수이고, 여기에서 '0'의 값은 수직 재-샘플링이 요구되지 않다는 것을 나타내며 '1'의 값은 수직 라인들이 업샘플링을 위해 반복되어야 된다는 것을 나타내고, 2 이상의 값은 재-샘플링 폴리-페이즈 필터의 계수들(i,j)이 i=0 내지 Lv-1 및 j=0 내지 M-1에 대해 설정되어야 된다는 것을 나타내며, M은 상기 폴리-페이즈 레그들의 각각에서 계수들의 개수를 나타냄 -
    중 하나 이상을 표현하는 정보를 제공하는 추가 인핸스먼트 정보(supplemental enhancement information;SEI)를 포함하는 3D 비디오 인코더.
  7. 제2항에 있어서,
    상기 트랜스포트 스트림들은 픽쳐 레벨에서,
    값들이,
    등록 디스크립터에 의해 시그널링된 4-바이트 값으로 설정되는 사용자-데이터 타입 코드;
    길이 데이터;
    픽쳐 크기 - '0'의 값은 상기 베이스 및 비베이스 뷰들에 대해 상기 픽쳐 크기가 동일하다는 것을 나타냄 -;
    베이스 뷰 픽쳐 크기;
    샘플 어스펙트 비율(SAR);
    Lh - 여기에서 Lh는 수평 방향으로 재-샘플링 폴리-페이즈 필터의 레그들의 개수이고, 여기에서 '0'의 값은 수평 재-샘플링이 요구되지 않다는 것을 나타내며 '1'의 값은 수평 라인들이 업샘플링을 위해 반복되어야 된다는 것을 나타내고, 2 이상의 값은 재-샘플링 폴리-페이즈 필터의 계수들(i,j)이 i=0 내지 Lh-1 및 j=0 내지 N-1에 대해 설정되어야 된다는 것을 나타내며, N은 상기 폴리-페이즈 레그들의 각각에서 계수들의 개수를 나타냄 -; 및
    Lv - 여기에서 Lv는 수직 방향으로 재-샘플링 폴리-페이즈 필터의 레그들의 개수이고, 여기에서 '0'의 값은 수직 재-샘플링이 요구되지 않다는 것을 나타내며 '1'의 값은 수직 라인들이 업샘플링을 위해 반복되어야 된다는 것을 나타내고, 2 이상의 값은 재-샘플링 폴리-페이즈 필터의 계수들(i,j)이 i=0 내지 Lv-1 및 j=0 내지 M-1에 대해 설정되어야 된다는 것을 나타내며, M은 상기 폴리-페이즈 레그들의 각각에서 계수들의 개수를 나타냄 -
    중 하나 이상을 표현하는 정보를 제공하는 사용자-데이터 요소를 포함하는 3D 비디오 인코더.
  8. 3D 비디오 디코더로서,
    비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 스트림들을 포함하는 트랜스포트 스트림을 수신하도록 구성된 입력 모듈;
    상기 트랜스포트 스트림을 디코딩하여 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들로부터 각각 베이스 및 비베이스 뷰들을 형성하도록 구성된 디코딩 모듈; 및
    상기 베이스 및 비베이스 뷰들을 이용하여 3D 비디오를 렌더링하도록 구성된 3D 조합 모듈
    을 포함하는 3D 비디오 디코더.
  9. 제8항에 있어서,
    상기 트랜스포트 스트림은 상기 베이스 및 비베이스 뷰들을 조합하여 상기 3D 비디오를 형성하는 정보를 제공하는 디스크립터를 포함하고,
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들은 공통 압축 포맷으로 분리되어 코딩되며 상이한 스트림 타입들이 할당되는 3D 비디오 디코더.
  10. 제8항에 있어서,
    상기 트랜스포트 스트림은 상기 베이스 및 비베이스 뷰들을 조합하여 상기 3D 비디오를 형성하는 정보를 제공하는 디스크립터를 포함하고,
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들은 서로 상이한 제1 및 제2 압축 포맷들로 각각 코딩되는 3D 비디오 디코더.
  11. 수신기로서,
    비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들을 포함하는 트랜스포트 스트림을 수신하도록 구성된 프로세서
    를 포함하고,
    상기 트랜스포트 스트림은 상기 프로세서에 의해 3D 비디오를 렌더링하도록 동작가능한 디스크립터를 포함하고,
    상기 디스크립터는,
    상기 디스크립터를 식별하는 디스크립터 태그;
    디스크립터 길이; 및
    상기 3D 비디오를 렌더링하기 위한 명령어들을 포함하는 구문을 구비하며,
    상기 명령어들은,
    2개의 뷰들이 상기 트랜스포트 스트림 내에 있는 경우에, 필드 픽쳐들이 상기 트랜스포트 스트림에서 수신되는지를 판정하고, 필드 픽쳐들이 수신되면 필드 패리티가 존재하는지를 판정하며, 필드 패리티가 존재하는 경우에 조합 시에 최상부 필드를 처음으로 이용하고, 필드 픽쳐들이 수신되지 않는 경우에는 프레임 순서를 이용하며 표시 특정 정보를 이용하는 단계; 및
    2개의 뷰들이 상기 트랜스포트 스트림 내에 없는 경우, 수평으로 업샘플링하고, 수직으로 업샘플링하며, 필드 또는 프레임 인터리빙을 이용하고, 상기 트랜스포트 스트림에서 좌측 아이 뷰(eye view) 또는 우측 아이 뷰에 대한 표시 특정 정보를 이용하는 단계를 포함하는
    수신기.
  12. 트랜스포트 스트림을 인코딩하는 방법으로서,
    비디오 컨텐트를 수신하는 단계;
    베이스 뷰를 인코딩하여 상기 비디오 컨텐트와 연관된 제1 독립적으로 압축된 비디오 스트림을 형성하는 단계;
    비베이스 뷰를 인코딩하여 상기 비디오 컨텐트와 연관된 제2 독립적으로 압축된 비디오 스트림을 형성하는 단계; 및
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들을 멀티플렉싱하여 트랜스포트 스트림을 형성하는 단계
    를 포함하고,
    상기 트랜스포트 스트림은 상기 베이스 및 비베이스 뷰들을 이용하여 3D 비디오를 렌더링하도록 처리되는 것이 동작가능한
    트랜스포트 스트림 인코딩 방법.
  13. 제12항에 있어서,
    디스크립터를 생성하는 단계를 더 포함하고,
    상기 디스크립터는 상기 베이스 및 비베이스 뷰들을 조합하여 3D 비디오를 형성할 때 이용하기 위한 정보를 포함하며,
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들을 멀티플렉싱하여 상기 트랜스포트 스트림을 형성하는 단계는, 상기 베이스 및 비베이스 뷰들을 조합하여 상기 3D 비디오를 형성하는 정보를 포함하는 디스크립터를 상기 트랜스포트 스트림에 포함하는 단계를 포함하는 트랜스포트 스트림 인코딩 방법.
  14. 제13항에 있어서,
    상기 베이스 뷰를 인코딩하여 상기 비디오 컨텐트와 연관된 상기 제1 독립적으로 압축된 비디오 스트림들을 형성하는 단계, 및 상기 비베이스 뷰를 인코딩하여 상기 비디오 컨텐트와 연관된 상기 제2 독립적으로 압축된 비디오 스트림을 형성하는 단계는,
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들을 공통 압축 포맷으로 개별적으로 코딩하고, 상이한 스트림 타입들을 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들에 할당하는 단계를 더 포함하는 트랜스포트 스트림 인코딩 방법.
  15. 제13항에 있어서,
    상기 베이스 뷰를 인코딩하여 상기 비디오 컨텐트와 연관된 상기 제1 독립적으로 압축된 비디오 스트림들을 형성하는 단계, 및 상기 비베이스 뷰를 인코딩하여 상기 비디오 컨텐트와 연관된 상기 제2 독립적으로 압축된 비디오 스트림을 형성하는 단계는,
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들을 서로 상이한 제1 및 제2 압축 포맷으로 각각 코딩하는 단계를 더 포함하는 트랜스포트 스트림 인코딩 방법.
  16. 제13항에 있어서,
    상기 트랜스포트 스트림에 상기 디스크립터를 포함하는 단계는 픽쳐 레벨 또는 슬라이스 레벨에서,
    값들이,
    픽쳐 크기 - 제1 소정 값은 상기 비베이스 뷰의 픽쳐 크기가 상기 베이스 뷰의 픽쳐 크기와 동일하다는 것을 나타냄 -;
    베이스 뷰 픽쳐 크기;
    샘플 어스펙트 비율(SAR);
    Lh - 여기에서 Lh는 수평 방향으로 재-샘플링 폴리-페이즈 필터의 레그들의 개수이고, 여기에서 '0'의 값은 수평 재-샘플링이 요구되지 않다는 것을 나타내며 '1'의 값은 수평 라인들이 업샘플링을 위해 반복되어야 된다는 것을 나타내고, 2 이상의 값은 재-샘플링 폴리-페이즈 필터의 계수들(i,j)이 i=0 내지 Lh-1 및 j=0 내지 N-1에 대해 설정되어야 된다는 것을 나타내며, N은 상기 폴리-페이즈 레그들의 각각에서 계수들의 개수를 나타냄 -; 및
    Lv - 여기에서 Lv는 수직 방향으로 재-샘플링 폴리-페이즈 필터의 레그들의 개수이고, 여기에서 '0'의 값은 수직 재-샘플링이 요구되지 않다는 것을 나타내며 '1'의 값은 수직 라인들이 업샘플링을 위해 반복되어야 된다는 것을 나타내고, 2 이상의 값은 재-샘플링 폴리-페이즈 필터의 계수들(i,j)이 i=0 내지 Lv-1 및 j=0 내지 M-1에 대해 설정되어야 된다는 것을 나타내며, M은 상기 폴리-페이즈 레그들의 각각에서 계수들의 개수를 나타냄 -
    를 표현하는 사용자-데이터 정보를 제공하는 SEI를 포함하는 단계를 더 포함하는 트랜스포트 스트림 인코딩 방법.
  17. 제13항에 있어서,
    상기 트랜스포트 스트림에 상기 디스크립터를 포함하는 단계는 픽쳐 레벨에서,
    값들이,
    등록 디스크립터에 의해 시그널링된 4-바이트 값으로 설정되는 사용자-데이터 타입 코드;
    길이 데이터;
    픽쳐 크기 - '0'의 값은 상기 베이스 및 비베이스 뷰들에 대해 상기 픽쳐 크기가 동일하다는 것을 나타냄 -;
    베이스 뷰 픽쳐 크기;
    샘플 어스펙트 비율(SAR);
    Lh - 여기에서 Lh는 수평 방향으로 재-샘플링 폴리-페이즈 필터의 레그들의 개수이고, 여기에서 '0'의 값은 수평 재-샘플링이 요구되지 않다는 것을 나타내며 '1'의 값은 수평 라인들이 업샘플링을 위해 반복되어야 된다는 것을 나타내고, 2 이상의 값은 재-샘플링 폴리-페이즈 필터의 계수들(i,j)이 i=0 내지 Lh-1 및 j=0 내지 N-1에 대해 설정되어야 된다는 것을 나타내며, N은 상기 폴리-페이즈 레그들의 각각에서 계수들의 개수를 나타냄 -; 및
    Lv - 여기에서 Lv는 수직 방향으로 재-샘플링 폴리-페이즈 필터의 레그들의 개수이고, 여기에서 '0'의 값은 수직 재-샘플링이 요구되지 않다는 것을 나타내며 '1'의 값은 수직 라인들이 업샘플링을 위해 반복되어야 된다는 것을 나타내고, 2 이상의 값은 재-샘플링 폴리-페이즈 필터의 계수들(i,j)이 i=0 내지 Lv-1 및 j=0 내지 M-1에 대해 설정되어야 된다는 것을 나타내며, M은 상기 폴리-페이즈 레그들의 각각에서 계수들의 개수를 나타냄 -
    중 하나 이상을 표현하는 정보를 제공하는 사용자-데이터 요소를 포함하는 단계를 더 포함하는 트랜스포트 스트림 인코딩 방법.
  18. 제13항에 있어서,
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들을 멀티플렉싱하여 상기 트랜스포트 스트림을 형성하는 단계는,
    상기 베이스 및 비베이스 뷰들을 조합하여 상기 3D 비디오를 형성하는 정보를 제공하는 디스크립터를 상기 트랜스포트 스트림에 포함하는 단계를 더 포함하고,
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들은 서로 상이한 제1 및 제2 압축 포맷으로 개별적으로 코딩되는 트랜스포트 스트림 인코딩 방법.
  19. 트랜스포트 스트림을 3D 비디오로 렌더링하는 방법에 있어서,
    비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들을 포함하는 트랜스포트 스트림을 수신하는 단계;
    상기 트랜스포트 스트림을 디코딩하여, 상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들로부터 각각 형성된 베이스 및 비베이스 뷰들을 형성하는 단계; 및
    상기 베이스 및 비베이스 뷰들을 이용하여 3D 비디오를 렌더링하는 단계
    를 포함하는 트랜스포트 스트림 렌더링 방법.
  20. 제19항에 있어서,
    상기 트랜스포트 스트림을 수신하는 단계는,
    상기 베이스 및 비베이스 뷰들을 조합하여 상기 3D 비디오를 형성하는 정보를 제공하는, 상기 트랜스포트 스트림내의 디스크립터를 수신하는 단계; 및
    공통 압축 포맷으로 개별적으로 코딩된 상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들을 수신하는 단계
    를 더 포함하고,
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들에게 상이한 스트림 타입들이 할당되는 트랜스포트 스트림 렌더링 방법.
  21. 제19항에 있어서, 상기 트랜스포트 스트림을 수신하는 단계는,
    상기 베이스 및 비베이스 뷰들을 조합하여 상기 3D 비디오를 형성하는 정보를 제공하는, 상기 트랜스포트 스트림내의 디스크립터를 수신하는 단계; 및
    서로 상이한 제1 및 제2 압축 포맷으로 개별적으로 코딩된 상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들을 수신하는 단계
    를 더 포함하는 트랜스포트 스트림 렌더링 방법.
  22. 실행되는 경우에 트랜스포트 스트림을 3D 비디오로 렌더링하는 방법을 수행하는 적어도 하나의 컴퓨터 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서, 상기 방법은,
    상기 트랜스포트 스트림에서 동일한 브로드캐스트 프로그램에 포함된, 비디오 컨텐트와 연관된 제1 및 제2 독립적으로 압축된 비디오 스트림들을 포함하는 트랜스포트 스트림을 수신하는 단계;
    상기 트랜스포트 스트림을 디코딩하여, 상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들로부터 각각 형성된 베이스 및 비베이스 뷰들을 형성하는 단계; 및
    상기 베이스 및 비베이스 뷰들을 이용하여 3D 비디오를 렌더링하는 단계
    를 포함하는 컴퓨터 판독가능 저장 매체.
  23. 실행되는 경우에 트랜스포트 스트림을 인코딩하는 방법을 수행하는 적어도 하나의 컴퓨터 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서, 상기 방법은,
    베이스 뷰를 인코딩하여 비디오 컨텐트와 연관된 제1 독립적으로 압축된 비디오 스트림을 형성하는 단계;
    비베이스 뷰를 인코딩하여 상기 비디오 컨텐트와 연관된 제2 독립적으로 압축된 비디오 스트림을 형성하는 단계; 및
    상기 비디오 컨텐트와 연관된 상기 제1 및 제2 독립적으로 압축된 비디오 스트림들을 멀티플렉싱하여 트랜스포트 스트림을 형성하는 단계
    를 포함하고,
    상기 트랜스포트 스트림은 상기 베이스 및 비베이스 뷰들을 이용하여 3D 비디오를 렌더링하도록 처리되는 것이 동작가능한
    컴퓨터 판독가능 저장 매체.
KR1020127003916A 2009-07-15 2010-07-15 3ｄ ｔｖ를 위한 스테레오뷰들의 사이멀캐스트 KR101342294B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US22579209P 2009-07-15 2009-07-15
US61/225,792 2009-07-15
US12/835,103 US9036700B2 (en) 2009-07-15 2010-07-13 Simulcast of stereoviews for 3D TV
US12/835,103 2010-07-13
PCT/US2010/042072 WO2011008917A1 (en) 2009-07-15 2010-07-15 Simulcast of stereoviews for 3d tv

Publications (2)

Publication Number Publication Date
KR20120041764A KR20120041764A (ko) 2012-05-02
KR101342294B1 true KR101342294B1 (ko) 2013-12-16

Family

ID=43449782

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020127003916A KR101342294B1 (ko) 2009-07-15 2010-07-15 3ｄ ｔｖ를 위한 스테레오뷰들의 사이멀캐스트

Country Status (5)

Country Link
US (1) US9036700B2 (ko)
EP (1) EP2454886B1 (ko)
KR (1) KR101342294B1 (ko)
CN (1) CN102474635B (ko)
WO (1) WO2011008917A1 (ko)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102484729B (zh) 2009-04-07 2016-08-24 Lg电子株式会社 广播发送器、广播接收器及其3d视频数据处理方法
KR101694821B1 (ko) * 2010-01-28 2017-01-11 삼성전자주식회사 다시점 비디오스트림에 대한 링크 정보를 이용하는 디지털 데이터스트림 전송 방법와 그 장치, 및 링크 정보를 이용하는 디지털 데이터스트림 전송 방법과 그 장치
US10448083B2 (en) 2010-04-06 2019-10-15 Comcast Cable Communications, Llc Streaming and rendering of 3-dimensional video
US11711592B2 (en) * 2010-04-06 2023-07-25 Comcast Cable Communications, Llc Distribution of multiple signals of video content independently over a network
US9030536B2 (en) 2010-06-04 2015-05-12 At&T Intellectual Property I, Lp Apparatus and method for presenting media content
US9787974B2 (en) * 2010-06-30 2017-10-10 At&T Intellectual Property I, L.P. Method and apparatus for delivering media content
US8640182B2 (en) 2010-06-30 2014-01-28 At&T Intellectual Property I, L.P. Method for detecting a viewing apparatus
US8593574B2 (en) 2010-06-30 2013-11-26 At&T Intellectual Property I, L.P. Apparatus and method for providing dimensional media content based on detected display capability
US8918831B2 (en) 2010-07-06 2014-12-23 At&T Intellectual Property I, Lp Method and apparatus for managing a presentation of media content
US9049426B2 (en) 2010-07-07 2015-06-02 At&T Intellectual Property I, Lp Apparatus and method for distributing three dimensional media content
US9560406B2 (en) 2010-07-20 2017-01-31 At&T Intellectual Property I, L.P. Method and apparatus for adapting a presentation of media content
US9032470B2 (en) 2010-07-20 2015-05-12 At&T Intellectual Property I, Lp Apparatus for adapting a presentation of media content according to a position of a viewing apparatus
US9232274B2 (en) 2010-07-20 2016-01-05 At&T Intellectual Property I, L.P. Apparatus for adapting a presentation of media content to a requesting device
US8994716B2 (en) 2010-08-02 2015-03-31 At&T Intellectual Property I, Lp Apparatus and method for providing media content
US8438502B2 (en) 2010-08-25 2013-05-07 At&T Intellectual Property I, L.P. Apparatus for controlling three-dimensional images
US20120062698A1 (en) * 2010-09-08 2012-03-15 Electronics And Telecommunications Research Institute Apparatus and method for transmitting/receiving data in communication system
KR20120031790A (ko) * 2010-09-27 2012-04-04 삼성전자주식회사 영상처리장치, 컨텐츠 제공서버 및 그들의 제어방법
US8947511B2 (en) 2010-10-01 2015-02-03 At&T Intellectual Property I, L.P. Apparatus and method for presenting three-dimensional media content
CN103190152B (zh) * 2010-10-26 2016-04-27 韩国放送公社 用于三维广播的分级广播系统及方法
CN103262549B (zh) * 2010-12-08 2017-02-22 Lg电子株式会社 用于接收数字广播信号的设备和方法
CN103190153B (zh) * 2010-12-13 2015-11-25 韩国电子通信研究院 用于立体感视频服务的信号传送方法和使用该方法的设备
US20120206568A1 (en) * 2011-02-10 2012-08-16 Google Inc. Computing device having multiple image capture devices and image modes
US9420259B2 (en) 2011-05-24 2016-08-16 Comcast Cable Communications, Llc Dynamic distribution of three-dimensional content
KR101803571B1 (ko) * 2011-06-17 2017-11-30 엘지디스플레이 주식회사 입체영상표시장치와 이의 구동방법
US8947497B2 (en) 2011-06-24 2015-02-03 At&T Intellectual Property I, Lp Apparatus and method for managing telepresence sessions
US9602766B2 (en) 2011-06-24 2017-03-21 At&T Intellectual Property I, L.P. Apparatus and method for presenting three dimensional objects with telepresence
US9445046B2 (en) 2011-06-24 2016-09-13 At&T Intellectual Property I, L.P. Apparatus and method for presenting media content with telepresence
US9030522B2 (en) 2011-06-24 2015-05-12 At&T Intellectual Property I, Lp Apparatus and method for providing media content
US8587635B2 (en) 2011-07-15 2013-11-19 At&T Intellectual Property I, L.P. Apparatus and method for providing media services with telepresence
EP2822282B1 (en) * 2012-04-23 2018-11-07 LG Electronics Inc. Signal processing device and method for 3d service
US9780910B2 (en) * 2013-03-14 2017-10-03 Harris Corporation Systems and methods for multiple stream encoded digital video
US20140340490A1 (en) * 2013-05-15 2014-11-20 Paul Duffy Portable simulated 3d projection apparatus
US10152828B2 (en) * 2015-09-30 2018-12-11 Umap AV Corp. Generating scene reconstructions from images
FI20165115A (fi) * 2016-02-17 2017-08-18 Nokia Technologies Oy Laitteisto, menetelmä ja tietokoneohjelma videokoodausta ja videokoodauksen purkua varten
WO2023025980A1 (en) * 2021-08-26 2023-03-02 Nokia Technologies Oy An apparatus, a method and a computer program for volumetric video

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020009137A1 (en) * 2000-02-01 2002-01-24 Nelson John E. Three-dimensional video broadcasting system
US20070211796A1 (en) 2006-03-09 2007-09-13 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding multi-view video to provide uniform picture quality

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2540809B2 (ja) * 1986-07-30 1996-10-09 ソニー株式会社 高能率符号化装置
US6704042B2 (en) * 1998-12-10 2004-03-09 Canon Kabushiki Kaisha Video processing apparatus, control method therefor, and storage medium
US7751473B2 (en) * 2000-05-15 2010-07-06 Nokia Corporation Video coding
AU2001266862A1 (en) 2000-06-12 2001-12-24 Vrex, Inc. Electronic stereoscopic media delivery system
US7072394B2 (en) 2002-08-27 2006-07-04 National Chiao Tung University Architecture and method for fine granularity scalable video coding
KR100556826B1 (ko) 2003-04-17 2006-03-10 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법
EP1727090A1 (en) 2004-02-27 2006-11-29 Tdvision Corporation S.A. DE C.V. Method and system for digital decoding 3d stereoscopic video images
KR100658222B1 (ko) * 2004-08-09 2006-12-15 한국전자통신연구원 3차원 디지털 멀티미디어 방송 시스템
JP4886689B2 (ja) * 2005-07-15 2012-02-29 パナソニック株式会社 パケット送信装置
US20080317124A1 (en) 2007-06-25 2008-12-25 Sukhee Cho Multi-view video coding system, decoding system, bitstream extraction system for decoding base view and supporting view random access
MY162861A (en) 2007-09-24 2017-07-31 Koninl Philips Electronics Nv Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal
WO2009111007A1 (en) * 2008-03-04 2009-09-11 Thomson Licensing Virtual reference view
JP5877065B2 (ja) * 2009-01-26 2016-03-02 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ ビデオ符号化のためのフレーム・パッキング

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020009137A1 (en) * 2000-02-01 2002-01-24 Nelson John E. Three-dimensional video broadcasting system
US20070211796A1 (en) 2006-03-09 2007-09-13 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding multi-view video to provide uniform picture quality

Also Published As

Publication number Publication date
EP2454886B1 (en) 2018-11-14
US9036700B2 (en) 2015-05-19
US20110012992A1 (en) 2011-01-20
CN102474635B (zh) 2017-02-08
KR20120041764A (ko) 2012-05-02
EP2454886A4 (en) 2013-01-30
CN102474635A (zh) 2012-05-23
EP2454886A1 (en) 2012-05-23
WO2011008917A1 (en) 2011-01-20

Similar Documents

Publication Publication Date Title
KR101342294B1 (ko) 3ｄ ｔｖ를 위한 스테레오뷰들의 사이멀캐스트
CA2758903C (en) Broadcast receiver and 3d video data processing method thereof
CA2760100C (en) Broadcast transmitter, broadcast receiver and 3d video data processing method thereof
US8665968B2 (en) Method and system for 3D video coding using SVC spatial scalability
KR101353115B1 (ko) 비디오 컨텐트를 인코딩하는 방법
CA2808395C (en) Method for providing 3d video data in a 3dtv
US20110134214A1 (en) Method and system for 3d video coding using svc temporal and spatial scalabilities
KR101889459B1 (ko) 입체영상-호환 비디오 스트림을 생성하고 재구성하기 위한 방법, 및 관련 코딩 및 디코딩 디바이스들
US9544661B2 (en) Cable broadcast receiver and 3D video data processing method thereof
US9635344B2 (en) Method for service compatibility-type transmitting in digital broadcast
US20140139628A1 (en) Method for providing and recognizing transmission mode in digital broadcasting
KR101844227B1 (ko) 방송 수신기 및 3d 비디오 데이터 처리 방법
US8483271B2 (en) Method and system for 3D video pre-processing and post-processing
US9930382B2 (en) Method and apparatus for transmitting/receiving broadcast signal for 3-dimensional (3D) broadcast service
KR20150037200A (ko) 비디오 스트림 송/수신 장치 및 비디오 스트림 송/수신 방법
Lee et al. High-definition 3DTV trial service over terrestrial broadcasting network
KR101277267B1 (ko) 3차원 방송을 위한 데이터 코덱 방법 및 장치
KR20120121831A (ko) 스테레오스코픽 비디오 송수신 방법 및 그 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161125

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20171129

Year of fee payment: 5