KR101806531B1

KR101806531B1 - 3ｄ 비디오 및 2ｄ 비디오 사이의 전환

Info

Publication number: KR101806531B1
Application number: KR1020127004849A
Authority: KR
Inventors: 필립 스테판 뉴튼; 윌헬머스 헨드리쿠스 알폰수스 브룰스; 한 비베 드; 요안 코넬리스 탈스트라; 헨드리크 프랭크 몰
Original assignee: 코닌클리케 필립스 엔.브이.
Priority date: 2009-07-27
Filing date: 2010-07-21
Publication date: 2017-12-07
Also published as: US20180176538A1; US11671578B2; BR112012001606A2; JP5647243B2; AU2010277256B2; AU2010277256A1; CN102474637A; BR112012001606A8; ES2808526T3; US20200366880A1; SG178034A1; US20220345683A1; BR112012001606B1; TW201130291A; JP2013500665A; PL3716620T3; EP2460361B1; CN107635134A; RU2547706C2; US11277600B2

Abstract

3차원[3D] 비디오 신호는 비디오 디바이스(50)에서 프로세싱된다. 상기 디바이스는 비디오 데이터를 HDMI와 같은 고속 디지털 인터페이스를 통해 3D 디스플레이로 전송하기 위하여 출력 신호를 생성하기 위한 생성 수단(52)을 가지며, 이는 3D 모드에서 동작하는 3D 디스플레이 상에 3D 비디오 데이터를 디스플레이하기 위한 3D 디스플레이 신호, 2D 모드에서 동작하는 3D 디스플레이 상에 2D 비디오 데이터를 디스플레이하기 위한 2D 디스플레이 신호, 또는 출력 신호 내에 2D 비디오 데이터를 포함함으로써 3D 모드에서 동작하는 3D 디스플레이 상에 2D 비디오 데이터를 디스플레이하기 위한 의사 2D 디스플레이 신호를 선택적으로 생성한다. 프로세싱 수단(53)은 3D 디스플레이 상에 2D 비디오 데이터를 디스플레이하기 위한 요청을 검출하고, 반면에 3D 디스플레이는 3D 모드에서 동작하고, 검출에 응답하여, 생성 유닛은 3D 디스플레이의 3D 모드를 유지하기 위하여 의사 2D 디스플레이 신호를 생성하도록 설정된다.

Description

3Ｄ 비디오 및 2Ｄ 비디오 사이의 전환{SWITCHING BETWEEN 3D VIDEO AND 2D VIDEO}

본 발명은 3차원 [3D] 비디오 신호를 프로세싱하기 위한 비디오 디바이스, 3D 비디오 신호를 수신하고 3D 비디오 데이터를 검색하기 위한 수신 수단, 및 비디오 데이터를 고속 디지털 인터페이스를 통해 3D 디스플레이로 전송하기 위한 출력 신호를 생성하기 위한 생성 수단을 포함하는 디바이스에 관한 것으로, 생성 수단은 3D 모드에서 동작하는 3D 디스플레이 상에 3D 비디오 데이터를 디스플레이하기 위해 3D 디스플레이 신호를 3D 모드에서 출력 신호로서 생성하고, 2D 모드에서 동작하는 3D 디스플레이 상에 2D 비디오 데이터를 디스플레이하기 위해 2D 디스플레이 신호를 2D 모드에서 출력 신호로 생성하도록 구성된다.

본 발명은 추가적으로, 3D 비디오 신호를 프로세싱하는 방법, 3D 비디오 신호를 제공하는 방법, 신호, 기록 매체(record carrier) 및 컴퓨터 프로그램 제품에 관한 것이다.

본 발명은 3D 비디오 데이터 및 2D 비디오 데이터를 3D 디스플레이 디바이스 상에 선택적으로 렌더링(rendering)하는 분야에 관한 것이다.

2차원(2D) 비디오 데이터를 생성하기 위한 디바이스들, 예를 들어 비디오 서버들, 브로드캐스터들, 또는 오서링 디바이스(authoring device)들이 공지되어 있다. 현재 3차원(3D) 이미지 데이터를 제공하기 위한 3D 강화 디바이스들이 제안되고 있다. 유사하게 수신된 디지털 비디오 신호들을 렌더링하는 광학 디스크(예를 들어, 블루-레이 디스크(Blu-ray Disc; BD) 또는 셋탑 박스(set box)들에 대한 재생기들과 같이 2D 비디오 데이터의 디스플레이를 프로세싱하기 위한 비디오 디바이스들이 제안되고 있다. 3D 비디오 디바이스는 TV 세트 또는 모니터와 같은 3D 디스플레이 디바이스에 결합되는 것이다. 비디오 데이터는 소스 디바이스(source device)로부터 적절한 인터페이스, 바람직하게는 HDMI와 같은 고속 디지털 인터페이스를 통해 전송된다.

3D 영화들 또는 TV 브로드캐스트들과 같은 3D 컨텐츠 외에도, 추가, 보조 2D 비디오 데이터, 예를 들어 메뉴, 뉴스 플래시 또는 다른 고지사항들이 디스플레이될 수 있다. 더욱이, 실제 사용자는 3D 비디오 자료 또는 2D 비디오 자료를 다양한 소스(source)들로부터 자유롭게 선택할 수 있다. 게다가, 사용자는 심지어 3D 자료가 이용 가능할 때에도, 2D 모드에서 강제로 디스플레이하도록 하는 세팅(setting)을 적용할 수 있다.

문서 WO 2009/077929는 2D 및 3D 사이의 전이(transition)를 위해 취해질 수 있는 방법들을 기술한다. 3D 비디오 신호는 비디오 정보 및 연관된 재생 정보를 가지며, 이 비디오 정보 및 연관된 재생 정보는 재생 포맷에 따라 조직된다. 비디오 정보는 2D 디스플레이를 위한 1차 비디오 스트림, 및 3D 디스플레이를 인에이블(enable)하기 위한 추가 정보 스트림(stream)을 포함한다. 연관된 재생 정보는 가능한 디스플레이의 유형들을 나타내는 디스플레이 정보를 포함한다. 디스플레이 정보는 수신기에서 프로세싱되어 2D 디스플레이 및 3D 디스플레이 이 둘 모두가 가능하다고 결정한다. 재생 모드는 비디오 정보가 2D 및 3D 모드에서 디스플레이되어야 하는지를 결정하도록 설정된다.
WO 03/053071은 3D 디스플레이 디바이스를 개시한다. 상기 디바이스는 2D 디스플레이 모드 및 3D(오토스테레오스코픽) 디스플레이 모드간에 교환가능하다. 상기 디바이스는 2D 비디오 신호를 수신하고 풀 해상도(full resolution) 2D 이미지를 제공하기 위해 사용할 수 있다. 제 2 동작 모드에서, 상기 디바이스는 3D 비디오 신호를 수신하고 3D 이미지 쌍의 존재를 검출한다. 또한, 상기 디바이스는 인증의 존재를 검출하고, 존재할 경우, 3D 이미지 쌍을 디스플레이한다. 그러나, 인증 키가 부재할 경우, 장치는 (감소된 해상도) 3D 이미지 쌍의 하나의 이미지가 2D 이미지가 보여지도록 양쪽 눈들에 대해 디스플레이되는 제 3 동작 모드를 제공한다.

WO2009/077929의 문제는 발생할 수 있는 3D 및 2D 재생 사이의 전이들이 디스플레이 디바이스로 하여금 비디오 포맷 및 주파수를 변경할 것을 요구한다는 점이다. 예를 들어, 3D 모드에서 스테레오스코픽 디스플레이(stereoscopic display)는 디스플레이에서 타이밍(timing)을 가지는 HDMI 인터페이스 상에 좌측 및 우측 비디오 프레임들의 정확한 동기화가 가능하도록 L(left) 및 R(right) 비디오를 적시에 교호한다. 동기화는 수평 동기화(H-sync) 및/또는 수직 동기화(V-sync)에 대한 시그널링이 좌 및/또는 우 프레임의 시작과 일치할 것을 요구한다. HDMI 인터페이스에 대한 이 시그널링은 3D로부터 2D로 진행할 때, 또는 역으로 진행할 때 디스플레이가 자신을 재조정하도록 한다. 이들 재조정들은 시간이 걸리며 사용자에게 매우 방해가 될 수 있다.

본 발명의 목적은 3D 및 2D 사이를 더욱 편리한 방식으로 전이하기 위한 시스템을 제공하는 것이다.

이를 위해, 본 발명의 제 1 양태에 따라, 청구항 제 1 항에 규정된 바와 같은, 3D 비디오 신호를 프로세싱하기 위한 디바이스가 제공된다.

이를 위해, 본 발명의 추가적인 양태에 따라, 청구항 제 8 항에 규정된 바와 같은, 3D 비디오 신호를 프로세싱하는 방법이 제공된다.

삭제

이를 위해, 본 발명의 추가 양태에 따라, 청구항 제 9 항에 규정된 바와 같은, 상기에 규정된 바와 같은 3D 비디오 디바이스로 전송하기 위한 3D 비디오 신호를 제공하는 방법이 제공된다.

삭제

이를 위해, 본 발명의 추가 양태에 따라, 청구항 제 12 항에 규정된 바와 같은, 상기에 규정된 바와 같이 3D 비디오 데이터를 3D 비디오 디바이스로 전송하기 위한 3D 비디오 신호가 제공된다.

상기 방법들은 다음의 효과를 가진다. 2D 비디오를 디스플레이하기 위한 3D 모드로부터의 전이가 개시되면, 출력 신호가 현재 3D 모드에 있음이 결정된다. 만일 그렇다면, 디스플레이는 또한 3D 모드에서 동작하고 있을 것이며, 이 디스플레이 모드는 의사 2D 디스플레이 신호, 즉 출력 신호를 3D 신호의 포맷으로 생성하거나 2D 비디오 정보만을 포함함으로써 유지된다. 디스플레이 디바이스는 계속해서 디스플레이 신호를 3D 신호의 포맷으로 수신하므로, 2D 모드로 다시 전환하거나 재 동기화하지 않을 것이다. 유용하게도 사용자에게 보여지는 실제 정보는 2D인 것으로 보이는데, 왜냐하면 3D 정보가 없기 때문이다. 예를 들어, 스테레오 비디오 신호, 즉 좌 및 우 뷰에 기초하는 3D에서, 이 둘 모두의 뷰들은 동일한 콘텐츠를 가질 것이다. 그러므로 그와 같은 뷰들을 디스플레이하는 것은 뷰어에게는 2D로 보인다.

본 발명은 또한 다음의 인식에 기초한다. 소비자들이 3D에서 뷰잉하는데 익숙해질 때 2D 및 3D 사이 그리고 3D 및 2D 사이의 전이가 필요할 것이다. 사용자는 물론 프리젠테이션(presentation)이 변할 것이라 예상할 것이지만, 이 전이는 드러나지 않아야만 하고, 영화 체험을 방해할, 비디오 내의 블랙 프레임(black frame)들 또는 다른 아티팩트(artifact)들을 발생시키지 않아야만 한다. 3D로부터 2D로 전이할 때 심한 지연들 및 아티팩트들이 재생기, 인터페이스 시그널링 및 디스플레이의 재구성과 관련하여 발생할 수 있다. 그러므로 본 발명 이전에는 3D로부터 2D로 매끄럽게 전환하고 영화의 재생 동안 역으로 전환하는 것이 사실상 불가능했다. 이 문제들을 극복하기 위해서, 만일 사용자 또는 시스템이 예를 들어 영화의 3D 모드 재생 동안 3D 및 2D 사이의 전환을 개시하는 경우, 디스플레이의 모드가 변하지 않으며 강제로 유지되는 것이 제안된다. 이로 인해 제안된 의사 2D 신호는 2D 비디오 데이터를 3D 비디오 신호 포맷으로 포함한다. 결과적으로, 영화의 프리젠테이션은 3D로부터 2D로, 그리고 그 역으로 매끄럽게 변하고, 한편 디스플레이는 3D 모드에서 동작하면서 유지된다. 예를 들어, 이것은 디스플레이 신호를 생성하는 재생기 디바이스에 의해, 이 상황을 인식하고 재생이 중단될 때보다는 3D 재생 동안 모드 전환들에 상이하게 반응함으로써 달성된다.

실시예에서 생성 수단은, 3D 모드 및 의사 2D 모드 사이에서 전이할 때, 3D 정보량을 변경시키기 위해 3D 오프셋(offset)을 2D 비디오 데이터에 적용하도록 구성된다. 이 효과는 2D 데이터가 상기 오프셋에 따라 3D 효과를 달성한다는 것이다. 유용하게도 오프셋을 적용하면, 미리 결정된 디스패리티(disparity) 또는 깊이는 더 큰 계산 전력을 요구하지 않는다.

실시예에서, 프로세싱 수단은, 의사 2D 모드에서, 그래픽 데이터에 오프셋을 적용하여 좌측 뷰 및 우측 뷰를 생성함으로써 2D 비디오 데이터 전면에 그래픽 데이터를 깊이 방향으로 위치시킴으로써 그래픽 데이터 및 비디오 데이터를 결합하도록 구성된다. 유용하게도 그래픽 데이터는 현재 2D 비디오 데이터 이전에 있으므로 비디오 데이터를 방해하지 않을 것이다.

실시예에서 수신 수단은 3D 비디오 신호로부터 전환 표시자를 검색하도록 구성되고, 전환 표시자는 선택될 2D 모드를 표시하고, 프로세싱 수단은 2D 비디오 데이터를 디스플레이하라는 요청을 검출할 때, 생성 수단을 설정하여 디스플레이 신호를 전환 표시자에 따라 2D 모드 또는 의사 2D 모드로 생성하도록 구성된다. 특히, 전화 표시자를 포함하는 3D 비디오 신호는 기록 매체로부터 검색될 수 있다. 이 효과는 사용자가 2D 뷰잉을 요구할 때 3D 비디오 신호의 발신자가 활성화되는 각각의 2D 모드를 선택할 기회를 가진다는 점이다. 유용하게도 발신자는 의사 2D 디스플레이 모드를 차단하거나 허용할 수 있다.

본 발명에 따른 방법, 3D 디바이스들 및 신호의 추가적인 바람직한 실시예들은 첨부된 청구항들에서 제공되고, 이의 내용은 본원에 참조로서 통합된다.

상술한 바와 같이 본 발명에 의해 3D 및 2D 사이에서의 전이가 더욱 편리한 시스템 및 방법이 제공된다.

도 1은 3D 이미지 데이터를 디스플레이하기 위한 시스템을 도시하는 도면,
도 2는 3D 재생기의 디코더 모델을 도시하는 도면,
도 3은 의사 2D 모드를 제어하는 것을 도시하는 도면,
도 4는 의사 2D 모드 상태일 때 3D 재생을 제어하는 것을 도시하는 도면,
도 5a는 3D 디스플레이 신호를 도시하는 도면,
도 5b는 정상적인 2D 재생을 위한 디스플레이 신호를 도시하는 도면,
도 5c는 의사 2D 재생을 위한 디스플레이 신호를 도시하는 도면,
도 6a는 3D 오프셋을 적용하는 것을 도시하는 도면,
도 6b는 듀얼 3D 오프셋을 적용하는 것을 도시하는 도면,
도 6c는 오프셋을 적용하는 동안 경계 컷-오프(cut-off)를 방지하는 것을 도시하는 도면,
도 7은 스트림 번호표를 도시하는 도면,
도 8은 스트림 엔트리를 도시하는 도면,
도 9는 스트림 엔트리 내의 유형을 규정하기 위한 표를 도시하는 도면, 및
도 10은 스트림 속성들의 구문(syntax)을 도시하는 도면.

본 발명의 상기 및 다른 양태들은 다음의 설명에서의 예를 통해 기술되는 실시예들을 참고하고 첨부 도면들을 참조하여 더욱 분명해지고 명확해질 것이다.

도면들에서, 이미 기술된 요소들에 대응하는 요소들은 동일한 참조 번호들을 가진다.

본 발명은 깊이 거리(depth range)를 가지는 임의의 유형의 3D 디스플레이에 이용될 수 있음이 주목된다. 3D 디스플레이용 비디오 데이터는 전자, 통상적으로 디지털 데이터로서 이용 가능하다록 가정된다. 본 발명은 그와 같은 이미지 데이터에 관한 것으로 디지털 도메인에서 이미지 데이터를 조작한다.

3D 비디오 포맷으로 칭해지는, 3D 이미지들이 포맷되고 전송될 수 있는 많은 상이한 방식들이 존재한다. 일부 포맷들은 2D 채널을 이용하여 또한 스테레오 정보를 운반하는 것에 기초한다. 예를 들어, 좌측 및 우측 뷰는 인터레이스(interlace)될 수 있거나, 나란히 그리고 상하로 배치될 수 있다. 이 방법들은 스테레오 정보를 운반하기 위해 해상도를 저하시킨다.

상이한 3D 포맷은 2D 이미지 내의 물체의 깊이에 대한 정보를 전달하는, 소위 깊이 맵(depth map)이라 칭해지는 추가 깊이 이미지 및 2D 이미지를 이용하는 2개의 뷰들에 기초한다. 이미지 + 깊이라 칭해지는 포맷은 이것이 2D 이미지가 소위 "깊이"와 결합하는, 즉 디스패리티 맵이라는 점에서 상이하다. 이것은 그레이 스케일 이미지(gray scale image)인데, 이로 인해 픽셀의 그레이 스케일 값은 연관되는 2D 이미지 내의 대응하는 픽셀에 대한 디스패리티(또는 깊이 맵의 경우 깊이)의 양을 나타낸다. 디스플레이 디바이스는 디스패리티, 깊이 또는 시차 맵(parallax map)을 이용하여, 2D 이미지를 입력으로 취하는 추가 뷰들을 계산한다. 이것은 다양한 방식들로 행해질 수 있고, 가장 간소화된 형태로서는 픽셀들을 상기 픽셀들과 연관되는 디스패리티 값들에 따라 좌 또는 우로 시프트(shift)하는 것이다. Christoph Fehn에 의한 "Depth image based rendering, compression and transmission for a new approach on 3D TV"라는 명칭의 논문이 이 기술에 대한 훌륭한 개요를 제공한다(http://iphome.hhi.de/fehn/Publications/fehn_EI2004.pdf).

도 1은 비디오, 그래픽들 또는 다른 시각 정보와 같은 3차원(3D) 이미지 데이터를 디스플레이하기 위한 시스템을 도시한다. 3D 소스 디바이스(40)는 3D 비디오 신호(41)를 비디오 디바이스(50)로 전송한다. 3D 비디오 신호는 저장소자, 3D 카메라들 등으로부터 이용 가능한 3D 비디오 데이터에 기초하여 원격 매체 서버, 브로드캐스터 등에 의해 제공될 수 있다. 비디오 디바이스는 3D 디스플레이 신호(56)를 전송하기 위해 3D 디스플레이 디바이스(60)에 연결된다. 3D 비디오 디바이스는 3D 비디오 신호를 수신하기 위해 입력 유닛(51)을 가진다. 예를 들어, 디바이스는 DVD 또는 블루-레이 디스크와 같은 광학 기록 매체(54)로부터 3D 비디오 정보를 검출하기 위해 입력 유닛에 연결되는 광학 디스크 유닛(58)을 포함할 수 있다. 대안으로, 디바이스는 네트워크(45), 예를 들어 인터넷 또는 브로드캐스트 네트워크에 연결되도록 네트워크 인터페이스 유닛(59)을 포함할 수 있고, 그와 같은 비디오 디바이스는 통상적으로 셋탑 박스로 칭해진다. 비디오 디바이스는 또한 위성 수신기, 매체 재생기, 개인용 컴퓨터, 모바일 디바이스 등일 수 있다.

실시예에서 3D 소스 디바이스는 2D 및 3D 사이의 전환을 위한 전환 표시자를 결정하고, 후술되는 바와 같이 전환 표시자를 3D 비디오 신호 내에 포함시키기 위한 프로세싱 유닛(42)을 가진다.

3D 소스 디바이스(source device)는 서버, 브로드캐스터, 기록 디바이스, 또는 블루-레이 디스크와 같은 기록 매체들을 제조하기 위한 오서링 및/또는 제작 시스템일 수 있다. 블루-레이 디스크는 콘텐츠 생성자들을 위하여 양방향 플랫폼을 지원한다. 3D 스테레오스코픽 비디오의 경우, 많은 포맷들이 존재한다. 주요 포맷들은 스테레오 및 이미지-플러스-깊이(image-plus-depth) 포맷이다. 이들 중에서 다시, 콘텐츠가 새로운 그리고 기존의 3D 디스플레이들 및 배포 포맷(distribution format)들과 함께 사용하는데 적합하도록 포맷될 수 있는 많은 가능한 방법들이 존재한다. 블루-레이 디스크 포맷에 대한 더 많은 정보는 오디오-비주얼 애플리케이션 포맷에 대한 논몬에서 블루-레이 디스크 관련 웹사이트로부터 입수 가능하다. http://www.blu-raydisc.com/Assets/Downloadablefile/2b_bdrom_audiovisualapplication_0305-12955-15269.pdf. 생산 프로세스는 깊이 메타데이터를 포함하는 3D 비디오 신호를 구현하는 트랙들에서 마크(mark)들의 물리 패턴을 도출하는 단계, 및 후속해서 기록 매체의 자료를 공유하여 적어도 하나의 저장 층에 마크들의 트랙들을 제공하는 단계를 추가로 포함한다.

3D 비디오 디바이스는 출력 인터페이스 유닛(55)을 통해 디스플레이 디바이스로 전송되는 3D 디스플레이 신호(56), 예를 들어 HDMI 표준에 따른 디스플레이 신호를 생성하기 위해 3D 정보를 프로세싱하는 입력 유닛(51)에 연결되는 생성 유닛(52)을 가지며, http://hdmi.org/manufacturer/specification.aspx에서 입수 가능한 "High Definition Multimedia Interface; 2006년 11월 10일의 사양 버전 1.3a"을 참조하라. 프로세싱 유닛(52)은 디스플레이 디바이스(60) 상에서의 디스플레이를 위해 3D 디스플레이 신호(56) 내에 포함되는 이미지 데이터를 생성하도록 구성된다.

생성 유닛은 다음의 방식들 중에서 선택되는 하나로, 디스플레이 신호(56)를 생성하도록 구성된다. 우선, 생성 수단은 3D 모드에서 동작하는 3D 디스플레이 상에 3D 비디오 데이터를 디스플레이하기 위해 디스플레이 신호로서 3D 디스플레이 신호를 생성하도록 설정될 수 있다. 제 1 상태는 전통적인 3D 디스플레이 신호의 생성 방식이다. 둘째로, 생성 수단은 2D 모드에서 동작하는 3D 디스플레이 상에 2D 비디오 데이터를 디스플레이하기 위해 디스플레이 신호로서 2D 디스플레이 신호를 생성하도록 설정될 수 있다. 제 2 상태는 전통적인 2D 디지털 신호의 생성 방식이다. 디스플레이는 2D 디스플레이 모드에서 강제로 동작하게 될 것이다. 세째로, 생성 수단은 3D 모드에서 동작하는 3D 디스플레이 상에 2D 비디오 데이터를 디스플레이하기 위해 디스플레이 신호 내에 2D 비디오 데이터를 포함함으로써, 디스플레이 신호로서 의사 2D 디스플레이 신호를 생성하도록 설정될 수 있다. 의사 2D 신호는 3D 비디오 신호의 포맷을 가지며 디스플레이에 의해 3D 정보로서 처리될 것임이 주목되어야 한다. 그러나, 신호 내에 내포되는 실제 비디오 데이터가 2D 데이터일 때, 뷰어는 2D로 비디오를 체험할 것이다.

비디오 디바이스는 3D 디스플레이 상에 2D 비디오 데이터를 디스플레이하라는 요청을 검출하기 위한 프로세싱 유닛(53)을 가진다. 상기 요청에는 2D 모드가 필요하다는 것을 나타내는 임의의 상태, 예를 들어 2D 모드로 전환하라는 사용자 명령이 포함되고, 소스 자료는 2D 소스 자료로 변경될 수 있고, 시스템은 공지사항들 또는 메뉴들 등을 디스플레이하기 위한 2D 모드를 개시할 수 있다. 둘째로, 프로세싱 유닛은 예를 들어 현재 3D 프로그램이 렌더링(rendering)되고 있음을 검출함으로써, 디스플레이의 현재 동작 모드가 3D임을 검출한다. 그러므로, 3D 디스플레이가 3D 모드에서 동작하는 것이 검출된다. 최종적으로, 디스플레이가 3D 모드에 있는 동안 상기 요청의 검출에 응답하여, 프로세싱 유닛은 3D 디스플레이의 3D 모드를 유지하기 위해 의사 2D 디스플레이 신호를 생성하도록 생성 수단(52)을 설정하도록 구성된다.

3D 디스플레이 디바이스(60)는 3D 이미지 데이터를 디스플레이하기 위한 것이다. 디스플레이는 비디오 디바이스(50)로부터 전송되는 3D 비디오 데이터를 포함하는 3D 디스플레이 신호(56)를 수신하기 위하여 입력 인터페이스 유닛(61)을 가진다. 전송된 3D 비디오 데이터는 3D 디스플레이(63), 예를 들어 듀얼 또는 렌티큘러(lenticular) LCD 상에 디스플레이하기 위해 프로세싱 유닛(62)에서 프로세싱된다. 디스플레이 디바이스(60)는 또한 3D 디스플레이라고 칭해지는 스테레오스코픽 디스플레이의 임의의 유형일 수 있고 화살표(64)에 의해 표시되는 디스플레이 깊이 거리를 가진다.

대안으로 3D 비디오 신호의 프로세싱 및 3D 및 2D 사이의 전이는 디스플레이 디바이스의 실시예에서 수행된다. 3D 비디오 데이터, 및 선택적인 전환 표시자는 디스플레이 신호(56)를 통해 전송된다. 전환은 예를 들어 사용자 명령에 의해 디스플레이 디바이스에서 국부적으로 개시된다. 프로세싱 유닛(62)은 현재 3D 디스플레이에 직접적으로 연결되는 의사 2D 디스플레이 신호들을 생성하는 기능들을 수행한다. 프로세싱 수단(62)은 비디오 디바이스 내의 생성 수단(52) 및 프로세싱 수단(53)에 대하여 후술되는 바와 같은 대응하는 기능들로 구성될 수 있다.

추가 실시예에서 비디오 디바이스(50) 및 디스플레이 디바이스(60)는 단일 디바이스로 통합되고, 여기서 프로세싱 수단의 단일 세트는 상기 2D/3D 전환 기능들을 수행한다.

도 1은 기록 매체(54)를 3D 비디오 신호의 캐리어(carrier)로서 추가로 도시한다. 기록 매체는 디스크 형상이고 트랙 및 중심 홀(hole)을 가진다. 일련의 물리적 탐색 가능 마크들에 의해 구성되는 트랙은 나선형이거나 정보 층 상에 실질적으로 평행한 트랙들을 구성하는 동심의 회전 패턴에 따라 배열된다. 기록 매체는 광학적으로 판독 가능할 수 있고, 광학 디스크, 예를 들어 CD, DVD 또는 BD(Blue-ray Disc)로 칭해진다. 정보는 트랙을 따라 광학적으로 검출될 수 있는 마크들, 예를 들어 피트(pit)들 및 랜드(land)들에 의해 정보 층 상에 표현된다. 트랙 구조는 또한 통상적으로 정보 블록들로 칭해지는 정보의 유닛들의 위치를 표시하기 위한, 위치 정보, 예를 들어 헤더(header)들 및 어드레스들을 포함한다. 기록 매체(54)는 DVD 또는 BD 포맷과 같은 미리 규정된 기록 포맷으로, 예를 들어 MPEG2 또는 MPEG4 인코딩 시스템에 따라 인코딩되는 비디오와 같이, 디지털로 인코딩되는 이미지 데이터를 표현하는 정보를 반송한다.

다양한 실시예들에서, 비디오 디바이스 내의 생성 수단(52) 및 프로세싱 수단(53)은 상세하게 기술되는 바와 같은 다음의 기능들들 실행하도록 구성된다.

도 2는 3D 재생기의 디코더 모델을 도시한다. 재생기는 스테레오스코픽 3D 컨텐츠의 재생에 적응되는, 예를 들어 변형된 블루-레이 디스크 재생기이다. 디스크 드라이브 유닛(201)은 복조 및 에러 정정(error correction: ECC) 디코딩을 위하여 디스크 프로세서(202)에 연결된다. 비디오 데이터는 디스크로부터 판독되는 스트림으로부터 검색되고 스위치(203)는 주 전송 스트림(TS204)을 소스 디-패킷타이저(de-packetizer)(208)에 연결되는 버퍼(206)에 제공하고, 소스 디-패킷타이저(208)는 주 TS로부터 패킷 아이덴티피케이션(packet identification: PID)을 식별하고 각각의 유형의 데이터를 각각의 버퍼들(214)에 전송하는 디-멀티플렉서(de-multiplexer)인 PID 필터(212)에 데이터를 제공하며, 여기서 상기 버퍼들(214)은 주 3D 비디오 데이터에 대해서 EB1-1, EB2-1로; 프리젠테이션 그래픽 데이터에 대해서 EB1-2 및 EB2-2로 그리고 인터랙티브(interactive) 그래픽 데이터에 대해서 EB1-3 및 EB2-3으로 칭해진다.

유사하게 스위치(203)는 서브 전송 스트림(TS; 205)을 소스 디-패킷타이저(209)에 연결되는 버퍼(207)에 제공하고, 소스 디-패킷타이저(209)는 서브 TS로부터 패킷 아이덴티피케이션(PID)를 식별하고 각각의 유형의 데이터를 또한 각각의 버퍼들(214)로 전송하는 디-멀티플렉서인 제 2 PID 필터에 데이터를 제공한다.

디-패킷타이저들(208, 209)은 또한 도착 시간 클럭 계수기들(210, 211)에 초기 값들(232, 234)을 제공하고, 도착 시간 클럭 계수기들(210, 211)은 기준 클럭 발생기(223)에 기초하여 도착 시간 클럭 (i) 값들(231, 233)을 디-패킷타이저들로 다시 제공한다.

각각의 스위치들(S1-1, S2-2, 및 S1-3)은 데이터를 주 3D 비디오를 위하여 디코더(216)(D1)로; 프리젠테이션 그래픽들을 위해서 디코더(217)(D2)로 그리고 인터랙티브 그래픽들을 위하여 디코더(218)(D3)로 전송한다. 디코딩된 데이터는 각각의 버퍼들로 전송된다. 주 비디오 데이터는 디코더(216) 또는 버퍼(241)로부터 스위치(S2)에 의해 선택되고, 스위치(S3-1)로 전송되고, 스위치(S3-1)는 주 비디오 좌측 뷰(225) 및 주 비디오 우측 뷰(226)를 위한 최종 데이터를 제공한다.

유사하게 디코더(217)로부터의 프리젠테이션 그래픽스(PG) 데이터는 각각의 버퍼들로 제공되고 컬러 검색표(color lookup table: CLUT)(221)와 협력하는 프리젠테이션 그래픽스 평면 발생기(219)에 전송된다. PG 데이터는 발생기(219)로부터 스위치(S3-2)에 의해 선택되어 PG-좌측 뷰(227) 및 PG-우측 뷰(228)를 위한 최종 데이터를 제공한다.

유사하게, 디코더(218)로부터의 인터랙티브 그래픽스(IG) 데이터는 각각의 버퍼들 및 컬러 검색표(CLUT)(222)와 협력하는 IG 평면 발생기(220)로 전송된다. IG 데이터는 발생기(220)로부터 스위치(S3-3)에 의해 선택되어 IG-좌측 뷰(229) 및 IG-우측 뷰(230)를 위한 최종 데이터를 제공한다. 인터랙티브 사용자 입력은 입력(240)을 통해 수용될 수 있다.

프로세싱 유닛(224)은 출력 시에 완전 3D 데이터, 정상 3D 데이터, 또는 의사 2D 데이터를 포함함으로써 디스플레이 신호를 생성하기 위한 다양한 스위치들의 동작을 제어한다.

도 2에 도시된 디바이스의 기능이 이제 기술된다. 패킷들은 자신들의 PID 값들에 기초하여 디스크로부터 검출되었던 전송 스트림으로부터 필터링되고 EB1-1 내지 EB3-3에 의해 표시되는 대응하는 버퍼들 내에 저장된다. 주 2D 비디오 및 대응하는 2D 그래픽스 스트림들을 운반하는 기초 스트림(elementary stream)들에 속하는 패킷들은 상부 버퍼들(EB1-1 내지 EB1-3) 내에 배치되고 3D를 위한 보조 스트림에 대한 패킷들은 EB2-1 내지 3B2-3 내에 배치된다. 보조 스트림은 주 스트림의 좌측 뷰 데이터 및 깊이 맵 및과 같은 깊이 데이터 및 투명 데이터(transparency data) 등에 따라 우측 뷰 데이터를 인코딩하기 위한 종속 스트림(dependent stream)일 수 있다. 스위치(S1-1 내지 S1-3)는 적절한 버퍼들을 선택하고 패킷들을 디코더들(D1 내지 D3)로 공급한다. 디코딩된 비디오 및 그래픽들을 디코딩한 것이 출력부 상에서 합성된 후에, 좌측 및 우측 비디오의 선택이 스위치(S3-1 내지 S3-3)에 의해 행해진다.

도 3은 의사 2D 모드를 제어하는 것을 도시한다. 이 기능은 전용 제어 유닛에서, 또는 프로세서 내의 적절한 제어 소프트웨어에 의해 구현될 수 있다. 우선 Init 2D(301)에서, 2D 디스플레이 모드가 예를 들어 사용자 명령 또는 시스템 호출에 의해 요청되는 것이 검출된다. 단계 "Detect 2D"에서 요청된 2D 디스플레이 모드는 예를 들어 상태 레지스터에 등록된다. 후속해서 정상 2D 디스플레이 신호가 생성되거나, 또는 다음과 같이 의사 2D 신호가 생성된다. 테스트 "3D Mode?" 303에서 디스플레이 신호가 현재 3D 비디오 데이터를 3D 디스플레이에 제공하고 있는지가 결정된다. 만일, 그렇다면, 의사 2D 신호는 의사 2D 304에서 생성된다. 거기에서는, 출력 모드(3D)를 유지하여 디스플레이에서 재생을 3D 모드로 유지하면서도, 스위치(S1-1...S1-3)를 L 지점으로 설정(실제로는 유지)함으로써 3D 모드에서의 2D 재생이 활성화된다. 그러나, 만일 아니라면(즉, 현재 재생이 중단되고; 3D 자료가 렌더링되고 있지 않다), 프로세시는 "Stopped" 305에서 계속되어, 여기서 출력 모드는 2D로 설정된다. 재생이 활성화되었음이 "Start 2D" 306에서 검출되면, 재생은 2D 디스플레이 신호를 생성함으로써 수행된다.

좌측 뷰를 두번 이용하도록 스위치들을 설정함으로써, 생성 수단이 입력된 3D 비디오 데이터로부터 3D 정보 없는 이미지 데이터를 도출함으로써 의사 2D 디스플레이 신호를 생성하도록 구성되는 점이 주목된다. 대안으로, 이미지 + 깊이 비디오 신호에 대해, 깊이 맵은 바람직하게는 디스플레이 면(영 깊이)에서, 단일 깊이를 표시하는 단일 값에 의해 대체될 수 있다.

어떤 시간 기간 동안 의사 2D모드에서 재생한 후에 사용자가 재생을 중단하면, 모드는 정상 2D 모드로 자동으로 전환될 수 있다는 것이 유의된다. 대안으로, 디스플레이 시스템은 사용자가 추가 명령을 제공하여 실제로 정상 모드로 갈 때까지 의사 2D에서 유지될 수 있다. 거기에 프로세싱 수단은, 생성 수단이 의사 2D 디스플레이 신호를 생성하는 동안, 3D 비디오 데이터를 렌더링하는 것이 종료했는지를 검출하고, 이 검출에 응답하여 2D 디스플레이 신호를 생성하도록 생성 수단을 설정하도록 구성될 수 있다.

도 4는 의사 2D 모드에 있을 때 3D 재생을 제어하는 것을 도시한다. 단계들의 시퀀스는 사용자가 재생 모드를 2D로부터 3D로 전환하라고 요청하고, 반면에 시스템이 의사 2D 모드에 있을 때 수행된다. 초기에 "Pseudo 2D" 401에서 시스템은 의사 2D 디스플레이 신호를 생성하고 있다. "Init 3D"에서 사용자는 디스플레이 모드를 3D로 진행하라고 요청할 수 있다. 단계 "Detect 3D"에서 요청된 3D 디스플레이 모드는 예를 들어 상태 레지스터에 등록된다. 후속해서 정상 3D 디스플레이 신호는 단계 "3D Playback" 404에서 스위치(S1-1...S1-3)가 L 및 R 사이에서 토글링(toggling)하도록 3D 재생을 3D 모드로 활성화함으로써 생성된다.

도 3 및 도 4는 3D(스테레오스코픽)영화 타이틀(title)의 재생 동안, 사용자가 재생을 2D 모드로 변경할려고 결정할 때 3D 및 2D 사이 그리고 역으로의 전이가 어떻게 수행될 수 있는지를 도시한다. 재생기는 현재 출력 모드를 3D로 유지하는 재생기 레지스터를 설정한다. 그리고나서 재생기는 재생이 현재 활성 중인지를 검사하고, 만일 그렇다면 출력 모드는 유지되지만 보조 또는 종속 뷰의 재생은 주 뷰를 반복함으로써 대체된다. 이것은 스위치(S1-1 내지 S1-3)를 "L" 지점(도 1-1에서 스위치들(S1-1 내지 S1-3)의 상부 지점)으로 유지함으로써 달성된다. 현재 제목의 재생의 종료 시에 그리고 새로운 타이틀의 시작 시에 재생기 디바이스는 출력 재생기 설정 레지스터의 상태를 검사하고 사용자가 타이틀을 선택하는 경우 2D에서의 재생을 개시할 수 있다.

매끄러운 전이를 달성하기 위해 재생 디바이스는 인터페이스 상에서 시그널링을 동일하게 유지해야만 한다. 블루-레이 디스크 재생기들에서 전형적으로 사용되는 인터페이스는 HDMI이다. HDMI에 대한 스테레오스코픽 컨텐츠의 전송 및 시그널링은 명세서에서 규정된다. HMDI를 통해 전송될 수 있는 여러 스테레오스코픽 비디오 포맷들이 있고, 여기서는 단지 하나의 공통으로 사용되는 포맷이 어떻게 전송되는지 즉 프레임 대체 스테레오스코픽 비디오만을 설명할 것이며, 유사한 원리들이 다른 스테레오스코픽 비디오 포맷들(라인 대체, 사이드-바이-사이드(side-by-side), 체커보드(checkerboard) 등)에 적용될 것이다. 도 5의 예들에서, HDMI 표준에 따른 디스플레이 신호가 도시된다. 그러나, 3D 비디오 디스플레이를 제어하는 포맷을 가지는 어떠한 비디오 신호도 의사 2D 모드를 구현하는데 유사하게 적응될 수 있다.

도 5a는 3D 디스플레이 신호를 도시한다. HDMI에 따라 프레임 대체 스테레오스코픽 비디오를 전송할 때 타이밍 및 공백 기간(blanking period)들이 사용되었다. 좌측 프레임이 종료하고 우측 프레임이 시작하는 곳을 표시하기 위한 시그널링은 수직 공백 기간을 삽입함으로써 행해진다. 이 포맷에 대한 전형적인 타이밍은 24fps에서 그리고 24Hz의 Vfeq 및 48.500 MHz에서 작동하는 픽셀 클럭을 가지는 Hblank 830, Vblank 45의 공백 기간들을 가지는 1920x1080일 것이다.

도 5b는 정상적인 2D 재생을 위한 디스플레이 신호를 도시한다. 예를 들어 상기 신호는 24fps에서 24Hz의 Vfeq 및 74.250MHz의 픽셀 클럭을 가지는 Hblank 830, Vblank 45의 공백 기간들을 가지는 1920x1080 비디오를 운반할 수 있다. 이 포맷들 둘 모두의 시그널링이 유사할지라도 픽셀 클럭은 빠르기에 있어 두배로 작동하고 스테레오스코픽 포맷에서 추가 수직 공백 기간이 존재한다. 픽셀 클럭에 대한 변경들은 전형적으로 인터페이스의 재-구성을 요구하고 프레임 손실을 야기시킨다. 그러므로 의사 2D 디스플레이 신호는 재생 동안 2D/3D 모드 변경들을 위해 제안된다.

도 5c는 의사 2D 재생을 위한 디스플레이 신호를 도시한다. 상기 신호에서 픽셀 주파수는 도 5a에 도시된 3D 신호의 레벨로 유지되지만, 우측 프레임은 도시된 바와 같이 좌측 프레임을 반복함으로써 대체된다. 특히 수직 주파수 신호는 도 5b의 정상 2D 신호와 다른 것을 특징으로 한다.

블루-레이 디스크 표준은 재생기가 2D 또는 3D 타이틀을 재생하는데 요구되는 모든 시그널링을 규정하기 위해 플레이리스트(playlist) 구조를 이용한다. 플레이리스트는 플레이아이템들의 시퀀스이고, 플레이아이템은 함께 프리젠테이션을 구성하는 스트림의 세그먼트(segment)들의 목록(비디오, 오디오 스트림들, 자막들, 및 다른 그래픽들)이다. 모든 플레이아이템 내에 플레이아이템의 재생 동안 디코딩되고 제공되는 모든 기초 스트림들을 목록화한 표가 있고, 이 표는 스트림 번호(STreamNumber: STN)-표로서 칭해지고; 도 7을 참조하라.

실시예에서 3D 및 2D 재생 사이에서 전이할 때 2D 이미지에 그리고 또한 그래픽들에 오프셋이 적용된다. 2D 이미지 데이터는 도 6에 도시된 바와 같이 3D 데이터를 생성하는데 이용된다. 상술한 바와 같은 생성 유닛은 3D 모드 및 의사 2D 모드 사이에서 전이할 때 3D 정보의 양을 변화시키기 위해 3D 오프셋을 2D 비디오에 적용하도록 구성된다.

오프셋은 디스크 상에서 표에 저장될 수 있고 재생 디바이스가 완전한 3D 스테레오스코픽 재생을 지원하지 않을 때 사용될 수 있다. 대안으로 오프셋은 재생기에서 설정되거나 사용자에 의해 선택된 미리 규정된 값 등일 수 있다.

3D 및 2D 사이에서 그리고 역으로 전이할 때 오프셋은 2D로부터 3D로 전환할 때 주 2D 이미지에 점진적으로 적용될 수 있고 3D 및 2D 사이에서 전이할 때 점진적으로 감소될 수 있다. 거기에 생성 수단은 3D 정보의 양을 점차 변경시키기 위해 3D 오프셋을 점진적으로 적용하도록 구성된다.

도 6a는 3D 오프셋을 적용하는 것을 도시한다. 2D 이미지 데이터(601)의 예는 그래픽 2D 데이터(602)와 결합되고, 이것은 배경 이미지(601)의 앞에서 깊이 방향으로 위치되어야 한다. 결합된 이미지는 좌측 뷰(607)로 이용된다. 오프셋(606)은 우측 뷰(608)를 생성하기 위해 디스패리티 시프트로서 적용된다. 사용자는 결합된 3D 뷰(609)를 체험할 것이다. 시프트로 인해 그래픽들의 부분(604)이 잘려지고, 한편 추가 부분은 공백 또는 투명하게 유지되는데 왜냐하면 그 영역을 채우는 정보가 이용 가능하지 않기 때문이다.

오프셋을 2D 이미지에 적용함으로써 생성되는 스테레오 그래픽들의 경우 오프셋이 2D 이미지 상에 한 방향으로 적용될 때 문제들이 발생한다. 2D 이미지의 관련 부분이 오프셋을 적용한 후에 이미지의 오프셋 부분이 평면의 경계 부근에 위치되면, 이미지의 일부는 요소 610에서 도 6a에 도시된 바와 같이 평면의 경계선들의 범위 밖에 있을 수 있다. 수 1은 최종 뷰(609)에서 부분적으로 사라질 것이다.

도 6b는 듀얼 3D 오프셋을 적용하는 것을 도시한다. 오프셋은 2개로 나눠지고 좌측 및 우측 출력 평면(그러나 반대 방향들로의) 이 둘 모두에 적용된다. 양 출력 평면들을 생성하기 위해 오프셋의 절반(625)을 적용함으로써, 양 방향들에서의 2D 이미지 상에서, 잘려진 효과는 도 6b에서 도시된 바와 같이 감소될 수 있다. 거기에 생성 수단은 좌측 출력 평면 및 우측 출력 평면을 생성하기 위해 2D 비디오를 반대 방향들로 시프트함으로써 3D 오프셋을 적용하도록 구성된다.

도 6c는 오프셋을 적용하는 동안 경계 컷-오프(cut-off)를 방지하는 것을 도시한다. 상기 도면은 그래픽 정보의 재 편집된 버전을 도시한다. 좌측 오프셋 버전(630) 및 우측 오프셋 버전(631) 이 둘 모두는 잘려진 부분들(632, 633) 내의 요소들을 포함하지 않는다. 그러므로 최종 뷰는 오서링 동안 이미지 + 적용된 오프셋이 양 좌측 및 우측 평면들의 경계면들 내에서 유지되는 것을 보장함으로써 개선된다.

추가 실시예에서 비-선형 스트레칭 및 스케일링(scaling)은 스테레오스코픽 인지를 생성하기 위해 2D 이미지에 적용되는 오프셋을 이용할 때 좌측 및 우측 뷰 모두에 적용된다. 오프셋을 적용하고 이미지를 (비디오 및/또는 그래픽) 이미지의 좌측 및/또는 우측 부분으로 시프트하면 배경이 폐색 해제된다. 상기 폐색 해제된 영역들을 채우는데 이용 가능한 배경 정보가 존재하는 않는 경우 출력 이미지가 잘려지게 된다. 사용자가 이미지의 이 급격한 잘림에 의해 방해받는 것을 방지하기 위해, 이미지는 비선형적으로 스케일링되어 없어진 폐색 해제 영역들을 채운다. 거기에 생성 수단은 상기 시프트에 의해 디스플레이 상에 공백이 남을 수도 있는 3D 신호의 부분들을 커버하기 위해 상기 시프트동안 2D 비디오를 비선형 스트레칭하도록 구성된다.

도 7은 STN_table_3D로 칭해지는, 3D 비디오 신호 내의 다양한 데이터 스트림들을 규정하는 스트림 번호 표를 도시한다. 상기 표는 하나의 플레이아이템을 위한 STN_table_3D의 예를 도시한다. 추가 엔트리들(후술되는 바와 같이)은 정규 2D STN_table에 포함된다. 보조 스트림 엔트리는 스트레오스코픽 비디오를 포함하는 경우와 같이 종속 스트림들을 참조 표시하거나 또는 깊이 맵 스트림 또는 이 둘 모두를 포함할 수 있다. 전형적으로 주 엔트리는 예를 들어 MPEG-4 MVC에 따라 인코딩된 스테레오스코픽 비디오에 대해 독립된 비디오를 포함할 것이고, 반면에 보조 스트림의 서브-경로는 종속 비디오 스트림과 함께 또는 이 대신에 선택되는 깊이 또는 디스패리티 맵을 참조하는데 이용될 수 있다.

MPEG MVC 스트림과 같이, 주 및 종속 기초 스트림으로 구성되는 3D 컨텐츠를 포함하는 플레이아이템의 재생의 경우, STN_table는 시그널링을 지원하도록 확장되어 주 비디오 스트림(정상적인 경우와 같이) 2D 재생뿐만 아니라 3D 데이터를 위한 종속 스트림을 식별한다. 이 정보를 포함하기 위해 두 선택사항들이 이용 가능하다. 새로운 플레이리스트 유형이 규정될 수 있거나 추가 시그럴링이 확장 데이터로서 기존 재생기가 무시할 플레이리스트에 추가된다. 양 경우들에서 기본 뷰(base view)를 넘는 모든 (스테레오스코픽) 3D 스트림, 즉 종속 또는 2차 뷰 스트림에 대한 엔트리를 포함하는 STN_table에 새로운 엔트리가 추가된다. 3D가 강화된 STN_table는 STN_table_3D로 칭해지고 전형적으로 호환성 이유들로 인해 플레이리스트에 확장 데이터로서 추가될 것이고 이로 인해 STN_table_stereoscopic은 플레이아이템들의 루프를 가지며 플레이아이템 당 주 및 보조 스트림들에 대한 스트림 엔트리들을 포함한다.

다음의 필드들은 STN_table_3D 의미정보(semantic)들을 규정하기 위하여 STN 표에 표기될 것이다:

Length : 이 16비트 필드는 이 length 필드 바로 뒤에 오는 STN_table() 및 STN_table()의 마지막까지의 바이트들의 수를 규정한다.

keep_3D_mode_during_playback

이 필드는 영화 타이틀의 재생 동안 3D로부터 2D 모드로 전이할 때 재생기의 동작을 표시한다. 0b로 설정되면 재생기는 모드들을 전환한다. 1b로 설정되면 재생기는 모드를 3D로 유지할 것이지만 재생기는 "L" 지점에서 L, R 평면 스위치들(S1-1,...,S1-3)을 유지하여 비디오 및/또는 그래픽들의 프리젠테이션이 의사 2D 신호를 생성함으로써 2D로 진행하도록 할 것이다. 이 신호는 현재 실행 중인 타이틀의 재생이 중단할 때까지 또는 사용자가 재생 모드를 다시 3D로 변경할 때가지 유지될 수 있다.

stream_entry() 이 섹션은 STN_table()의 stream_entry()를 규정한다; 도 8을 참조하라

stream_entry_auxilliary_view() 이 엔트리는 종속 코딩되는 우측 뷰 또는 깊이 맵과 같이, 3D 정보를 구성하는 추가 비디오 데이터 스트림을 규정한다. 구문 및 의미정보들은 주 뷰의 stream_entry에 대해 동일하다.

stream_attributes() 이 필드는 STN_table()의 stream_attributes()를 규정한다; 도 10을 참조하라.

실시예에서, 전체 플레이리스트에 대한 하나의 STN_table_3D 대신, STN_table_3D는 각각의 플레이아이템에 추가될 수 있다. 더욱이, 특히 3D 재생을 위한 새로운 플레이리스트가 2D 플레이리스트로의 확장 대신 규정될 수 있다.

3D로부터 2D로의 역으로의 전이들 동안의 전이 지연들 및 아티팩트들을 최소화하기 위해, 전환 표시자로 칭해지며, 3D에서 2D로 그리고 그 역으로의 전이 동안 콘텐츠 저작자가 원하는 동작을 표시하도록 하는 새로운 엔트리가 추가될 수 있다. 이 전환 표시자는 선택될 2D 모드를 표시한다. 이 선택을 위한 선택사양들은: (a) 재생기 모드들을 전환하거나 (b) 3D 모드에서 그러나 영(0) 디스패리티(의사 2D 모드)를 가지고 재생을 계속하는 것을 표시하는 것이다.

도 1의 비디오 디바이스에서 전환 표시자를 수용하기 위해, 수신 디바이스는 3D 비디오 신호로부터 전환 표시자를 검색하도록 구성된다. 프로세싱 유닛(53)은, 2D 비디오 데이터를 디스플레이하라는 상기 요청을 검출할 때, 디스플레이 신호를 2D 모드 또는 의사 2D 모드로 생성하기 위해 생성 수단을 전환 표시자와 관계 없이 설정하도록 구성된다.

실시예에서 필드 keep_3D_mode_during_playback 71, 72, 73은 의사 2D 스위칭 모드가 선택되어야만 한다거나 정상 2D 모드를 표시하는 전환 표시자의 예이다. 실시예에서 표시자(71)는 주 비디오 데이터에 제공되고, 추가 표시자(72)는 프리젠테이션 그래픽 데이터에 제공되고 추가 표시자(73)는 인터랙티브 그래픽 데이터에 제공된다. 다른 실시예들에서 이 필드는 생략될 수 있거나, 모든 스트림들에 대한 단 하나의 표시자일 수 있거나, 또는 2D/3D 모드 스위칭의 추가 상태들을 표시하도록 확장될 수 있음을 주목하라.

3D 비디오 신호를 제공하는 방법은 3D 비디오 데이터를 포함하는 3D 비디오 신호를 생성하는 단계, 및 3D 비디오 신호 내에 전환 표시자를 포함하는 단계를 포함한다. 그러므로, 생성되는 3D 비디오 신호는 네트워크를 통해 전송되고, 브로드캐스팅되고, 기록 매체에 저장될 수 있다. 상기 방법은 기록 매체를 제조하는 단계를 추가로 포함하고, 기록 매체에는 3D 비디오 신호를 표현하는 표시들의 트랙이 제공된다.

도 8은 스트림 엔트리를 도시한다. 스트림 엔트리는 각각의 스트림의 파라미터들을 규정한다. 특히 다음의 필드들은 구문을 규정하기 위한 스트림 엔트리 테이블에서 기재될 것이다:

length : 이 8비트 필드는 이 length 필드 바로 뒤에 오는 stream_entry() 및 stream_entry()의 마지막까지의 바이트들의 수를 표시한다.

type : 이 8비트 필드는 stream_entry()에 대한 스트림 번호에 의해 참조되는 기초 스트림을 식별하기 위한 데이터베이스의 유형을 표시한다; 도 9를 참조하라.

ref_to_stream_PID_of_mainClip : 이 16비트 필드는 PlayItem()의 Clip_Information_file_name[0]/Clip_Information_file_name[angle_id]에 의해 참조되는 클립의 ProgramInfo()에서 규정되는 stream_PID[0][stream_index] 엔트리들로부터의 값을 표시한다.

ref_to_SubPath_id : 이 8비트 필드는 PlayList()에서 규정되는 SubPath_id 엔트리들로부터의 값을 표시한다.

ref_to_subClip_entry_id : 이 8비트 필드는 ref_to_SubPath_id에 의해 참조되는 서브경로의 서브플레이아이템에서 규정되는 subClip_entry_id 엔트리들로부터의 값을 표시한다.

ref_to_stream_PID_of_subClip : 이 16비트 필드는 ref_to_subClip_entry_id에 의해 참조되는 Clip_Information_file_name에 의해 참조되는 클립의 ProgramInfo()에서 규정되는 stream_PID[0][stream_index] 엔트리들로부터의 값을 표시한다.

도 9는 스트림 엔트리에서의 유형을 규정하기 위한 표를 도시한다. 유형의 값은 표에 표시되는 바와 같이, 3D 비디오 신호에서의 각각의 스트림을 구조를 식별한다.

도 10은 스트림 속성들의 구문을 도시한다. 이 스트림 속성들은 도 7에 도시된 바와 같이 STN 표의 일부이다. 특히 다음의 필드들은 스트림 속성 구문에서 주목되어야 한다:

length : 이 8비트 필드는 length 필드 바로 뒤에 오는 stream_attributes() 및 stream_attributes()의 마지막까지의 바이트들의 수를 표시한다.

stream_coding_type : 이 8비트 필드는 stream_attributes()의 스트림 번호와 연관되는 기초 스트림의 코딩 유형을 표시하고, 미리 규정된 값, 예를 들어 0x20으로 설정되어 MVC 코딩된 종속 스트림을 표시하거나 0x21으로 설정되어 깊이 또는 디스패리티 맵을 표시한다.

명료성을 위한 상기 설명은 상이한 기능 유닛들 및 프로세서들을 참조하여 본 발명의 실시예들을 설명했음이 인정될 것이다. 그러나, 상이한 기능 유닛들 또는 프로세서들 사이의 기능의 임의의 적절한 분배는 본 발명을 손상시키지 않고 사용될 수 있음이 명확할 것이다. 예를 들어, 별개의 유닛들, 프로세서들 또는 제어기들에 의해 수행되도록 설명되는 기능은 동일한 프로세서 또는 제어기들에 수행될 수 있다. 그러므로, 특정한 기능 유닛들을 언급한 것은 엄격한 논리 또는 물리 구조 또는 조직을 나타내기 보다는 단지 기술된 기능을 제공하기 위한 적절한 수단을 언급한 것으로 보아야만 할 것이다.

본 발명은 하드웨어, 소프트웨어, 펌웨어 또는 이들의 임의의 결합을 포함하는 임의의 적절한 형태로 구현될 수 있다. 본 발명은 선택사양으로 적어도 부분적으로, 하나 이상의 데이터 프로세서들 및/또는 디지털 신호 프로세서들 상에서 운영되는 컴퓨터 소프트웨어로 구현될 수 있다. 본 발명의 실시예의 요소들 및 구성요소들은 임의의 적절한 방식으로 물리적, 기능적 그리고 논리적으로 구현될 수 있다. 실제로 상기 기능은 단일 유닛에서, 복수의 유닛들에서, 또는 다른 기능 유닛들의 일부로서 구현될 수 있다. 이와 같으므로, 본 발명은 단일 유닛에서 구현될 수 있거나 상이한 유닛들 및 프로세서들 사이에서 물리적 그리고 기능적으로 분배될 수 있다.

본 발명이 일부 실시예들과 함께 기술되었을지라도, 본 발명은 본원에서 진술되는 특정한 형태로 제한되도록 의도되지 않는다. 오히려, 본 발명의 범위는 첨부 청구항들에 의해서만 제한된다. 게다가, 특징이 특정한 실시예들과 함께 기술된 것처럼 보일 수 있을지라도, 당업자는 기술된 실시예들의 다양한 특징들이 본 발명에 따라 결합될 수 있음을 인정할 것이다. 청구항들에서, 용어 포함하는은 다른 요소들 또는 단계들의 존재를 배제하지 않는다.

더욱이, 개별적으로 기재될지라도, 복수의 수단들, 요소들 또는 방법 단계들은 예를 들어 단일 유닛 또는 프로세서에 의해 구현될 수 있다. 추가적으로, 개별 특징들은 상이한 청구항들에 포함될 수 있을지라도, 유용하게 결합되는 것이 가능할 수 있고, 상이한 청구항들에 포함되는 것은 특징들의 결합이 실현 가능하지 않고/않거나 유용하지 않다는 것을 의미하지 않는다. 또한 하나의 청구항들의 카테고리 내에 특징을 포함하는 것이 이 카테고리로 제한되는 것을 의미하지 않고 오히려 특징이 적절하다면 다른 청구항 카테고리들에 마찬가지로 적용 가능하다는 것을 나타낸다. 더욱이, 청구항들에서의 특징들의 순서는 특징들이 작업되어야 하는 임의의 특정한 순서를 의미하지 않고 특히 방법 청구항에서의 개별 단계들의 순서는 단계들인 이 순서로 수행되어야만 한다는 것을 의미하지 않는다. 오히려, 단계들은 임의의 적절한 순서로 수행될 수 있다. 게다가, 단수를 언급하는 것이 복수를 배제하지 않는다. 그러므로 "a", "an", "first", "second" 등을 언급하는 것을 복수를 제외하지 않는다. 청구항들 내에서의 참조 기호들은 단지 명확한 예로서 제공되고, 어떠한 방식으로도 청구항들의 범위를 제한하는 것으로 해석되지 않아야 한다.

52 : 생성 수단 53 : 프로세싱 수단
54 : 기록 매체 51, 58, 59 : 수신 수단

Claims

3차원[3D] 비디오 신호를 프로세싱하기 위한 비디오 디바이스(50)에 있어서,
상기 3D 비디오 신호를 수신하고 3D 비디오 데이터를 검색하기 위한 수신 수단(51, 58, 59),
상기 비디오 데이터를 3D 디스플레이로 전송하기 위하여 디스플레이 신호를 생성하기 위한 생성 수단(52)으로서, 상기 생성 수단은,
3D 모드에서 동작하는 상기 3D 디스플레이 상에 상기 3D 비디오 데이터를 디스플레이하기 위해 3D 디스플레이 신호를 상기 3D 모드에서 생성하고,
2D 모드에서 동작하는 상기 3D 디스플레이 상에 2D 비디오 데이터를 디스플레이하기 위해 2D 디스플레이 신호를 상기 2D 모드에서 생성하고,
상기 3D 모드에서 동작하는 상기 3D 디스플레이 상에 상기 2D 비디오 데이터를 디스플레이하기 위해 상기 디스플레이 신호 내의 2D 비디오 데이터를 포함함으로써 의사(pseudo) 2D 디스플레이 신호를 의사 2D 모드에서 생성하도록 구성되는, 상기 생성 수단, 및
프로세싱 수단(53)으로서,
상기 3D 디스플레이 상에 2D 비디오 데이터를 디스플레이하기 위해 상기 3D 모드로부터 전이하기 위한 요청을 검출하고, 상기 검출에 응답하여,
상기 3D 디스플레이의 3D 모드를 유지하기 위해 상기 의사 2D 디스플레이 신호를 생성하도록 상기 생성 수단을 설정하기 위한, 상기 프로세싱 수단(53)을 포함하고,
상기 비디오 디바이스는,
고속 디지털 인터페이스를 통해 상기 3D 디스플레이를 갖는 3D 디스플레이 디바이스(60)로 HDMI 표준에 따라 포맷된 출력 신호를 출력하기 위한 출력 인터페이스 유닛(55)을 포함하고,
상기 출력 신호는,
상기 3D 모드에서 3D 신호의 포맷의 상기 3D 디스플레이 신호;
상기 2D 모드에서 2D 신호의 포맷의 상기 2D 디스플레이 신호; 및
상기 의사 2D 모드에서 3D 신호의 포맷의 2D 비디오 데이터를 포함하는 상기 의사 2D 디스플레이 신호를 포함하는 것을 특징으로 하는, 비디오 디바이스.
제 1 항에 있어서,
상기 생성 수단(52)은, 상기 의사 2D 디스플레이 신호를 생성하는 동안, 상기 3D 비디오 데이터로부터 3D 정보 없는 이미지 데이터를 도출함으로써 상기 2D 비디오 데이터를 생성하도록 구성되는, 비디오 디바이스.
제 1 항에 있어서,
상기 프로세싱 수단(53)은, 오프셋을 그래픽 데이터에 적용하여 좌측 뷰(view) 및 우측 뷰를 생성함으로써 상기 2D 비디오 데이터 전면에 그래픽 데이터를 깊이 방향으로 위치시킴으로써 그래픽 데이터 및 2D 비디오 데이터를 결합하도록 구성되는, 비디오 디바이스.
제 1 항에 있어서,
상기 프로세싱 수단(53)은, 상기 생성 수단(52)이 상기 의사 2D 디스플레이 신호를 생성하는 동안, 상기 3D 비디오 데이터를 렌더링하는 것이 종료되었음을 검출하고, 상기 검출에 응답하여, 상기 2D 디스플레이 신호를 생성하기 위해 상기 생성 수단을 설정하도록 구성되는, 비디오 디바이스.
제 1 항에 있어서,
상기 수신 수단(51, 58, 59)은, 상기 3D 비디오 신호로부터 전환 표시자(switching indicator)를 검출하도록 구성되고, 상기 전환 표시자는 선택될 2D 모드를 표시하고, 상기 프로세싱 수단(53)은, 상기 출력 신호를 상기 전환 표시자에 따라 생성하기 위해 상기 생성 수단(52)을 설정하도록 구성되는, 비디오 디바이스.
제 5 항에 있어서,
상기 전환 표시자는 상기 2D 모드가 선택된 것을 표시하거나, 상기 전환 표시자는 상기 의사 2D 모드가 선택된 것을 표시하는, 비디오 디바이스.
제 1 항에 있어서,
상기 수신 수단은 상기 3D 비디오 신호를 수신하기 위해 기록 매체(record carrier)를 판독하기 위한 수단(58)을 포함하는, 비디오 디바이스.
3차원[3D] 비디오 신호를 프로세싱하는 방법에 있어서,
상기 3D 비디오 신호를 수신하고 3D 비디오 데이터를 검색하는 단계;
비디오 데이터를 3D 디스플레이로 전송하기 위하여 디스플레이 신호를 생성하는 단계로서,
3D 모드에서 동작하는 상기 3D 디스플레이 상에 상기 3D 비디오 데이터를 디스플레이하기 위해 3D 디스플레이 신호를 3D 모드에서 생성하고,
2D 모드에서 동작하는 상기 3D 디스플레이 상에 2D 비디오 데이터를 디스플레이하기 위해 2D 디스플레이 신호를 2D 모드에서 생성하고,
상기 3D 모드에서 동작하는 상기 3D 디스플레이 상에 상기 2D 비디오 데이터를 디스플레이하기 위해 상기 디스플레이 신호 내의 2D 비디오 데이터를 포함함으로써 의사 2D 디스플레이 신호를 의사 2D 모드에서 생성하고;
상기 3D 디스플레이 상에 2D 비디오 데이터를 디스플레이하기 위해 상기 3D 모드로부터 상기 2D 모드로 전이하기 위한 요청을 검출하고, 상기 검출에 응답하여,
상기 3D 디스플레이의 3D 모드를 유지하기 위해 상기 의사 2D 디스플레이 신호를 생성하도록 생성 수단을 설정하도록 구성되는, 상기 생성 단계를 포함하고,
상기 방법은,
고속 디지털 인터페이스를 통해 HDMI 표준을 따라 포맷된 출력 신호를 상기 3D 디스플레이를 갖는 3D 디스플레이 디바이스(60)에 출력하는 단계로서,
상기 출력 신호는,
상기 3D 모드에서 3D 신호의 포맷의 상기 3D 디스플레이 신호;
상기 2D 모드에서 2D 신호의 포맷의 상기 2D 디스플레이 신호; 및
상기 의사 2D 모드에서 3D 신호의 포맷의 2D 비디오 데이터를 포함하는 상기 의사 2D 디스플레이 신호를 포함하는, 상기 출력 단계를 포함하는 것을 특징으로 하는, 3차원 비디오 신호를 프로세싱하는 방법.
제 5 항에 따른 3차원[3D] 비디오 디바이스로 전송하기 위한 3D 비디오 신호를 제공하는 방법에 있어서,
3D 비디오 데이터를 포함하는 3D 비디오 신호를 생성하는 단계, 및
상기 3D 비디오 신호 내에 전환 표시자(switching indicator)를 포함하는 단계를 포함하고,
상기 전환 표시자는, 상기 디바이스에서, 상기 출력 신호를 상기 전환 표시자에 따라 생성하기 위해 상기 생성 수단을 설정하도록 선택되는 2D 모드를 표시하는, 3D 비디오 신호를 제공하는 방법.
제 9 항에 있어서,
상기 전환 표시자는 상기 2D 모드가 선택된 것을 표시하거나, 상기 전환 표시자는 상기 의사 2D 모드가 선택된 것을 표시하는, 3D 비디오 신호를 제공하는 방법.
제 9 항 또는 제 10 항에 있어서,
기록 매체를 제조하는 단계를 포함하고, 상기 기록 매체에는 상기 3D 비디오 신호를 표현하는 마크들의 트랙이 제공되는, 3D 비디오 신호를 제공하는 방법.
제 8 항에 따른 3차원[3D] 비디오 신호(41)를 프로세싱하는 방법을 처리하기 위한 컴퓨터 프로그램이 기록되어 있는 컴퓨터 판독 가능 기록 매체에 있어서,
상기 3D 비디오 신호는 상기 3D 비디오 데이터 및 전환 표시자를 포함하고, 상기 전환 표시자는, 상기 디바이스에서, 상기 출력 신호를 상기 전환 표시자에 따라 생성하기 위해 생성 수단(52)을 설정하도록 선택되는 상기 2D 모드를 표시하는, 컴퓨터 판독 가능 기록 매체.
제 12 항에 있어서,
상기 전환 표시자는 상기 2D 모드가 선택된 것을 표시하거나, 상기 전환 표시자는 상기 의사 2D 모드가 선택된 것을 표시하는, 컴퓨터 판독 가능 기록 매체.
삭제
3차원[3D] 비디오 신호를 프로세싱하기 위한 컴퓨터 프로그램이 기록된 컴퓨터 판독가능한 기록 매체에 있어서,
프로세서가 제 8 항 내지 제 10 항 중 어느 한 항에 따른 방법의 각각의 단계들을 수행하도록 동작하는, 컴퓨터 판독가능한 기록 매체.