KR101377736B1 - 3차원 그래픽 데이터의 생성 - Google Patents

3차원 그래픽 데이터의 생성 Download PDF

Info

Publication number
KR101377736B1
KR101377736B1 KR1020097009605A KR20097009605A KR101377736B1 KR 101377736 B1 KR101377736 B1 KR 101377736B1 KR 1020097009605 A KR1020097009605 A KR 1020097009605A KR 20097009605 A KR20097009605 A KR 20097009605A KR 101377736 B1 KR101377736 B1 KR 101377736B1
Authority
KR
South Korea
Prior art keywords
segment
dimensional
data
data stream
graphic
Prior art date
Application number
KR1020097009605A
Other languages
English (en)
Other versions
KR20090066320A (ko
Inventor
다윈 헤
리 홍
필립 스티븐 뉴튼
Original Assignee
코닌클리케 필립스 엔.브이.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 코닌클리케 필립스 엔.브이. filed Critical 코닌클리케 필립스 엔.브이.
Publication of KR20090066320A publication Critical patent/KR20090066320A/ko
Application granted granted Critical
Publication of KR101377736B1 publication Critical patent/KR101377736B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/15—Processing image signals for colour aspects of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/156—Mixing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/293—Generating mixed stereoscopic images; Generating mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/324—Colour aspects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4135—Peripherals receiving signals from specially adapted client devices external recorder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42653—Internal components of the client ; Characteristics thereof for processing graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/015—High-definition television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0077—Colour aspects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Image Generation (AREA)
  • Television Signal Processing For Recording (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은, 그래픽 시스템에서, 복수의 세그먼트로 구성된 3차원 그래픽 데이터의 형성을 허용하는 그래픽 스트림을 생성하는 방법에 관한 것이다. 그래픽 시스템은 적어도 제 1 세그먼트와 제 2 세그먼트로 분할되고, 제 1 세그먼트는 2차원 그래픽 데이터를 포함하고 제 2 세그먼트는 2차원 그래픽 데이터에 대한 깊이 맵을 포함한다. 그래픽 스트림은 디코더에 의해 디코딩되어 디스플레이 장치로 별개로 출력되는 2개의 데이터 시퀀스를 형성함으로써, 3차원 비디오 영상에 대한 3차원 자막 또는 그래픽 영상을 렌더링할 수 있다.
Figure R1020097009605
3차원 그래픽, 기록매체, 깊이 맵, 그래픽 객체

Description

3차원 그래픽 데이터의 생성{CREATING THREE DIMENSIONAL GRAPHICS DATA}
본 발명은, 디코더에 의해 디코딩되어 디스플레이의 화면 상에 표시될 수 있는 3차원 그래픽 스트림을 형성할 수 있는 데이터 스트림을 생성하는 방법에 관한 것이다. 또한, 본 발명은, 이에 대응하는 디코딩방법, 디코더, 컴퓨터 프로그램 제품, 기록매체, 셋톱 박스, 디지털 비디오 디스크(DVD) 플레이어 및 디지털 텔레비전에 관한 것이다.
일반적으로, 장치의 사용자에게 2차원 또는 3차원 객체를 표시하기 위해 컴퓨터 디스플레이 또는 텔레비전 등의 그래픽 디스플레이 장치가 사용된다. 보통, 사용자에게 표시되는 오디오/비디오(AV) 클립은 비디오 스트림, 적어도 1개의 오디오 스트림과 그래픽 스트림으로 구성된다. 비디오 스트림은 영화의 동화상에 대응하고, 오디오 스트림을 영화의 오디오에 대응하며, 그래픽 스트림은 보통 영화의 자막이나 메뉴 데이터에 대응한다.
3차원(3D) 비디오의 도입은 창의적인 콘텐츠 창작자들에 대해 새로운 기회를 제공하는데, 예를 들어 영화 출판의 분야에서는, 새로운 오토스테레오스코 픽(autostereoscopic) 디스플레이의 도입과 높은 리플레시율을 갖는 모니터 등의 기존 기술의 개량에 따라 3D 비디오가 각광을 받고 있다.
블루레이 디스크(BD)는 고선명(HD) 비디오 및 데이터의 고밀도 저장을 위해 의도된 디스크 포맷이다. 블루레이 표준은 블루레이 디스크 연합(Blu-ray Disc Association: BDA)으로 불리는 민수용 전자 및 퍼스널 컴퓨터(PC) 회사들의 그룹에 의해 공동 개발되었다.
도 1은 그래픽 시스템의 주요 구성요소를 나타낸 것으로, 이 경우에는 그래픽 시스템이 블루레이 표준에 따라 작동한다. 도 1에는, BD(101)가 도시되어 있는데, 이 BD는 본 명세서에서는 BD-ROM(101)으로 불린다. BD-ROM(101)은 3D 비디오 클립 등의 데이터를 저장하도록 구성된다. 그후, BD-ROM(101)으로부터 데이터를 디코딩할 수 있는 재생 유니트로도 알려진 BD 플레이어(103)가 도시되어 있다. BD 플레이어(103)는 다음과 같은 오디오 및 비디오 코덱, 즉 MPEG-2, MPEG-4 및 H.264/AVC 중에서 적어도 1개를 지원한다. BD 플레이어(103)는 BD-ROM(101)에 데이터를 기록하도록 배치될 수도 있다. 플레이어(103)는 화면을 구비한 디스플레이 유니트(105)에 접속된다. 이 경우에 디스플레이 유니트(105)는 텔레비전(105)이다.
도 2는 2D 또는 3D 그래픽 데이터 스트림을 디코딩하는데 사용될 수 있는 그래픽 디코더(200)의 블록도의 일례를 나타낸 것이다. 이 예에서 디코더(200)는 BD 플레이어(103) 내부에 물리적으로 배치된다.
데이터 세그먼트들로 구성된 데이터 스트림은 먼저 코딩된 데이터 버퍼(201)에 도착한다. 데이터 세그먼트는 다음과 같은 기능 세그먼트 종류를, 즉 프리젠테 이션 콤포지션(composition) 세그먼트(PCS), 윈도우 정의 세그먼트(WDS), 팔레트(pallette) 정의 세그먼트(PDS), 객체 정의 세그먼트(ODS) 및 디스플레이 세그먼트의 종료(END)를 포함한다.
ODS는 그래픽 객체를 정의하기 위한 기능 세그먼트이다. 그래픽 객체는 object_data_fragment로 불리는 필드에 배치된다. ODS는 다른 필드들, 예를 들어 그래픽 객체를 식별하는데 사용되는 object_ID 필드를 더 포함한다.
PDS는 칼라 변환을 위해 사용되는 팔레트를 정의하는 기능 세그먼트이다. PDS는 픽셀값들과 1 내지 255의 픽셀 코드들의 조합을 표시하는 데이터를 포함한다. 여기에서 말하는 픽셀값은, 투명도(transparency)(T 값), 적색 색차 성분(CR 값), 청색 색차 성분(Cb) 값)과 휘도 성분(Y 값)으로 구성된다.
WDS는 그래픽 평면(graphics plane) 상에 영역을 정의하는 기능 세그먼트이다. 그래픽 평면의 의미는 나중에 설명한다. 그래픽 평면 위의 사각형 영역은 윈도우로 불리는데, 이것은 WDS에 의해 정의된다.
END는 데이터 세그먼트의 전송이 완료한 것을 표시하는, 즉 디스플레이 세트와 관련된 모든 세그먼트들이 디코딩된 것을 표시하는 기능 세그먼트이다.
PCS는 동영상과 동기될 수 있는 화면을 합성하기 위한 기능 세그먼트이다. PCS는 그래픽 평면 상에서 그래픽 디스플레이의 외관을 정의한다.
데이터 스트림 내부의 다양한 세그먼트 종류들의 수는 전송된 그래픽 객체에 의존하여 변할 수 있다. 예를 들어, 다수의 ODS가 존재하면서 단지 1개의 PCS가 존재할 수 있다. 다양한 세그먼트 종류들은, 세그먼트들에 있는 객체 아이덴티 티(identity), 윈도우 아이덴티티 또는 팔레트 아이엔티티 등의 다양한 식별자들을 사용하여 함께 연결된다. 1개의 그래픽 스트림이 디스플레이 세트를 더 형성한다. 예를 들어, 국제특허출원 공개 WO2005/006747에는 이들 기능 세그먼트들에 대한 상세한 내용이 개시되어 있다.
그래픽 프로세서(203)는, 데이터 세그먼트들과 연관된 시스템 타임 스탬프들에 의해 정의된 시간 간격으로 코딩된 데이터 버퍼로부터 데이터 세그먼트들을 추출하여 데이터 시퀀스를 생성한다. PCS들, PDS들 및 WDS들이 그래픽 프로세서에 도착하면, 이것들은 콤포지션 버퍼(205)로 디코딩된다. ODS들이 그래픽 프로세서(203)에 도착하면, 그래픽 프로세서가 ODS들을 디코딩하여 색인 색상들을 갖는 압축되지 않은 그래픽들을 얻으며, 압축되지 않은 그래픽들을 객체 버퍼(207)로 전달한다.
그래픽 제어기(209)는 PCS 내부의 기재내용에 따라 그래픽 평면(211) 위에 그래픽 화상들을 합성하는 역할을 한다. 또한, 그래픽 제어기는, PCS 내부의 데이터 필드들에 근거하여, 객체 버퍼(207)에 있는 크로핑(cropping) 그래픽 객체들과 관련된 정보를 제공한다. 이에 따라, 기능 세그먼트들이 디코딩되고, 그래픽 객체가 윈도우로 불리는 경계 영역 내부의 그래픽 평면(211) 위에 합성된다.
칼라 clut 블록(213)은 그래픽 제어기(209)에서 얻어진 정보에 근거하여 객체 버퍼(207)에서 얻어진 비압축된 그래픽에 대해 칼라 변환을 수행한다. 이를 위해 그래픽 제어기(209)도 칼라 clut 블록(213)에 접속된다.
그후, 그래픽 스트림이 디스플레이(105)로 출력된다.
그러나, 이와 같은 그래픽 시스템에의 3D 비디오 및 3D 그래픽의 도입은 보통 비디오에 대한 MPEG 표준의 변화와 그래픽 시스템의 변화를 필요로 한다. 이와 같은 상황은, 예를 들어 블루레이 그래픽 시스템에 3D 그래픽을 포함시키는 것에 대해서도 마찬가지이다. 이러한 변경은 귀찮은 작업이다.
따라서, 기존의 시스템 사양을 변경할 필요가 없이 기존의 그래픽 시스템에 3D 그래픽을 포함시키는 간단한 해결책을 찾는 것이 바람직하다.
[발명의 요약]
본 발명은 전술한 목적을 달성하는 것을 목적으로 한다.
본 발명의 제 1 국면에 따르면, 그래픽 시스템에서, 3차원 그래픽 데이터를 형성하도록 허용하며 복수의 세그먼트로 구성된 데이터 스트림을 생성하는 방법이 제공된다. 이 방법은,
- 적어도 제 1 및 제 2 세그먼트들을 포함하는 데이터 시스템을 생성하는 단계를 포함하고, 상기 제 1 세그먼트는 2차원 그래픽 객체를 포함하며, 상기 제 2 세그먼트는, 상기 제 1 및 제 2 세그먼트로부터 디코더에 의해 각각 얻어진 적어도 제 1 및 제 2 데이터 시퀀스들을 합성함으로써 3차원 그래픽 데이터를 얻는 것을 허용하도록 상기 2차원 그래픽 객체와 관련된 정보를 포함한다.
본 발명의 일 실시예의 한가지 이점은, 시스템 표준을 변경하지 않으면서 3D 그래픽 데이터가 그래픽 시스템에 추가될 수 있다는 것이다.
본 발명의 제 2 국면에 따르면, 그래픽 시스템에서, 2차원 그래픽 데이터를 포함하는 제 1 세그먼트와, 2차원 그래픽 객체와 관련된 정보를 포함하는 제 2 세그먼트를 적어도 포함하는 데이터 스트림을 디코딩하는 방법이 제공되는데, 이 방법은,
- 상기 데이터 스트림을 수신하는 단계와,
- 상기 제 1 세그먼트로부터 제 1 디코딩된 데이터 시퀀스를 형성하고 상기 제 2 세그먼트로부터 제 2 디코딩된 데이터 시퀀스를 형성하는 단계와,
- 상기 제 1 디코딩된 데이터 시퀀스와 상기 제 2 디코딩된 데이터 시퀀스를 디스플레이부에 출력하여, 상기 제 1 디코딩된 데이터 시퀀스와 상기 제 2 디코딩된 데이터 시퀀스를 합성함으로써 3차원 그래픽 데이터를 렌더링하는 단계를 포함한다.
본 발명의 제 3 국면에 따르면, 그래픽 시스템의 컴퓨터수단에 로드되어 실행될 때, 본 발명의 제 1 및 제 2 국면에 따른 방법을 구현하는 명령어들을 포함하는 컴퓨터 프로그램 제품이 제공된다.
본 발명의 제 4 국면에 따르면, 기록매체의 컴퓨터수단에 로드되어 실행될 때, 본 발명의 제 1 및 제 2 국면에 따른 방법의 단계들을 구현하는 명령어들을 저장하는 기록매체가 제공된다.
본 발명의 제 5 국면에 따르면, 2차원 그래픽 객체를 포함하는 제 1 세그먼트와, 상기 2차원 그래픽 객체와 관련된 정보를 포함하는 제 2 세그먼트를 적어도 포함하는 데이터 스트림을 디코딩하는 디코더가 제공되는데, 이 디코더는,
- 상기 데이터 스트림을 수신하는 수신기와,
- 상기 제 1 세그먼트로부터 제 1 디코딩된 데이터 시퀀스를 형성하고 상기 제 2 세그먼트로부터 제 2 디코딩된 데이터 시퀀스를 형성하는 프로세서와,
- 상기 제 1 디코딩된 데이터 시퀀스와 상기 제 2 디코딩된 데이터 시퀀스를 디스플레이부에 출력하여, 상기 제 1 디코딩된 데이터 시퀀스와 상기 제 2 디코딩된 데이터 시퀀스를 합성함으로써 3차원 그래픽 데이터를 렌더링하는 수단을 구비한다.
본 발명의 일 실시예에 따른 또 다른 이점은, 설치된 디코더가 단지 1개의 프로세서를 사용함으로써 그래픽 객체와 이 그래픽 객체와 관련된 정보 모두를 디코딩하도록 구성된다는 것이다.
본 발명의 제 6 국면에 따르면, 본 발명의 제 5 국면에 따른 디코더를 구비한 셋톱 박스가 제공된다.
본 발명의 제 7 국면에 따르면, 본 발명의 제 5 국면에 따른 디코더를 구비한 DVD 플레이어가 제공된다.
본 발명의 제 8 국면에 따르면, 본 발명의 제 5 국면에 따른 디코더를 구비한 디지털 텔레비전이 제공된다.
본 발명의 또 다른 특징과 이점은 다음의 첨부도면을 참조하여 저어지는 이하의 비한정적인 실시예로부터 명백해질 것이다:
도 1은 본 발명의 실시예들이 존재하는 상황을 나타낸 것이고,
도 2는 그래픽 스트림을 디코딩하도록 구성된 디코더의 블록도이며,
도 3은 데이터 스트림을 디코딩하도록 구성된 본 발명의 일 실시예에 따른 디코더의 블록도이고,
도 4는 본 발명의 일 실시예에 따른 데이터 스트림 디코딩 방법을 나타낸 흐름도이며,
도 5는 본 발명의 일 실시예에 따른 그래픽 스트림 생성방법을 예시한 블록도이다.
이하의 설명에서는, 첨부 도면을 참조하여 블루레이 그래픽 시스템과 관련하여 본 발명의 비한정적인 실시예를 더욱 상세히 설명한다. 그러나, 본 발명은 이와 같은 상황에 한정되지 않으며, 본 발명의 발명내용은 다른 종류의 그래픽 시스템에도 마찬가지로 적용될 수 있다는 점에 주목하기 바란다.
본 발명의 일 실시예에 따르면, 본 실시예에서는 2개의 ODS, 1개의 PCS, 1개의 WDS, 1개의 PDS 및 1개의 END 세그먼트를 포함하는 데이터 스트림이 생성된다. 이와 같은 경우에, 데이터 스트림은 BD 플레이어(103)에 의해 생성된다. 이때, 제 1 ODS는 그것의 object_data_fragment 필드에 2D 그래픽 객체를 포함하고, 제 2 ODS는 그것의 object_data_fragment 필드에 2D 그래픽 객체에 대한 깊이 맵(depth map)을 포함한다. 이때, 깊이 맵 대신에, 제 2 세그먼트는 2D 그래픽 객체에 대한 오디오 정보 또는 기타의 인터랙티브 정보를 마찬가지로 포함할 수도 있다는 점에 주목하기 바란다. 또한, 이들 2개의 ODS의 순서는 한정되지 않으며, 제 1 ODS가 깊이 맵을 포함할 수도 있고 제 2 ODS가 그래픽 객체를 포함할 수도 있다. PCS, WDS 및 PDS는 ODS들에 포함된 데이터를 추가로 정의하기 위한 정보를 포함한다. END 세그먼트를 사용하여 디스플레이 세트의 전송이 완료하였다는 것을 표시한다. 데이터 스트림은 세그먼트들로 구성되고 이들 세그먼트는 디스플레이 세트들을 더 구성한다. END 세그먼트는 세그먼트 데이터를 포함하지 않으며, END의 콘텐츠가 디코딩된 후 디코더의 버퍼에 저장되지 않는다. 그후, 생성된 그래픽 스트림은 BD-ROM(101)에 저장된다.
이때, 데이터 스트림이 2개보다 많은 수의 ODS를 포함할 수도 있으며, 이와 같은 경우에는 2D 그래픽 객체를 포함하는 각 ODS에 대해, 깊이 맵 정보를 포함하는 대응하는 ODS가 존재하게 된다는 점에 주목하기 바란다. 데이터 스트림에 있는 ODS들의 수는 PCS들이나 WDS들의 수에 의존하지 않을 수도 있다.
본 실시예에서는, 데이터 스트림이 관련된 비디오 화상 위에 자막으로 오버레이될 수 있는 그래픽 객체를 포함한다. 따라서, 데이터 스트림은 블루레이 표준의 고선명 영화(high definition movie: HDMV)의 프리젠테이션 그래픽 스트림이다. 또한, HDMV 모드는, 관련된 HDMV 프리젠테이션에 보완적인 프레임 정밀도를 갖고 나타나고 사라지는 일련의 인터랙티브 디스플레이를 제공하는데 필요한 정보를 포함하는 인터랙티브 그래픽 스트림도 제공한다. 디코더에서는, 프리젠테이션 그래픽 스트림의 객체들과 인터랙티브 그래픽 스트림의 객체들에 대해 별개의 그래픽 평면들이 필요하다. 관련된 비디오 화상 위에 그래픽 디스플레이를 오버레이하기 전에 그래픽 화상이 그래픽 평면 위에 합성되어 그래픽 디스플레이를 형성한다. 이와 같은 과정을 나중에 더욱 상세히 설명한다.
다음에, 디코더의 동작을 도 3 및 도 5의 블록도와 도 4의 흐름도를 참조하여 설명한다.
도 3은 본 발명의 일 실시예에 따른 그래픽 디코더(300)를 예시한 것으로, 이 그래픽 디코더는 BD-ROM(101) 상에 저장된 정보를 디코딩하도록 구성된다. 디코더(300)는 물리적으로는 BD 플레이어(103) 내부에 배치된다.
코딩된 데이터 버퍼(301), 콤포지션 버퍼(305), 객체 버퍼(307), 그래픽 평면(311) 및 칼라 clut 블록(313)은 도 2의 대응하는 블록들과 마찬가지로 작동한다. 그러나, 그래픽 프로세서(303)와 그래픽 제어기(309)의 동작은 도 2에서와 다르다. 도 2의 디코더에는 존재하지 않는 깊이 평면(317)과 제 2 칼라 clut 블록(319)도 도시되어 있다. 디코더(300)는 2D 또는 3D 데이터 스트림을 디코딩하는데 사용될 수 있다. 이와 같은 경우에 디코더(103)는 물리적으로는 BD 플레이어(103) 내부에 놓인다.
먼저, 스텝 401에서는, BD-ROM(101)에 저장된 정보가 코딩된 데이터 버퍼(301) 내부로 판독된다. 코딩된 데이터 버퍼(301)에 도착한 데이터 스트림은 전술한 것과 같이 다음과 같은 기능 세그먼트들, 즉 1개의 PCS, 1개의 WDS, 1개의 PDS, 2개의 ODS 및 1개의 END로 구성된다. END 세그먼트가 스트림의 최종 세그먼트인 한, 데이터 스트림 내부의 데이터 세그먼트들의 순서는 한정되지 않는다. 그후, 스텝 403에서, 그래픽 프로세서(303)는, 데이터 세그먼트들과 관련된 시스템 타임 스탬프들에 의해 정의된 시간에 코딩된 데이터 버퍼(301)에서 데이터 세그먼트들을 추출한다. 다음에, 그래픽 프로세서(303)는, 스텝 405에서, 서로 다른 세그먼트 종 류들을 인식한다.
현재의 세그먼트가 ODS가 아니면, 스텝 407에서, 현재의 세그먼트가 콤포지션 버퍼(305)로 디코딩된다. 따라서, PCS, WDS 및 PDS가 그래픽 프로세서(303)에 의해 콤포지션 버퍼(305)로 디코딩된다.
그러나, 스텝 405에서, 현재의 세그먼트가 ODS인 것으로 결론이 내려지면, 스텝 409에서, 현재의 세그먼트가 깊이 맵을 포함하는지 여부를 판정한다. 깊이 캡을 포함하는 경우에는, 스텝 411에서, 깊이 맵이 디코딩되어 깊이 맵 버퍼(depth map buffer: DMB)(315)로 전달된다. 이와 달리 ODS가 2D 그래픽 객체를 포함하는 경우에는, 2D 그래픽 객체를 디코딩하여 색인 칼라들을 갖는 비압축된 그래픽을 얻으며, 그후 그래픽 프로세서(303)가 스텝 413에서 비압축된 그래픽을 객체 버퍼(OB)(307)로 전달한다.
그후, 스텝 415에서, 콤포지션 버퍼(305)에 있는 데이터가 그래픽 제어기(309)로 전달된다. PCS와 WDS로부터 디코딩된 정보에 근거하여, 그래픽 제어기(309)는, 스텝 417에서, 객체 버퍼(307)(OB) 및 그래픽 평면(311)(GP)이 그래픽 평면(311) 위에 그래픽 디스플레이를 형성하도록 지시한다. 그와 동시에, 그래픽 제어기(309)는 깊이 맵 버퍼(315)(DMB)와 깊이 평면(317)(DP)에게 깊이 평면(311) 위에 깊이 디스플레이를 형성하도록 지시한다. 그래픽 제어기(309)에 의해 제공된 정보는, 예를 들면, 그래픽 또는 그래픽 위의 깊이 디스플레이 또는 깊이 평면의 크로핑 및 위치지정과 관련된 정보를 포함한다. 국제특허 공개 WO2005/006747에는 그래픽 디스플레이를 얻을 수 있는 방법이 더욱 상세히 설명되어 있다.
다음에, 스텝 419에서는, 그래픽 제어기(309)에서 얻어진 정보에 근거하여 깊이 디스플레이가 깊이 평면(317) 위에 합성된다. 이와 유사하게 스텝 421에서는, 그래픽 디스플레이가 그래픽 평면(311) 위에 합성된다. 디코더(300)는, 그래픽 디스플레이들과 깊이 디스플레이들이 각각 그래픽 평면과 깊이 평면 위에 조립될 수 있는 동시에, 새로운 그래픽 데이터와 깊이 맵 데이터가 각각 객체 버퍼(307)와 깊이 맵 버퍼(317) 내부에 디코딩될 수 있도록 파이프라인으로 연결되는 디코딩 모델을 구현한다.
스텝 423에서, 그래픽 제어기(309)는 칼라 clut들(313, 319)이 칼라 변환을 형성하도록 지시한다. 이들 지시에 근거하여, 스텝 425에서는, 깊이 디스플레이가 칼라 clut 319에서 풀 칼라(full color) 및 투명도로 변환되고, 스텝 427에서는, 그래픽 디스플레이가 칼라 clut 313에서 풀 칼라와 투명도로 변환된다.
그후, 스텝 429에서는, 칼라 clut 319으로부터 얻어진 깊이 디스플레이가 텔레비전(105)으로 전달되어 깊이 디스플레이를 관련된 비디오 화상 위에 오버레이한다. 마찬가지로, 스텝 431에서는, 칼라 clut 313으로부터 얻어진 그래픽 디스플레이가 텔레비전(105)으로 전달되어 그래픽 디스플레이를 관련된 비디오 화상 위에 오버레이한다. 이 결과, 칼라 clut들(313, 319)에서 얻어진 2가지 다른 데이터 스트림이 텔레비전(105)에 별개로 출력되어 3D 비디오에 3D 자막을 오버레이한다. 그후, 디코딩 처리가 다시 시작될 수도 있다. 새로운 ODS가 그래픽 프로세서(303)에 도착하면, 객체 버퍼(307)로 디코딩되거나 깊이 맵 버퍼(315)로 디코딩된 후, 그래픽 평면(311)과 깊이 평면(317) 상에서 조립될 수 있다.
도 5는 그래픽 평면(311)과 깊이 평면(317) 위에 포함된 데이터를 예시한 것이다. 도 5에는, 다른 필드들 이외에, 2개의 콤포지션_객체 필드, 즉 콤포지션_객체(1)(501a)와 콤포지션_객체(2)(501b)를 포함하는 1개의 PCS가 도시되어 있다. 콤포지션_객체(1)(501a)는 그래픽 객체를 크로핑하고 그래픽 평면 상에서 그래픽 객체의 위치를 지정하는 정보를 포함한다. 마찬가지로, 콤포지션_객체(2)(501b)는 깊이 맵을 크로핑하고 깊이 평면(317) 상에서 깊이 맵의 위치를 지정하는 정보를 포함한다.
도 5에는, 2개의 윈도우, 즉 윈도우(1)(503a) 및 윈도우(2)(503b)를 정의하는 WDS(503)가 더 도시되어 있다. 이 경우에, 윈도우(1)(503a)은 2D 그래픽 객체에 대한 윈도우를 정의하고, 윈도우(2)(503b)는 깊이 맵 정보에 대한 윈도우를 정의한다. 윈도우(1)(503a) 및 윈도우(2)(503b)는 그래픽 평면(311) 또는 깊이 평면(317) 상에서 윈도우 505a, 505b로 알려진 영역을 정의하는 방법에 대한 정보를 포함한다. 이와 같은 경우에, 윈도우(1)(503a) 및 윈도우(2)(503b)에 의해 사각형 윈도우가 정의된다. 윈도우(1)(503a) 및 윈도우(2)(503b)는 그래픽 평면 및 깊이 평면 상의 윈도우들(505a, 505b)의 수직 및 수평 위치 뿐만 아니라, 윈도우들(505a, 505b)의 높이 및 폭을 정의한다. 이와 같은 경우에, 윈도우들 505a 및 505b는 동일한 크기를 갖지만, 반드시 그럴 필요는 없다. 윈도우들 505a 및 505b가 다른 크기를 갖도록 정의되면, 더 큰 윈도우가 패딩 비트를 포함할 수도 있다.
또한, 본 발명은, 그래픽 시스템의 컴퓨터 수단에 로드되어 실행될 때 본 발명의 실시예들의 방법 단계들을 구현할 수 있는 컴퓨터 프로그램 제품에 관한 것이 다.
또한, 본 발명은, 본 발명의 실시예들에 따른 방법 단계들을 수행하도록 구성된 집적회로에 관한 것이다.
또한, 본 발명은, 기록매체의 컴퓨터 수단에 로드되어 실행될 때 본 발명의 실시예들의 방법 단계들을 구현할 수 있는 기록매체에 관한 것이다.
또한, 본 발명은 디코더(300)를 구비한 셋톱 박스에 관한 것이다.
또한, 본 발명은 디코더(300)를 구비한 DVD 플레이어에 관한 것이다.
또한, 본 발명은, 디코더(300)를 구비한 디지털 텔레비전(105)에 관한 것이다.
본 발명을 첨부도면과 전술한 설명에서 상세히 예시하고 기술하였지만, 이와 같은 예시 및 설명은 예시적인 것으로 한정적인 것으로 생각되어서는 안되며, 본 발명은 전술한 실시예들에 한정되지 않는다.
첨부도면, 상세한 설명 및 첨부된 청구범위로부터, 당업자가 특허청구된 본 발명을 실시함으로써 전술한 실시예들의 다른 변형예가 행해질 수 있다. 청구범위에서, "포함한다" 또는 "구비한다"는 용어는 다른 구성요소들이나 단계들을 배제하는 것이 아니고, 부정관사 "a" 또는 "an"이 복수를 배제하는 것이 아니다. 단일의 프로세서 또는 다른 구성요소가 청구범위에 언급된 다양한 항목들의 특징을 충족시킬 수도 있다. 서로 다른 종속항들에서 서로 다른 특징이 반복된다는 단순한 사실이 이들 특징들의 조합이 유리하게 사용될 수 없다는 것을 시사하는 것은 아니다.
컴퓨터 프로그램은 다른 하드웨어와 함께 또는 다른 하드웨어의 일부로서 공 급된 적절한 매체에 저장/배포될 수 있지만, 다른 형태로, 예를 들어 인터넷이나 다른 유선 또는 무선 통신 시스템을 통해 배포될 수도 있다. 청구항에 있는 참조번호가 본 발명의 보호범위를 제한하는 것으로 해석되어서는 안된다.

Claims (13)

  1. 3차원 비디오 시스템에서, 3차원 화상의 비디오 스트림을 포함한 데이터 스트림을 생성하는 방법으로서, 상기 데이터 스트림이, 3차원 그래픽 데이터를 형성하는 것을 허용하고 세그먼트들로 이루어진 그래픽 데이터 스트림을 포함하는, 데이터 스트림 생성방법으로서,
    적어도 제 1 및 제 2 세그먼트들을 포함하는 상기 그래픽 데이터 스트림을 형성하는 단계를 포함하고, 상기 제 1 세그먼트는 2차원 그래픽 객체를 포함하며, 상기 제 2 세그먼트는, 상기 제 1 및 제 2 세그먼트로부터 디코더에 의해 각각 얻어진 적어도 제 1 및 제 2 데이터 시퀀스들을 합성함으로써 상기 3차원 화상 위에 오버레이 하기 위한 상기 3차원 그래픽 데이터를 얻는 것을 허용하도록 상기 2차원 그래픽 객체와 관련된 정보를 포함하는 것을 특징으로 하는 데이터 스트림 생성방법.
  2. 제 1항에 있어서,
    상기 제 2 세그먼트는 상기 2차원 그래픽 객체에 대한 깊이 맵 및 오디오 데이터 중 적어도 하나를 포함하는 것을 특징으로 하는 데이터 스트림 생성방법.
  3. 제 1항에 있어서,
    상기 제 1 세그먼트와 상기 제 2 세그먼트는 블루레이 디스크 표준의 객체 정의 세그먼트들인 것을 특징으로 하는 데이터 스트림 생성방법.
  4. 제 1항에 있어서,
    상기 그래픽 데이터 스트림은, 상기 3차원 화상 위에 자막을 오버레이하기 위한 정보 및 상기 3차원 화상에 대해 메뉴 특징을 제공하기 위한 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 데이터 스트림 생성방법.
  5. 3차원 비디오 시스템에서, 3차원 화상의 비디오 스트림을 포함한 데이터 스트림을 디코딩하는 방법으로서, 상기 데이터 스트림이 그래픽 데이터 스트림을 포함하고, 상기 그래픽 데이터 스트림은, 2차원 그래픽 객체를 포함하는 제 1 세그먼트와, 상기 2차원 그래픽 객체와 관련된 정보를 포함하는 제 2 세그먼트를 적어도 포함하는, 데이터 스트림을 디코딩하는 방법으로서,
    상기 데이터 스트림을 수신하는 단계와,
    상기 제 1 세그먼트로부터 제 1 디코딩된 데이터 시퀀스를 형성하고 상기 제 2 세그먼트로부터 제 2 디코딩된 데이터 시퀀스를 형성하는 단계와,
    상기 제 1 디코딩된 데이터 시퀀스와 상기 제 2 디코딩된 데이터 시퀀스를 디스플레이부에 출력하여, 상기 제 1 디코딩된 데이터 시퀀스와 상기 제 2 디코딩된 데이터 시퀀스를 합성함으로써 3차원 그래픽 데이터를 상기 3차원 화상 위에 오버레이 하는 단계를 포함하는 것을 특징으로 하는 데이터 스트림 디코딩방법.
  6. 제 5항에 있어서,
    상기 3차원 비디오 시스템은, 프로세서(303), 제 1 버퍼(307), 제 2 버퍼(315), 제 1 메모리(311) 및 제 2 메모리(317)를 구비하고, 상기 방법은, 상기 제 1 데이터 시퀀스를 상기 제 1 버퍼(307)를 통해 상기 프로세서(303)에서 상기 제 1 메모리(311)로 전달하고, 상기 제 2 데이터 시퀀스를 상기 제 2 버퍼(315)를 통해 상기 프로세서(303)에서 상기 제 2 메모리(317)로 전달하는 단계를 더 포함하는 것을 특징으로 하는 데이터 스트림 디코딩방법.
  7. 제 5항에 있어서,
    상기 3차원 비디오 시스템은 제 3 버퍼(305)를 더 구비하고, 상기 그래픽 데이터 스트림은 윈도우 정의 세그먼트(503), 프리젠테이션 콤포지션 세그먼트(501) 및 팔레트 정의 세그먼트를 더 포함하며, 상기 방법은, 상기 윈도우 정의 세그먼트(503), 프리젠테이션 콤포지션 세그먼트(501) 및 팔레트 정의 세그먼트를 프로세서(303)에 의해 상기 제 3 버퍼(305)로 디코딩하는 단계를 더 포함하는 것을 특징으로 하는 데이터 스트림 디코딩방법.
  8. 컴퓨터 수단에 로드되어 실행될 때, 제 1항 내지 제 4항 중 어느 한 항에 따른 방법의 단계들을 구현하는 명령어들이 저장된 기록매체.
  9. 3차원 화상의 비디오 스트림을 포함한 데이터 스트림을 디코딩하는 디코더(300)로서,
    상기 데이터 스트림은, 2차원 그래픽 객체를 포함하는 제 1 세그먼트와, 상기 2차원 그래픽 객체와 관련된 정보를 포함하는 제 2 세그먼트를 적어도 포함하는 그래픽 데이터 스트림을 포함하고,
    상기 데이터 스트림을 수신하는 수신기(301)와,
    상기 제 1 세그먼트로부터 제 1 디코딩된 데이터 시퀀스를 형성하고 상기 제 2 세그먼트로부터 제 2 디코딩된 데이터 시퀀스를 형성하는 프로세서(303)와,
    상기 제 1 디코딩된 데이터 시퀀스와 상기 제 2 디코딩된 데이터 시퀀스를 디스플레이부(105)에 출력하여, 상기 제 1 디코딩된 데이터 시퀀스와 상기 제 2 디코딩된 데이터 시퀀스를 합성함으로써 3차원 그래픽 데이터를 상기 3차원 화상 위에 오버레이 하는 수단을 구비한 것을 특징으로 하는 디코더(300).
  10. 제 9항에 따른 디코더를 구비한 셋톱 박스.
  11. 삭제
  12. 제 9항에 따른 디코더를 구비한 디지털 텔레비전(105).
  13. 컴퓨터 수단에 로드되어 실행될 때, 제 5항 내지 제 7항 중 어느 한 항에 따른 방법의 단계들을 구현하는 명령어들이 저장된 기록매체.
KR1020097009605A 2006-10-11 2007-10-08 3차원 그래픽 데이터의 생성 KR101377736B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP06301037.5 2006-10-11
EP06301037 2006-10-11

Publications (2)

Publication Number Publication Date
KR20090066320A KR20090066320A (ko) 2009-06-23
KR101377736B1 true KR101377736B1 (ko) 2014-03-24

Family

ID=39283262

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020097009605A KR101377736B1 (ko) 2006-10-11 2007-10-08 3차원 그래픽 데이터의 생성

Country Status (6)

Country Link
US (2) US8711203B2 (ko)
EP (1) EP2105032A2 (ko)
JP (2) JP2010510558A (ko)
KR (1) KR101377736B1 (ko)
CN (1) CN101682793B (ko)
WO (1) WO2008044191A2 (ko)

Families Citing this family (93)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8422801B2 (en) 2007-12-20 2013-04-16 Koninklijke Philips Electronics N.V. Image encoding method for stereoscopic rendering
KR20100002032A (ko) * 2008-06-24 2010-01-06 삼성전자주식회사 영상 생성 방법, 영상 처리 방법, 및 그 장치
CN102067591B (zh) * 2008-06-26 2014-03-19 松下电器产业株式会社 再现装置、记录装置、再现方法及记录方法
AU2009275052B2 (en) * 2008-07-24 2014-05-29 Panasonic Corporation Playback device capable of stereoscopic playback, playback method, and program
EP2362671B1 (en) * 2008-07-25 2013-09-11 Koninklijke Philips Electronics N.V. 3d display handling of subtitles
AU2011202552B8 (en) * 2008-07-25 2012-03-08 Koninklijke Philips Electronics N.V. 3D display handling of subtitles
BRPI0904965A2 (pt) * 2008-09-30 2015-06-30 Panasonic Corp Meio de gravação no qual se grava vídeo 3d, aparelho de reprodução destinado à reprodução de vídeo 3d e sistema lsi
WO2010058977A2 (en) * 2008-11-21 2010-05-27 Lg Electronics Inc. Recording medium, data recording/reproducing method and data recording/reproducing apparatus
CN102224738A (zh) 2008-11-24 2011-10-19 皇家飞利浦电子股份有限公司 在三维图形用户界面中扩展二维图形
WO2010062104A2 (ko) * 2008-11-25 2010-06-03 엘지전자(주) 기록매체, 데이터 기록/재생 방법 및 데이터 기록/재생 장치
EP2356818B1 (en) 2008-12-01 2016-04-13 Imax Corporation Methods and systems for presenting three-dimensional motion pictures with content adaptive information
US8933987B2 (en) * 2008-12-01 2015-01-13 Sharp Kabushiki Kaisha Content reproducing apparatus and recording medium for switching graphics and video images from 2D to 3D
US8358331B2 (en) 2008-12-02 2013-01-22 Lg Electronics Inc. 3D caption display method and 3D display apparatus for implementing the same
RU2537800C2 (ru) * 2008-12-19 2015-01-10 Конинклейке Филипс Электроникс Н.В. Способ и устройство для наложения трехмерной графики на трехмерное видеоизображение
CA2732281C (en) 2008-12-26 2016-09-06 Panasonic Corporation Recording medium, reproduction device, and integrated circuit
WO2010085074A2 (en) * 2009-01-20 2010-07-29 Lg Electronics Inc. Three-dimensional subtitle display method and three-dimensional display device for implementing the same
CN104333746B (zh) * 2009-02-12 2017-04-12 Lg电子株式会社 广播接收机及其3d字幕数据处理方法
US9544569B2 (en) 2009-02-12 2017-01-10 Lg Electronics Inc. Broadcast receiver and 3D subtitle data processing method thereof
KR101639053B1 (ko) 2009-02-17 2016-07-13 코닌클리케 필립스 엔.브이. ３ｄ 이미지 및 그래픽 데이터의 조합
KR101659576B1 (ko) 2009-02-17 2016-09-30 삼성전자주식회사 영상 처리 방법 및 장치
KR101539232B1 (ko) * 2009-02-20 2015-07-24 삼성전자주식회사 3차원 그래픽 생성 방법 및 장치
CN102318351B (zh) * 2009-02-17 2016-06-15 三星电子株式会社 图形图像处理方法和设备
US8284236B2 (en) * 2009-02-19 2012-10-09 Sony Corporation Preventing interference between primary and secondary content in a stereoscopic display
MX2010011683A (es) * 2009-02-19 2010-11-30 Panasonic Corp Medio de grabacion, dispositivo de reproduccion y circuito integrado.
WO2010095410A1 (ja) * 2009-02-20 2010-08-26 パナソニック株式会社 記録媒体、再生装置、集積回路
KR101556575B1 (ko) 2009-02-25 2015-10-01 삼성전자주식회사 렌더링 장치 및 방법
JP4915456B2 (ja) * 2009-04-03 2012-04-11 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
JP4915459B2 (ja) * 2009-04-03 2012-04-11 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
JP4915458B2 (ja) * 2009-04-03 2012-04-11 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
JP5510700B2 (ja) 2009-04-03 2014-06-04 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
JP4915457B2 (ja) 2009-04-03 2012-04-11 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
JP4962822B2 (ja) * 2009-04-03 2012-06-27 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
JP4962673B1 (ja) * 2009-04-03 2012-06-27 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
JP4985807B2 (ja) * 2009-04-15 2012-07-25 ソニー株式会社 再生装置および再生方法
JP4985887B2 (ja) * 2009-04-15 2012-07-25 ソニー株式会社 記録方法
JP2010268431A (ja) * 2009-04-15 2010-11-25 Sony Corp データ構造、記録媒体、再生装置および再生方法、並びにプログラム
JP2011041249A (ja) * 2009-05-12 2011-02-24 Sony Corp データ構造および記録媒体、並びに、再生装置、再生方法、プログラム、およびプログラム格納媒体
PL2433429T3 (pl) 2009-05-18 2019-03-29 Koninklijke Philips N.V. Punkty wejścia trójwymiarowego odtwarzania 3d ze zmienioną prędkością
JP4714307B2 (ja) 2009-05-19 2011-06-29 パナソニック株式会社 記録媒体、再生装置、符号化装置、集積回路、及び再生出力装置
US8290338B2 (en) 2009-05-27 2012-10-16 Panasonic Corporation Recording medium, playback device, encoding device, integrated circuit, and playback output device
JP4733785B2 (ja) * 2009-06-17 2011-07-27 パナソニック株式会社 ３ｄ映像を再生するための情報記録媒体、記録媒体の記録方法、再生装置、及び記録媒体再生システム
US20110013888A1 (en) * 2009-06-18 2011-01-20 Taiji Sasaki Information recording medium and playback device for playing back 3d images
CN102461187A (zh) * 2009-06-22 2012-05-16 Lg电子株式会社 视频显示装置及其操作方法
EP2446636A1 (en) 2009-06-24 2012-05-02 Dolby Laboratories Licensing Corporation Method for embedding subtitles and/or graphic overlays in a 3d or multi-view video data
TW201119353A (en) 2009-06-24 2011-06-01 Dolby Lab Licensing Corp Perceptual depth placement for 3D objects
JP5429034B2 (ja) 2009-06-29 2014-02-26 ソニー株式会社 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP5402715B2 (ja) * 2009-06-29 2014-01-29 ソニー株式会社 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP5407968B2 (ja) 2009-06-29 2014-02-05 ソニー株式会社 立体画像データ送信装置および立体画像データ受信装置
JP5407957B2 (ja) 2009-06-29 2014-02-05 ソニー株式会社 立体画像データ送信装置および立体画像データ受信装置
DK2453661T3 (en) * 2009-07-10 2017-10-30 Panasonic Ip Man Co Ltd PLAYBACK, RECORDING PROCEDURE AND SYSTEM, INCLUDING A RECORDING MEDIUM AND PLAYBACK
US8270807B2 (en) 2009-07-13 2012-09-18 Panasonic Corporation Recording medium, playback device, and integrated circuit
RU2554465C2 (ru) * 2009-07-27 2015-06-27 Конинклейке Филипс Электроникс Н.В. Комбинирование 3d видео и вспомогательных данных
KR20110018261A (ko) * 2009-08-17 2011-02-23 삼성전자주식회사 텍스트 서브타이틀 데이터 처리 방법 및 재생 장치
GB2473282B (en) 2009-09-08 2011-10-12 Nds Ltd Recommended depth value
JP5428697B2 (ja) * 2009-09-16 2014-02-26 ソニー株式会社 受信装置、受信方法、送信装置およびコンピュータプログラム
JP5433862B2 (ja) * 2009-09-30 2014-03-05 日立マクセル株式会社 受信装置及び表示制御方法
US20110080462A1 (en) * 2009-10-02 2011-04-07 Panasonic Corporation Playback device, integrated circuit, playback method, and program for stereoscopic video playback
WO2011039990A1 (ja) * 2009-10-02 2011-04-07 パナソニック株式会社 立体視映像を再生することができる再生装置、集積回路、再生方法、プログラム
JP5415217B2 (ja) 2009-10-02 2014-02-12 パナソニック株式会社 三次元映像処理装置
EP2309463A3 (en) 2009-10-07 2011-07-27 Thomson Licensing Method of displaying a 3D video with insertion of a graphic item and terminal for implementing the method
JP2011010255A (ja) * 2009-10-29 2011-01-13 Sony Corp 立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP5564117B2 (ja) * 2009-11-06 2014-07-30 ソニー コーポレイション オブ アメリカ 立体オーバーレイオフセットの作成及び編集
KR20110053160A (ko) 2009-11-13 2011-05-19 삼성전자주식회사 비디오 부가 재생 정보의 3차원 깊이감 조절을 위한 멀티미디어 스트림 생성 방법과 그 장치, 및 수신 방법과 그 장치
JP5502436B2 (ja) * 2009-11-27 2014-05-28 パナソニック株式会社 映像信号処理装置
KR101445777B1 (ko) * 2010-02-19 2014-11-04 삼성전자 주식회사 재생 기기 및 그 제어방법
US9426441B2 (en) 2010-03-08 2016-08-23 Dolby Laboratories Licensing Corporation Methods for carrying and transmitting 3D z-norm attributes in digital TV closed captioning
KR101834263B1 (ko) * 2010-04-01 2018-03-06 톰슨 라이센싱 3차원(3ｄ) 프리젠테이션에서의 서브타이틀들
JP5143856B2 (ja) 2010-04-16 2013-02-13 株式会社ソニー・コンピュータエンタテインメント ３次元画像表示装置、および３次元画像表示方法
KR101717787B1 (ko) 2010-04-29 2017-03-17 엘지전자 주식회사 디스플레이장치 및 그의 음성신호 출력 방법
US20110316972A1 (en) * 2010-06-29 2011-12-29 Broadcom Corporation Displaying graphics with three dimensional video
JP5609336B2 (ja) 2010-07-07 2014-10-22 ソニー株式会社 画像データ送信装置、画像データ送信方法、画像データ受信装置、画像データ受信方法および画像データ送受信システム
CN101902582B (zh) * 2010-07-09 2012-12-19 清华大学 一种立体视频字幕添加方法及装置
US8605136B2 (en) 2010-08-10 2013-12-10 Sony Corporation 2D to 3D user interface content data conversion
US20130182072A1 (en) * 2010-10-01 2013-07-18 Samsung Electronics Co., Ltd. Display apparatus, signal processing apparatus and methods thereof for stable display of three-dimensional objects
KR101090981B1 (ko) * 2011-05-09 2011-12-08 주식회사 쓰리디누리 3차원 영상신호 처리방법 및 이를 구현하는 휴대형 3차원 디스플레이 장치
US20120105581A1 (en) * 2010-10-29 2012-05-03 Sony Corporation 2d to 3d image and video conversion using gps and dsm
US9172943B2 (en) * 2010-12-07 2015-10-27 At&T Intellectual Property I, L.P. Dynamic modification of video content at a set-top box device
JP4908624B1 (ja) * 2010-12-14 2012-04-04 株式会社東芝 立体映像信号処理装置及び方法
GB2488746B (en) * 2010-12-23 2016-10-26 Samsung Electronics Co Ltd Improvements to subtitles for three dimensional video transmission
EP2506263A1 (en) 2011-03-31 2012-10-03 Thomson Licensing Stereoscopic scene graph for defining 3D- and 2D-compatible graphical objects
EP2697975A1 (en) 2011-04-15 2014-02-19 Dolby Laboratories Licensing Corporation Systems and methods for rendering 3d images independent of display size and viewing distance
CN102256154A (zh) * 2011-07-28 2011-11-23 中国科学院自动化研究所 实现三维全景视频的定位与播放的方法及系统
US9626798B2 (en) 2011-12-05 2017-04-18 At&T Intellectual Property I, L.P. System and method to digitally replace objects in images or video
JP2015008360A (ja) * 2013-06-24 2015-01-15 ソニー株式会社 再生装置、再生方法、および記録媒体
CN105474631A (zh) * 2013-08-20 2016-04-06 索尼公司 再现装置、再现方法以及记录介质
WO2015100515A1 (en) * 2013-12-30 2015-07-09 Qualcomm Incorporated Simplification of segment-wise dc coding of large prediction blocks in 3d video coding
US10958987B1 (en) 2018-05-01 2021-03-23 Amazon Technologies, Inc. Matching based on video data
US10630748B1 (en) * 2018-05-01 2020-04-21 Amazon Technologies, Inc. Video-based encoder alignment
US10630990B1 (en) 2018-05-01 2020-04-21 Amazon Technologies, Inc. Encoder output responsive to quality metric information
CN109257609B (zh) * 2018-09-30 2021-04-23 Oppo广东移动通信有限公司 数据处理方法及装置、电子设备及存储介质
CN112334949A (zh) * 2018-10-09 2021-02-05 松下电器（美国）知识产权公司 三维数据编码方法、三维数据解码方法、三维数据编码装置、以及三维数据解码装置
US10424048B1 (en) * 2019-02-15 2019-09-24 Shotspotter, Inc. Systems and methods involving creation and/or utilization of image mosaic in classification of acoustic events
CN111669603B (zh) * 2019-03-07 2023-03-21 阿里巴巴集团控股有限公司 多角度自由视角数据处理方法及装置、介质、终端、设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000078611A (ja) 1998-08-31 2000-03-14 Toshiba Corp 立体映像受信装置及び立体映像システム
JP2004274125A (ja) 2003-03-05 2004-09-30 Sony Corp 画像処理装置および方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5394524A (en) 1992-08-07 1995-02-28 International Business Machines Corporation Method and apparatus for processing two graphics data streams in parallel
JP3231618B2 (ja) * 1996-04-23 2001-11-26 日本電気株式会社 ３次元画像符号化復号方式
US6188394B1 (en) * 1998-08-28 2001-02-13 Ati Technologies, Inc. Method and apparatus for video graphics antialiasing
US6456287B1 (en) 1999-02-03 2002-09-24 Isurftv Method and apparatus for 3D model creation based on 2D images
US6882346B1 (en) * 2000-11-17 2005-04-19 Hewlett-Packard Development Company, L.P. System and method for efficiently rendering graphical data
EP1587329B1 (en) * 2003-01-20 2015-04-15 Sanyo Electric Co., Ltd. Three-dimensional video providing method and three-dimensional video display device
CN101582983B (zh) * 2003-04-28 2014-01-22 松下电器产业株式会社 记录介质和方法、再现装置和方法、程序和集成电路
KR100882077B1 (ko) * 2003-07-11 2009-02-10 파나소닉 주식회사 디스플레이 세트의 병렬처리를 수행할 수 있는 재생장치, 기록매체, 기록방법, 재생방법, 및 컴퓨터 판독가능한 기록매체
KR100546383B1 (ko) * 2003-09-29 2006-01-26 삼성전자주식회사 눈에 보이지 않는 프래그먼트를 처리하기 위한 3차원그래픽스 렌더링 엔진 및 그 방법
US20050185711A1 (en) * 2004-02-20 2005-08-25 Hanspeter Pfister 3D television system and method
KR100585966B1 (ko) * 2004-05-21 2006-06-01 한국전자통신연구원 3차원 입체 영상 부가 데이터를 이용한 3차원 입체 디지털방송 송/수신 장치 및 그 방법
WO2006024091A1 (en) * 2004-08-30 2006-03-09 Commonwealth Scientific And Industrial Research Organisation A method for automated 3d imaging

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000078611A (ja) 1998-08-31 2000-03-14 Toshiba Corp 立体映像受信装置及び立体映像システム
JP2004274125A (ja) 2003-03-05 2004-09-30 Sony Corp 画像処理装置および方法

Also Published As

Publication number Publication date
US10200667B2 (en) 2019-02-05
JP2010510558A (ja) 2010-04-02
JP2013117983A (ja) 2013-06-13
EP2105032A2 (en) 2009-09-30
US8711203B2 (en) 2014-04-29
US20100118119A1 (en) 2010-05-13
CN101682793B (zh) 2012-09-26
US20150381961A1 (en) 2015-12-31
KR20090066320A (ko) 2009-06-23
JP5684839B2 (ja) 2015-03-18
WO2008044191A2 (en) 2008-04-17
CN101682793A (zh) 2010-03-24
WO2008044191A3 (en) 2009-12-10

Similar Documents

Publication Publication Date Title
KR101377736B1 (ko) 3차원 그래픽 데이터의 생성
US9124858B2 (en) Content processing apparatus for processing high resolution content and content processing method thereof
EP2406950B1 (en) Information processing device, information processing method, playback device, playback method, program and recording medium
US8848037B2 (en) Data structure, recording medium, playing device and playing method, and program
US8237741B2 (en) Image processing apparatus, image processing method, and image processing program
US20100269065A1 (en) Data structure, recording medium, playback apparatus and method, and program
US20120020640A1 (en) Data structure, recording medium, playing device and playing method, and program
US20140099065A1 (en) Apparatus for reproducing recording medium and method thereof
EP2299729B1 (en) Data structure, playing device, playing method, program, and program storage medium
KR20140044258A (ko) 기록 매체 재생 장치 및 그 재생 방법
KR20140057135A (ko) 기록 매체, 그 기록 매체에 기록된 데이터에 기초하여 서비스를 제공하는 기록 매체 재생 장치 및 그 서비스 제공 방법
JP2012130036A (ja) 記録方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180223

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20200226

Year of fee payment: 7