CN102273214B - 基于同步立体图像来提供立体图像的设备和方法 - Google Patents

基于同步立体图像来提供立体图像的设备和方法 Download PDF

Info

Publication number
CN102273214B
CN102273214B CN200980153631.4A CN200980153631A CN102273214B CN 102273214 B CN102273214 B CN 102273214B CN 200980153631 A CN200980153631 A CN 200980153631A CN 102273214 B CN102273214 B CN 102273214B
Authority
CN
China
Prior art keywords
image
image streams
service
solid
broadcast
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN200980153631.4A
Other languages
English (en)
Other versions
CN102273214A (zh
Inventor
尹国镇
李奉镐
李贤�
李光淳
许南淏
金镇雄
李寿寅
金晟勋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Publication of CN102273214A publication Critical patent/CN102273214A/zh
Application granted granted Critical
Publication of CN102273214B publication Critical patent/CN102273214B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/167—Synchronising or controlling image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H04N21/23106—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion involving caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/232—Content retrieval operation locally within server, e.g. reading video streams from disk arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server

Abstract

提供了一种用于同步和提供立体图像的设备和方法。该方法包括：存储第一图像；接收用于在与第一图像关联的情况下形成立体图像的第二图像；对该第一图像和该第二图像进行同步；以及输出所同步的两个图像。

Description

基于同步立体图像来提供立体图像的设备和方法
技术领域
本发明涉及一种用于同步和提供图像的技术；并更具体地，涉及一种用于同步和提供立体图像的设备和方法。 
背景技术
提供立体内容的技术的标准化已在进行中。这样的标准化促使基于诸如数字电视(TV)、移动电话、数字相机、数字通用盘(DVD)和便携式多媒体播放器(PMP)之类的各种数字图像装置来快速推进相关技术。立体内容向自然图像提供优异的三维(3D)效果和卓越的逼真度。相应地，已经开发了用于捕获、生成和显示立体内容的技术，并且也已经推进了用于使用立体内容的应用服务和装置的有关技术。 
作为现有技术，引入了用于形成立体图像的并排方法。并排方法通过将立体内容的左图像和右图像缩减一半并且在一帧中包括所缩减的左图像和右图像来提供立体服务。 
例如，通过仅仅采集左图像中奇数编号的垂直线来将左图像缩减一半，并通过仅仅采集右图像中偶数编号的垂直线来将右图像缩减一半，并且在一帧中包括所缩减的左图像和右图像。由于在一帧中包括左图像和右图像两者，所以易于对左图像与右图像进行同步。然而，并排方法也具有缺点。即，使得图像分辨率劣化，并且它不可与典型的数字广播相比。 
作为根据现有技术的用于形成立体图像的另一方法，引入了帧顺序方法。根据现有技术的帧顺序方法交替地对立体内容的右图像和左图像进行编码。根据现有技术的帧顺序方法有利地提供了具有与原始图像一致的全分辨率的立体图像。 
然而，帧顺序方法可能不利地导致对左图像与右图像进行同步的难题，并且如果右图像和左图像之一被损坏，则可能在忽略右图像和左图像之一的 情况下提供相关服务。因此，根据现有技术的帧顺序方法不可与典型的数字广播相比。 
此外，引入了根据现有技术的编码方法，用于在维持与典型数字广播的可比性的同时提供立体内容。此编码方法使用诸如MPEG-2(运动图像专家组-2)和先进视频编码(AVC)之类的不同编解码器(CODEC)来对左图像和右图像进行编码。 
而且，引入了用于在维持该可比性的情况下提供立体图像的另一编码方法。此编码方法使用左图像与右图像之间的关系来对左图像和右图像进行编码。 
尽管这些方法都维持了与典型数字广播系统的可比性，但是这些方法需要附加的编解码器以用于个别地对左图像和右图像进行编码和解码，由此具有高的系统复杂度。同样，由于数字广播带宽的限制，所以难以将这些方法应用于HD级别的高分辨率数字广播服务。 
发明内容
技术问题 
本发明的实施例针对提供一种用于有效地同步和提供立体图像的技术。 
本发明的另一实施例针对在数字广播的有限频带内提供高质量的立体数字广播服务，同时维持与典型数字广播的可比性。 
本发明的其他目的和优点可以通过以下描述来理解，并且通过参考本发明的实施例而变得明显。同样地，对于本发明领域的技术人员明显的是，可以通过所要求保护的部件及其组合来实现本发明的目的和优点。 
技术方案 
根据本发明的一方面，提供了一种用于提供立体图像的方法，包括：存储第一图像，接收用于在与第一图像关联的情况下形成立体图像的第二图像，对该第一图像和该第二图像进行同步，以及输出所同步的两个图像。 
根据本发明的一方面，提供了一种用于提供立体图像的设备，包括：存储器，用于存储第一图像；接收器，用于接收用于在与第一图像关联的情况下形成立体图像的第二图像；同步控制器，用于对该第一图像和该第二图像进行同步；以及输出单元，用于输出所同步的两个图像。 
根据本发明的一方面，提供了一种用于同步立体图像的方法，包括：存 储第一图像，接收用于在与第一图像关联的情况下形成立体图像的第二图像，以及对该第一图像和该第二图像进行同步。 
根据本发明的一方面，提供了一种用于同步立体图像的设备，包括：存储器，用于存储第一图像；接收器，用于接收用于在与第一图像关联的情况下形成立体图像的第二图像；以及同步控制器，用于对该第一图像和该第二图像进行同步。 
有益效果 
根据本发明，可以有效地同步和提供立体图像。具体地，可以在有限的数字广播频率带宽内提供高质量的立体数字广播服务，同时维持与典型数字广播的可比性。 
附图说明
图1图示了根据本发明实施例的立体图像提供设备100。 
图2图示了图1所示的同步控制器106。 
图3图示了根据本发明实施例的数字广播系统300。 
图4是图示了根据本发明实施例的3-D广播节目的图。 
图5是描述了根据本发明实施例的用于提供立体图像的方法的流程图。 
图6是图示了图5所示的同步步骤S506的流程图。 
图7图示了根据本发明实施例的立体图像提供设备700。 
图8图示了根据本发明实施例的立体图像流。 
图9图示了用于示出根据本发明实施例的广播节目信息的节目映射表。 
具体实施方式
根据在下文中提出的、参考附图而进行的实施例的以下描述，本发明的优点、特征和方面将变得明显。为了提供立体图像，必须具有两个图像，即左图像和右图像。在下文中，第一图像和第二图像意味着左图像和右图像之一。 
图1图示了根据本发明实施例的立体图像提供设备100。可以将立体图像提供设备100实施为用于3D广播服务的终端或机顶盒。 
如图1所示，立体图像提供设备100包括存储器102、接收器104、同步控制器106、和输出单元108。 
存储器102存储第一图像，并且接收器104接收与第一图像对应的第二图像。第二图像是用于在与第一图像关联的情况下形成立体图像的图像。如果第一图像是右图像，则第二图像是左图像。 
同样，如果独立地对第一图像和第二图像进行再现，则可以以2D图像来显示第一图像和第二图像。第一图像可以是从外部接收的或者通过广播信号而事先接收的图像。同步控制器106对预先所存储的第一图像与接收器104所接收的第二图像进行同步。输出单元108将所同步的两个图像输出为立体图像。 
根据本实施例的立体图像提供设备100事先存储立体图像的两个图像之一，并且附加地接收另一图像，如上所述。因此，根据本实施例的立体图像提供设备100有效地使用用于接收图像的传送带宽。 
例如，如果第一和第二图像中的至少一个图像是数字广播节目，则存储器102在广播该数字广播节目的时间之前存储第一图像。这里，第一图像可以由接收器104来接收。或者，可以在通过广播信道、因特网和卫星通信接收到之后，将第一图像存储在外部装置中，并且稍后将它输入到立体图像提供设备。 
立体图像提供器可以提供以下服务，该服务通过在向观众提供广播节目列表之后选择所期望的立体广播、来使得观众能够事先接收第一图像。接收器104在广播该数字广播节目时接收该第二图像。然后，同步控制器106对第一和第二图像进行同步，并且输出单元108输出所同步的图像。 
因此，根据本实施例的立体图像提供设备100可以实时地向观众提供高清晰度立体数字广播内容，同时维持与典型数字广播系统的可比性。在此情况下，根据本实施例的立体图像提供设备100可以提供具有全分辨率的立体图像，而没有当提供HD级别的立体数字广播时已出现的传送带宽限制问题。 
图2是图1所示的同步控制器106。如图1所示，同步控制器106包括节目ID信息提取器202、图像控制器204、和图像相关器206。同步控制器106还可以包括时间参考值提取器208和同步器210。 
节目ID信息提取器202从第一图像中提取节目ID信息。节目ID信息是向第一图像分派的、第一图像的唯一索引。图像控制器204确定是否根据第二图像来形成立体图像。 
如果图像控制器204确定根据第二图像来形成立体图像，则图像相关器 206使用来自节目ID信息提取器202的所提取的节目ID信息来使得第一图像与第二图像关联。由于可以独立地以二维图像来显示第二图像，所以图像控制器204基于关于是否形成立体图像的信息来决定图像输出方法。 
如果图像控制器204确定形成立体图像，则图像控制器204查找与该第二图像对应的第一图像，并且对第一图像与第二图像进行同步。由于第一图像事先存储在立体图像提供设备100中，所以立体图像提供设备100可以存储用于各种广播节目的左图像和右图像之一。 
尽管立体图像提供设备100事先存储了多个第一图像，但是仅仅存在一个与第二图像对应的第一图像。图像相关器206可以使用从第一图像中提取的节目标识信息来查找与第二图像相关的第一图像。 
时间参考值提取器208从第一图像和第二图像中提取时间参考值。同步器210使用时间参考值提取器208所提取的时间参考值来对第一图像和第二图像进行同步。同步器210可以使用来自图像相关器206的第一和第二图像的相关性信息来确认两个对应图像。同步器210可以通过将所提取的第一和第二图像的时间参考值之一校正为与另一时间参考值相同，来同步两个图像。 
因为接收第二图像的时间不同于接收并存储第一图像的时间，所以第一和第二图像的时间参考值可能不同。同步器210可以通过使用所提取的时间参考值而校正第一图像或第二图像的时间戳，来同步两个图像。 
同样，同步器210根据所提取的时间参考值来对第二图像的分组或帧进行计数，并且将第一图像的分组或帧的计数数目校正为与第二图像的分组的计数数目相同。 
图3是图示了根据本发明实施例的数字广播服务系统300的图。图4是图示了根据本发明实施例的3D广播节目的图。根据本实施例的数字广播服务系统300向观众提供包括3D广播节目的广播节目。可以以二维图像来独立地对左图像和右图像进行再现。 
同样，可以将左图像和右图像中的一个图像与另一图像一起再现为立体图像。可以独立地或者彼此从属地(dependently)在流中形成左图像和右图像中的每一个图像。这里，独立流意味着可以以2D图像来再现、以便维持与典型广播的可比性的流。从属流意味着可以再现为独立流的流。相应地，将在广播相关广播节目的时间之前传送并存储的第一图像称作3D补充图像，并且将在广播相关广播节目时传送的第二图像称作主要图像。 
首先，3D内容服务器306将包括3D视频302和音频304的立体内容转移到广播站308。广播站308将3D视频划分为主要图像和3D补充图像，并且单独地传送该主要图像和3D补充图像。网络服务器310事先接收3D补充图像，并且在广播该主要图像之前，向计算机312或3D TV接收器316传送所接收到的3D补充图像。 
这里，可以通过因特网来传送3D补充图像，并且观众通过存储装置314来将所接收到的3D补充图像转移到3D TV接收器316。如果3D TV接收器316具有接收3D补充图像的能力，则计算机312和存储装置314不是必须的。即，3D TV接收器316可以直接接收并存储3D补充图像。当广播站308广播主要图像时，3D TV接收器316接收主要图像，对所接收到的主要图像与所存储的3D补充图像进行同步，并且将所同步的图像输出为3D广播320。具有典型DTV接收器318的观众可以通过DTV接收器318来观看仅仅包括主要图像的2D广播322。 
如图4所示，可以服务3D广播节目。在时段402期间，以2D广播服务类型来提供广播节目。在预定的时段404期间，以3D广播服务类型来提供广播节目。在提供了3D广播节目之后，在时段406中再次提供2D广播节目。2D广播由视频和音频流形成，而3D广播由主要图像、3D补充图像、和音频流形成。用于提供3D广播节目的时段404可根据用于存储3D补充图像的3DTV接收器的存储空间而不同。例如，3D广播节目可以是广告、精彩场景(scene highlight)、和体育事件。在比较短的时间中再现广告和精彩场景。如果以3D来广播这些节目，则其效果可能是显著的。同样，如果以3D来广播体育事件，则它可给出更为丰富的现实感和卓越的充实度(solidity)。同样，可以与3D图像一起显示各种相关信息。因此，可以有效地广播体育事件。 
在本实施例中，3D补充图像是使用典型商业视频编解码器来编码的并且基于MPEG-2标准来多路复用的流。将3D补充图像存储为MPEG-2传输流(ST)。然而，可以以包括MPEG-2TS的其他格式来存储3D补充图像。还可以以附加存储文件格式或传输协议来将3D补充图像存储为编码流。传输流TS可以包括作为MPEG-2节目控制信息的节目特定信息(PSI)，或者仅仅包括媒体流(例如，3D补充图像流)，而没有节目控制信息(PSI)。 
尽管传输流(TS)包括节目特定信息(PSI)，但是3D TV接收器315可以使用主要图像的节目特定信息(PSI)，并且忽略3D补充图像的节目特定信 息(PSI)，以便对3D补充图像与实时广播的主要图像流进行同步。可能通过以与主要图像的传输流相似的格式来存储3D补充图像来减小3D TV接收器316的复杂度。 
当以存储文件格式来存储3D补充图像时，可以将3D TV接收器316实施为将该存储文件格式的时间戳与主要图像流的时间戳相匹配，以便对存储文件格式与实时广播的主要图像流进行同步。在此情况下，可能有利地减少用于以传输流(TS)的格式来存储3D补充图像的系统的开销。 
图5是描述了根据本发明实施例的用于提供立体图像的方法的流程图。 
当在步骤S502中存储了第一图像之后，在步骤S504中接收第二图像。通过使得第一图像与第二图像关联来形成立体图像。然后，在步骤S506中对所接收到的第二图像与所存储的第一图像进行同步。在同步之后，在步骤S508中，将所同步的两个图像输出为立体图像。如上所述，可以将第一和第二图像个别地显示为2D图像，或者可以仅仅以2D图像来显示第二图像。 
如果第一和第二图像中的至少一个图像是数字广播节目，则可以在广播该数字广播节目之前存储第一图像，并且可以在广播该数字广播节目时接收第二图像。例如，如果第二图像是数字广播节目，则第一图像可以是属于数字广播节目的并且与第二图像一起形成立体图像的3D补充图像。第二图像是作为用于形成数字广播节目的典型2D图像的主要图像。可以利用立体图像来与第一图像一起显示2D图像，或者可以个别地以2D图像来显示2D图像。 
图6是用于详细地图示在步骤S506中对第一图像与第二图像进行同步的流程图。 
对第一图像与第二图像进行同步包括：在步骤S602中，从第一图像中提取节目标识信息；以及在步骤S604中，确定是否根据第二图像来形成立体图像。如果在步骤S604中确定根据第二图像来形成立体图像，则在步骤S606中使得第一图像与第二图像关联。在步骤S606中，通过使用从步骤S602中提取的节目标识信息而搜索第一图像，来使得第一图像与第二图像关联。 
在步骤S610中，将从第一和第二图像中提取的时间参考值之一校正为与另一时间参考值相匹配，或者可以使用所提取的时间参考值来校正第一图像或第二图像的时间戳。在步骤S610中，基于时间参考值来对第二图像的分组/帧进行计数，并且可以将第一图像的分组/帧的计数数目校正为与第二图像的 分组/帧的计数器数目相匹配。这里，时间参考值可以是节目时钟参考(PCR)，并且时间戳可以是解码时间戳(DTS)和呈现时间戳(PTS)之一。 
图7是图示了根据本发明实施例的立体图像提供设备700的图。 
如图7所示，根据本实施例的立体图像提供设备700包括解多路复用器704和解码器706。解多路复用器704包括PSI分析模块712、TS分析模块714、PES分析模块716、重新添加时间戳(Re_timestamping)模块718、和重新计数(Re_counting)模块720。解码器706包括解码模块722和立体图像生成模块724。在下文中，主要图像是立体图像提供设备700所接收的第二图像，而3D补充图像是事先在立体图像提供设备700中存储的第一图像。 
当将3D补充图像流702输入到解多路复用器704时，PSI分析模块712提取节目特定信息(PSI)。TS分析模块714提取PCR和节目ID(PID)，该PCR是在传输流(TS)的报头中包括的时间参考值。PES分析模块716分析在分组化基础流(PES)的报头中包括的分组计数器或PES专用数据。解多路复用器704可以使用所分析的分组计数器或PES专用数据来对3D补充图像的分组或帧进行计数。重新添加时间戳模块718根据所提取的PCR、DTS和PTS(即，时间参考值或时间戳)来校正3D补充图像流的时间戳。 
如果以预定的存储文件格式、而不是传输流(TS)的格式来存储3D补充图像流702，则重新添加时间戳模块718基于所提取的时间参考值来校正存储文件格式的时间戳。重新计数模块720根据PCR来将主要图像流和补充图像流的计数器数目校正为彼此相匹配。可以将重新添加时间戳模块718包括在TS分析模块714中，并且可以将重新计数模块720包括在PES分析模块716中。 
解码器706通过解码模块722来仅仅对具有相同时间戳的主要图像和3D补充图像流进行解码，并且通过立体图像生成模块724来将所解码的主要图像和3D补充图像输出为立体图像。当再现传统的2D广播的情况下，不使用立体图像生成模块724。 
图8是图示了根据本发明实施例的立体图像流的图。在下文中，将参考图8来描述对主要图像与3D补充图像进行同步的方法。 
立体图像提供设备一般地使用在典型数字广播中使用、以用于音频和视频(AV)同步的PCR，来将主要图像与3D补充图像进行同步。PCR是用于匹配解码时间和再现时间的时间参考值。通过MPEG-2TS的报头806来传送 PCR。关键的是，对主要图像与3D补充图像进行同步，以便再现立体内容。 
然而，两个图像具有不同的时间值，这是因为在传送并存储主要图像之前对3D补充图像进行传送并存储。因此，将3D补充图像和主要图像的时间值校正为相同的时间值或相同的时间戳。 
立体图像提供设备在开始主要图像流802中的3D广播时，使用PCR来对主要图像流802与3D补充图像流804进行同步。即，基于作为参考的主要图像流802的PCR值来对3D补充图像流804的时间戳进行重新添加时间戳。时间戳可以是每个分组的DTS或PTS。例如，假设3D补充图像流804的开始TS分组的PCR值是1000，而当3D广播开始时主要图像流802的开始PCR值是2000。在此情况下，将3D补充图像流804的开始TS分组的PCT值校正为2000，这与作为1000的两个PCR值的差值差不多。 
同样，基于所校正的PCR值来对以下连续分组的DTS和PTS值进行校正。如果对时间戳进行了校正，则通过PTS来对两个图像流802和804进行同步，并且将它们再现为立体图像。由于观众可以通过在3D广播服务时段816中打开TV来接收服务，所以甚至在3D广播服务时段816中，主要图像流802也必须包括开始3D广播的时间和对应的PCR值。在此情况下，立体图像提供设备可以得知主要图像流802的3D广播开始时间和对应的PCR值。因此，可能对主要图像流与3D补充图像流804进行同步。 
为了精确地进行同步，可以使用PES报头中的节目_分组_序列_计数器(program_packet_sequence_counter)字段或者PES专用数据(Private data)字段。其相当于持续地对连续PES分组进行计数。在开始3D广播时，PES报头的节目_分组_序列_计数器_标志(program_packet_sequence_counter_flag)变为1，并且通过节目_分组_序列_计数器来对主要图像流802的PES分组进行计数。在开始3D广播时，将用于形成3D补充图像流804的PES分组的计数数目校正为与主要图像流802的第一PES分组计数数目相一致。 
例如，如果主要图像流的PES分组计数数目是100，则将3D补充图像流804的第一PES分组计数数目校正为100。同样，可以使用PES专用数据字段来将各数目分配到每一分组或帧。利用上述方法，可以在开始3D广播时，将3D补充图像流804的PES分组数目或PES帧数目校正为与主要图像流802的PES分组数目或PES帧数目相一致。 
节目映射表(PMT)814可以包括用于执行同步处理的必要信息。即，PMT 814可以包括：初始_PCR(initial_PCR)808，作为用于同步的3D广播开始部分的PCR  值；初始_分组_序列_计数器(initial_packet_sequence_counter)810，作为3D广播开始部分处的分组计数数目；以及子PID(SubPID)812，作为节目标识信息。在下文中，将参考图9来更加详细地描述PMT 814。 
图9是图示了根据本发明实施例的包括广播节目信息的PMT 900的图。 
PMT 900表达了关于MPEG-2系统上的数字广播节目的基本信息。作为描述符，PMT 900定义了3D_服务_描述符(3D_service_descriptor)902和3D_从属性_描述符(3D_dependency_descriptor)904。3D_服务_描述符902包括关于是否广播2D/3D广播的信息、关于主要图像和3D补充图像之间的相关性的信息、和初始PCR。即，3D_服务_描述符902包括关于广播节目的2D广播时段和3D广播时段的信息。由于可以在节目_信息_长度(program_info_length)之后添加用于总体广播节目的附加所需的描述符，所以在节目_信息_长度之后安排3D_服务_描述符902。 
如图9所示，将N1环(loop)划分为具有关于主要图像906的信息的比特流和具有关于音频908的信息的另一比特流。3D_从属性_描述符904包括关于主要图像和3D补充图像之间的相关性的信息。由于可以在ES_信息_长度之后添加与广播节目的主要图像相关的附加信息，所以在ES_信息_长度之后安排3D_从属性_描述符904。然而，并不限制将3D_服务_描述符902和3D_从属性_描述符904包括在PMT 900中。 
可以将这些描述符包括在应用于其他广播服务的各种表格中，作为独立的描述符。同样，3D_服务_描述符902和3D_从属性_描述符904的名称以及其在PMT 900中的位置可以根据各实施例而不同。此外，可以将这些描述符的字段包括在其他描述符中，或者实施为独立的描述符。 
表1示出了根据本发明实施例的3D_服务_描述符。3D_服务_描述符包括关于是广播2D广播节目还是3D广播节目的信息和初始的PCR信息。 
表1 
  语法   比特数目
  3D_service_descriptor(){  
  descriptor_tag   8
  descriptor_length   8
  3DService_flag   1
  if(3Dservice_flag){  
  initial_PCR   42
  3D_auxiliary_dataType   3
  Reserved   2
  }  
  Reserved   7
  }  
在表1中，3D服务_标志(3DService_flag)是用于指示是广播2D广播还是3D广播的值。可以将3D服务_标志定义为：如果3D服务_标志是“0”，则指示出2D广播；或者如果3D服务_标志是“1”，则指示出3D广播。初始_PCR指示出作为3D广播开始时间的时间参考值的初始PCR值。 
表2示出了根据本发明另一实施例的3D_服务_描述符。 
表2 
  语法   比特数目
  3D_service_descriptor(){  
  descriptor_tag   8
  descriptor_length   8
  3DService_flag   1
  if(3Dservice_flag){  
  initial_PCR   42
  initial_packet_sequence_counter   7
  3D_auxiliary_dataType   3
  Reserved   3
  }  
  Reserved   7
  }  
初始_分组_序列_计数器表示出在开始3D广播时PES分组的计数器数目、或者向PES专用数据字段分配的帧的计数数目。 
3D_辅助_数据类型(3D_auxiliary_dataType)表示出在立体图像提供设备中存储的3D补充图像流的图像形成类型。存在许多用于将所同步的左图像和右图像显示为立体图像的方法，例如，用于重叠地显示左图像和右图像的偏振方法、用于交替地并重复地再现左图像和右图像的帧的帧顺序方法、用于交替地并重复地再现左图像和右图像的场图像的场顺序方法、以及通过以线为单位而对左图像的奇数线和右图像的偶数线进行交织来再现左图像和右图像的方法、和通过以像素为单位而对左图像的奇数列和右图像的偶数列进行交织来再现左图像和右图像的方法。由于仅仅将3D补充图像用于再现立体内容，所以需要得到图像的尺寸信息。这是因为偏振方法或帧顺序方法需要具有主要图像的相同尺寸的图像，而其他方法需要在水平方向或垂直方法中具有主要图像的半尺寸的图像。 
表3示出了3D_辅助_数据类型。3D_辅助_数据类型包括关于3D补充图像的尺寸的信息和深度图或视差图的元数据。使用深度图和视差图来将左图像和右图像显示为立体图像。 
表3 
  值   类型
  000   保留
  001   与主要图像相比，为相同尺寸的图像
  010   与主要图像相比，为水平半尺寸的图像
  011   与主要图像相比，为垂直半尺寸的图像
  100   与主要图像相比，为水平/垂直尺寸的图像
  101   深度图
  1110   视差图
  101～111   保留
表4示出了3D_从属性_描述符904的结构。 
表4 
 语法   比特数目
 3D_dependency_descriptor(){  
 descriptor_tag   8
 descriptor_length   8
  SubPID   13
  3D_auxiliaryData_streamtype   8
  Reserved   3
  }  
3D_从属性_描述符904用于3D广播，并且包括主要图像和3D补充图像的相关性信息。子PID表示出与用于再现立体图像的主要图像流相关的3D补充图像流的PID。同样，子PID可以表示出与主要图像流相关的3D补充图像的预定索引。3D_辅助数据_流类型(3D_auxiliaryData_streamtype)表示出在立体图像提供设备中存储的3D补充图像的流类型，例如MPEG-2流或AVC流。 
然而，本发明不限于所描述的实施例。可以将本发明改变或修改为各种其他实施例。例如，可以容易地将本发明应用于多声道音频服务、以及高清晰度立体服务。在20.1声道服务的情况下，可以将根据本发明的立体图像提供设备实施为事先接收15个声道，并且在广播主要广播节目时接收5.1个声道。然后，根据本发明的立体图像提供设备通过将预先所接收到的15个声道与5.1个声道进行集成来提供20.1声道服务。 
在本说明书中，模块意味着诸如用于执行预定处理的功能或装置之类的单元。可以作为硬件、软件或其组合来实施该模块。 
可以作为硬件、软件或其组合来实施所描述的设备和系统。在硬件中，用于同步立体图像的模块可以被实施为特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、和被设计为执行所描述的功能的电气单元、或者其组合中的至少一个。可以通过用于执行所描述的功能的模块来实施软件。可以将软件代码存储在存储单元中，并且通过处理器来执行。可以将存储单元实施在处理器的内部或外部。在此情况下，可以通过各种已知方法来将存储单元连接到处理器。 
可以将根据本发明的上述方法实施为程序，并存储在计算机可读记录介质上。该计算机可读记录介质是可以存储其后可由计算机系统读取的数据的任何数据存储装置。该计算机可读记录介质包括：只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、软盘、硬盘和磁光盘。 
本发明包含与在2008年11月4日向韩国知识产权局提交的韩国专利申 请第2008-0108893号相关的主题，在这里通过引用而合并其全部内容。 
尽管已经针对特定实施例而描述了本发明，但是对于本领域技术人员将明显的是，可以做出各种改变和修改，而不脱离由以下权利要求限定的本发明的精神和范围。 

Claims (12)

1.一种用于提供立体服务的方法，包括： 
存储用于立体服务的第一图像流，其中在广播该立体服务的时间之前存储该第一图像流； 
接收第二图像流，其中该第二图像流在与该第一图像流关联的情况下形成该立体服务，其中在广播该立体服务的开始时间处接收该第二图像流； 
对该第一图像流和该第二图像流进行同步，
其中所述第一和第二图像流分别包括时间参考值， 
其中该第一图像流的时间参考值被校正为该第二图像流的时间参考值，和 
其中基于所校正的时间参考值来校正用于该第一图像流的连续分组的时间戳；以及 
输出所同步的立体服务。 
2.根据权利要求1的方法，其中该第一图像流和该第二图像流被独立地显示为2D图像。 
3.根据权利要求1的方法，其中所述时间戳是解码时间戳（DTS）或呈现时间戳（PTS）。 
4.根据权利要求1的方法，其中所述对该第一图像流和该第二图像流进行同步的步骤还包括： 
从节目映射表（PMT）中提取服务标识信息，其中该服务标识信息指示服务是否是立体服务；以及 
当确定该服务是该立体服务时，基于所提取的服务标识信息来使得该第一图像流和该第二图像流关联。 
5.根据权利要求4的方法，其中该PMT包括该立体服务的初始时间参考值。 
6.根据权利要求1的方法，其中经由与该第二图像流不同的网络来接收该第一图像流。 
7.一种用于提供立体服务的设备，包括： 
存储器，用于存储用于立体服务的第一图像流，其中在广播该立体服务的时间之前存储该第一图像流； 
接收器，用于接收第二图像流，其中该第二图像流在与该第一图像流关联的情况下形成该立体服务，其中在广播该立体服务的开始时间处接收该第二图像流； 
同步控制器，用于将该第一图像流和该第二图像流同步为该立体服务， 
其中所述第一和第二图像流分别包括时间参考值， 
其中该第一图像流的时间参考值被校正为该第二图像流的时间参考值，和 
其中基于所校正的时间参考值来校正用于该第一图像流的连续PES分组的时间戳；以及 
输出单元，用于输出该立体服务。 
8.根据权利要求7的设备，其中将所述第一图像和第二图像流独立地显示为2D图像。 
9.根据权利要求7的设备，其中所述时间戳是解码时间戳（DTS）或呈现时间戳（PTS）。 
10.根据权利要求7的设备，其中该同步控制器还包括： 
提取器（712），用于从节目映射表（PMT）中提取服务标识信息，其中该服务标识信息指示服务是否是立体服务；以及 
图像生成模块（724），用于当确定该服务是该立体服务时，基于所提取的服务标识信息来使得该第一图像流和该第二图像流关联。 
11.根据权利要求10的设备，其中该PMT包括该立体服务的初始时间参考值。 
12.根据权利要求7的设备，其中经由与该第二图像流不同的网络来接收该第一图像流。 
CN200980153631.4A 2008-11-04 2009-07-21 基于同步立体图像来提供立体图像的设备和方法 Active CN102273214B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020080108893A KR100972792B1 (ko) 2008-11-04 2008-11-04 스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법
KR10-2008-0108893 2008-11-04
PCT/KR2009/004044 WO2010053246A2 (en) 2008-11-04 2009-07-21 Apparatus and method for synchronizing stereoscopic image, and apparatus and method for providing stereoscopic image based on the same

Publications (2)

Publication Number Publication Date
CN102273214A CN102273214A (zh) 2011-12-07
CN102273214B true CN102273214B (zh) 2014-03-12

Family

ID=42153360

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200980153631.4A Active CN102273214B (zh) 2008-11-04 2009-07-21 基于同步立体图像来提供立体图像的设备和方法

Country Status (6)

Country Link
US (1) US8917314B2 (zh)
EP (1) EP2353299B1 (zh)
JP (1) JP2012507968A (zh)
KR (1) KR100972792B1 (zh)
CN (1) CN102273214B (zh)
WO (1) WO2010053246A2 (zh)

Families Citing this family (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101347744B1 (ko) * 2009-08-19 2014-01-03 서울시립대학교 산학협력단 영상 처리 장치 및 방법
KR101694821B1 (ko) * 2010-01-28 2017-01-11 삼성전자주식회사 다시점 비디오스트림에 대한 링크 정보를 이용하는 디지털 데이터스트림 전송 방법와 그 장치, 및 링크 정보를 이용하는 디지털 데이터스트림 전송 방법과 그 장치
US9426441B2 (en) 2010-03-08 2016-08-23 Dolby Laboratories Licensing Corporation Methods for carrying and transmitting 3D z-norm attributes in digital TV closed captioning
EP2582142B1 (en) * 2010-06-09 2017-03-15 Samsung Electronics Co., Ltd Method for providing fragment-based multimedia streaming service and device for same, and method for receiving fragment-based multimedia streaming service and device for same
FR2963528B1 (fr) * 2010-07-29 2012-08-24 Television Francaise 1 Telediffusion d'une video stereoscopique
US9549228B2 (en) 2010-09-01 2017-01-17 Lg Electronics Inc. Broadcast signal processing method and device for 3-dimensional (3D) broadcasting service
KR20120023268A (ko) * 2010-09-01 2012-03-13 삼성전자주식회사 디스플레이 장치 및 그 영상 생성 방법
CN103329544A (zh) * 2010-10-13 2013-09-25 韩国电子通信研究院 用于传送立体感视频信息的方法和设备
US20130208090A1 (en) * 2010-10-26 2013-08-15 Korean Broadcasting System Hierarchical broadcasting system and method for 3d broadcasting
KR101910192B1 (ko) * 2010-11-12 2018-10-22 한국전자통신연구원 3ｄｔｖ 서비스에서의 영상 압축 규격 결정 방법 및 장치
JP5412404B2 (ja) * 2010-11-15 2014-02-12 シャープ株式会社 情報統合装置、情報表示装置、情報記録装置
WO2012074331A2 (ko) * 2010-12-02 2012-06-07 한국전자통신연구원 스테레오스코픽 영상 정보의 전송 방법 및 장치
CN103348694A (zh) 2010-12-07 2013-10-09 三星电子株式会社 发送用于构成内容的数据的发射机、接收和处理该数据的接收机及其方法
KR101831775B1 (ko) * 2010-12-07 2018-02-26 삼성전자주식회사 멀티미디어 컨텐츠를 송수신하는 송신 장치 및 수신 장치와, 그 재생 방법
EP2654305A2 (en) * 2010-12-13 2013-10-23 Electronics And Telecommunications Research Institute Signaling method for a stereoscopic video service and apparatus using the method
US10321118B2 (en) 2011-01-04 2019-06-11 Samsung Electronics Co., Ltd. 3D display device and method
KR20120084252A (ko) * 2011-01-19 2012-07-27 삼성전자주식회사 복수의 실시간 전송 스트림을 수신하는 수신 장치와 그 송신 장치 및 멀티미디어 컨텐츠 재생 방법
KR101869103B1 (ko) 2011-01-26 2018-06-19 한국전자통신연구원 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 이를 수행하는 송수신 시스템
JP2012160813A (ja) * 2011-01-31 2012-08-23 Sony Corp 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
KR20120103505A (ko) * 2011-03-10 2012-09-19 한국전자통신연구원 실시간 방송 프로그램의 기준 영상과 부가 영상간의 동기화 방법 및 장치
EP2697975A1 (en) 2011-04-15 2014-02-19 Dolby Laboratories Licensing Corporation Systems and methods for rendering 3d images independent of display size and viewing distance
KR101203483B1 (ko) * 2011-04-27 2012-11-21 주식회사 에스비에스 3차원 입체방송의 전송방법 및 그 수신기
JP2012244411A (ja) * 2011-05-19 2012-12-10 Sony Corp 画像データ送信装置、画像データ送信方法および画像データ受信装置
CA2841197A1 (en) * 2011-07-21 2013-01-24 Panasonic Corporation Transmission device, receiving/playing device, transmission method, and receiving/playing method
WO2013019042A1 (ko) 2011-07-29 2013-02-07 한국전자통신연구원 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법
ITTO20110723A1 (it) * 2011-08-03 2013-02-04 Csp A Innovazione Nelle Ict Scarl Metodi ed apparecchi per trasmettere e per ricevere contenuti multimediali
US9900577B2 (en) 2011-08-10 2018-02-20 Electronics And Telecommunications Research Institute Apparatus and method for providing content for synchronizing left/right streams in fixed/mobile convergence 3DTV, and apparatus and method for playing content
US9516086B2 (en) 2011-08-12 2016-12-06 Samsung Electronics Co., Ltd. Transmitting device, receiving device, and transceiving method thereof
EP2744214A4 (en) * 2011-08-12 2015-03-11 Samsung Electronics Co Ltd TRANSMISSION DEVICE, RECEPTION DEVICE AND TRANSMISSION / RECEIVING METHOD THEREFOR
BR112014003343B1 (pt) 2011-08-12 2022-06-21 Samsung Electronics Co., Ltd Aparelho de recepção e método de recepção do mesmo
KR20130065250A (ko) * 2011-12-09 2013-06-19 삼성전자주식회사 디스플레이 장치 및 그를 이용한 디스플레이 방법
JP5915158B2 (ja) * 2011-12-22 2016-05-11 ソニー株式会社 タイムコード表示装置及びタイムコード表示方法
US20130276046A1 (en) * 2012-04-13 2013-10-17 Electronics And Telecommunications Research Institute Receiving apparatus for receiving a plurality of signals through different paths and method for processing signals thereof
KR102016674B1 (ko) * 2012-04-13 2019-08-30 한국전자통신연구원 하이브리드 서비스를 제공하는 수신 장치 및 하이브리드 서비스 제공 방법
US20130271568A1 (en) * 2012-04-13 2013-10-17 Electronics And Telecommunications Research Institute Transmitting system and receiving apparatus for providing hybrid service, and service providing method thereof
CN102665109A (zh) * 2012-04-19 2012-09-12 中兴通讯股份有限公司 一种多媒体视频数据的发送、接收方法及对应装置
US20150089564A1 (en) * 2012-04-23 2015-03-26 Lg Electronics Inc. Signal processing device and method for 3d service
KR20130128266A (ko) * 2012-05-16 2013-11-26 삼성전자주식회사 컨텐츠 수신 장치, 디스플레이 장치 및 그 방법
KR101699367B1 (ko) * 2012-05-16 2017-02-14 한국전자통신연구원 3ｄｔｖ 다중화 방법 및 그 장치
CN102780896A (zh) * 2012-05-31 2012-11-14 新奥特（北京）视频技术有限公司 一种流媒体素材支持3d技术的方法
CN102780897A (zh) * 2012-05-31 2012-11-14 新奥特（北京）视频技术有限公司 一种单文件视频素材支持3d技术的方法
CN103517062B (zh) * 2012-06-15 2016-05-25 晨星软件研发(深圳)有限公司 影像的同步方法及其装置
JP2014027448A (ja) * 2012-07-26 2014-02-06 Sony Corp 情報処理装置、情報処理方法、及びプログラム
US9860515B2 (en) * 2012-12-11 2018-01-02 Electronics And Telecommunications Research Institute Apparatus and method for 3D content broadcasting with boundary information
US20150109413A1 (en) * 2013-10-21 2015-04-23 Electronics And Telecommunications Research Institute Video reception apparatus to provide hybrid service based on transport stream system target decoder model
CN104935914B (zh) * 2014-03-19 2017-03-22 宏达国际电子股份有限公司 电子装置及其摄影方法
KR102204830B1 (ko) * 2014-05-20 2021-01-19 한국전자통신연구원 비-실시간 서비스 기반 지상파 3차원 방송 제공 방법 및 장치
US9838756B2 (en) * 2014-05-20 2017-12-05 Electronics And Telecommunications Research Institute Method and apparatus for providing three-dimensional territorial broadcasting based on non real time service
US10154225B2 (en) 2016-11-18 2018-12-11 Electronics & Telecommunications Research Institute Frame grabber, image processing system including the same, and image processing method using the frame grabber
JP6891913B2 (ja) * 2019-03-25 2021-06-18 カシオ計算機株式会社 電子表示装置及び表示制御方法
US20200314411A1 (en) * 2019-03-29 2020-10-01 Alibaba Group Holding Limited Synchronizing an illumination sequence of illumination sources with image capture in rolling shutter mode
SE545345C2 (en) * 2021-06-30 2023-07-11 Tobii Ab Method and system for alignment of data

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008069613A1 (en) * 2006-12-08 2008-06-12 Electronics And Telecommunications Research Institute System for transmitting/receiving digital realistic broadcasting based on non-realtime and method therefor

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4562463A (en) * 1981-05-15 1985-12-31 Stereographics Corp. Stereoscopic television system with field storage for sequential display of right and left images
US5953054A (en) * 1996-05-31 1999-09-14 Geo-3D Inc. Method and system for producing stereoscopic 3-dimensional images
JPH10174064A (ja) * 1996-12-06 1998-06-26 Sanyo Electric Co Ltd ディジタル放送システム
JPH10336700A (ja) 1997-05-30 1998-12-18 Sanyo Electric Co Ltd ディジタル放送システム、送信機、および受信機
JP4723715B2 (ja) * 1999-10-15 2011-07-13 パナソニック株式会社 マルチチャンネル表示用データ作成装置、及びマルチチャンネル表示用データ作成方法
TW508945B (en) 1999-10-15 2002-11-01 Matsushita Electric Ind Co Ltd Multichannel display data generating apparatus, medium, and informational set
US6724825B1 (en) * 2000-09-22 2004-04-20 General Instrument Corporation Regeneration of program clock reference data for MPEG transport streams
JP4612171B2 (ja) * 2000-10-27 2011-01-12 株式会社東芝 動画像復号再生モジュールと再生時刻管理プログラムとマルチメディア情報受信装置
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
KR100977193B1 (ko) * 2002-04-25 2010-08-20 샤프 가부시키가이샤 화상 데이터 생성 장치, 화상 데이터 재생 장치, 및 화상데이터 기록 매체
JP2004040455A (ja) 2002-07-03 2004-02-05 Nippon Television Network Corp 伝送再生方法、伝送方法、及びそのシステム
US7298741B2 (en) * 2003-02-27 2007-11-20 Sharp Laboratories Of America, Inc. Robust MPEG-2 multiplexing system and method using an adjustable time stamp
KR100556826B1 (ko) * 2003-04-17 2006-03-10 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법
US7650036B2 (en) * 2003-10-16 2010-01-19 Sharp Laboratories Of America, Inc. System and method for three-dimensional video coding
JP4689231B2 (ja) * 2004-10-25 2011-05-25 池上通信機株式会社 トランスポートストリーム切換装置
JP2007158442A (ja) * 2005-11-30 2007-06-21 Toshiba Corp 放送記録装置及び放送記録方法
KR100747550B1 (ko) 2005-12-09 2007-08-08 한국전자통신연구원 Ｄｍｂ 기반의 3차원 입체영상 서비스 제공 방법과, ｄｍｂ기반의 3차원 입체영상 서비스를 위한 복호화 장치 및 그방법
KR100864826B1 (ko) 2006-09-29 2008-10-23 한국전자통신연구원 디지털 방송기반의 3차원 정지영상 서비스 방법 및 장치
JP5047607B2 (ja) * 2006-12-26 2012-10-10 パナソニック株式会社 ストリーム記録装置、ストリーム記録方法、記録システム、および記録再生システム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008069613A1 (en) * 2006-12-08 2008-06-12 Electronics And Telecommunications Research Institute System for transmitting/receiving digital realistic broadcasting based on non-realtime and method therefor

Also Published As

Publication number Publication date
JP2012507968A (ja) 2012-03-29
EP2353299A4 (en) 2013-03-06
KR100972792B1 (ko) 2010-07-29
KR20100049873A (ko) 2010-05-13
CN102273214A (zh) 2011-12-07
EP2353299B1 (en) 2018-09-12
WO2010053246A3 (en) 2011-03-31
US8917314B2 (en) 2014-12-23
WO2010053246A2 (en) 2010-05-14
US20110254920A1 (en) 2011-10-20
EP2353299A2 (en) 2011-08-10

Similar Documents

Publication Publication Date Title
CN102273214B (zh) 基于同步立体图像来提供立体图像的设备和方法
JP5575949B2 (ja) 放送データ送信方法およびその装置
KR101831775B1 (ko) 멀티미디어 컨텐츠를 송수신하는 송신 장치 및 수신 장치와, 그 재생 방법
CN102860000B (zh) 产生用于提供三维多媒体服务的数据流的方法和设备以及用于接收所述数据流的方法和设备
US9055280B2 (en) Method and apparatus for transmitting digital broadcasting stream using linking information about multi-view video stream, and method and apparatus for receiving the same
KR101639358B1 (ko) 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법
TWI437887B (zh) Ｍｐｅｇ－２系統上多視角視訊編碼
US9210354B2 (en) Method and apparatus for reception and transmission
US9900577B2 (en) Apparatus and method for providing content for synchronizing left/right streams in fixed/mobile convergence 3DTV, and apparatus and method for playing content
WO2007064159A1 (en) Method for providing 3d contents service based on digital broadcasting
CN102474657A (zh) 图像数据发送装置、图像数据发送方法和图像数据接收装置
CN103416069A (zh) 发送设备、发送方法、接收设备以及接收方法
KR101965385B1 (ko) 융합형 ３ｄｔｖ에서 컨텐츠 스트림에 접근하는 컨텐츠 제공 장치 및 방법, 그리고 컨텐츠 재생 장치 및 방법
US9270972B2 (en) Method for 3DTV multiplexing and apparatus thereof
US20100315486A1 (en) Stereoscopic video service providing/receiving method and apparatus in digital broadcasting system
KR20110068821A (ko) 송, 수신 장치 및 송, 수신 방법
KR101808672B1 (ko) 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant