CN103718563A - 接收装置及其接收方法 - Google Patents

接收装置及其接收方法 Download PDF

Info

Publication number
CN103718563A
CN103718563A CN201280039426.7A CN201280039426A CN103718563A CN 103718563 A CN103718563 A CN 103718563A CN 201280039426 A CN201280039426 A CN 201280039426A CN 103718563 A CN103718563 A CN 103718563A
Authority
CN
China
Prior art keywords
medium data
video
frame
data
buffer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280039426.7A
Other languages
English (en)
Other versions
CN103718563B (zh
Inventor
朱有晟
李大钟
金喜琎
李栽准
张庸硕
朴洪奭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN103718563A publication Critical patent/CN103718563A/zh
Application granted granted Critical
Publication of CN103718563B publication Critical patent/CN103718563B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/04—Synchronising
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/18—Arrangements for synchronising broadcast or distribution via plural systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/631—Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明公开一种接收装置。该接收装置包括：第一接收单元，通过广播网接收按照帧分别添加第一时间码的第一多媒体数据；第二接收单元，通过IP网接收按照帧分别添加第二时间码的第二多媒体数据；第一信号处理单元，对第一多媒体数据进行信号处理而生成第一视频帧；第二信号处理单元，对第二多媒体数据进行信号处理而生成第二视频帧；控制单元，比较第一多媒体数据的第一时间码和第二多媒体数据的第二时间码，算出具有一致的时间码的视频帧的时间戳信息之差；渲染单元，利用时间戳信息之差，从生成的第一视频帧和第二视频帧中分别读取将要相互同步的视频帧而进行渲染。

Description

接收装置及其接收方法
技术领域
本发明涉及接收装置及其接收方法，尤其涉及接收多个流而进行处理的接收装置及其接收方法。
背景技术
最近，随着电子技术的发展，多种类型的电子装置被开发和普及。尤其，对于TV来说，能够提供3D内容或分辨率更高的内容，据此在广播技术方面也正在开发用于提供3D内容、多视角内容、包括深度图像的内容等包含多个图像的内容或UHD级画质的内容的技术。
现有的广播网中使用的信道带宽是有限的，与之相反的是多视角内容、3D内容、UHD级画质的内容等具有相比现有的内容更大的数据量，因此通过现有的广播网难以原样地传送数据量大的内容。
另外，为了提供新内容而投资新设备，在成本方面不合理，因而需要能够利用现有的广播设备和接收装置提供新内容。据此，可以考虑如下方案：
通过现有广播网传送包含于多媒体内容中的多个多媒体数据中成为标准的多媒体数据，且通过不同于现有广播网的传送路径传送附加的多媒体数据。
但是，当利用分别不同的传送网传送数据时，各个多媒体数据将使用独立的编码器，而由于各个编码器的系统时钟不一致，导致添加相同的同步信号方面存在困难。
发明内容
技术问题
本发明基于上述必要性，本发明的目的在于提供一种通过相互不同的路径接收多个流而进行处理的接收装置及其接收方法。而且，本发明的目的还在于提供一种能够将通过相互不同的路径提供的多个流进行同步而再现的方法。
技术方案
根据本发明一实施例的接收装置，可包括：第一接收单元，通过广播网接收按照帧分别添加第一时间码的第一多媒体数据；第二接收单元，通过IP网接收按照帧分别添加第二时间码的第二多媒体数据；第一信号处理单元，对所述第一多媒体数据进行信号处理而生成第一视频帧；第二信号处理单元，对所述第二多媒体数据进行信号处理而生成第二视频帧；控制单元，比较所述第一多媒体数据的第一时间码和所述第二多媒体数据的第二时间码，算出具有一致的时间码的视频帧的时间戳信息之差；渲染单元，利用所述时间戳信息之差，从生成的所述第一视频帧和第二视频帧中分别读取将要相互同步的视频帧而进行渲染。
在此，所述第一信号处理单元可包括：第一解复用器，将接收的所述第一多媒体数据解复用；第一缓冲器，存储由所述第一多媒体数据解复用的第一视频数据；第一解码器，将存储于所述第一缓冲器的第一视频数据解码而生成第一视频帧；第二缓冲器，存储生成的所述第一视频帧，所述第二信号处理单元可包括：第二解复用器，将接收的所述第二多媒体数据解复用；第三缓冲器，存储由所述第二多媒体数据解复用的第二视频数据；第二解码器，将存储于所述第三缓冲器的第二视频数据解码而生成第二视频帧；第四缓冲器，存储生成的所述第二视频帧。
而且，所述控制单元可利用所述时间戳信息之差补偿存储于所述第一缓冲器和所述第三缓冲器的第一视频数据和第二视频数据中的一个数据的时间戳信息。
另外，接收装置还可以包括存储通过所述第一接收单元接收的第一多媒体数据的存储单元，且当接收到将与存储的所述第一多媒体数据进行同步的第二多媒体数据时，所述控制单元可控制所述第一信号处理单元，以处理存储的所述第一多媒体数据。
而且，所述控制单元可比较添加到存储于所述存储单元的第一多媒体数据的第一时间码和添加到通过所述第二接收单元接收的第二多媒体数据的第二时间码，从而判断是否接收到将与存储的所述第一多媒体数据进行同步的第二多媒体数据。
并且，当接收到用于使所述第一多媒体数据和所述第二多媒体数据同步而进行再现的用户指令时，所述控制单元可控制所述存储单元，以存储所述第一多媒体数据。
根据本发明一实施例的接收装置的接收方法，可包括如下步骤：通过广播网接收按照帧分别添加第一时间码的第一多媒体数据；通过IP网接收按照帧分别添加第二时间码的第二多媒体数据；对所述第一多媒体数据进行信号处理而生成第一视频帧；对所述第二多媒体数据进行信号处理而生成第二视频帧；比较所述第一多媒体数据的第一时间码和所述第二多媒体数据的第二时间码，算出具有一致的时间码的视频帧的时间戳信息之差；利用所述时间戳信息之差，从生成的所述第一视频帧和第二视频帧中分别读取将要相互同步的视频帧而进行渲染。
在此，生成所述第一视频帧的步骤可包括如下步骤：将接收的所述第一多媒体数据解复用；在第一缓冲器中存储由所述第一多媒体数据解复用的第一视频数据；将存储的所述第一视频数据解码而生成第一视频帧；将生成的所述第一视频帧存储在第二缓冲器中，生成所述第二视频帧的步骤可包括如下步骤：将接收的所述第二多媒体数据解复用；在第三缓冲器中存储由所述第二多媒体数据解复用的第二视频数据；将存储的所述第二视频数据解码而生成第二视频帧；将生成的所述第二视频帧存储在第四缓冲器。
而且，所述接收装置的接收方法还可以包括步骤：利用所述时间戳信息之差补偿存储于所述第一缓冲器和所述第三缓冲器的第一视频数据和第二视频数据中的一个数据的时间戳信息。
并且，还可以包括存储通过所述第一接收单元接收的第一多媒体数据的步骤，且在生成所述第一视频帧的步骤中，当接收到将与存储的所述第一多媒体数据进行同步的第二多媒体数据时，对存储的所述第一多媒体数据进行信号处理。
而且，生成所述第一视频帧的步骤中，可比较添加到存储的所述第一多媒体数据的第一时间码和添加到接收的所述第二多媒体数据的第二时间码，从而判断是否接收到将与存储的所述第一多媒体数据进行同步的第二多媒体数据。
另外，所述存储步骤中，当接收到用于使所述第一多媒体数据和所述第二多媒体数据同步而进行再现的用户指令时，可存储所述第一多媒体数据。
技术效果
根据如上的本发明的多样的实施例，利用现有广播设备而通过相互不同的路径收发不同的数据，据此能够克服传送带宽的限制而给用户提供新内容。
而且，在通过相互不同的路径提供多个流时，可有效地使各个多媒体数据同步，据此可执行多个多媒体数据之间的经同步的再现。
附图说明
图1为表示根据本发明一实施例的多媒体数据收发系统的图。
图2为表示根据本发明一实施例的多媒体数据收发系统的组成的方框图。
图3为表示根据本发明一实施例的接收装置的具体组成的方框图。
图4为表示根据本发明一实施例而添加时间码和时间戳的流的示例的图。
图5为用于说明根据本发明一实施例的第一信号处理单元和第二信号处理单元的具体组成的方框图。
图6为示出根据本发明另一实施例的接收装置的组成的方框图。
图7为用于说明根据本发明一实施例而延迟处理第一多媒体数据的方法的图。
图8为用于说明根据本发明另一实施例而延迟处理第一多媒体数据的方法的图。
图9为用于说明根据本发明一实施例的接收装置的接收方法的流程图。
具体实施方式
以下，参照附图对本发明进行详细的说明。
图1为表示根据本发明一实施例的多媒体数据收发系统的图。根据图1，多媒体数据收发系统1000包括发送装置100和接收装置200。
发送装置100对多媒体数据进行处理而通过相互不同的传送网传送彼此不同的信号。例如，如图1所示，发送装置100可通过第一传送网传送第一信号，可通过第二传送网传送第二信号。
第一信号和第二信号可以是构成一个内容的彼此不同的多媒体数据或画质相对较低的多媒体数据和画质相对较高的多媒体数据。例如，当多媒体数据为3D内容时，左眼图像和右眼图像中的其中一个图像可通过第一传送网被传送，另一个图像可通过第二传送网被传送。作为另一例，全高清(FHD，Full High Definition)画质的第一信号可通过第一传送网被传送，超高清(UHD，Ultra High Definition)画质的第二信号可通过第二传送网被传送。除此之外，第一信号和第二信号还可以是构成多视角内容的多媒体数据、2D图像和深度图像等。
在此，第一传送网可以是RF网（或者广播网），第二传送网可以是IP网（或者互联网）。但是，这仅仅是一实施例，第一传送网可以是IP网，第二传送网可以是RF网，或者第一传送网和第二传送网可以是相同形态的网络。
接收装置200分别接收发送装置100传送的第一信号和第二信号，执行针对多媒体数据的信号处理，并可以使经过信号处理的多媒体数据同步而再现内容。
在此，接收装置200可从服务器接收第二信号。即，接收装置200可以从发送装置100直接接收第二信号，但也可以通过专门的服务器接收发送装置100所生成的第二信号。
另外，通过第一传送网和第二传送网传送的信号中可包括用于同步的节目时钟基准（PCR,Program Clock Reference)、解码时间戳(DTS，DecodingTime Stamp)、显示时间戳(PTS，Presentation Time Stamp)等。
PCR表示在接收装置（机顶盒或TV等）与发送装置侧对准时间基准的基准时间信息。在接收装置中，将根据PCR对准系统时间时钟(STC，SystemTime Clock)的值。DTS表示告知数据的解码时间的时间戳，PTS表示告知用于图像和声音的同步的再现时间的时间戳。在本说明书中，将DTS和PTS命名为时间戳。
当相互不同的信号由彼此不同的发送装置100-1、100-2传送时，PCR可根据发送装置100-1、100-2的特性而不同。具体而言，这是因为相互不同的信号使用相互不同的编码器，而各个编码器的系统工作时钟信息不一致，且每个编码器可能具有不同的工作方式和延迟。因此，即便按照对准PCR的时间戳进行再现，也有可能无法实现同步。
在本系统中，接收装置200可利用时间码补偿时间戳而执行同步。
图2为表示根据本发明一实施例的多媒体数据收发系统的组成的方框图。根据图2，多媒体数据收发系统1000的发送装置100包括数据生成单元110、第一传送单元120以及第二传送单元130。
数据处理单元110处理多媒体数据而传送至第一传送单元120和第二传送单元130。具体而言，数据处理单元110处理构成多媒体内容的第一多媒体数据和第二多媒体数据而分别传送至第一传送单元120和第二传送单元130。在此，第一多媒体数据和第二多媒体数据中可包括用于同步的同步信息。
第一传送单元120通过第一传送网将第一多媒体数据传送至接收装置200。为此，第一传送单元120可以将第一多媒体数据变换为符合第一传送网的传送标准的形态而传送至接收装置200。
第二传送单元130通过第二传送网将第二多媒体数据传送给接收装置200。为此，第二传送单元130可以将第二多媒体数据变换为符合第二传送网的传送标准的形态。
另外，多媒体数据收发系统的接收装置200包括第一接收单元210、第二接收单元220以及数据处理单元230。
第一接收单元210通过第一传送网从发送装置100接收第一多媒体数据。第二接收单元210通过第二传送网从发送装置100接收第二多媒体数据。例如，第一接收单元210可通过广播网接收第一多媒体数据，第二接收单元210可通过IP网接收第二多媒体数据。
数据处理单元230处理第一传送数据和第二传送数据而构建多媒体内容。具体而言，数据处理单元230可对所接收的第一多媒体数据和第二多媒体数据进行信号处理而生成视频帧，并可利用包含于第一多媒体数据和第二多媒体数据中的同步信息而同步第一多媒体数据的视频帧和第二多媒体数据的视频帧并执行渲染。
图3为表示根据本发明一实施例的接收装置的具体组成的方框图。根据图3，接收装置200包括第一接收单元210、第二接收单元220、第一信号处理单元240、第二信号处理单元250、控制单元260、渲染单元270。
第一接收单元210接收第一多媒体数据。具体而言，第一接收单元210可通过广播网接收按照帧分别添加第一时间码的第一多媒体数据。
第二接收单元220接收第二多媒体数据。具体而言，第二接收单元220可通过广播网接收按照帧分别添加第二时间码的第二多媒体数据。
第一接收单元210和第二接收单元220的组成可根据其通信路径而实现为多种多样。例如，对于用来接收通过广播网传送的信号的模块来说，可包括天线、调谐器、解调单元、均衡单元之类的构成要素。而通过网络接收信号时，可包括网络通信模块。
另外，作为添加到各个多媒体数据的时间码，可使用电影与电视工程师协会(SMPTE，Society of Motion Picture and Television Engineers)时间码。在SMPTE12M中以“时：分：秒：帧”的形式表现时间码。SMPTE12M的时间码可在获取和编辑电影、视频、音频等原始数据时插入，可以起到用于时间轴上的修改和编辑的基准的作用。在相同的时间轴上获取的原始数据可具有相同的时间码值。
SMPTE时间码可根据记录方式被区分为纵向时间码(LTC，LongitudeTime Code)或场逆程时间码(VITC，Vertical Interval Time Code)。LTC沿着磁带的行进方向被记录。对于LTC来说，可包括时间信息(25比特)、用户信息(32比特)、同步信息（16比特）、保存区（4比特）、帧模式显示（2比特）而总共构成80比特的数据。VITC被记录于视频信号的场逆程期间内的两个水平线上。
SMPTE RP-188中定义了能够以辅助数据（ancillary data）传送LTC或VITC类型的时间码的接口标准，时间码可根据这样的接口标准被传送。
另外，第一多媒体数据和第二多媒体数据除了包括时间码之外，还可以包括用于同步的时间戳。具体而言，第一多媒体数据和第二多媒体数据可分别包括解码时间戳(DTS，Decoding Time Stamp)和显示时间戳(PTS，Presentation Time Stamp)。通常，时间戳可利用为用于同步的同步信息，但在基于不同网络的多媒体数据收发系统中，随着分别利用不同的编码器编码第一多媒体数据和第二多媒体数据，可能会发生系统时钟不一致的问题，据此可利用上述的时间码执行同步。对此的具体内容将在后面描述。
图4为表示根据本发明一实施例而添加时间码和时间戳的流（Stream）的示例的图。发送装置100能够以传送流的形态传送第一多媒体数据和第二多媒体数据。
具体而言，发送装置100可在通过分组化基本码流(PES，PacketizedElementary Stream)打包器将构成多媒体数据的视频基本码流(ES，ElementaryStream)、音频ES以及附加数据ES进行分组之后进行复用而生成传送流。在此，如图4所示，各个PES头中可包括PTS和DTS信息，ES头中可包括时间码信息。尤其，时间码信息可包含于视频ES头、音频ES头、附加数据ES头中的其中一个之中。
第一信号处理单元240对通过第一接收单元210接收的第一多媒体数据进行信号处理而生成视频帧。第二信号处理单元250对通过第二接收单元220接收的第二多媒体数据进行信号处理而生成视频帧。对于第一信号处理单元240和第二信号处理单元250将参照图5具体进行说明。
图5为用于说明根据本发明一实施例的第一信号处理单元和第二信号处理单元的具体组成的方框图。根据图5，第一信号处理单元240包括第一解复用器241、第一缓冲器242、第一解码器243、第二缓冲器244。
第一解复用器241从第一接收单元210接收第一多媒体数据而进行解复用。具体而言，第一解复用器241接收第一多媒体数据而进行解复用，从而可以将其分离为第一视频数据、第一音频数据以及第一附加数据。
第一缓冲器242存储从第一多媒体数据解复用的第一视频数据。具体而言，第一缓冲器242可依序存储从第一多媒体数据解复用的第一视频数据。
第一解码器243可解码存储于第一缓冲器242的第一视频数据而生成第一视频帧。具体而言，第一解码器242执行与发送装置100中的对第一视频数据进行编码的编码器（未图示）相反的过程，可在第一视频数据的DTS和系统时钟一致的瞬间对第一视频数据进行解码。尤其，在发送装置100中对第一视频数据进行编码的编码器（未图示），为了与不支持通过不同网络的数据接收的现有接收装置的兼容，可对第一视频数据执行MPEG-2编码，据此接收装置200的第一解码器242可对第一视频数据执行MPEG-2解码。第一视频数据的图像格式并不局限于此，第一视频数据还可以根据H.264、HEVC等当前可利用的图像格式及将来被开发出来而可适用于本发明的多种多样的图像格式而被编码和解码。
第二缓冲器244存储通过第一解码器243生成的第一视频帧。具体而言，第二缓冲器244可依序存储按照第一视频数据被第一解码器243解码的顺序生成的视频帧。
另外，根据图5，第二信号处理单元250包括第二解复用器251、第三缓冲器252、第二解码器253、第四缓冲器254。
第二解复用器251从第二接收单元220接收第二多媒体数据而进行解复用。具体而言，第二解复用器251接收第二多媒体数据而进行解复用，从而可以将其分离为第二视频数据、第二音频数据以及第二附加数据。
第三缓冲器252存储从第二多媒体数据解复用的第二视频数据。具体而言，第二缓冲器252可依序存储从第二多媒体数据解复用的第二视频数据。
第二解码器253可解码存储于第三缓冲器252的第二视频数据而生成第二视频帧。具体而言，第二解码器252执行与发送装置100中的对第二视频数据进行编码的编码器（未图示）相反的过程，可在第二视频数据的DTS和系统时钟一致的瞬间对第二视频数据进行解码。尤其，发送装置100中的对第二视频数据进行编码的编码器（未图示），可对第二视频数据执行H.264编码，据此接收装置200的第二解码器252可对第二视频数据执行H.264解码。第二视频数据的图像格式并不局限于此，第二视频数据还可以根据HEVC等当前可利用的图像格式及将来被开发出来而可适用于本发明的多种多样的图像格式而被编码和解码。
第四缓冲器254存储通过第二解码器253生成的第二视频帧。具体而言，第四缓冲器254可依序存储按照第二视频数据被第二解码器253解码的顺序生成的视频帧。
另外，第一信号处理单元240和第二信号处理单元250可进一步包括用于对解复用的视频数据、音频数据以及附加数据进行解分组化的解分组化单元、用于处理被解分组化的音频数据和附加数据的缓冲器（未图示）、解码器（未图示）等构成要素，而被解码的音频数据和附加数据可与第一视频帧和第二视频帧同步或渲染而输出。但是，这与本发明没有直接的关系，因此省略其具体的操作。
控制单元260可控制接收装置260的全部的操作。具体而言，控制单元260分别控制第一接收单元210、第二接收单元220、第一信号处理单元240、第二信号处理单元250以及渲染单元270，从而可使接收装置260接收第一多媒体数据和第二多媒体数据而进行处理。
而且，控制单元260可从解复用的第一多媒体数据和第二多媒体数据之中分别检测出关于时间码和时间戳的信息。如参照图3说明的那样，时间码可被插入于ES头，时间戳可被插入于PES头。据此，控制单元260可以在第一多媒体数据和第二多媒体数据解复用之后检测出时间码和时间戳。更具体而言，控制单元260可从将多媒体数据解复用而生成的PES头中检测出时间戳，并可从将PES通过解分组化单元（未图示）解分组化而生成的ES的头中检测出时间码。
而且，在多媒体数据被解复用和解分组化之后，控制单元260可在任何时间检测出时间码。即，控制单元260可从被解复用而存储于缓冲器242、252的视频数据中检测出时间码，或者还可以从通过解码器243、253的解码过程中检测出时间码。而且，还可以从被解码而存储于缓冲器244、254的数据中检测出时间码。
并且，控制单元260可以算出比较第一多媒体数据的第一时间码和第二多媒体数据的第二时间码而具有一致的时间码的视频帧的时间戳信息的差。
例如，当具有相同的时间码的第一视频帧和第二视频帧中，第一视频帧的PTS(PTS_1)为115，第二视频帧的PTS(PTS_2)为100时，两个帧的PTS之差可以是15。这对于DTS也是一样的。
控制单元260通过计算所算出的时间戳信息的差而补偿时间戳，由此可使第一视频数据（或第一视频帧）和第二视频数据（或者第二视频帧）同步。例如，当PTS_1-PTS_2=15时，可对PTS进行补偿，以使第一视频帧相对于具有相同时间码的第二视频帧延迟输出15帧。
在此，控制单元260可利用算出的时间戳信息的差而补偿存储于第一缓冲器242和第三缓冲器252中的第一视频数据和第二视频数据中的一个数据的DTS，从而可使由解码器243、253解码之前的视频数据同步。
而且，控制单元260利用算出的时间戳信息的差而在第一解码器243和第二解码器253的解码过程中补偿第一视频数据和第二视频数据（或者，第一视频帧和第二视频帧）的DTS（或PTS），由此可使视频数据实现同步。
而且，控制单元260利用算出的时间戳信息的差而补偿存储于第二缓冲器244和第四缓冲器254的第一视频帧和第二视频帧中的一个帧的PTS，由此在输入到渲染单元270之前可使视频帧实现同步。
渲染单元270可利用第一视频帧和第二视频帧执行渲染。具体而言，可以在第一视频帧和第二视频帧的PTS与系统时钟一致的瞬间渲染第一视频帧和第二视频帧而输出至显示器画面。
另外，渲染单元270可利用由控制单元260算出的时间戳信息的差，读取存储于第二缓冲器244的第一视频帧和存储于第四缓冲器254的第二视频帧中需要同步的图像帧而执行渲染。
另外，在上述实施例中，说明了时间码被插入到传送流的ES头而被传送至接收装置200，但接收装置200可以从专门的流接收针对时间码的信息而使第一视频数据和第二视频数据同步。具体而言，接收装置200可通过第一接收单元210或第二接收单元220而从服务器等外部设备接收包括第一多媒体数据和第二多媒体数据的包顺序和包含于各个包的视频帧的时间码和PTS信息的映射表。控制单元260可以比较包含于接收的映射表的第一多媒体数据和第二多媒体数据的时间码信息，从而比较具有一致的时间码的第一多媒体数据和第二多媒体数据的PTS，由此算出PTS差。
图6为表示根据本发明另一实施例的接收装置的组成的方框图。根据图6，接收装置200不仅可包括第一接收单元210、第二接收单元220、第一信号处理单元240、第二信号处理单元250、控制单元260以及渲染单元270，还可以进一步包括存储单元280。
当接收装置200通过分别不同的网络接收第一多媒体数据和第二多媒体数据时，根据网络特性，接收时间点将可能存在差异。尤其，当通过广播网传送第一多媒体数据，通过IP网传送第二多媒体数据时，根据IP网的特点，第二多媒体数据可延迟传送到接收装置。当第一多媒体数据和第二多媒体数据在相近的时间点被接收时，可以通过上述的时间戳补偿而进行同步，但当第一多媒体数据和第二多媒体数据的接收时间点相差较大时，仅通过PTS补偿则可能无法进行同步。即，当延迟接收到第一多媒体数据和第二多媒体数据中的其中一个时，无法找到具有相同时间码的视频帧，从而可能导致无法实现各个视频帧的同步。
据此，为了延迟第一多媒体数据和第二多媒体数据中首先接收到的多媒体数据，接收装置200可包括用于存储第一多媒体数据或第二多媒体数据的存储单元280。在此，存储单元280可由个人视频记录器(PVR，Personal VideoRecorder)之类的设备实现。以下，为了便于说明，以通过广播网接收第一多媒体数据，通过IP网接收第二多媒体数据为例进行说明。
在通过广播网接收第一多媒体数据，通过IP网接收第二多媒体数据时，存储单元280可存储通过第一接收单元210接收的第一多媒体数据。
当接收到将与存储到存储单元280的多媒体数据进行同步的第二多媒体数据时，控制单元260可控制第一信号处理单元240，以处理第一多媒体数据。在此，控制单元260比较添加到存储单元280中存储的第一多媒体数据的第一时间码和添加到通过第二接收单元220接收的第二多媒体数据的第二时间码，由此可以判断是否接收到将与存储到存储单元280的多媒体数据同步的第二多媒体数据。
具体而言，控制单元260从存储于存储单元280的第一多媒体数据检测出时间码。如图3中说明的那样，时间码可被插入到ES头，而为了从第一多媒体数据检测出时间码，需要将存储于存储单元280的第一多媒体数据解复用（更具体而言，可将通过第一多媒体数据的解复用生成的PES数据解分组化之后，检测出时间码）。为此，第一信号处理单元可利用第一解复用器241解复用第一多媒体数据。或者，第一信号处理单元240可配备专门的解复用器（未图示），以将存储于存储单元280的第一多媒体数据进行解复用。
而且，当通过第二接收单元220接收到第二多媒体数据时，控制单元260可从第二多媒体数据检测出时间码。控制单元260比较从第二多媒体数据检测出的时间码和从存储于存储单元280的第一多媒体数据检测出的时间码，当存在一致的时间码时，可判断为已接收到将与存储于存储单元280的第一多媒体数据同步的第二多媒体数据。
另外，控制单元260当判断为已接收到将与第一多媒体数据同步的第二多媒体数据时，可控制接收装置200的各个构成要素，以使第一多媒体数据和第二多媒体数据实现同步而再现。对此，已参照图5进行了说明，因此省略具体的说明。
另外，接收装置200的操作可根据第一多媒体数据存储到存储单元280的条件而变得不同。对此，将参照图7和图8详细说明。
图7为用于说明根据本发明一实施例而延迟处理第一多媒体数据的方法的图。具体而言，图7为用于说明如下情形的图：接收装置200仅处理第一多媒体数据而再现的过程中，当接收到用于同步化（synchronize）而再现第一多媒体数据和第二多媒体数据的用户指令时，从接收到用户指令的时间点开始存储所接收的第一多媒体数据。
在通过RF网接收到第一多媒体数据710而再现的过程中，当接收到用于同步化而再现第一多媒体数据和第二多媒体数据的用户指令时（例如，再现2D内容的过程中接收到用于再现3D内容的用户指令时），接收到用户指令的时间点以后接收到的第一多媒体数据（图7的第一多媒体数据710的第4个包之后）将被存储到存储单元280。
当接收到用户指令时，接收装置200可向提供第二多媒体数据的发送装置100或服务器请求第二多媒体数据而通过IP网接收第二多媒体数据720。此时，从接收到用户指令的时间点开始到第一多媒体数据和第二多媒体数据实现同步而再现的时间点为止，会存在一定的延迟。例如，从接收装置200请求第二多媒体数据开始到接收第1个包为止，可能会需要一定的时间，进一步地，从接收到第二多媒体数据的第1个包的时间点（t1）开始到接收将要与存储于存储单元280的第一多媒体数据实现同步而再现的第二多媒体数据的第4个包的时间点（t2）为止，可能会需要一定的时间。
据此，接收装置200可从接收到用户指令的时间点（t0）开始至接收到第二多媒体数据的第4个包的时间点（t2）为止，停止再现第一多媒体数据，而当接收到第二多媒体数据的第4个包时，可与第一多媒体数据同步而再现。
或者，接收装置200即便接收到用户指令也仅利用第一多媒体数据执行再现，而当接收到（t2）第二多媒体数据的第4个包时，从第一多媒体数据和第二多媒体数据的第4个包开始再执行同步而进行再现。
结果，即便通过IP流的第二多媒体数据的接收被延迟，接收装置200还可以在延迟存储于存储单元280的第一多媒体数据的处理之后，使第一多媒体数据和第二多媒体数据同步而进行再现。
图8为用于说明根据本发明另一实施例而延迟处理第一多媒体数据的方法的图。具体而言，图8是用于说明接收装置200从第一多媒体数据810最初再现的时间点开始在存储单元280中存储第一多媒体数据的情形（即，从第一多媒体数据的第一个包开始存储第一多媒体数据的情形）的图。
接收装置200通过RF网接收第一多媒体数据810而进行再现，并从第一多媒体数据的第1个包开始存储到存储单元280。之后，当接收到用于同步化第一多媒体数据和第二多媒体数据而进行再现的用户指令时，接收装置200可向发送装置100或服务器请求第二多媒体数据820，由此通过IP网接收。当接收到第二多媒体数据的第1个包时，接收装置200从存储于存储单元280的第一多媒体数据的包中找出将要与第二多媒体数据的第1个包同步而进行再现的第一多媒体数据的包（即，第一多媒体数据的第1个包）而同步之后进行输出。即，可以使第一多媒体数据和第二多媒体数据同步而从一开始就再现多媒体内容。
结果，即便通过IP流的第二多媒体数据的接收被延迟，接收装置200还可以在延迟存储于存储单元280的第一多媒体数据的处理之后，使第一多媒体数据和第二多媒体数据同步而进行再现。
图9为用于说明根据本发明一实施例的接收装置的接收方法的流程图。根据图9，通过广播网接收第一多媒体数据（S910），并通过IP网接收第二多媒体数据（S920）。然后，对第一多媒体数据进行信号处理而生成第一视频帧（S930）。生成第一视频帧的步骤可包括：解复用所接收的第一多媒体数据的步骤；将从第一多媒体数据解复用的第一视频数据存储到第一缓冲器的步骤；将存储的第一视频数据进行解码而生成第一视频帧的步骤；将第一视频帧存储到第二缓冲器的步骤。
然后，对第二多媒体数据进行信号处理而生成第二视频帧（S940）。生成第二视频帧的步骤可包括：解复用所接收的第二多媒体数据的步骤；将从第二多媒体数据解复用的第二视频帧存储到第三缓冲器的步骤；将存储的第二视频数据进行解码而生成第二视频帧的步骤；将第二视频帧存储到第四缓冲器的步骤。
然后，比较第一多媒体数据的第一时间码和第二多媒体数据的第二时间码，算出具有一致的时间码的视频帧的时间戳信息的差（S950）。
然后，利用时间戳信息的差而分别读取第一视频帧和第二视频帧中将要相互同步的视频帧而执行渲染（S960）。
另外，根据本发明一实施例的接收装置的接收方法还可以包括如下步骤：利用时间戳信息之差补偿存储于第一缓冲器和第三缓冲器的第一视频数据和第二视频数据中的一个数据的时间戳信息。
而且，还可以包括存储通过第一接收单元接收的第一多媒体数据的步骤。在此，生成第一视频帧的步骤中，当接收到将要与第一多媒体数据同步的第二多媒体数据时，可对第一多媒体数据进行信号处理。
而且，生成第一视频帧的步骤中，可比较添加于所存储的第一多媒体数据的第一时间码和添加于所接收的第二多媒体数据的第二时间码，从而判断是否接收到将与所存储的第一多媒体数据同步的第二多媒体数据。
而且，存储步骤中，当接收到用于使第一多媒体数据和第二多媒体数据同步而进行再现的用户指令时，可存储第一多媒体数据。
用于执行上述的根据本发明的多种实施例的方法的程序可被存储于多种类型的记录介质中使用。
具体而言，用于执行上述方法的代码可被存储在闪存、只读存储器、可擦写可编程只读存储器、电可擦写可编程只读存储器、硬盘、软盘、存储卡、USB存储器、CD-ROM之类的多种类型的非易失性记录介质之中。
以上，图示并说明了本发明的优选实施例，但本发明并不局限于上述的特定实施例，在不脱离权利要求书中请求的本发明的主旨的前提下可由本发明所属技术领域中具有普通知识的技术人员进行各种变更实施，而这样的变更实施并不能脱离本发明的技术思想或展望而单独地去理解。

Claims (12)

1.一种接收装置，包括：
第一接收单元，通过广播网接收按照帧分别添加第一时间码的第一多媒体数据；
第二接收单元，通过IP网接收按照帧分别添加第二时间码的第二多媒体数据；
第一信号处理单元，对所述第一多媒体数据进行信号处理而生成第一视频帧；
第二信号处理单元，对所述第二多媒体数据进行信号处理而生成第二视频帧；
控制单元，比较所述第一多媒体数据的第一时间码和所述第二多媒体数据的第二时间码，算出具有一致的时间码的视频帧的时间戳信息之差；
渲染单元，利用所述时间戳信息之差，从生成的所述第一视频帧和第二视频帧中分别读取将要相互同步的视频帧而进行渲染。
2.根据权利要求1所述的接收装置，其特征在于，所述第一信号处理单元包括：
第一解复用器，将接收的所述第一多媒体数据解复用；
第一缓冲器，存储由所述第一多媒体数据解复用的第一视频数据；
第一解码器，将存储于所述第一缓冲器的第一视频数据解码而生成第一视频帧；
第二缓冲器，存储生成的所述第一视频帧，
所述第二信号处理单元包括：
第二解复用器，将接收的所述第二多媒体数据解复用；
第三缓冲器，存储由所述第二多媒体数据解复用的第二视频数据；
第二解码器，将存储于所述第三缓冲器的第二视频数据解码而生成第二视频帧；
第四缓冲器，存储生成的所述第二视频帧。
3.根据权利要求2所述的接收装置，其特征在于，所述控制单元利用所述时间戳信息之差补偿存储于所述第一缓冲器和所述第三缓冲器的第一视频数据和第二视频数据中的一个数据的时间戳信息。
4.根据权利要求1所述的接收装置，其特征在于，还包括存储通过所述第一接收单元接收的第一多媒体数据的存储单元，且当接收到将与存储的所述第一多媒体数据进行同步的第二多媒体数据时，所述控制单元控制所述第一信号处理单元，以处理存储的所述第一多媒体数据。
5.根据权利要求4所述的接收装置，其特征在于，所述控制单元比较添加到存储于所述存储单元的第一多媒体数据的第一时间码和添加到通过所述第二接收单元接收的第二多媒体数据的第二时间码，从而判断是否接收到将与存储的所述第一多媒体数据进行同步的第二多媒体数据。
6.根据权利要求4所述的接收装置，其特征在于，当接收到用于使所述第一多媒体数据和所述第二多媒体数据同步而进行再现的用户指令时，所述控制单元控制所述存储单元，以存储所述第一多媒体数据。
7.一种接收装置的接收方法，包括如下步骤：
通过广播网接收按照帧分别添加第一时间码的第一多媒体数据；
通过IP网接收按照帧分别添加第二时间码的第二多媒体数据；
对所述第一多媒体数据进行信号处理而生成第一视频帧；
对所述第二多媒体数据进行信号处理而生成第二视频帧；
比较所述第一多媒体数据的第一时间码和所述第二多媒体数据的第二时间码，算出具有一致的时间码的视频帧的时间戳信息之差；
利用所述时间戳信息之差，从生成的所述第一视频帧和第二视频帧中分别读取将要相互同步的视频帧而进行渲染。
8.根据权利要求7所述的接收方法，其特征在于，生成所述第一视频帧的步骤包括如下步骤：
将接收的所述第一多媒体数据解复用；
在第一缓冲器中存储由所述第一多媒体数据解复用的第一视频数据；
将存储的所述第一视频数据解码而生成第一视频帧；
将生成的所述第一视频帧存储在第二缓冲器中，
生成所述第二视频帧的步骤包括如下步骤：
将接收的所述第二多媒体数据解复用；
在第三缓冲器中存储由所述第二多媒体数据解复用的第二视频数据；
将存储的所述第二视频数据解码而生成第二视频帧；
将生成的所述第二视频帧存储在第四缓冲器。
9.根据权利要求8所述的接收方法，其特征在于，还包括步骤：利用所述时间戳信息之差补偿存储于所述第一缓冲器和所述第三缓冲器的第一视频数据和第二视频数据中的一个数据的时间戳信息。
10.根据权利要求7所述的接收方法，其特征在于，还包括存储通过所述第一接收单元接收的第一多媒体数据的步骤，且在生成所述第一视频帧的步骤中，当接收到将与存储的所述第一多媒体数据进行同步的第二多媒体数据时，对存储的所述第一多媒体数据进行信号处理。
11.根据权利要求10所述的接收方法，其特征在于，生成所述第一视频帧的步骤中，比较添加到存储的所述第一多媒体数据的第一时间码和添加到接收的所述第二多媒体数据的第二时间码，从而判断是否接收到将与存储的所述第一多媒体数据进行同步的第二多媒体数据。
12.根据权利要求10所述的接收方法，其特征在于，所述存储步骤中，当接收到用于使所述第一多媒体数据和所述第二多媒体数据同步而进行再现的用户指令时，存储所述第一多媒体数据。
CN201280039426.7A 2011-08-12 2012-08-13 接收装置及其接收方法 Expired - Fee Related CN103718563B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161522906P 2011-08-12 2011-08-12
US61/522,906 2011-08-12
KR1020120088488A KR101967818B1 (ko) 2011-08-12 2012-08-13 수신 장치 및 그 수신 방법
KR10-2012-0088488 2012-08-13
PCT/KR2012/006455 WO2013025032A1 (ko) 2011-08-12 2012-08-13 수신 장치 및 그 수신 방법

Publications (2)

Publication Number Publication Date
CN103718563A true CN103718563A (zh) 2014-04-09
CN103718563B CN103718563B (zh) 2019-03-15

Family

ID=47897156

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280039426.7A Expired - Fee Related CN103718563B (zh) 2011-08-12 2012-08-13 接收装置及其接收方法

Country Status (7)

Country Link
US (1) US9762774B2 (zh)
EP (1) EP2728858B1 (zh)
JP (1) JP6184408B2 (zh)
KR (1) KR101967818B1 (zh)
CN (1) CN103718563B (zh)
BR (1) BR112014003343B1 (zh)
WO (1) WO2013025032A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106713963A (zh) * 2016-11-28 2017-05-24 天脉聚源（北京）科技有限公司 一种对齐视频流的播放进度的方法及装置
CN106937137A (zh) * 2015-12-30 2017-07-07 惠州市伟乐科技股份有限公司 一种多通道数字音频编码音视频同步的方法
CN109547768A (zh) * 2018-11-05 2019-03-29 万维科研有限公司 生成三维视频精准深度图的方法
TWI825928B (zh) * 2022-08-18 2023-12-11 瑞昱半導體股份有限公司 訊號補償裝置以及用來動態地補償訊號的方法

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9653117B2 (en) * 2013-08-29 2017-05-16 Avid Technology, Inc. Interconnected multimedia systems with synchronized playback of media streams
CN103780943B (zh) * 2014-01-24 2017-04-12 华为技术有限公司 一种音轨切换的方法、设备及系统
KR20150114854A (ko) * 2014-04-02 2015-10-13 한국전자통신연구원 하이브리드 방송 송수신 방법 및 장치
WO2016136404A1 (ja) * 2015-02-27 2016-09-01 富士フイルム株式会社 ガス分離膜、ガス分離モジュール、ガス分離装置、及びガス分離方法
JP6822407B2 (ja) * 2015-09-01 2021-01-27 ソニー株式会社 受信装置、データ処理方法、及び、プログラム
CN106550248B (zh) * 2015-09-18 2020-05-01 中国移动通信集团公司 一种音视频同步的方法和设备
KR102553258B1 (ko) * 2015-09-18 2023-07-07 삼성전자 주식회사 멀티미디어 컨텐츠를 플레이백하기 위한 장치 및 방법
US10764473B2 (en) * 2016-01-14 2020-09-01 Disney Enterprises, Inc. Automatically synchronizing multiple real-time video sources
US11259082B2 (en) * 2019-10-22 2022-02-22 Synamedia Limited Systems and methods for data processing, storage, and retrieval from a server
WO2021221194A1 (ko) * 2020-04-28 2021-11-04 엘지전자 주식회사 신호 처리 장치 및 이를 구비하는 영상표시장치
KR20220111552A (ko) * 2021-02-02 2022-08-09 삼성전자주식회사 전자 장치 및 그 제어 방법

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020040478A1 (en) * 2000-10-03 2002-04-04 Tsutomu Ando Multimedia-data transmission system, apparatus and method
JP2004254149A (ja) * 2003-02-21 2004-09-09 Nippon Telegr & Teleph Corp <Ntt> データ伝送制御方法およびシステム
CN101151902A (zh) * 2005-04-28 2008-03-26 三星电子株式会社 在数字广播接收机中初始化解码器的装置和方法
WO2009020302A2 (en) * 2007-08-07 2009-02-12 Electronics And Telecommunications Research Institute System and method for digital multimedia broadcasting
CN101453662A (zh) * 2007-12-03 2009-06-10 华为技术有限公司 立体视频通信终端、系统及方法
CN101557474A (zh) * 2008-05-28 2009-10-14 北京同步科技有限公司 实现多路录制单元录制的视频文件时间点对齐的方法
WO2010053246A2 (en) * 2008-11-04 2010-05-14 Electronics And Telecommunications Research Institute Apparatus and method for synchronizing stereoscopic image, and apparatus and method for providing stereoscopic image based on the same
US20110304618A1 (en) * 2010-06-14 2011-12-15 Qualcomm Incorporated Calculating disparity for three-dimensional images

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6334219B1 (en) * 1994-09-26 2001-12-25 Adc Telecommunications Inc. Channel selection for a hybrid fiber coax network
KR20000015877A (ko) * 1996-06-04 2000-03-15 클라스 노린, 쿨트 헬스트룀 지정매체를통한액세스네트워크
US7241219B2 (en) * 1997-03-12 2007-07-10 Walker Digital, Llc Methods and apparatus for providing entertainment content at a gaming device
US6272132B1 (en) * 1998-06-11 2001-08-07 Synchrodyne Networks, Inc. Asynchronous packet switching with common time reference
US6414996B1 (en) * 1998-12-08 2002-07-02 Stmicroelectronics, Inc. System, method and apparatus for an instruction driven digital video processor
JP2002125203A (ja) 2000-10-12 2002-04-26 Mitsubishi Electric Corp メディア符号器及びメディア復号器
US20020089602A1 (en) * 2000-10-18 2002-07-11 Sullivan Gary J. Compressed timing indicators for media samples
US7346698B2 (en) * 2000-12-20 2008-03-18 G. W. Hannaway & Associates Webcasting method and system for time-based synchronization of multiple, independent media streams
CA2392812C (en) * 2001-07-09 2005-09-20 Sung-Oh Hwang Apparatus and method for symbol mapping tfci bits for a hard split mode in a cdma mobile communication system
US20040125762A1 (en) * 2001-08-17 2004-07-01 Amit Haller Device, system, method and computer readable medium for attaching to a device identifited by an access point name in a wide area network providing particular services
US7039000B2 (en) * 2001-11-16 2006-05-02 Mitsubishi Electric Research Laboratories, Inc. Timing synchronization for OFDM-based wireless networks
JP3741425B2 (ja) * 2002-01-29 2006-02-01 株式会社東芝 無線伝送装置
JP2004040455A (ja) 2002-07-03 2004-02-05 Nippon Television Network Corp 伝送再生方法、伝送方法、及びそのシステム
JP2004102647A (ja) * 2002-09-10 2004-04-02 Sony Corp 記録装置および方法、再生装置および方法、記録媒体、並びにプログラム
US20070022437A1 (en) 2005-07-19 2007-01-25 David Gerken Methods and apparatus for providing content and services coordinated with television content
JP4440863B2 (ja) * 2005-09-13 2010-03-24 パナソニック株式会社 符号化復号化装置、符号化復号化方法、符号化復号化集積回路、および符号化復号化プログラム
US9153125B2 (en) * 2005-12-20 2015-10-06 Savant Systems, Llc Programmable multimedia controller with programmable services
KR100738930B1 (ko) * 2006-01-06 2007-07-12 에스케이 텔레콤주식회사 이동통신망과 위성 디지털 멀티미디어 방송망의 다중전송을 이용한 위성 디지털 멀티미디어 방송의 화질 개선방법 및 시스템, 그를 위한 장치
JP4994698B2 (ja) * 2006-04-13 2012-08-08 キヤノン株式会社 情報伝送装置及び情報伝送方法
US8379735B2 (en) 2006-05-15 2013-02-19 Microsoft Corporation Automatic video glitch detection and audio-video synchronization assessment
TW200835303A (en) * 2006-09-07 2008-08-16 Avocent Huntsville Corp Point-to-multipoint high definition multimedia transmitter and receiver
US7782851B2 (en) * 2007-06-26 2010-08-24 At&T Intellectual Property I, L.P. System and method of detecting lost video data packets
KR20090003809A (ko) * 2007-07-03 2009-01-12 삼성전자주식회사 복수개의 망을 이용한 방송 정보 재생 방법 및 장치
KR101132043B1 (ko) * 2007-08-27 2012-04-02 후지쯔 가부시끼가이샤 디코더 장치 및 디코드 방법
JP2009253538A (ja) * 2008-04-03 2009-10-29 Sharp Corp 情報処理装置、情報処理方法、及び情報処理プログラム、並びにこのプログラムを記録したコンピュータ読取可能な記録媒体
JP5077028B2 (ja) * 2008-04-07 2012-11-21 第一精工株式会社 コネクタ装置
EP2141689A1 (en) * 2008-07-04 2010-01-06 Koninklijke KPN N.V. Generating a stream comprising interactive content
US8549575B2 (en) * 2008-04-30 2013-10-01 At&T Intellectual Property I, L.P. Dynamic synchronization of media streams within a social network
US8583067B2 (en) * 2008-09-24 2013-11-12 Honeywell International Inc. Apparatus and method for improved wireless communication reliability and performance in process control systems
US9906757B2 (en) * 2009-02-26 2018-02-27 Akamai Technologies, Inc. Deterministically skewing synchronized events for content streams
KR101012980B1 (ko) * 2009-03-16 2011-02-10 한국방송공사 계층적 방송 장치 및 방법
US20110052136A1 (en) * 2009-09-01 2011-03-03 Video Clarity, Inc. Pattern-based monitoring of media synchronization
ATE540529T1 (de) * 2009-11-03 2012-01-15 Tektronix Int Sales Gmbh Verfahren und vorrichtung zum messen der verzögerung innerhalb eines komprimierten digitalen stroms
CA2684678A1 (en) * 2009-11-03 2011-05-03 Research In Motion Limited System and method for dynamic post-processing on a mobile device
CN101854533B (zh) * 2010-06-10 2012-05-23 华为技术有限公司 频道切换方法、装置及系统
US20120218288A1 (en) * 2011-02-24 2012-08-30 Cheng Bruce C H Interactive program system

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020040478A1 (en) * 2000-10-03 2002-04-04 Tsutomu Ando Multimedia-data transmission system, apparatus and method
JP2004254149A (ja) * 2003-02-21 2004-09-09 Nippon Telegr & Teleph Corp <Ntt> データ伝送制御方法およびシステム
CN101151902A (zh) * 2005-04-28 2008-03-26 三星电子株式会社 在数字广播接收机中初始化解码器的装置和方法
WO2009020302A2 (en) * 2007-08-07 2009-02-12 Electronics And Telecommunications Research Institute System and method for digital multimedia broadcasting
WO2009020302A3 (en) * 2007-08-07 2009-04-02 Korea Electronics Telecomm System and method for digital multimedia broadcasting
CN101453662A (zh) * 2007-12-03 2009-06-10 华为技术有限公司 立体视频通信终端、系统及方法
CN101557474A (zh) * 2008-05-28 2009-10-14 北京同步科技有限公司 实现多路录制单元录制的视频文件时间点对齐的方法
WO2010053246A2 (en) * 2008-11-04 2010-05-14 Electronics And Telecommunications Research Institute Apparatus and method for synchronizing stereoscopic image, and apparatus and method for providing stereoscopic image based on the same
US20110304618A1 (en) * 2010-06-14 2011-12-15 Qualcomm Incorporated Calculating disparity for three-dimensional images

Non-Patent Citations (6)

* Cited by examiner, † Cited by third party
Title
E-NIAN LI等著 史元春等译: "《多媒体技术教程》", 31 January 2007 *
储钟圻: "《现代通信新技术》", 28 February 1998 *
姜秀华: "《现代电视原理》", 30 June 2008 *
张宏伟: "《数字电视技术》", 31 January 2008 *
杨义先等: "《2006通信理论与技术新进展 第十一届全国青年通信学术会议论文集》", 31 July 2006 *
陈善移: "《数字视频测量应用技术（基础编）》", 31 March 2008 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106937137A (zh) * 2015-12-30 2017-07-07 惠州市伟乐科技股份有限公司 一种多通道数字音频编码音视频同步的方法
CN106937137B (zh) * 2015-12-30 2020-07-14 惠州市伟乐科技股份有限公司 一种多通道数字音频编码音视频同步的方法
CN106713963A (zh) * 2016-11-28 2017-05-24 天脉聚源（北京）科技有限公司 一种对齐视频流的播放进度的方法及装置
CN106713963B (zh) * 2016-11-28 2019-07-26 天脉聚源（北京）科技有限公司 一种对齐视频流的播放进度的方法及装置
CN109547768A (zh) * 2018-11-05 2019-03-29 万维科研有限公司 生成三维视频精准深度图的方法
TWI825928B (zh) * 2022-08-18 2023-12-11 瑞昱半導體股份有限公司 訊號補償裝置以及用來動態地補償訊號的方法

Also Published As

Publication number Publication date
BR112014003343A2 (pt) 2017-03-01
EP2728858B1 (en) 2018-05-23
JP6184408B2 (ja) 2017-08-23
US9762774B2 (en) 2017-09-12
EP2728858A4 (en) 2014-12-31
KR20130018207A (ko) 2013-02-20
CN103718563B (zh) 2019-03-15
US20140176795A1 (en) 2014-06-26
EP2728858A1 (en) 2014-05-07
KR101967818B1 (ko) 2019-04-10
JP2014527353A (ja) 2014-10-09
WO2013025032A1 (ko) 2013-02-21
BR112014003343B1 (pt) 2022-06-21

Similar Documents

Publication Publication Date Title
CN103718563A (zh) 接收装置及其接收方法
US9628771B2 (en) Transmitter and receiver for transmitting and receiving multimedia content, and reproduction method therefor
KR100972792B1 (ko) 스테레오스코픽 영상을 동기화하는 장치 및 방법과 이를 이용한 스테레오스코픽 영상 제공 장치 및 방법
JP5977760B2 (ja) 複数のリアルタイム伝送ストリームを受信する受信装置と、その送信装置およびマルチメディアコンテンツ再生方法
US6404818B1 (en) Video transmission device and its method
US20120293618A1 (en) Image data transmission apparatus, image data transmission method and image data reception apparatus
US20130276046A1 (en) Receiving apparatus for receiving a plurality of signals through different paths and method for processing signals thereof
KR100619007B1 (ko) 비디오 트랜스포트 스트림 동기화 제어 장치 및 방법
US20130271657A1 (en) Receiving apparatus for providing hybrid service, and hybrid service providing method thereof
US20130271568A1 (en) Transmitting system and receiving apparatus for providing hybrid service, and service providing method thereof
US20130209063A1 (en) Digital receiver and content processing method in digital receiver
JP2006345223A (ja) 記録出力装置及び記録出力方法
US7894704B2 (en) Reproducing apparatus and method, and recording medium
KR20140038482A (ko) 송신장치, 수신재생장치, 송신방법 및 수신재생방법
WO2005055230A1 (en) Method and apparatus for transcoding digital audio/video streams
EP3280147A1 (en) Method and apparatus for transmitting and receiving broadcast signal
KR102016674B1 (ko) 하이브리드 서비스를 제공하는 수신 장치 및 하이브리드 서비스 제공 방법
CN108702533B (zh) 发送装置、发送方法、接收装置和接收方法
KR20140053777A (ko) 이종 비디오 코덱을 사용하는 영상 시스템에서의 디코더 버퍼링 방법 및 그 장치
JP2007201797A (ja) 伝送システム及び映像出力方法
KR20170068946A (ko) 방송 수신 장치 및 방송 수신 장치의 제어 방법
JP2005286742A (ja) Ａｖ装置、ａｖシステムおよびａｖ信号転送方法
KR20130116154A (ko) 서로 다른 경로를 통해 복수의 신호를 수신하는 수신 장치 및 그 신호 처리 방법
JP2009100114A (ja) データ記録再生方法
KR20130115975A (ko) 하이브리드 서비스를 제공하기 위한 송신 시스템과 수신 장치 및 그 서비스 제공 방법들

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190315

CF01 Termination of patent right due to non-payment of annual fee