CN104303512B - 数据流处理装置及数据流处理方法 - Google Patents

数据流处理装置及数据流处理方法 Download PDF

Info

Publication number
CN104303512B
CN104303512B CN201380004730.2A CN201380004730A CN104303512B CN 104303512 B CN104303512 B CN 104303512B CN 201380004730 A CN201380004730 A CN 201380004730A CN 104303512 B CN104303512 B CN 104303512B
Authority
CN
China
Prior art keywords
data
buffer
data stream
stream
multimedia
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380004730.2A
Other languages
English (en)
Other versions
CN104303512A (zh
Inventor
惠光俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Singapore Pte Ltd
Original Assignee
MediaTek Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Singapore Pte Ltd filed Critical MediaTek Singapore Pte Ltd
Publication of CN104303512A publication Critical patent/CN104303512A/zh
Application granted granted Critical
Publication of CN104303512B publication Critical patent/CN104303512B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341—Demultiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks

Abstract

本发明提供一种数据流处理装置及数据流处理方法。该数据流处理装置包括：解复用器、数据处理器和反向缓冲器。解复用器，存取并解复用多媒体数据流，以及输出第一数据流。多媒体数据流包括多个数据单元。数据处理器，接收并处理第一数据流。反向缓冲器，存储多媒体数据流的第一部分。其中多媒体数据流的第一部分的多个数据单元已由解复用器存取，但未被数据处理器处理。若使用者请求改变多媒体数据流的重放内容，存储于反向缓冲器中的多个数据单元被重传送至解复用器以用于滤波出与使用者请求相应的第二数据流。

Description

数据流处理装置及数据流处理方法
技术领域
本发明是有关于一种数据流处理装置及数据流处理方法，特别是有关于一种具有缓冲装置的数据流处理装置及数据流处理方法。
背景技术
近年来多媒体系统已广泛应用于娱乐技术。使用者利用电子设备接收，解码并播放已接收的多媒体数据。多媒体数据可能包含不同的媒体内容，如视频内容，音频内容，图文电视(teletext)，字幕(caption)或其他。基本的数据流是对于的编码视频，编码音频，编码图形或其它可以由假想的解码器正确地解码的存取单元(access units)的一个序列的通用术语。基本的数据流被划分为数据包以形成基本封包流(packetized elementarystream,PES)。数据包具有报头(header)，数据包内容(例如净荷(payload))和描述符(descriptor)。信息封包(packetization)为多媒体数据流穿过不同网络提供了保护并增加了多媒体数据流穿过不同网络的灵活性(flexibility)。
发明内容
依据本发明一实施方式，提供一种数据流处理装置。该数据流处理装置包括：缓冲装置、解复用器、数据处理器和控制器。缓冲装置，缓冲多媒体数据流。多媒体数据流包括多个数据单元。解复用器，存取在缓冲装置中的多媒体数据流的多个数据单元，产生与多媒体数据流的多个数据单元相应的索引数据，并滤波多媒体数据流的多个数据单元以输出第一输出数据流。数据处理器，接收并处理第一输出数据流。控制器，接收改变重放内容的请求，产生控制信号，并依据索引数据确定解复用指针以及解码指针，以便依据解复用指针和解码指针确定缓冲装置的反向缓冲器。依据控制信号，解复用器重存取和滤波存储于反向缓冲器中的多个数据单元以输出第二输出数据流。以及数据处理器接收并处理第二输出数据流。
依据本发明另一实施方式，提供一种数据流处理装置。该数据流处理装置包括：解复用器、数据处理器和反向缓冲器。解复用器，存取并解复用多媒体数据流，以及输出第一数据流。多媒体数据流包括多个数据单元。数据处理器，接收并处理第一数据流。反向缓冲器，存储多媒体数据流的第一部分，其中多媒体数据流的第一部分的多个数据单元由解复用器存取，但未被数据处理器处理。若使用者请求改变多媒体数据流的重放内容，存储于反向缓冲器中的多个数据单元被重传送至解复用器以用于滤波出与使用者请求相应的第二数据流。
依据本发明又一实施方式，提供一种数据流处理方法，该数据处理方法包括：(a)在缓冲装置中缓冲多媒体数据流，多媒体数据流包括多个数据单元；(b)存取在缓冲装置中的多媒体数据流的多个数据单元，以及产生与多媒体数据流的多个数据单元相应的索引数据；(c)确定是否接收到改变重放内容的请求；(d)若接收到改变重放内容的请求，则依据索引数据确定解复用指针和解码指针，以便依据解复用指针和解码指针确定缓冲装置的反向缓冲器；以及(e)重存取存储于缓冲装置的反向缓冲器中的多个数据单元。
附图说明
图1为依据本发明实施方式的用于平稳地传送各种数据流至处理装置的数据流缓冲装置的示意图。
图2为依据本发明实施方式的数据流处理装置的示意图。
图3为依据本发明实施方式的在多媒体处理装置中实施的数据流处理装置的示意图。
图4为依据本发明实施方式的缓冲装置的示意图。
图5为依据本发明实施方式的解复用器的示意图。
图6为依据本发明实施方式的数据流处理方法的流程图。
具体实施方式
以下描述为本发明的较佳的实施方式。此较佳实施方式仅用于解释本发明的基本原理，而并非以此作为本发明的限制。本发明的保护范围应当通过参考权利要求的涵盖范围来界定。
图1为依据本发明实施方式的用于平稳地(smoothly)传送各种数据流至处理装置的数据流缓冲装置的示意图。数据流缓冲装置包括数据缓冲装置11，解复用器12和数据处理器14。数据缓冲装置11存储并缓冲各种多媒体数据流，例如视频数据流，音频数据流，或信息数据流。数据缓冲装置11包括反向缓冲器(backward buffer)13。多媒体数据流中的每一个包括多个数据单元。数据单元可以是数据段(chunk)，包(pack)，数据包(packet)或数据块(block)。解复用器12用于解复用存储于数据缓冲装置11中的已缓冲的多媒体数据流。依据控制信号，解复用器12存取来自数据缓冲装置11的已缓冲的多媒体数据流(即多个数据单元)，解复用器12一个数据单元接着一个数据单元地滤波接收的多媒体数据流并且传送输出数据流至数据处理器14。输出数据流可以包括完整(complete)的输出数据单元或输出数据比特，其中输出数据比特是完整的数据单元的一部分。数据处理器14接收并处理输出数据流。
依据本发明的实施方式，解复用器12接收并滤波来自数据缓冲装置11的已缓冲的多媒体数据流以及依据数据处理器14的请求输出数据流。举例来说，多媒体数据流包括视频数据流、具有2.1声道(channel)声音格式的第一音频数据流、以及具有5.1声道声音格式的第二音频数据流。在开始时，数据处理器14仅需要视频数据流以及第一音频数据流，因此，解复用器12滤波多媒体数据流并输出视频数据流和第一音频数据流至数据处理器14。一旦使用者通过远程控制(remote control)请求音频改变以选择5.1声道声音格式(图1未绘示)，解复用器12将会接收控制信号。然后解复用器12依据控制信号滤波多媒体数据流并且解复用器12输出视频数据流和第二音频数据流至数据处理器14以用于进一步处理。依据本发明的实施方式，输出数据流可以进一步包括一些其他的数据流，例如包括在美国的数字电视国家标准(ATSC)中定义的字幕信息的节目和系统信息协议(Program and SystemInformation Protocol,PSIP)数据包。然而，为求简洁，关于PSIP数据包的细节将不会在下文中描述。
当解复用器12处理多媒体数据流的数据单元(例如，数据包)时，解复用器12产生并添加索引数据(index data)至数据单元(例如，数据包)，例如添加索引数据至数据流的保留域(reserved field)中。索引数据可以包括时间标记(time stamp)，数据流逻辑偏移(stream logic offset)以及缓冲地址信息。时间标记代表与数据单元解码时间(decodingtime,DTS)及/或数据单元呈现时间(presenting time,PTS)相应的时间值。数据流逻辑偏移代表基于多媒体数据流的第一数据包的偏移值。缓冲地址信息代表数据缓冲装置11的用于存储数据的缓冲地址。
数据缓冲装置11可以用环形缓冲器结构来实现。依据本发明的实施方式，用于存储多媒体数据流中由数据处理器14已处理的数据单元(例如，数据包)的数据缓冲装置11的缓冲区域可以被设置为未被占用(free)或可用(available)，以便能够存储接收的新的数据单元。因此，解复用器12已处理的多媒体数据流的数据单元可以在一段时间内保持在数据缓冲装置11中。数据缓冲装置11包括由解复用指针和解码指针确定的反向缓冲器。解复用指针指向数据缓冲装置11存储第一数据单元的第一缓冲地址，即解复用指针指向解复用器12当前处理的第一数据单元。第一数据单元当前由解复用器12存取但未被数据处理器14处理。用于存储被解复用器12已处理的数据单元的缓冲区域被确定为反向缓冲器。解码指针指向数据缓冲装置11存储多媒体数据流的第二数据单元的第二缓冲地址，即解码指针指向数据处理器14当前处理的第二数据单元。利用索引数据,数据流缓冲装置可以分别从第一数据单元和第二数据单元中的索引数据计算出解复用指针和解码指针。因此，反向缓冲器13的位置和尺寸随时间动态改变并且可以依据解码指针和解复用指针确定。
由于数据单元可以在一段时间内保存在数据缓冲装置11中，当使用者改变音频设定以播放不同的音频数据流(例如具有5.1声道声音格式的音频数据流)时，解复用器12可以依据控制信号重存取(re-access)存储于反向缓冲器13中的数据以使得视频数据流和第二音频数据流(即具有5.1声道声音格式的音频数据流)可以被滤波出并输出至数据处理器14。使用这种重存取操作，使用者请求音频变化的操作将在更短的过渡时间内被快速和平稳地执行，从而改善了用户体验。
图2为依据本发明实施方式的数据流处理装置的示意图。数据流处理装置20可以包括于连接(connected)电视、DVD播放机、蓝光光盘播放器、机顶盒或能够接收和处理多媒体数据流的计算机中。数据流处理装置20包括数据缓冲装置21，解复用器22，数据处理器23以及索引表24。数据缓冲装置21接收并缓冲多媒体数据流。已缓冲的多媒体数据流被传送至解复用器22，以及依据数据处理器23发出的控制信号25，解复用器22解复用已缓冲的多媒体数据流以输出至少一个输出数据流。举例来说，假定多媒体数据流包括音频数据流和视频数据流。数据处理器23包括音频解码器和视频解码器以用于分别解码音频数据流和视频数据流。依据本发明的实施方式，当数据处理器23开始处理视频数据流，数据处理器23发出控制信号25至解复用器22以便控制解复用器22滤波已缓冲的多媒体数据流以输出视频数据流至数据处理器23以用于进一步处理。
在此实施方式中，解复用器22产生并输出与输出数据流相应的索引数据。然后索引数据被存储于索引表24中。索引数据可以包括时间标记，数据流逻辑偏移以及缓冲地址信息。时间标记代表与数据单元解码时间(DTS)及/或数据单元呈现时间(PTS)相应的时间值。解码时间和呈现时间为多媒体数据流中发送的数据并且解码时间和呈现时间为本领域技术人员所熟悉。因此，为求简洁，关于解码时间和呈现时间的细节将不会在下文中描述。数据流逻辑偏移代表基于多媒体数据流的第一数据包的偏移值。缓冲地址信息代表存储数据包的缓冲地址。利用索引数据，数据流处理装置20可以从与当前由解复用器22处理的数据单元(例如，数据包)相对应的索引数据中计算出解复用指针。进一步地，数据流处理装置20可以从与当前由数据处理器23处理的数据单元(例如，数据包)相对应的索引数据中计算出解码指针。
假定数据处理器23起初处理视频数据流，当数据处理器23停止处理视频数据流并开始请求音频数据流时，数据处理器23传送控制信号25至解复用器22。依据解复用指针和解码指针，解复用器22重存取存储于数据缓冲装置21的反向缓冲器中的数据单元(例如，数据包)。然后解复用器22再次解复用存储于反向缓冲器中的数据单元(例如，数据包)并输出需要的音频数据流至数据处理器23。如上述所描述，可以使用第二缓冲装置(secondbuffer)存储解复用器22的输出数据。当数据处理器23依据使用者的请求来改变数据处理器23的重放内容时，数据处理器23可以传送缓冲装置清除控制信号以清除或置位第二缓冲装置。
图3为依据本发明实施方式的在多媒体处理装置中实施的数据流处理装置的示意图。举例来说，多媒体处理装置可以为电视30。电视30包括控制器37，缓冲管理器32，解复用器33，索引表34，视频数据流缓冲器35a，音频数据流缓冲器35b，字幕数据流缓冲器35c，视频解码器36a，音频解码器36b，字幕解码器36c，以及缓冲装置38。多媒体信源31可以是互联网的业务提供商(service provider)，多媒体播放器，射频发射机(radio frequencytransmitter)以用于为广播电视节目或其他多媒体信源提供多媒体数据流数据。控制器37控制电视30的操作。控制器37接收改变重放内容的请求，产生控制信号并依据索引数据确定解复用指针以及解码指针，以便依据解复用指针和解码指针确定缓冲装置38的反向缓冲器。具体来说，缓冲管理器32接收来自多媒体信源31的多媒体数据流数据。然后，缓冲管理器32由控制器37控制以存储已接收的多媒体数据流数据至缓冲装置38。更详细地，由缓冲管理器32控制的缓冲装置38可以用环形缓冲器结构来实现，以使得用于存储由视频解码器36a、音频解码器36b或字幕解码器36c处理过的多媒体数据流的数据单元(例如，数据包)的缓冲区域可以被设置为未被占用(free)或可用(available)，以便能够存储新的接收的数据单元。缓冲管理器32进一步由控制器37控制以用于传送数据单元(例如，数据包)至解复用器33。解复用器33滤波接收的数据单元(例如，数据包)。依据由控制器37发出的控制信号，解复用器33输出需要的视频数据单元(例如，视频数据包)至视频数据流缓冲器35a，输出需要的音频数据单元(例如，音频数据包)至音频数据流缓冲器35b，以及输出字幕数据单元(例如，字幕数据包)至字幕数据流缓冲器35c。视频解码器36a由控制器37控制并且视频解码器36a存取并解码存储于视频数据流缓冲器35a中的视频数据单元(例如，视频数据包)。音频解码器36b由控制器37控制并且音频解码器36b存取并解码存储于音频数据流缓冲器35b的音频数据单元(例如，音频数据包)。此外，字幕解码器36c由控制器37控制并且字幕解码器36c存取并解码存储于字幕数据流缓冲器35c中的字幕数据单元(例如，字幕数据包)。需要注意的是，电视30还可以包括未示出于图3中的其他原件，例如，显示屏幕(display panel)，扬声器或其他控制元件。图3仅示出对于数据流处理装置所必须的功能模块，而本发明并不限于此。依据本发明的实施方式，由多媒体信源31输出的多媒体数据流包括视频数据流，第一字幕数据流，第二字幕数据流，具有2.1声道的第一音频数据流以及具有5.1声道的第二音频数据流。
依据本发明的实施方式，解复用器33产生并输出与输出数据流相应的索引数据以及解复用器33存储索引数据至索引表34。索引数据可以包括时间标记，数据流逻辑偏移以及缓冲地址信息。索引表34为记录多媒体数据流和索引数据相应关系的图表。索引表34记录索引数据、已缓冲的多媒体数据流以及解复用器33的输出数据流之间的关系。利用索引数据，控制器37可以从与当前由视频解码器36a处理的视频数据单元(例如，视频数据包)相应的索引数据中计算出解码指针。进一步地，控制器37从与当前由解复用器33处理的数据单元(例如，数据包)相对应的索引数据中计算出解复用指针。因此，缓冲装置38的反向缓冲器的位置和尺寸随时间动态改变并且可以依据解码指针和解复用指针确定。
依据本发明的实施方式，开始时，控制器37控制解复用器33输出第一音频数据流至音频数据流缓冲器35b，并控制音频解码器36b解码第一音频数据流。若电视30接收来自使用者的远程控制信号以将从具有2.1声道的第一音频数据流的音频输出改变至具有5.1声道的第二音频数据流的音频输出(即若使用者请求改变多媒体数据流的重放内容)，控制器37搜索索引表34以计算出解复用指针和解码指针以便确定缓冲装置38的反向缓冲器的位置和区域。然后控制器发出控制信号以控制缓冲管理器32，解复用器33，音频解码器36b。依据由控制器37发出的控制信号，缓冲管理器32重传送反向缓冲器中的数据单元至解复用器33。依据由控制器37发出的控制信号，解复用器滤波并输出具有5.1声道的第二音频数据流至音频数据流缓冲器35b以用于音频解码器36b进一步处理。
依据本发明的另一实施方式，当控制器37发送控制信号至解复用器33时，控制器37清除并重置(reset)音频数据流缓冲器35b。在此实施方式中，解复用器33也可以分别输出并传送再次解复用的视频数据流和字幕数据流至视频数据流缓冲器35a和字幕数据流缓冲器35c。依据本发明的另一实施方式，当解复用器接收缓冲装置38的反向缓冲器中的数据单元(例如，数据包)时，解复用器33仅输出新的需要的数据单元(例如，数据包)，例如，第二音频数据流，以用于该需要的数据单元的输出端的解码器(例如，音频解码器36b)进一步处理。当存储于反向缓冲器的数据已被解复用时，缓冲管理器32传送存储于缓冲区域中位于由解复用指针指出的缓冲地址之后的数据至解复用器33。
尽管图3所示的实施方式描述了音频输出切换(switching)的情况，然而本发明并不限于此。图3所示的装置也可以应用于字幕切换。
如先前所述，多媒体数据流分别包括第一字幕数据流(例如中文字幕)，和第二字幕数据流(例如，英文字幕)。开始时，使用者需要观看中文字幕，因此，控制器37控制解复用器33输出第一字幕数据流至字幕数据流缓冲器35c，并控制字幕解码器36c解码第一字幕数据流。当使用者需要改变字幕以观看英文字幕时，使用者通过远程控制传送远程控制信号至电视30。控制器37相应地搜索索引表34以计算出解复用指针和解码指针以便确定缓冲装置38的反向缓冲器的区域和位置。然后，控制器发出控制信号以控制缓冲管理器32，解复用器33，和音频解码器36b。依据控制器37发出的控制信号，缓冲管理器32重传送解复用器33的反向缓冲器中的数据单元(例如，数据包)。依据控制器37发出的控制信号，解复用器33滤波并输出第二字幕数据流至字幕数据流缓冲器35c以用于字幕解码器36c进一步处理。
图4为依据本发明实施方式的缓冲装置38的示意图。缓冲装置38可以包括四部分，第一偏移缓冲器(first offset buffer)41，反向缓冲器42，前向缓冲器(forward buffer)43和第二偏移缓冲器(second offset buffer)44。反向缓冲器42存储已被解复用器解复用的但未被后端数据处理单元(例如音频解码器36b)处理的数据。前向缓冲器43存储新接收的来自多媒体信源的多媒体数据流，其中多媒体数据流未被解复用器解复用。存储于第一偏移缓冲器41中的数据也已经由后端数据处理单元处理并且依据解复用器和数据处理单元的处理时间周期来确定第一偏移缓冲器41的尺寸。第二偏移缓冲器44的数据为预读取(pre-read)的暂时数据。
依据本发明的实施方式，第一偏移缓冲器41的尺寸可以小于第二偏移缓冲器44的尺寸。在图4中，可以发现，能够依据解复用指针和解码指针确定反向缓冲器42。解复用指针指向缓冲器38存储多媒体数据流的第一数据单元的第一缓冲地址，即指向当前由解复用器(例如，图3所示的解复用器33)处理的第一数据单元。解码指针指向缓冲装置38存储多媒体数据流的第二数据单元的第二缓冲地址，即指向当前由数据处理装置(例如，图3所示的音频解码器36b)处理的第二数据单元。在此实施方式中，缓冲装置由环状缓冲器实现。
图5为依据本发明实施方式的解复用器的示意图。解复用器51包括数据流滤波器52和索引生成器53。索引生成器53接收多媒体数据流的多个数据单元并产生索引数据。索引数据可以包括时间标记，数据流逻辑偏移和缓冲地址信息。时间标记代表与数据单元解码时间(DTS)及/或数据单元呈现时间(PTS)相应的时间值。数据流逻辑偏移代表基于多媒体数据流的第一数据包的偏移值。缓冲地址信息代表用于存储数据的缓冲装置38的缓冲地址。数据流滤波器52滤波多媒体数据流并输出要求的数据流至缓冲器55。依据本发明的实施方式，索引生成器53基于解复用的数据输出索引数据至索引表54，该解复用的数据由数据流滤波器52滤波。
图6为依据本发明实施方式的数据流处理方法的流程图。在步骤S61中，数据流缓冲装置接收并缓冲多媒体数据流。多媒体数据流包括多个数据单元。在步骤S62中，解复用器存取存储于数据流缓冲装置中的多媒体数据流并产生与多媒体数据流的数据单元相应的索引数据。索引数据包括时间标记，数据流逻辑偏移以及缓冲地址信息。时间标记代表与数据单元解码时间(DTS)及/或数据单元呈现时间(PTS)相应的时间值。解码时间和呈现时间为多媒体数据流中发送的数据并且解码时间和呈现时间为本领域技术人员所熟悉。因此，为求简洁，关于解码时间和呈现时间的细节将不会在下文中描述。数据流逻辑偏移代表基于多媒体数据流的第一数据包的偏移值。缓冲地址信息代表存储数据单元(例如，数据包)的缓冲地址。解复用器进一步滤波多媒体数据流并将输出数据流与索引数据一起输出。
在步骤S63中，数据流缓冲装置确定是否接收到改变重放内容的请求，例如音频改变，字幕改变，或观看角度改变。若数据流缓冲装置没有接收到请求改变重放内容的请求，则流程转到步骤S61。若数据流缓冲装置接收到请求改变重放内容的请求(即确定步骤S63中的结果为肯定)，则流程转入步骤S64。在步骤S64中，数据流缓冲装置依据索引数据确定解复用指针和解码指针，以便依据解复用指针和解码指针确定数据缓冲装置的反向缓冲器。在解复用指针和解码指针之间定义的缓冲区域为用于存储多媒体的数据单元的反向缓冲器，反向缓冲器存储的多媒体的数据单元已由解复用器存取，然而，反向缓冲器存储的多媒体的数据单元并未被数据处理装置处理。解复用指针指向数据流缓冲装置存储多媒体数据流的第一数据单元的第一缓冲地址，即指向当前由解复用器处理的第一数据单元。解码指针指向数据流缓冲装置存储多媒体数据流的第二数据单元的第二缓冲地址，即指向当前由数据处理装置处理的第二数据单元。在步骤S65中，解复用器重存取反向缓冲器中的数据单元(例如，数据包)。由于数据单元可以在一定时间内保存于数据缓冲装置中，当使用者改变音频设定以选择5.1声道声音格式时，解复用器12依据控制信号重存取存储于反向缓冲器13中的数据以使得视频数据流和第二音频数据流会输出至数据处理装置。依据本发明的实施方式，数据流处理方法可进一步包括若接收到改变重放内容的请求，则产生控制信号；以及依据控制信号，滤波自数据流缓冲装置的反向缓冲器13重存取的多个数据单元。使用这种重存取操作，使用者请求音频变化的操作将在更短的过渡时间内被快速和平稳地执行，从而改善了用户体验。
虽然本发明以较佳实施方式揭露如上，然而此较佳实施方式并非用以限定本发明。本领域技术人员不脱离本发明的精神和范围内，凡依本发明申请专利范围所做的均等变化与修饰，都应属本发明的涵盖范围。

Claims (15)

1.一种数据流处理装置，其特征在于，包括：
缓冲装置，缓冲多媒体数据流，其中该多媒体数据流包括多个数据单元；
解复用器，存取在该缓冲装置中的该多媒体数据流的该多个数据单元，产生与该多媒体数据流的该多个数据单元相应的索引数据，并滤波该多媒体数据流的该多个数据单元以输出第一输出数据流；
数据处理器，接收并处理该第一输出数据流；
控制器，接收改变重放内容的请求，产生控制信号，并依据该索引数据确定解复用指针以及解码指针，以便依据该解复用指针和该解码指针确定该缓冲装置的反向缓冲器，该反向缓冲器存储已被该解复用器解复用的但未被该数据处理单元处理的数据；
其中，依据该控制信号，该解复用器重存取和滤波存储于该反向缓冲器中的多个数据单元以输出第二输出数据流；以及
其中，该数据处理器接收并处理该第二输出数据流。
2.根据权利要求1所述的数据流处理装置，其特征在于，该解复用器进一步包括：
索引生成器，接收该多媒体数据流的该多个数据单元并产生该索引数据；以及
滤波器，滤波该多媒体数据流的该多个数据单元。
3.根据权利要求2所述的数据流处理装置，其特征在于，该索引数据包括时间标记和缓冲地址信息；
其中，该时间标记代表与数据单元解码时间及/或数据单元呈现时间相应的时间值，以及该缓冲地址信息代表存储数据单元的缓冲地址。
4.根据权利要求2所述的数据流处理装置，其特征在于，进一步包括索引表，该索引表为记录该多媒体数据流和该索引数据相应关系的图表。
5.根据权利要求1所述的数据流处理装置，其特征在于，该解复用指针指向该缓冲装置存储该多媒体数据流的第一数据单元的第一缓冲地址，以及该第一数据单元当前由该解复用器处理。
6.根据权利要求1所述的数据流处理装置，其特征在于，该解码指针指向该缓冲装置存储该多媒体数据流的第二数据单元的第二缓冲地址，以及该第二数据单元当前由该数据处理器处理。
7.一种数据流处理装置，其特征在于，包括：
解复用器，存取并解复用多媒体数据流，以及输出第一数据流；其中该多媒体数据流包括多个数据单元；
数据处理器，接收并处理该第一数据流；
反向缓冲器，存储该多媒体数据流的第一部分，其中该多媒体数据流的该第一部分的多个数据单元已由该解复用器存取，但未被该数据处理器处理，以及
若使用者请求改变该多媒体数据流的重放内容，存储于该反向缓冲器中的该多个数据单元被重传送至该解复用器以用于滤波出与该使用者请求相应的第二数据流。
8.根据权利要求7所述的数据流处理装置，其特征在于，该解复用器进一步包括：
索引生成器，接收该多媒体数据流的该多个数据单元并产生索引数据；以及
滤波器，滤波该多媒体数据流的该多个数据单元。
9.根据权利要求8所述的数据流处理装置，其特征在于，该索引数据包括时间标记和缓冲地址信息；
其中，该时间标记代表与数据单元解码时间及/或数据单元呈现时间相应的时间值，以及该缓冲地址信息代表存储数据单元的缓冲地址。
10.根据权利要求8所述的数据流处理装置，其特征在于，进一步包括索引表，该索引表为记录该多媒体数据流和该索引数据相应关系的图表。
11.一种数据流处理方法，其特征在于，包括：
(a)在缓冲装置中缓冲多媒体数据流，该多媒体数据流包括多个数据单元；
(b)存取在该缓冲装置中的该多媒体数据流的该多个数据单元，以及产生与该多媒体数据流的该多个数据单元相应的索引数据；
(c)确定是否接收到改变重放内容的请求；
(d)若接收到该改变重放内容的请求，则依据该索引数据确定解复用指针和解码指针，以便依据该解复用指针和该解码指针确定该缓冲装置的反向缓冲器，该反向缓冲器存储已被该解复用器解复用的但未被该数据处理单元处理的数据；以及
(e)重存取存储于该缓冲装置的该反向缓冲器中的多个数据单元。
12.根据权利要求11所述的数据流处理方法，其特征在于，该索引数据包括时间标记和缓冲地址信息；
其中，该时间标记代表与数据单元解码时间及/或数据单元呈现时间相应的时间值，以及该缓冲地址信息代表存储数据单元的缓冲地址。
13.根据权利要求11所述的数据流处理方法，其特征在于，该数据流处理方法进一步包括：
(f)若接收到该改变重放内容的请求，则产生控制信号；以及
(g)依据该控制信号，滤波自该缓冲装置的该反向缓冲器重存取的该多个数据单元。
14.根据权利要求11所述的数据流处理方法，其特征在于，该解复用指针指向该缓冲装置存储该多媒体数据流的第一数据单元的第一缓冲地址，以及该第一数据单元当前由解复用器处理。
15.根据权利要求11所述的数据流处理方法，其特征在于，该解码指针指向该缓冲装置存储该多媒体数据流的第二数据单元的第二缓冲地址，以及该第二数据单元当前由数据处理器处理。
CN201380004730.2A 2013-05-20 2013-05-20 数据流处理装置及数据流处理方法 Active CN104303512B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2013/075904 WO2014186934A1 (en) 2013-05-20 2013-05-20 Data stream processing apparatus

Publications (2)

Publication Number Publication Date
CN104303512A CN104303512A (zh) 2015-01-21
CN104303512B true CN104303512B (zh) 2017-10-03

Family

ID=51932698

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380004730.2A Active CN104303512B (zh) 2013-05-20 2013-05-20 数据流处理装置及数据流处理方法

Country Status (4)

Country Link
US (1) US9930403B2 (zh)
EP (1) EP3000235B1 (zh)
CN (1) CN104303512B (zh)
WO (1) WO2014186934A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113760979A (zh) * 2020-11-12 2021-12-07 北京沃东天骏信息技术有限公司 用于生成信息的方法和装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1863309A (zh) * 2004-11-12 2006-11-15 松下电器产业株式会社 音频/视频流加速系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6091772A (en) 1997-09-26 2000-07-18 International Business Machines, Corporation Black based filtering of MPEG-2 compliant table sections
JP3443093B2 (ja) 2000-12-27 2003-09-02 株式会社東芝 ディジタル記録再生装置
US6859434B2 (en) * 2002-10-01 2005-02-22 Comsys Communication & Signal Processing Ltd. Data transfer scheme in a communications system incorporating multiple processing elements
FR2849327A1 (fr) * 2002-12-20 2004-06-25 St Microelectronics Sa Procede et dispositif de decodage audio/video, circuit pilote video et boitier decodeur l'incorporant
US8238721B2 (en) 2004-02-27 2012-08-07 Hollinbeck Mgmt. Gmbh, Llc Scene changing in video playback devices including device-generated transitions
US8264960B2 (en) 2005-05-31 2012-09-11 Broadcom Corporation Method and system for sharing AV/record resources in a programmable transport demultiplexer and PVR engine
KR100800727B1 (ko) * 2005-06-24 2008-02-01 삼성전자주식회사 디지털멀티미디어방송 수신 장치에서 채널 전환을 위한 재생 장치 및 방법
KR100929073B1 (ko) * 2005-10-14 2009-11-30 삼성전자주식회사 휴대 방송 시스템에서 다중 스트림 수신 장치 및 방법
US8331772B1 (en) * 2006-09-07 2012-12-11 Opentv, Inc. Systems and methods to position and play content
EP2280541A1 (en) * 2009-06-30 2011-02-02 Trident Microsystems (Far East) Ltd. Fast channel switch between digital televisison channels
CN101980541A (zh) 2010-11-23 2011-02-23 华亚微电子（上海）有限公司 数字电视接收装置及其换台方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1863309A (zh) * 2004-11-12 2006-11-15 松下电器产业株式会社 音频/视频流加速系统

Also Published As

Publication number Publication date
EP3000235B1 (en) 2019-08-28
EP3000235A4 (en) 2017-01-18
US20160057487A1 (en) 2016-02-25
CN104303512A (zh) 2015-01-21
EP3000235A1 (en) 2016-03-30
WO2014186934A1 (en) 2014-11-27
US9930403B2 (en) 2018-03-27

Similar Documents

Publication Publication Date Title
JP4437341B2 (ja) ターゲットシステム復号化器及びデータのバッファ化システム
CN101820538B (zh) 串流格式转换的系统、方法及数字电视记录装置
EP2312850A2 (en) Method and apparatus for transmitting content, method and apparatus for receiving content, method and apparatus for encoding content, method and apparatus for decoding content
CN101207764B (zh) 记录装置、记录方法和再现装置
CN104410807A (zh) 一种多路视频同步回放方法及装置
JPH0923424A (ja) オーディオビジュアルストリームを送信、受信及び復号化するためのデバイス
EP2442581B1 (en) Video assets having associated graphical descriptor data
CN101710997A (zh) 基于mpeg-2系统实现视、音频同步的方法及系统
CN106331853B (zh) 多媒体解封装方法及装置
CN101232611A (zh) 图像处理设备及其方法
KR20010050669A (ko) 데이터 처리 장치, 데이터 처리 방법 및 기록 매체
EP2040475A2 (en) Environment information providing method, video apparatus and video system using the same
CN100481238C (zh) 再现方法
CN101256817B (zh) 再现多角度数据的设备
CN104303512B (zh) 数据流处理装置及数据流处理方法
WO2004086765A1 (ja) データ送信装置
CN107770599A (zh) 一种录制的音视频的播放方法、装置及存储介质
US20060197880A1 (en) Signal processing device and stream processing method
TW201143441A (en) Transport layer modification to enable transmission gaps
JP5854208B2 (ja) 多段高速再生のための映像コンテンツ生成方法
CN109068156A (zh) 一种节目录制、播放方法及装置
JP2885217B2 (ja) Ｍｐｅｇデータ処理回路
JPH09312625A (ja) データ多重化装置およびその方法
CN109743627A (zh) 基于avs+视频编码数字电影包的播放方法
US20060039675A1 (en) Streaming apparatus and streaming method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant