CN101518081A - 对使用音频时间戳的多媒体解码器的再同步 - Google Patents

对使用音频时间戳的多媒体解码器的再同步 Download PDF

Info

Publication number
CN101518081A
CN101518081A CNA2007800352174A CN200780035217A CN101518081A CN 101518081 A CN101518081 A CN 101518081A CN A2007800352174 A CNA2007800352174 A CN A2007800352174A CN 200780035217 A CN200780035217 A CN 200780035217A CN 101518081 A CN101518081 A CN 101518081A
Authority
CN
China
Prior art keywords
audio
counting
byte
decoder
bit stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007800352174A
Other languages
English (en)
Other versions
CN101518081B (zh
Inventor
程明霞
安东尼·帕特里克·莫罗二世
埃迪·L·T·乔伊
高玉洁
金塔尔·迪利普辛·桑帕特
马修·布莱恩·齐夫奈伊
萨蒂什·戈韦尔丹
萨米尔·库马尔·古普塔
哈里纳特·加吕达德里
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN101518081A publication Critical patent/CN101518081A/zh
Application granted granted Critical
Publication of CN101518081B publication Critical patent/CN101518081B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368Multiplexing of audio and video streams
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/005Correction of errors induced by the transmission channel, if related to the coding algorithm
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H04N19/68Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving the insertion of resynchronisation markers into the bitstream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341Demultiplexing of audio and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44204Monitoring of content usage, e.g. the number of times a movie has been viewed, copied or the amount which has been watched
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4425Monitoring of client processing errors or hardware failure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8106Monomedia components thereof involving special audio data, e.g. different tracks for different languages

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Receiver Circuits (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)
  • Error Detection And Correction (AREA)

Abstract

一种用于使用音频解码器中所消耗的字节再同步嵌入式多媒体系统的方法和系统。所述消耗的字节提供了补偿不需要重新传输的系统中的位错误处置和校正的机制。所述音频解码器跟踪所述消耗的字节,且周期性地报告所述消耗的字节。主机微处理器将自从位错误可能已被处置或校正以来实际消耗的字节索引到预定字节计数,以确定再同步是否必需。

Description

对使用音频时间戳的多媒体解码器的再同步
技术领域
本发明是针对一种在嵌入式多媒体系统的领域中用于同步目的的音频时间戳表示。
背景技术
在多处理器系统中,例如音频解码的计算密集的任务通常在例如数字信号处理器(DSP)的单独的处理器中完成,而例如音频/视频同步的任务处置是由主机微处理器处置。例如高级精简指令集计算机机器(Advanced RISC Machine,ARM)的主机微处理器需要来自音频解码器的时间戳报告以用于多个目的,例如音频/音频同步、音频/视频同步以及音频重放时间显示。
传输控制协议(TCP)保证了数据从发送器向接收器的可靠且按次序的传递。但其要求重新传输额外开销(引起带宽浪费),而且在接收器处用于缓冲的额外延迟可能引起对音频或视频的实时重放的中断。TCP通常不用于多媒体串流。
作为另一协议,用户数据报协议(UDP)使用例如循环冗余校验(CRC)的校验和来解决数据的错误校正。轻量级UDP(UDP Lite)仅使用用于敏感报头数据的校验和,且允许编解码器处置受错误破坏的数据。因此,轻量级UDP较快,但可能导致位错误没有被检测到且被发送到音频或视频编解码器。大多数原始设备制造商(OEM)要求用于移动装置串流的UDP,这是由于以下事实:其较快,且没有重新传输带宽额外开销,且大多数音频/视频编解码器可以某种程度处置位错误。
举例来说,高通公司(QUALCOMM)的仅前向链路媒体(MediaFlo)广播系统使用专用的协议,其不允许重新传输,因此音频/视频编解码器可能接收错误的位流。一般来说,对于使用轻量级UDP或其它“尽力(best-effort)”(不可靠)协议的多媒体串流系统,音频/视频编解码器可能接收在上层中不可检测的错误位流数据。
报告时间戳的常规方法是使音频解码器向主机微处理器报告重放时间或音频帧数。然而当音频包具有错误时,所报告的时间戳是错误的。
大多数视频编码标准具有嵌入在位流内的时间戳信息,其可有利地由主机微处理器使用以维持音频-视频同步。然而,此类时间戳在音频编码标准中通常不可用。
对于使用例如霍夫曼(Huffman)编码的可变长度编码方案的经压缩音频位流,当位流受破坏时,音频解码器丢失准确的位流边界信息,且将不再能够向主机微处理器报告准确的时间戳。因而发生不准确的报告,因为当包中遇到位错误时音频解码器将大体上消耗或多或少的位流数据。因此,重放时间将与位流消耗速率不同步。当主机微处理器使用所报告的错误音频重放时间用于同步或任何其它目的时,错误的累积性质可使得不可能正确地再同步。
鉴于上述内容,需要提供一种错误稳健的报告方法和嵌入式多媒体系统,其实现回到主机微处理器的准确的时间戳报告以获得改进的系统同步。
进一步需要提供一种用于多媒体系统中的错误稳健的报告方法,其补偿了音频位流中的错误的累积性质。
进一步需要提供一种错误稳健的报告方法,其补偿了在使用不需要重新传输的协议的多媒体系统中的错误的累积性质。
此外,需要提供一种错误稳健的报告方法,其可用于使用轻量级UDP或其它“尽力”(不可靠)协议的多媒体系统中。
发明内容
鉴于上述内容,本发明的目的是提供一种错误稳健的报告方法和嵌入式多媒体系统,其实现回到主机微处理器的准确的时间戳报告以获得改进的系统同步。
本发明的又一目的是提供一种用于多媒体系统中的错误稳健的报告方法,其补偿了音频位流中的错误的累积性质。
本发明的另一目的是提供一种错误稳健的报告方法,其补偿了在使用不需要重新传输的协议的多媒体系统中的错误的累积性质。
本发明的再一目的是提供一种错误稳健的报告方法,其可用于使用轻量级UDP或其它“尽力”(不可靠)协议的多媒体系统中。
本发明的上述和其它目的由具有多个处理器的多媒体系统实行,所述多媒体系统包括:音频解码器,其可操作以对音频位流进行解码,对所述音频解码器所消耗的字节进行计数,且报告所述消耗的字节的所述计数;以及主机微处理器,其可操作以基于所述消耗的字节的所述计数再同步所述系统。
所述音频解码器还包含样本计数器,所述样本计数器可操作以对扬声器播出的音频位流的经解码样本数目进行计数。所述报告还发送所述样本计数器的所述计数。
所述主机微处理器包含位流组合模块,所述位流组合模块可操作以组合并传送位流且将回叫间隔写入存储器中以供所述音频解码器使用。所述回叫间隔随所述经解码样本的所述数目而变且指示将所述报告发送到所述主机微处理器的频率。
所述主机微处理器包含:查找表(LUT),其具有预定字节计数和与所述预定字节计数相关联的预定音频重放时间。使用错误稳健的重放时间戳报告交叉引用模块来交叉引用所述消耗的字节的所述计数和所述LUT中索引的所述预定字节计数。
所述主机微处理器响应于快进、倒带或停止的用户输入命令,其中响应于所述快进或倒带的用户输入命令,所述系统复位对所述音频解码器中所消耗的字节的计数和所述样本计数器且重构所述LUT。
在操作中,所述再同步包含再同步指示所述经解码音频位流的音频播出的重放时间显示。而且,可能需要再同步与所述音频位流有关的视频流。
所述音频解码器与视窗媒体音频、高级音频编码(AAC)解码器、AAC加解码器、增强型AAC加解码器(eAAC+)、MP3以及里尔(Real)音频位流格式中的至少一者兼容。
在另一方面中,本发明是针对一种再同步多媒体系统的方法,其包括以下步骤:由音频解码器对音频位流进行解码,且对所述解码期间所消耗的字节进行计数;向主机微处理器报告所述消耗的字节的计数;处理所报告的消耗的字节;以及基于所述报告的所消耗字节再同步所述系统。
在又一方面中,本发明是针对一种音频解码器,其用于嵌入式多媒体系统中且可操作以对音频位流进行解码,对消耗的字节进行计数,且向主机微处理器周期性地报告所述消耗的字节的所述计数以用于再同步所述系统。
在再一方面中,本发明是针对一种可由嵌入式多媒体系统的多个处理器执行的程序指令,所述程序指令在执行时可操作以对音频位流进行解码、对解码期间所消耗的字节进行计数,且报告所述消耗的字节的所述计数,以及基于所述消耗的字节的所述计数再同步所述系统。
附图说明
当结合附图阅读时将更好地理解上述发明内容以及下文本发明的具体实施方式。为了说明本发明的目的,图式中展示目前优选的实施例。然而应了解,本发明不限于所展示的精确布置。在图式中:
图1说明根据本发明的多媒体系统的方框图;
图2A说明图1中的多媒体系统的方框图,其中以虚线展示音频解码器的细节;
图2B说明图1中的多媒体系统的方框图,其中以虚线展示主机微处理器的细节;
图3说明根据本发明的音频解码器的错误稳健的音频重放时间戳报告方法的流程图;
图4说明根据本发明的系统再同步方法的流程图;
图5说明用于根据本发明的错误稳健的音频重放时间戳报告方法的主机微处理器控制的流程图;
图6说明根据本发明的多媒体系统的替代实施例的方框图,其中以虚线展示音频解码器的细节。
具体实施方式
尽管本发明容许有许多不同形式的实施例,但本说明书和附图仅揭示一些形式作为本发明的使用的实例。不希望本发明限于如此描述的实施例,且将在所附权利要求书中指出本发明的范围。
下文使用可变长度编码方案的具体应用来描述根据本发明的嵌入式多媒体系统的优选实施例。所述多媒体系统可采用媒体重放应用程序。音频解码器可与视窗(windows)媒体音频、高级音频编码(AAC)解码器、AAC加(AAC Plus)解码器、增强型AAC加解码器(eAAC+)、MP3以及里尔音频(Real Audio)位流格式兼容。然而,所属领域的技术人员将了解,本发明还较好地适于包含游戏音频应用的其它类型音频解码器。
现在详细参看图式,其中相同标号始终用于指示相同元件,图1以及图2A-2B中展示根据本发明的大体上以10指定的嵌入式多媒体系统的实施例。
大体上,嵌入式多媒体系统10包含多个媒体输出,例如音频通过(audio through)扬声器44和视频通过(video through)视频显示器46。系统10进一步输出重放时间显示48(以虚线展示),其可集成在视频显示器46中或与其分离。尽管所说明的嵌入式多媒体系统10包含音频与视频两者,但任何一个用户选择的节目可仅包含音频或包含音频与视频两者。
在嵌入式多媒体系统10中,主机微处理器12包含程序指令,其在位流组合模块14中组合经压缩的音频位流,且将经压缩的音频位流发送到DSP 30中的音频解码器32,如图2B中最佳所见。音频解码器32包含将经压缩音频位流解码为通过扬声器44播出的波形的程序指令。大体上,一个节目的经压缩位流中的每一帧与由查找表(Look-Up-Table,LUT)构建模块15构建且随后存储在查找表(LUT)22中的预定音频重放时间与字节计数相关联。
在示范性实施例中,将用于一个节目的帧FR1、FR2...FRX的预定音频重放时间表示为24A、24B、...24X。此外,LUT 22具有与每一帧的预定音频重放时间24A、24B、...24X相关联的预定字节计数26A、26B、...26X。
主机微处理器12进一步包含可操作以充当错误稳健的重放时间戳报告交叉引用模块16的程序指令,所述错误稳健的重放时间戳报告交叉引用模块16交叉引用用于LUT22中的特定帧的所存储预定音频重放时间24A、24B、...24X。而且对于再同步操作,主机微处理器12进一步包含可作为再同步评估模块18和再同步模块20操作的程序指令。
音频解码器32包含可操作以充当错误稳健的音频重放时间戳报告产生器40的程序指令。错误稳健的音频重放时间戳报告产生器40包含报告间隔比较器34、样本计数器36以及字节计数器38,如图2A中最佳所见。
报告间隔比较器34将回叫间隔54与时间进行比较,使得错误稳健的音频重放时间戳报告产生器40可发送报告。报告间隔比较器34可接收和提取存储在共享存储器50中的回叫间隔54中的一者或一者以上,所述回叫间隔54是由主机微处理器12写入。音频解码器32可使用回叫间隔以在整个节目中使用。
错误稳健的音频重放时间戳报告产生器40产生发送到主机微处理器12的错误稳健的音频重放时间戳报告。所述错误稳健的音频重放时间戳报告包含来自样本计数器36的样本计数和来自字节计数器38的字节计数。
在操作中,主机微处理器12将依据所播出的音频样本的数目(N)来设置和/或发送回叫间隔54,以指示音频解码器32应以怎样的频率将错误稳健的音频重放时间戳报告发送回到主机微处理器12。回叫间隔54可用于辅助主机微处理器12通过LUT构建模块15构建LUT 22。音频解码器32从共享存储器50提取回叫间隔54。或者,可在主机命令中将回叫间隔54发送到DSP 30。此外,音频解码器32跟踪在字节计数器38中消耗了多少位流字节,以及多少样本经由样本计数器36而被解码/发出到扬声器44。错误稳健的音频重放时间戳报告产生器40以请求的回叫间隔54或整数倍的回叫间隔54报告回样本计数器36的样本计数和字节计数器38的字节计数两者。
主机微处理器12维持查找表(LUT)22,所述查找表(LUT)22从重放的开始处映射位流字节数目(字节计数)26A、26B、...、26X与预定音频重放时间24A、24B、...、24X。当主机微处理器12接收到错误稳健的音频重放时间戳报告时,主机微处理器12认识到由于至少一个位流错误的可能性,样本数目可能不是定时的准确指示。因此,主机微处理器12使用来自报告的所消耗字节数目(字节计数)来索引到LUT 22中以找到预定音频重放时间24A、24B、...、24X。优选的是,“索引到LUT 22中”应使用最近匹配搜索以找到LUT 22中最靠接近报告中所发送的字节计数的条目,因为经压缩音频位流中的任何错误均可能导致字节计数与帧边界临时不对准。
在字节计数和样本计数已知的情况下,主机微处理器12可确定音频正在何处播出,且使音频、与音频相关联的视频以及重放时间显示中的至少一者同步。
当接收到用于媒体(音频或视频)重放的倒带、快进或停止的命令时,主机微处理器12通过发送对应的命令而指示音频解码器32进行此操作。音频解码器32将复位样本计数器36和字节计数器38。此外,主机微处理器12将经由LUT构建模块15重构LUT 22。样本和字节命令可用于将样本计数器36和字节计数器38复位为零。或者,样本和字节命令可简单地使样本计数器36和字节计数器38前进或后退。
主机微处理器12和/或DSP 30基于图5的步骤S172A、172B、S172C处做出的确定而知道何时复位字节/样本计数器。由主机微处理器12控制再同步(例如)以删除视频帧或延迟视频帧,因为音频重放在实时进行且人耳对丢弃或添加的音频样本非常敏感。通过视频重放,帧可被丢弃或播放两次。
各种位流错误检测和处置方案可用于音频解码器。音频解码器32可在其检测到或命中一错误位流时使输出无声或隐蔽输出脉码调制(PCM)。由于音频解码已较好地建立,因此不进一步陈述对解码和错误处置的解释。
错误稳健的音频重放时间戳报告方法100和多媒体系统10利用了位流长度即使在不利的通道条件下也保持相同的事实。主机微处理器12使用音频字节计数来通过在音频位流帧边界处的经压缩位流位置而交叉引用预定音频重放时间,且因此可确定准确的“实际”音频重放时间,而不管位流中例如用于系统10的再同步的任何错误如何。
现在参看图3,错误稳健的音频重放时间戳报告方法100实现了错误稳健的时间戳报告,其可实施于嵌入式多媒体系统10中以促进主机经由方法150(图4)对系统10的再同步。方法100以步骤S102开始,其中音频解码器32对来自主机微处理器12的经压缩音频位流进行解码。步骤S102之后是步骤S104和S106。在步骤S104处,在解码发生时,在步骤S104处字节计数器38对解码器所消耗的字节进行计数。再次返回到步骤S106,步骤S106确定在解码过程中是否检测到错误。如果确定是“否”,那么步骤S106之后是步骤S109,其中对在步骤S110处经由扬声器44播出的样本进行计数。
再返回到步骤S106,如果步骤S106处的确定是“是”(意味着已检测到错误),那么步骤S106之后是步骤S108,其中使用适合于检测到的错误的已知错误校正和处置技术来处置错误。步骤S108之后也是步骤S109,其中对在步骤S110(步骤S110在步骤S109之后)处播出的样本进行计数。
如可了解,步骤S102、S106和S108是解码过程的一部分,其中音频解码器32在经由扬声器44播出(步骤S110)之前解码且校正或处置所接收位流中的位错误。
再次返回到步骤S109,步骤S109之后是步骤S112,以确定是否已达到回叫间隔54或整数倍的回叫间隔54。回叫间隔54随样本计数而变。如果确定是“否”,那么步骤S112返回到步骤S109。如果步骤S112处的确定是“是”,那么步骤S112随后是步骤S114,其中将具有字节和样本计数的错误稳健的音频重放时间戳报告发送到主机微处理器12。步骤S114之后是步骤S116,其中做出是否仍存在任何节目播放的确定。如果步骤S120处的确定是“是”,那么步骤S120返回到步骤S102。否则,如果在步骤S120处确定是“否”,那么方法100结束。
现在参看图4,展示系统再同步方法150。方法150以步骤S152开始,其中主机微处理器12接收具有字节计数和样本计数的错误稳健的音频重放时间戳报告。步骤S152之后是步骤S154,其中在LUT 22中查找或搜索用于经压缩位流的帧的预定音频重放时间24A、24B、...、24X。可使用最接近的匹配搜索来找到最靠接近于字节计数的用于预定音频重放时间的条目。由错误稳健的重放时间戳报告交叉引用模块16执行步骤S154。
步骤S154之后是S156,其中使用字节计数和交叉引用的预定音频重放时间来计算实际的音频重放时间。步骤S156之后是步骤S158,其中基于步骤S156中的计算的结果而做出是否需要再同步的确定。如果确定是“否”,那么方法150结束。由再同步评估模块18执行步骤S156和S158。
另一方面,如果步骤S158处的确定是“是”,那么步骤S158之后是步骤S160和S162。在步骤S162处,再同步模块20将使重放时间显示同步。在步骤S160处,做出节目是否还包含视频的确定。如果确定是“否”,那么步骤S160之后是步骤S164,其中将音频-音频同步进行同步。另一方面,如果在步骤S160处确定是“是”,那么节目包含视频与音频两者。因此,需要在步骤S166处将音频-视频同步进行同步。步骤S162、S164和S166结束再同步方法150。如果使用视频帧的插入或延迟或对视频的其它操纵而完成再同步,那么无需修改LUT 22。因此,在视频的任何时间点处的再同步将再对准LUT 22,使得样本计数和字节计数的下一报告将与LUT 22对准(假定没有错误发生)。另一方面,如果再同步要求丢弃或以其它方式操纵音频帧,那么LUT 22可能需要重构。
嵌入式多媒体系统10可能需要用于上文未提到的其它媒体应用的同步信息,因为不可能提及每一具体应用。
现在参看图5,展示音频解码器32的用于错误稳健的音频重放时间戳报告的主机微处理器控制方法170的流程图。方法170以步骤S172A、172B和172C开始。在操作中,主机微处理器12可接收在步骤S172A处重放新节目、在步骤S172B处将节目快进以及在步骤S172C处将节目倒带的用户命令。
步骤S172A、172B和/或172C之后是步骤S174,其中主机微处理器12使用新的字节计数和与其相关联的预定音频重放时间24A、24B、...、24X来构建或重构LUT 22(S174)。步骤S174之后是步骤S176(以虚线展示),其中复位样本计数器36。步骤S176(以虚线展示)之后是步骤S178(以虚线展示),其中复位字节计数器38。使用新的或复位的字节计数构建LUT 22。在一个实施例中,样本计数器36和字节计数器38可被复位为零(0)或由主机微处理器12和/或DSP 30确定的某个其它数字。步骤S178(以虚线展示)之后是任选步骤S180(以虚线展示),其中设置或复位回叫间隔54或用于回叫间隔54的计数器。可在认为适当时发送回叫间隔54。举例来说,可仅在新节目开始重放时而不是在其它时间设置步骤S180处的回叫间隔54。
以虚线展示步骤S176和S178以指示由于主机微处理器12接收到新节目选择、快进或倒带的用户输入,主机微处理器12与DSP 30之间的接口将致使样本计数器36、字节计数器38被设置或复位。同样,可设置或复位回叫间隔54。而且,样本计数器36和字节计数器38的复位可由DSP 30自动完成。
在图1、2A和2B的实施例中,主机微处理器12与DSP 30之间用以传送回叫间隔54的接口是共享存储器50。在此实施例中,主机微处理器12将在共享存储器50中写入回叫间隔54。DSP 30将从共享存储器50读取回叫间隔54以供错误稳健的音频重放时间戳报告产生器40使用。或者,主机微处理器12与DSP 30之间用以传送回叫间隔54的接口可为从主机微处理器12发送到DSP 30的命令。
现在参看图6,展示多媒体系统10′的替代实施例的方框图,其中具有DSP 30的细节(以虚线展示)。在此实施例中,主机微处理器12与DSP 30之间用以传送回叫间隔54的接口是共享存储器50′。DSP 30与主机微处理器12之间用以发送错误稳健的音频重放时间戳报告的样本计数52和字节计数53的接口包含由音频解码器32′将样本计数52和字节计数53写入共享存储器50′的存储器位置中。主机微处理器12将从共享存储器50′读取样本计数52和字节计数53。此外,错误稳健的音频重放时间戳报告产生器40′向主机微处理器12发送错误稳健的音频重放时间戳中断。所述中断向主机微处理器12通知共享存储器50′中的样本计数52和字节计数53的可用性。
鉴于上述内容,本发明提供一种错误稳健的报告方法和嵌入式多媒体系统10,其实现准确的时间戳报告回主机微处理器以获得系统同步。所述方法和系统10还补偿了音频位流中的错误的累积性质以使系统同步。
所属领域的技术人员将了解,通过本文揭示的嵌入式多媒体系统、方法和程序指令,错误稳健的报告实现了准确的时间戳报告且补偿了音频位流中的错误的累积性质。错误稳健的报告还补偿了当协议不需要重新传输时错误的累积性质。举例来说,协议可以是轻量级UDP或其它“尽力”(不可靠)协议。错误稳健的报告还允许改进的同步。
已出于说明和描述的目的呈现了本发明实施例的上述描述。不希望其为详尽的或将本发明限于所揭示的精确形式,且鉴于以上教示,修改和变化是可能的且可从本发明的实践中获得。选择和描述实施例以便解释本发明的原理及其实际应用,以使所属领域的技术人员能够在各种实施例中且使用适于所预期特定用途的各种修改来利用本发明。希望本发明的范围由附加到本发明的权利要求书及其等效物界定。

Claims (44)

1.一种具有多个处理器的多媒体系统,其包括:
音频解码器,其可操作以对音频位流进行解码,对由所述音频解码器消耗的字节进行计数,且报告所述消耗的字节的所述计数;以及
主机微处理器,其可操作以基于所述消耗的字节的所述计数再同步所述系统。
2.根据权利要求1所述的系统;其中所述音频解码器进一步包括样本计数器,所述样本计数器可操作以对由扬声器播出的所述音频位流的经解码样本数目进行计数。
3.根据权利要求2所述的系统;其中所述音频解码器包括错误稳健的音频重放时间戳报告产生器,所述错误稳健的音频重放时间戳报告产生器可操作以产生所述报告,所述报告进一步包括所述样本计数器的所述计数。
4.根据权利要求3所述的系统;其进一步包括共享存储器,其中所述主机微处理器包含位流组合模块,所述位流组合模块可操作以组合并传送位流且将回叫间隔写入所述共享存储器中以供所述音频解码器使用,所述回叫间隔随所述经解码样本的所述数目而变且指示将所述报告发送到所述主机微处理器的频率,且所述错误稳健的音频重放时间戳报告产生器将所述报告中的所述样本计数器的所述计数和所述消耗的字节的所述计数写入所述共享存储器中以供所述主机微处理器使用。
5.根据权利要求1所述的系统;其中所述主机微处理器包含:查找表(LUT),其具有预定字节计数和与所述预定字节计数相关联的预定音频重放时间;以及错误稳健的重放时间戳报告交叉引用模块,其交叉引用所述消耗的字节的所述计数和在所述LUT中索引的所述预定字节计数。
6.根据权利要求5所述的系统;其中所述主机微处理器包含LUT构建模块,所述LUT构建模块用于为预定音频节目构建所述LUT。
7.根据权利要求6所述的系统;其中所述主机微处理器响应于快进、倒带或停止的用户输入命令,其中响应于所述快进或倒带的用户输入命令,所述主机微处理器可操作以重构所述LUT且所述音频解码器可操作以复位所述消耗的字节。
8.根据权利要求1所述的系统;其中所述音频解码器进一步可操作以与所述主机微处理器介接以接收回叫间隔并复位所述消耗的字节。
9.根据权利要求1所述的系统;其中当所述主机微处理器再同步所述系统时,指示所述经解码音频位流的音频播出的重放时间显示被再同步。
10.根据权利要求1所述的系统;其中当所述主机微处理器再同步所述系统时,与所述音频位流有关的视频流被再同步。
11.根据权利要求1所述的系统;其中所述音频解码器包含由数字信号处理器(DSP)执行的程序指令,且所述主机微处理器包含由高级RISC机器(ARM)执行的程序指令。
12.根据权利要求1所述的系统;其中所述音频解码器与视窗媒体音频、高级音频编码(AAC)解码器、AAC加解码器、增强型AAC加解码器(eAAC+)、MP3以及里尔音频位流格式中的至少一者兼容。
13.一种多媒体系统,其包括:
解码装置,其用于对音频位流进行解码,对解码期间所消耗的字节进行计数,且报告所述消耗的字节的所述计数;以及
处理装置,其用于处理所述消耗的字节且基于所述消耗的字节的所述计数再同步所述系统。
14.根据权利要求13所述的系统;其中所述解码装置进一步包括样本计数装置,所述样本计数装置用于对播出的所述音频位流的经解码样本数目进行计数。
15.根据权利要求14所述的系统;其中所述解码装置进一步包括报告装置,所述报告装置用于报告所述样本计数装置的所述计数。
16.根据权利要求15所述的系统;其进一步包括用于存储回叫间隔的存储装置,其中所述处理装置包含用于组合并传送位流并将所述回叫间隔写入到所述存储装置以供所述解码装置使用的装置,所述回叫间隔随所述经解码样本的所述数目而变,且指示所述报告装置将所述样本计数装置的所述计数和所述消耗的字节的所述计数写入到所述存储装置以供所述处理装置使用的频率。
17.根据权利要求13所述的系统;其中所述处理装置包含:查找表(LUT),其具有预定字节计数和与所述预定字节计数相关联的预定音频重放时间;以及交叉引用装置,其用于交叉引用所述消耗的字节的所述计数和在所述LUT中索引的所述预定字节计数。
18.根据权利要求17所述的系统;其中所述处理装置包含用于为预定音频节目构建所述LUT的构建装置。
19.根据权利要求18所述的系统;其中所述处理装置响应于快进、倒带或停止的用户输入命令,其中响应于所述快进或倒带的用户输入命令,所述处理装置所述构建装置包含用于重构所述LUT的重构装置且所述解码装置包含用于复位所述消耗的字节的复位装置。
20.根据权利要求13所述的系统;其中所述解码装置进一步包括用于与所述处理装置介接以接收回叫间隔并复位所述消耗的字节的介接装置。
21.根据权利要求13所述的系统;其中所述处理装置包含用于再同步指示所述经解码音频位流的音频播出的重放时间显示的再同步装置。
22.根据权利要求13所述的系统;其中所述处理装置包含用于再同步与所述音频位流有关的视频流的再同步装置。
23.根据权利要求13所述的系统;其中所述解码器装置与视窗媒体音频、高级音频编码(AAC)解码器、AAC加解码器、增强型AAC加解码器(eAAC+)、MP3以及里尔音频位流格式中的至少一者兼容。
24.一种再同步多媒体系统的方法,其包括以下步骤:
由音频解码器对音频位流进行解码,且对所述解码期间所消耗的字节进行计数;
向主机微处理器报告所述消耗的字节的计数;
处理所报告的消耗的字节;以及
基于所述报告的消耗的字节再同步所述系统。
25.根据权利要求24所述的方法;其进一步包括以下步骤:
在所述解码步骤期间,对播出的所述音频位流的经解码样本数目进行计数。
26.根据权利要求25所述的方法;其中所述报告步骤进一步包括以下步骤:报告所述经解码样本数目的计数。
27.根据权利要求26所述的方法;其进一步包括以下步骤:组合并传送位流,以及设置回叫间隔以供所述解码步骤期间使用,其中所述回叫间隔随所述经解码样本的所述数目而变且指示所述报告步骤的频率。
28.根据权利要求27所述的方法;其中所述报告步骤包括以下步骤:由所述音频解码器将所述消耗的字节和所述经解码样本的所述计数写入存储器中以供所述主机微处理器使用。
29.根据权利要求24所述的方法;其中所述处理步骤包括:交叉引用所述消耗的字节的所述计数与查找表(LUT)中的预定字节计数,所述查找表(LUT)具有所述预定字节计数和与所述预定字节计数相关联的预定音频重放时间。
30.根据权利要求29所述的方法;其进一步包括以下步骤:在所述解码步骤之前为预定音频节目构建所述LUT。
31.根据权利要求24所述的方法;其中再同步步骤包括以下步骤:再同步指示所述经解码音频位流的音频播出的重放时间显示。
32.根据权利要求24所述的方法;其中所述再同步步骤包含以下步骤:再同步与所述音频位流有关的视频流。
33.根据权利要求24所述的方法;其中所述解码步骤与视窗媒体音频、高级音频编码(AAC)解码器、AAC加解码器、增强型AAC加解码器(eAAC+)、MP3以及里尔音频位流格式中的至少一者兼容。
34.一种音频解码器,其用于嵌入式多媒体系统中且可操作以对音频位流进行解码、对消耗的字节进行计数,且向主机微处理器周期性地报告所述消耗的字节的所述计数以用于再同步所述系统。
35.根据权利要求34所述的解码器;其中所述音频解码器进一步可操作以对由扬声器播出的所述音频位流的经解码样本数目进行计数。
36.根据权利要求35所述的解码器;其中所述音频解码器进一步可操作以报告所述样本计数器的所述计数。
37.根据权利要求36所述的解码器;其中所述音频解码器进一步可操作以将所述样本计数器的所述计数和所述消耗的字节的所述计数写入到存储器并从所述存储器检索回叫间隔。
38.根据权利要求34所述的解码器;其中所述音频解码器与视窗媒体音频、高级音频编码(AAC)解码器、AAC加解码器、增强型AAC加解码器(eAAC+)、MP3以及里尔音频位流格式中的至少一者兼容。
39.一种可由嵌入式多媒体系统的多个处理器执行的程序指令,所述程序指令在执行时可操作以
对音频位流进行解码、对解码期间消耗的字节进行计数,且报告所述消耗的字节的所述计数;以及
基于所述消耗的字节的所述计数再同步所述系统。
40.根据权利要求39所述的程序指令;其中所述程序指令在执行时进一步可操作以对由扬声器播出的所述音频位流的经解码样本数目进行计数。
41.根据权利要求40所述的程序指令;其中所述可操作以进行报告的程序指令在执行时进一步可操作以报告所述经解码样本数目的所述计数。
42.根据权利要求39所述的程序指令;其中所述程序指令在执行时进一步可操作以组合并传送位流且将回叫间隔写入到存储器,其中所述回叫间隔随所述经解码样本的所述数目而变且指示所述可操作以解码的指令进行报告的频率。
43.根据权利要求39所述的程序指令;其中所述程序指令在执行时进一步可操作以:构建具有预定字节计数和与所述预定字节计数相关联的预定音频重放时间的查找表(LUT);以及交叉引用所述消耗的字节的所述计数和在所述LUT中索引的所述预定字节计数。
44.根据权利要求43所述的程序指令;其中所述程序指令在执行时响应于快进、倒带或停止的用户输入命令,其中响应于所述快进或倒带的用户输入命令,所述程序指令在执行时可操作以传送复位所述消耗的字节的所述计数且重构所述LUT。
CN2007800352174A 2006-09-26 2007-09-26 对使用音频时间戳的多媒体解码器的再同步 Expired - Fee Related CN101518081B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/535,406 US9083994B2 (en) 2006-09-26 2006-09-26 Method and system for error robust audio playback time stamp reporting
US11/535,406 2006-09-26
PCT/US2007/079595 WO2008039871A2 (en) 2006-09-26 2007-09-26 Resynchronisation of a multimedia decoder using audio timestamps

Publications (2)

Publication Number Publication Date
CN101518081A true CN101518081A (zh) 2009-08-26
CN101518081B CN101518081B (zh) 2013-03-06

Family

ID=39167219

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007800352174A Expired - Fee Related CN101518081B (zh) 2006-09-26 2007-09-26 对使用音频时间戳的多媒体解码器的再同步

Country Status (6)

Country Link
US (1) US9083994B2 (zh)
EP (1) EP2070329B1 (zh)
JP (1) JP5096472B2 (zh)
KR (1) KR101047820B1 (zh)
CN (1) CN101518081B (zh)
WO (1) WO2008039871A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102081941B (zh) * 2009-11-30 2012-09-05 天瀚科技股份有限公司 电子书的影音数据处理方法

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100906766B1 (ko) * 2007-06-18 2009-07-09 한국전자통신연구원 키 재동기 구간의 음성 데이터 예측을 위한 음성 데이터송수신 장치 및 방법
US9794605B2 (en) * 2007-06-28 2017-10-17 Apple Inc. Using time-stamped event entries to facilitate synchronizing data streams
CN103269257B (zh) * 2013-05-13 2016-08-24 杰发科技(合肥)有限公司 一种检测变长编码码流错误的方法和解码及错误检测装置
US9684294B2 (en) * 2015-01-09 2017-06-20 Tyco Safety Products Canada Ltd. Multi-core processor for optimized power consumption in a security and home automation system
CN113113013B (zh) * 2021-04-15 2022-03-18 北京帝派智能科技有限公司 一种智能语音交互打断处理方法、装置及系统
EP4322536A1 (en) 2021-08-05 2024-02-14 Samsung Electronics Co., Ltd. Electronic device and method for multimedia playback in electronic device

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3354597B2 (ja) 1991-08-12 2002-12-09 富士通株式会社 カウンタ回路およびその応用回路
US5515296A (en) * 1993-11-24 1996-05-07 Intel Corporation Scan path for encoding and decoding two-dimensional signals
US6125398A (en) * 1993-11-24 2000-09-26 Intel Corporation Communications subsystem for computer-based conferencing system using both ISDN B channels for transmission
US5838874A (en) * 1995-05-08 1998-11-17 Kabushiki Kaisha Toshiba Audiovisual encoding system with a reduced number of audio encoders
US5703877A (en) 1995-11-22 1997-12-30 General Instrument Corporation Of Delaware Acquisition and error recovery of audio data carried in a packetized data stream
US6101195A (en) * 1997-05-28 2000-08-08 Sarnoff Corporation Timing correction method and apparatus
US20030161614A1 (en) * 1997-11-28 2003-08-28 Kabushiki Kaisha Toshiba Method and apparatus for playing back data recorded on a recoding medium
US6157955A (en) * 1998-06-15 2000-12-05 Intel Corporation Packet processing system including a policy engine having a classification unit
US6359479B1 (en) * 1998-08-04 2002-03-19 Juniper Networks, Inc. Synchronizing data transfers between two distinct clock domains
US6363207B1 (en) * 1998-10-22 2002-03-26 Sony Corporation Method and apparatus for a virtual system time clock for digital audio/video processor
JP3358581B2 (ja) 1999-03-23 2002-12-24 ヤマハ株式会社 パケット転送装置
US6512552B1 (en) * 1999-03-29 2003-01-28 Sony Corporation Subpicture stream change control
EP1056297A3 (en) 1999-05-24 2002-10-02 Agilent Technologies, Inc. (a Delaware corporation) Multimedia decoder with error detection
AU5140200A (en) * 1999-05-26 2000-12-18 Enounce, Incorporated Method and apparatus for controlling time-scale modification during multi-media broadcasts
US7539130B2 (en) * 2000-03-28 2009-05-26 Nokia Corporation Method and system for transmitting and receiving packets
US6961631B1 (en) * 2000-04-12 2005-11-01 Microsoft Corporation Extensible kernel-mode audio processing architecture
US7212727B2 (en) * 2000-04-21 2007-05-01 Matsushita Electric Industrial Co., Ltd. Trick play method for digital storage medium
US7212726B2 (en) * 2000-09-15 2007-05-01 International Business Machines Corporation System and method of processing MPEG streams for file index insertion
JP2002247565A (ja) 2001-02-22 2002-08-30 Hitachi Ltd ネットワークavカメラおよびシステム
CN1463441A (zh) * 2001-04-20 2003-12-24 皇家菲利浦电子有限公司 Mp3的特技播放
US6977980B2 (en) * 2001-08-29 2005-12-20 Rambus Inc. Timing synchronization methods and systems for transmit parallel interfaces
BRPI0212368B1 (pt) 2001-09-06 2015-06-30 Thomson Licensing Sa Método para a monitoração durante o processamento de um arquivo de dados de áudio tendo porções de dados com razões de compactação diferentes e tocador de dados de áudio que implementa o mesmo
US20030099196A1 (en) * 2001-11-23 2003-05-29 Benoist Sebire Radio bearer service for IMS services
US6912010B2 (en) * 2002-04-15 2005-06-28 Tektronix, Inc. Automated lip sync error correction
US7158539B2 (en) 2002-04-16 2007-01-02 Microsoft Corporation Error resilient windows media audio coding
DE60211157T2 (de) * 2002-09-06 2007-02-08 Sony Deutschland Gmbh Synchrones Abspielen von Medien-Paketen
CH704101B1 (de) * 2002-11-06 2012-05-31 Barix Ag Verfahren und Vorrichtung zur synchronisierten Wiedergabe von Datenströmen.
CN1720749B (zh) * 2002-12-04 2010-12-08 三叉微系统(远东)有限公司 自动测试音频/视频同步的方法
KR100711328B1 (ko) 2003-02-27 2007-04-27 마츠시타 덴끼 산교 가부시키가이샤 데이터 처리 장치 및 방법
US7227899B2 (en) * 2003-08-13 2007-06-05 Skystream Networks Inc. Method and system for re-multiplexing of content-modified MPEG-2 transport streams using interpolation of packet arrival times
US7392417B2 (en) * 2003-10-06 2008-06-24 Nxp B.V. Device for exchanging data signals between two clock domains
US8687607B2 (en) 2003-10-08 2014-04-01 Qualcomm Incorporated Method and apparatus for feedback reporting in a wireless communications system
US20050166135A1 (en) * 2004-01-05 2005-07-28 Burke David G. Apparatus, system and method for synchronized playback of data transmitted over an asynchronous network
US20050226601A1 (en) * 2004-04-08 2005-10-13 Alon Cohen Device, system and method for synchronizing an effect to a media presentation
DE602004009560T2 (de) * 2004-07-22 2008-08-21 Harman Becker Automotive Systems Gmbh Datenübertragungssynchronisationsschema
US20060069457A1 (en) * 2004-09-24 2006-03-30 Texas Instruments Incorporated Dynamically adjustable shared audio processing in dual core processor
US7335576B2 (en) * 2004-10-08 2008-02-26 Irvine Sensors Corp. Method for precision integrated circuit die singulation using differential etch rates
US8335576B1 (en) * 2005-09-22 2012-12-18 Teradici Corporation Methods and apparatus for bridging an audio controller
US8189586B2 (en) * 2006-04-12 2012-05-29 Telefonaktiebolaget Lm Ericsson (Publ) Plural telecommunications functions having sharing transaction(s)
US9420332B2 (en) * 2006-07-06 2016-08-16 Qualcomm Incorporated Clock compensation techniques for audio decoding
US8948206B2 (en) * 2006-08-31 2015-02-03 Telefonaktiebolaget Lm Ericsson (Publ) Inclusion of quality of service indication in header compression channel

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102081941B (zh) * 2009-11-30 2012-09-05 天瀚科技股份有限公司 电子书的影音数据处理方法

Also Published As

Publication number Publication date
JP2010505150A (ja) 2010-02-18
WO2008039871A2 (en) 2008-04-03
US20080074542A1 (en) 2008-03-27
US9083994B2 (en) 2015-07-14
JP5096472B2 (ja) 2012-12-12
EP2070329A2 (en) 2009-06-17
KR20090089287A (ko) 2009-08-21
CN101518081B (zh) 2013-03-06
WO2008039871A3 (en) 2008-07-31
KR101047820B1 (ko) 2011-07-08
EP2070329B1 (en) 2017-06-14

Similar Documents

Publication Publication Date Title
CN101518081B (zh) 对使用音频时间戳的多媒体解码器的再同步
CN103338386B (zh) 基于简化时间戳的音视频同步方法
CN101803263B (zh) 用于分组交换传输的可伸缩检错和交叉会话定时同步
JP5130352B2 (ja) マルチメディアコンテナファイルの受信ヒントトラックに記録するメディアストリーム
US20060029139A1 (en) Data transmission synchronization scheme
CN101202613B (zh) 一种用于时钟同步的终端
CN104394456A (zh) 一种嵌入式环境下音视频解码的方法及装置
KR20020073533A (ko) 재생 시스템 및 재생 방법 및 데이터 송신 장치 및 데이터송신 방법
WO2008139692A1 (ja) デジタル放送受信機
CN1330183C (zh) 广播接收再现系统以及广播接收装置
JP2010531087A (ja) 一定のビットレートのストリームの伝送のためのシステム及び方法
US20030046711A1 (en) Formatting a file for encoded frames and the formatter
CN101409093B (zh) 一种确定音频数据采样点位置的方法及装置
CN103297862A (zh) 在终端中使用关键帧显示内容的设备和方法
KR100772375B1 (ko) 전송 스트림의 시간 정보를 이용하여 디지털 방송 수신장치의 시간을 설정하는 방법 및 그 장치
CN100544448C (zh) 一种移动多媒体网络的时钟同步系统
US20120192039A1 (en) Method, Apparatuses and Service for Media Transmission
JP5082715B2 (ja) 受信装置、受信方法およびコンピュータプログラム
KR100759216B1 (ko) 방송 컨텐츠 축적 시스템 및 방법
CN106357415A (zh) 抗丢包处理方法和装置
KR102426852B1 (ko) 비상 방송용 멀티미디어 파일 내장형 네트워크 방송시스템
KR101268757B1 (ko) 단방향 전송환경에서 멀티미디어 전자파일의 다운로드와 재생을 병렬적으로 처리하기 위한 송수신 방법 및 장치
KR0181080B1 (ko) 엠펙 시스템의 이에스씨알 부호화장치
JP2002319993A (ja) 通信システムおよび通信方法
JP5433245B2 (ja) データ制御装置、データ制御システム、制御方法及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130306

Termination date: 20180926

CF01 Termination of patent right due to non-payment of annual fee