CN113055718B - 时间戳均匀化处理的方法、系统、电子装置和存储介质 - Google Patents
时间戳均匀化处理的方法、系统、电子装置和存储介质 Download PDFInfo
- Publication number
- CN113055718B CN113055718B CN202110611537.1A CN202110611537A CN113055718B CN 113055718 B CN113055718 B CN 113055718B CN 202110611537 A CN202110611537 A CN 202110611537A CN 113055718 B CN113055718 B CN 113055718B
- Authority
- CN
- China
- Prior art keywords
- media frame
- timestamp
- compensation
- current media
- standard
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23608—Remultiplexing multiplex streams, e.g. involving modifying time stamps or remapping the packet identifiers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4344—Remultiplexing of multiplex streams, e.g. by modifying time stamps or remapping the packet identifiers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请涉及一种时间戳均匀化处理的方法、系统、电子装置和存储介质，通过获取媒体流，获取媒体流中当前媒体帧时间戳和上一媒体帧时间戳的差值，以及差值的上下限范围，当差值在上下限范围内，则输出当前媒体帧时间戳，若不在，则获取媒体流的标准媒体帧间隔，将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和；当差值大于标准媒体帧间隔时，根据补偿系数对更新后的当前媒体帧时间戳进行正向补偿，小于时，根据补偿系数对更新后的当前媒体帧时间戳进行反向补偿；输出补偿后的当前媒体帧目标时间戳，解决了音视频帧的时间戳不均匀，播放端播放异常的问题，还通过正向补偿和反向补偿平衡累计误差，防止累计误差越积累越大。
Description
技术领域
本申请涉及媒体流技术领域，特别是涉及时间戳均匀化处理的方法、系统、电子装置和存储介质。
背景技术
互联网直播采用实时流式传输技术，首先，主播开启直播，将直播内容编码压缩后，传输至网站服务器，这一过程被称为“推流”，即将视频内容推给服务器，直播内容传输至网站服务器后，用户观看直播时，会直接从网站服务器拉取直播内容，这一过程被称为“拉流”。拉流获得相应媒体流后可在本地进行解码播放，解码播放的过程会依赖媒体流中音视频帧携带的时间戳，在原始采集均匀性不佳或编码器输出的时间戳序列不均匀等情况下，会使媒体流中的音视频帧携带的时间戳不均匀，导致播放端播放异常。
目前针对相关技术中媒体流中的音视频帧携带的时间戳不均匀，导致不同播放端播放异常的问题，尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种时间戳均匀化处理的方法、系统、电子装置和存储介质，以至少解决相关技术中媒体流中的音视频帧携带的时间戳不均匀，导致播放端播放异常的问题。
第一方面，本申请实施例提供了一种时间戳均匀化处理的方法，所述方法包括：
获取媒体流，其中，所述媒体流为视频流或音频流；
获取所述媒体流中当前媒体帧时间戳和上一媒体帧时间戳的差值，以及获取所述差值的上下限范围，并判断所述差值是否在所述上下限范围内；
若所述判断结果为是，则输出所述当前媒体帧时间戳作为当前媒体帧目标时间戳，若所述判断结果为否，则获取所述媒体流的标准媒体帧间隔，将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和；
判断所述差值是否大于所述标准媒体帧间隔，若所述判断结果为是，则根据补偿系数对更新后的所述当前媒体帧时间戳进行正向补偿，若所述判断结果为否，则根据补偿系数对更新后的所述当前媒体帧时间戳进行反向补偿，输出所述正向补偿或所述反向补偿后的时间戳作为所述当前媒体帧目标时间戳。
在其中一些实施例中，将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和之前，所述方法还包括：
判断所述差值是否大于最大误差允许系数，若所述判断结果为是，则输出所述当前媒体帧时间戳作为当前媒体帧目标时间戳，若所述判断结果为否，则将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和，其中，所述最大误差允许系数为n倍的所述标准媒体帧间隔，n为大于1的数值。
在其中一些实施例中，根据补偿系数对更新后的所述当前媒体帧时间戳进行正向补偿或反向补偿包括：
所述正向补偿为将更新后的所述当前媒体帧时间戳与所述补偿系数之和作为所述当前媒体帧目标时间戳；
所述反向补偿为将更新后的所述当前媒体帧时间戳与所述补偿系数之差作为所述当前媒体帧目标时间戳。
在其中一些实施例中，所述根据补偿系数对更新后的所述当前媒体帧时间戳进行正向补偿或反向补偿之后，所述方法还包括：
根据所述当前媒体帧目标时间戳更新上一媒体帧时间戳，更新后的上一媒体帧时间戳作为下一媒体帧时间戳的上一媒体帧时间戳。
在其中一些实施例中，获取所述上下限范围包括，根据所述标准媒体帧间隔和波动上下限系数，获取所述上下限范围，其中，所述波动上下限系数小于播放端解码器能容忍的波动范围。
在其中一些实施例中，获取所述媒体流的标准媒体帧间隔包括：
若所述媒体流为视频流，则根据所述视频流的帧率，获取标准视频帧间隔，所述标准视频帧间隔作为所述标准媒体帧间隔；
若所述媒体流为音频流，则根据所述音频流的采样率和每帧音频实际采样点数，获取标准音频帧间隔，所述标准音频帧间隔作为所述标准媒体帧间隔。
第二方面，本申请实施例提供了一种时间戳均匀化处理的系统，所述系统包括获取模块、判断模块、补偿模块、调整模块和输出模块，
所述获取模块，用于获取媒体流，其中，所述媒体流为视频流或音频流；
所述判断模块，用于获取当前媒体帧时间戳和上一媒体帧时间戳的差值和所述差值的上下限范围，并判断所述差值是否在所述上下限范围内，若所述判断结果为是，则所述输出模块输出所述当前媒体帧时间戳作为当前媒体帧目标时间戳，若所述判断结果为否，则所述补偿模块获取所述媒体流的标准媒体帧间隔，所述调整模块将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和；
所述判断模块判断所述差值是否大于所述标准媒体帧间隔，若所述判断结果为是，则所述补偿模块根据补偿系数对更新后的所述当前媒体帧时间戳进行正向补偿，若所述判断结果为否，则所述补偿模块根据补偿系数对更新后的所述当前媒体帧时间戳进行反向补偿；
所述输出模块输出所述正向补偿或所述反向补偿后的时间戳作为所述当前媒体帧目标时间戳。
在其中一些实施例中，所述调整模块将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和之前，所述判断模块还用于判断所述差值是否大于最大误差允许系数，若所述判断结果为是，则所述输出模块输出所述当前媒体帧时间戳作为当前媒体帧目标时间戳，若所述判断结果为否，则所述调整模块将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和，其中，所述最大误差允许系数为n倍的所述标准媒体帧间隔，n为大于1的数值。
在其中一些实施例中，根据补偿系数对更新后的所述当前媒体帧时间戳进行正向补偿或反向补偿包括：
所述正向补偿为将更新后的所述当前媒体帧时间戳与所述补偿系数之和作为所述当前媒体帧目标时间戳；
所述反向补偿为将更新后的所述当前媒体帧时间戳与所述补偿系数之差作为所述当前媒体帧目标时间戳。
在其中一些实施例中，所述根据补偿系数对更新后的所述当前媒体帧时间戳进行正向补偿或反向补偿之后，所述系统还包括更新模块，所述更新模块，用于根据所述当前媒体帧目标时间戳更新上一媒体帧时间戳，更新后的上一媒体帧时间戳作为下一媒体帧时间戳的上一媒体帧时间戳。
在其中一些实施例中，获取所述上下限范围包括，根据所述标准媒体帧间隔和波动上下限系数，获取所述上下限范围，其中，所述波动上下限系数小于播放端解码器能容忍的波动范围。
在其中一些实施例中，获取所述媒体流的标准媒体帧间隔包括：若所述媒体流为视频流，则根据所述视频流的帧率，获取标准视频帧间隔，所述标准视频帧间隔作为所述标准媒体帧间隔；
若所述媒体流为音频流，则根据所述音频流的采样率和每帧音频实际采样点数，获取标准音频帧间隔，所述标准音频帧间隔作为所述标准媒体帧间隔。
第三方面，本申请实施例提供了一种电子装置，包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上述第一方面所述的时间戳均匀化处理的方法。
第四方面，本申请实施例提供了一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上述第一方面所述的时间戳均匀化处理的方法。
相比于相关技术，本申请实施例提供的时间戳均匀化处理的方法，通过获取媒体流，其中，媒体流为视频流或音频流；获取媒体流中当前媒体帧时间戳和上一媒体帧时间戳的差值，以及获取差值的上下限范围，并判断差值是否在上下限范围内；若判断结果为是，则输出当前媒体帧时间戳作为当前媒体帧目标时间戳，若判断结果为否，则获取媒体流的标准媒体帧间隔，将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和；判断差值是否大于标准媒体帧间隔，若判断结果为是，则根据补偿系数对更新后的当前媒体帧时间戳进行正向补偿，若判断结果为否，则根据补偿系数对更新后的当前媒体帧时间戳进行反向补偿；输出正向补偿或反向补偿后的时间戳作为当前媒体帧目标时间戳，本申请根据当前媒体帧时间戳和上一媒体帧时间戳的差值判断是否需要对当前媒体帧时间戳进行校正，当差值在上下限范围内，则认为当前媒体帧时间戳和上一媒体帧时间戳的帧间隔符合要求，当差值在上下限范围外，则将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和，更新当前媒体帧时间戳后，判断更新前当前媒体帧时间戳和上一媒体帧时间戳的差值是否大于标准媒体帧间隔，若差值大于标准媒体帧间隔，更新当前媒体帧时间戳后，更新后的当前媒体帧时间戳和下一媒体帧时间戳的帧间隔会增大，故根据补偿系数对更新后的当前媒体帧时间戳进行正向补偿，经过正向补偿后，当前媒体帧目标时间戳与上一媒体帧时间戳的差值在标准媒体帧间隔的波动范围内，同时还缩小了更新后的当前媒体帧时间戳和下一媒体帧时间戳的帧间隔，对需要校正的每一媒体帧时间戳经过校正和补偿的处理，不仅解决了媒体流中的音视频帧携带的时间戳不均匀，导致播放端播放异常的问题，还通过正向补偿和反向补偿平衡累计误差，防止调整时间戳序列过程中累计误差越积累越大，提升了音视频的兼容性，有标准化意义。
附图说明
此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：
图1是根据本申请实施例的时间戳均匀化处理的方法的流程图；
图2是根据本申请实施例的另一种时间戳均匀化处理的方法的流程图；
图3是根据本申请实施例的时间戳均匀化处理的系统的结构框图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行描述和说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。基于本申请提供的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。此外，还可以理解的是，虽然这种开发过程中所作出的努力可能是复杂并且冗长的，然而对于与本申请公开的内容相关的本领域的普通技术人员而言，在本申请揭露的技术内容的基础上进行的一些设计，制造或者生产等变更只是常规的技术手段，不应当理解为本申请公开的内容不充分。
在本申请中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域普通技术人员显式地和隐式地理解的是，本申请所描述的实施例在不冲突的情况下，可以与其它实施例相结合。
除非另作定义，本申请所涉及的技术术语或者科学术语应当为本申请所属技术领域内具有一般技能的人士所理解的通常意义。本申请所涉及的“一”、“一个”、“一种”、“该”等类似词语并不表示数量限制，可表示单数或复数。本申请所涉及的术语“包括”、“包含”、“具有”以及它们任何变形，意图在于覆盖不排他的包含；例如包含了一系列步骤或模块（单元）的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可以还包括没有列出的步骤或单元，或可以还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。本申请所涉及的“连接”、“相连”、“耦接”等类似的词语并非限定于物理的或者机械的连接，而是可以包括电气的连接，不管是直接的还是间接的。本申请所涉及的“多个”是指大于或者等于两个。“和/或”描述关联对象的关联关系，表示可以存在三种关系，例如，“A和/或B”可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。本申请所涉及的术语“第一”、“第二”、“第三”等仅仅是区别类似的对象，不代表针对对象的特定排序。
本实施例提供了一种时间戳均匀化处理的方法，图1是根据本申请实施例的时间戳均匀化处理的方法的流程图，如图1所示，该方法包括如下步骤：
步骤S101，获取媒体流，其中，媒体流为视频流或音频流；其中，媒体流是采用流式传输的方式，使得流式媒体在互联网上播放的技术，媒体流包括视频流和音频流；
步骤S102，获取媒体流中当前媒体帧时间戳和上一媒体帧时间戳的差值，以及获取差值的上下限范围，并判断差值是否在上下限范围内；本实施例中，获取媒体流后，每一媒体帧数据都会附带媒体帧采集时刻的时间戳和媒体帧数据编码后标记的时间戳，本申请采用的时间戳可以为采集时刻的时间戳，也可以为编码后标记的时间戳；
步骤S103，若判断结果为是，则输出当前媒体帧时间戳作为当前媒体帧目标时间戳，若判断结果为否，则获取媒体流的标准媒体帧间隔，将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和；本实施例中，差值在上下限范围内，则认为当前媒体帧时间戳和上一媒体帧时间戳的帧间隔符合要求，无需对当前媒体帧时间戳进行校正，输出当前媒体帧时间戳作为当前媒体帧目标时间戳，当差值在上下限范围外，则会导致播放端解码后播放异常，故将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和；
步骤S104，判断差值是否大于标准媒体帧间隔，若判断结果为是，则根据补偿系数对更新后的当前媒体帧时间戳进行正向补偿，若判断结果为否，则根据补偿系数对更新后的当前媒体帧时间戳进行反向补偿，输出正向补偿或反向补偿后的时间戳作为当前媒体帧目标时间戳。
本实施例中，当差值在上下限范围外，则将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和之后，判断差值是否大于标准媒体帧间隔，若差值大于标准媒体帧间隔，更新当前媒体帧时间戳后，更新后的当前媒体帧时间戳和下一媒体帧时间戳的帧间隔会增大，故根据补偿系数对更新后的当前媒体帧时间戳进行正向补偿，经过正向补偿后，当前媒体帧目标时间戳与上一媒体帧时间戳的差值还在上下限范围内，即在标准媒体帧间隔的波动范围内，并且同时缩小了更新后的当前媒体帧时间戳和下一媒体帧时间戳的帧间隔；若差值小于标准媒体帧间隔，更新当前媒体帧时间戳后，更新后的当前媒体帧时间戳和下一媒体帧时间戳的帧间隔会减小，故根据补偿系数对更新后的当前媒体帧时间戳进行反向补偿，经过反向补偿后，当前媒体帧目标时间戳与上一媒体帧时间戳的差值还在标准媒体帧间隔的波动范围内，同时还增大了更新后的当前媒体帧时间戳和下一媒体帧时间戳的帧间隔；对当前媒体帧时间戳进行校正后，通过正向补偿和反向补偿平衡累计误差，其中，考虑到补偿系数太大会进一步增大误差，太小的补偿能力有限，故补偿系数可设置为0.1倍的标准媒体帧间隔。
通过上述步骤S101至步骤S104，相比于相关技术中，在原始采集均匀性不佳或编码器输出的时间戳序列不均匀等情况下，即采集端为android系统，程序定时调用audiorecord接口，通过系统api获取的媒体帧可能存在不均匀、编码器内部可能存在队列缓冲区，媒体帧的编码处理过程也有时间差异，如果采集未标记时间戳，采用编码器输出的时间戳序列，可能存在不均匀，或者采集的时间戳是通过解码音频文件进一步得到的，解码每一帧的过程可能时间不均匀，进而导致采集不均匀等情况下，会使媒体流中的音视频帧携带的时间戳不均匀，导致播放端播放异常的问题，本申请通过根据当前媒体帧时间戳和上一媒体帧时间戳的差值判断是否需要对当前媒体帧时间戳进行校正，当差值在标准媒体帧间隔的波动范围内，则认为当前媒体帧时间戳和上一媒体帧时间戳的帧间隔符合要求，当差值在标准媒体帧间隔的波动范围外，则将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和，更新当前媒体帧时间戳后，判断更新前当前媒体帧时间戳和上一媒体帧时间戳的差值是否大于标准媒体帧间隔，若差值大于标准媒体帧间隔，更新当前媒体帧时间戳后，更新后的当前媒体帧时间戳和下一媒体帧时间戳的帧间隔会增大，故根据补偿系数对更新后的当前媒体帧时间戳进行正向补偿，经过正向补偿后，当前媒体帧目标时间戳与上一媒体帧时间戳的差值在标准媒体帧间隔的波动范围内，同时还缩小了更新后的当前媒体帧时间戳和下一媒体帧时间戳的帧间隔，对需要校正的每一媒体帧时间戳经过校正和补偿的处理，不仅解决了媒体流中的音视频帧携带的时间戳不均匀，导致播放端播放异常的问题，还通过正向补偿和反向补偿平衡累计误差，防止累计误差越积累越大，提升了音视频的兼容性，有标准化意义。
在其中一些实施例中，获取上下限范围包括，根据标准媒体帧间隔和波动上下限系数，获取上下限范围，其中，波动上下限系数小于播放端解码器能容忍的波动范围。本实施例中，波动上下限系数一般要求小于播放端解码器能容忍的波动范围，将波动上限系数设置为1.05，波动下限系数设置为0.8，则上限范围阈值为波动上限系数1.05乘于标准媒体帧间隔，下限范围阈值为波动下限系数0.8乘于标准媒体帧间隔，本申请将波动范围上限设置为1.05，远远小于h5播放器能容忍的波动范围上限1.5，不设置为最大上限，是因为较小的上限会使输出的均匀度提升，但是会导致需要调整的原始点变多，也会增大超过最大误差允许系数强制同步的可能性。较大的上限（小于播放器能容忍的最大上限1.5倍标准音频帧间隔）会使输出均匀性略微下降，但是需要调整的采集点会变少，也会减少差值超过最大误差允许系数，不进行校正的可能性，故可根据需求设定波动上下限系数，只要设定的波动上下限系数小于播放端解码器能容忍的波动范围即可，示例性的，波动上限系数×标准媒体帧间隔+补偿系数小于播放内核限定的上限系数×标准媒体帧间隔即可。
在其中一些实施例中，将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和之前，判断差值是否大于最大误差允许系数，若判断结果为是，则输出当前媒体帧时间戳作为当前媒体帧目标时间戳，若判断结果为否，则将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和，其中，最大误差允许系数为n倍的标准媒体帧间隔，n为大于1的数值。本实施例中，n为大于1的数值，并且n大于波动范围上限，波动范围上限改变时，可动态设置n的取值，在将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和之前，先判断差值是否有太大偏差，当差值大于n倍的标准媒体帧间隔时，不对当前媒体帧时间戳进行校正，直接输出当前媒体帧时间戳作为当前媒体帧目标时间戳，这是因为当差值大于n倍的标准媒体帧间隔时，意味着当前媒体帧时间戳和上一媒体帧时间戳有了较大的偏差，该偏差可能是采集端在采集媒体流数据时出现了中断情况，示例性的，采集端允许音频源切换，切换的过程会有一定的时间间隙，该时间间隙内没有音频帧产生，当音频帧恢复时，当前音频帧时间戳和上一音频时间戳的帧间隔会非常大，如果对当前音频帧时间戳进行校正，会导致从切换时刻开始的后续音频帧都需要经过较大幅度的调整，故直接输出当前媒体帧时间戳作为当前媒体帧目标时间戳，不进行校正，牺牲一个点的均匀性来消除这个大的差值对一大段时间戳序列的影响。
在其中一些实施例中，根据补偿系数对更新后的当前媒体帧时间戳进行正向补偿或反向补偿包括：
正向补偿为将更新后的当前媒体帧时间戳与补偿系数之和作为当前媒体帧目标时间戳；反向补偿为将更新后的当前媒体帧时间戳与补偿系数之差作为当前媒体帧目标时间戳。本实施例中，校正过程并不一定要将每帧的帧间隔校正为标准媒体帧间隔，例如，h5播放器能容忍的波动范围上限为1.5倍的标准音频帧间隔，当标准音频帧间隔为22.5毫秒，那么播放第一帧音频后，第二帧音频时间戳与第一帧音频时间戳的帧间隔只要在1.5 *22.5毫秒内就能正常播放，故将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和之后，根据补偿系数对更新后的当前媒体帧时间戳进行正向补偿或反向补偿，正向补偿下，当前媒体帧目标时间戳为更新后的当前媒体帧时间戳与补偿系数之和，使播放器能正常播放的情况下，缩小更新后的当前媒体帧时间戳和下一媒体帧时间戳的帧间隔，平衡累计误差，反向补偿下，当前媒体帧目标时间戳为更新后的当前媒体帧时间戳与补偿系数之差，使播放器能正常播放的情况下，增大更新后的当前媒体帧时间戳和下一媒体帧时间戳的帧间隔，平衡累计误差，通过引入补偿系数以平衡累计误差，防止累计误差越积累越大。
在其中一些实施例中，根据补偿系数对更新后的当前媒体帧时间戳进行正向补偿或反向补偿之后，根据当前媒体帧目标时间戳更新上一媒体帧时间戳，更新后的上一媒体帧时间戳作为下一媒体帧时间戳的上一媒体帧时间戳。本实施例中，根据补偿系数对更新后的当前媒体帧时间戳进行正向补偿或反向补偿之后，对当前媒体帧时间戳的校正就已经完成了，此时，判断是否需要对下一媒体帧时间戳进行校正，需求出下一媒体帧时间戳和当前媒体帧目标时间戳的帧间隔，故根据当前媒体帧目标时间戳更新上一媒体帧时间戳，更新后的上一媒体帧时间戳作为下一媒体帧时间戳的上一媒体帧时间戳，示例性的，某个音频帧时间戳序列为pts1、pts2、pts3和pts4，当前媒体帧时间戳为pts2，上一媒体帧时间戳prevpts= pts1，pts2与pts1差值大于标准音频帧间隔，对pts2进行校正和补偿，得到当前媒体帧目标时间戳PTS2，若pts3与PTS2差值也大于标准音频帧间隔，需对pts3进行校正和补偿，根据当前媒体帧目标时间戳更新上一媒体帧时间戳，即此时prevpts= PTS2，更新后的上一媒体帧时间戳prevpts= PTS2作为下一媒体帧时间戳pts3的上一媒体帧时间戳，通过pts3-PTS2求出pts3与上一媒体帧时间戳的差值。
在其中一些实施例中，获取媒体流的标准媒体帧间隔包括：若媒体流为视频流，则
根据视频流的帧率，获取标准视频帧间隔，标准视频帧间隔作为标准媒体帧间隔；示例性
的，视频流的帧率为30fps，则标准视频帧间隔为
，单位为毫秒；若媒体流为
音频流，则根据音频流的采样率和每帧音频实际采样点数，获取标准音频帧间隔，标准音频
帧间隔作为标准媒体帧间隔。示例性的，音频流的采样率为44100HZ，采集端每帧读取音频
实际采样点数为1024，则标准音频帧间隔为
，单位为毫秒，通过本
实施例计算出标准媒体帧间隔后，通过该标准媒体帧间隔对媒体帧时间戳进行校正。
在其中一些实施例中，图2是根据本申请实施例的另一种时间戳均匀化处理的方法的流程图，如图2所示，以媒体流为音频流为例，该方法包括如下步骤：
步骤S201，编码器输出音频帧时间戳pts，其中，输出的音频帧时间戳可以是音频帧采集时刻的时间戳，也可以是音频帧数据编码后标记的系统时间戳，采集时刻的时间戳相对于编码后标记的时间戳更准确，故pts推荐采用音频帧采集时刻的时间戳进行校正；
步骤S202，更新diff = pts- prevPts，即差值diff = 当前音频帧时间戳pts-上一音频帧时间戳prevPts；
步骤S203，判断diff< lowThreshold || diff> highThreshold 
即差值diff小
于下限lowThreshold或差值diff大于上限highThreshold，则说明差值在上下限范围外，判
断差值diff是否在上下限范围外，若判断结果为是，则跳转到步骤S205，若判断结果为否，
则跳转到步骤S204；
步骤S204，curpts= pts，即差值diff在上下限范围内，无需校正，直接输出当前音频帧时间戳pts，或差值diff大于或等于n倍的标准音频帧间隔，无需校正，直接输出当前音频帧时间戳pts；
步骤S205，判断diff <n×SAMPLE_DURATION
即判断差值diff是否小于n倍的标
准音频帧间隔SAMPLE_DURATION，若判断结果为是，则为正向补偿，跳转到步骤S206，若判断
结果为否，则为反向补偿，跳转到步骤S204；
步骤S206，curpts = prevPts + SAMPLE_DURATION，即将当前音频帧时间戳curpts更新为上一音频帧时间戳prevPts与标准音频帧间隔之和；
步骤S207，判断diff< SAMPLE_DURATION
若判断结果为是，则跳转到步骤S208，
若判断结果为否，则跳转到步骤S209；
步骤S208，normalAdujst = COMPENSATE，即正向补偿时，补偿系数normalAdujst为正的COMPENSATE；
步骤S209，normalAdujst = - COMPENSATE，即反向补偿时，补偿系数normalAdujst为负的COMPENSATE；
步骤S210，curpts = curpts + normalAdujst，即将当前音频帧目标时间戳为更新后的当前音频帧时间戳与补偿系数之和；
步骤S211，prevPts= curpts，即根据当前音频帧时间戳更新上一音频帧时间戳，作为下一音频帧时间戳的上一音频帧时间戳；
步骤S212，输出curpts。
需要说明的是，在上述流程中或者附图的流程图中示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
本实施例还提供了一种时间戳均匀化处理的系统，该系统用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”、“单元”、“子单元”等可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图3是根据本申请实施例的时间戳均匀化处理的系统的结构框图，如图3所示，该系统包括获取模块31、判断模块32、补偿模块33、调整模块34和输出模块35，
获取模块31，用于获取媒体流，其中，媒体流为视频流或音频流；判断模块32，用于获取当前媒体帧时间戳和上一媒体帧时间戳的差值和差值的上下限范围，并判断差值是否在上下限范围内，若判断结果为是，则输出模块35输出当前媒体帧时间戳作为当前媒体帧目标时间戳，若判断结果为否，则补偿模块33获取媒体流的标准媒体帧间隔，调整模块34将当前媒体帧时间戳更新为上一媒体帧时间戳和标准媒体帧间隔之和；判断模块32判断差值是否大于标准媒体帧间隔，若判断结果为是，则补偿模块33根据补偿系数对更新后的当前媒体帧时间戳进行正向补偿，若判断结果为否，则补偿模块33根据补偿系数对更新后的当前媒体帧时间戳进行反向补偿；输出模块35输出正向补偿或反向补偿后的时间戳作为当前媒体帧时间戳，解决了媒体流中的音视频帧携带的时间戳不均匀，导致播放端播放异常的问题，还通过正向补偿和反向补偿平衡累计误差，防止累计误差越积累越大，提升了音视频的兼容性，有标准化意义。
需要说明的是，上述各个模块可以是功能模块也可以是程序模块，既可以通过软件来实现，也可以通过硬件来实现。对于通过硬件来实现的模块而言，上述各个模块可以位于同一处理器中；或者上述各个模块还可以按照任意组合的形式分别位于不同的处理器中。
本实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序以及执行上述任一项方法实施例中的步骤所用到的参数，例如，该参数包括标准媒体帧间隔和上下限范围，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
需要说明的是，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。
另外，结合上述实施例中的时间戳均匀化处理的方法，本申请实施例可提供一种存储介质来实现。该存储介质上存储有计算机程序以及执行上述任一项方法实施例中的步骤所用到的参数；该计算机程序被处理器执行时实现上述实施例中的任意一种时间戳均匀化处理的方法。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是终端。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序以及执行上述任一项方法实施例中的步骤所用到的参数。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种时间戳均匀化处理的方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器（ROM）、可编程ROM（PROM）、电可编程ROM（EPROM）、电可擦除可编程ROM（EEPROM）或闪存。易失性存储器可包括随机存取存储器（RAM）或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM（SRAM）、动态RAM（DRAM）、同步DRAM（SDRAM）、双数据率SDRAM（DDRSDRAM）、增强型SDRAM（ESDRAM）、同步链路（Synchlink） DRAM（SLDRAM）、存储器总线（Rambus）直接RAM（RDRAM）、直接存储器总线动态RAM（DRDRAM）、以及存储器总线动态RAM（RDRAM）等。
本领域的技术人员应该明白，以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。
Claims (9)
1.一种时间戳均匀化处理的方法，其特征在于，所述方法包括：
获取媒体流，其中，所述媒体流为视频流或音频流；
获取所述媒体流中当前媒体帧时间戳和上一媒体帧时间戳的差值，以及获取所述差值的上下限范围，并判断所述差值是否在所述上下限范围内，其中，所述上下限范围在播放端解码器能容忍的波动范围内；
若所述判断结果为是，则输出所述当前媒体帧时间戳作为当前媒体帧目标时间戳，若所述判断结果为否，则获取所述媒体流的标准媒体帧间隔，将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和；
判断所述差值是否大于所述标准媒体帧间隔，若所述判断结果为是，则根据补偿系数对更新后的所述当前媒体帧时间戳进行正向补偿，若所述判断结果为否，则根据补偿系数对更新后的所述当前媒体帧时间戳进行反向补偿，输出所述正向补偿或所述反向补偿后的时间戳作为所述当前媒体帧目标时间戳；
其中，根据补偿系数对更新后的所述当前媒体帧时间戳进行正向补偿或反向补偿包括：
所述正向补偿为将更新后的所述当前媒体帧时间戳与所述补偿系数之和作为所述当前媒体帧目标时间戳；
所述反向补偿为将更新后的所述当前媒体帧时间戳与所述补偿系数之差作为所述当前媒体帧目标时间戳；
其中，所述补偿系数的取值使所述正向补偿或所述反向补偿后，所述当前媒体帧目标时间戳与上一媒体帧的时间戳在播放端解码器能容忍的波动范围内。
2.根据权利要求1所述的方法，其特征在于，将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和之前，所述方法还包括：
判断所述差值是否大于最大误差允许系数，若所述判断结果为是，则输出所述当前媒体帧时间戳作为当前媒体帧目标时间戳，若所述判断结果为否，则将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和，其中，所述最大误差允许系数为n倍的所述标准媒体帧间隔，n为大于1的数值。
3.根据权利要求1所述的方法，其特征在于，所述根据补偿系数对更新后的所述当前媒体帧时间戳进行正向补偿或反向补偿之后，所述方法还包括：
根据所述当前媒体帧目标时间戳更新上一媒体帧时间戳，更新后的上一媒体帧时间戳作为下一媒体帧时间戳的上一媒体帧时间戳。
4.根据权利要求1所述的方法，其特征在于，获取所述上下限范围包括，根据所述标准媒体帧间隔和波动上下限系数，获取所述上下限范围，其中，所述波动上下限系数小于播放端解码器能容忍的波动范围。
5.根据权利要求1所述的方法，其特征在于，获取所述媒体流的标准媒体帧间隔包括：
若所述媒体流为视频流，则根据所述视频流的帧率，获取标准视频帧间隔，所述标准视频帧间隔作为所述标准媒体帧间隔；
若所述媒体流为音频流，则根据所述音频流的采样率和每帧音频实际采样点数，获取标准音频帧间隔，所述标准音频帧间隔作为所述标准媒体帧间隔。
6.一种时间戳均匀化处理的系统，其特征在于，所述系统包括获取模块、判断模块、补偿模块、调整模块和输出模块，
所述获取模块，用于获取媒体流，其中，所述媒体流为视频流或音频流；
所述判断模块，用于获取当前媒体帧时间戳和上一媒体帧时间戳的差值和所述差值的上下限范围，并判断所述差值是否在所述上下限范围内，若所述判断结果为是，则所述输出模块输出所述当前媒体帧时间戳作为当前媒体帧目标时间戳，若所述判断结果为否，则所述补偿模块获取所述媒体流的标准媒体帧间隔，所述调整模块将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和，其中，所述上下限范围在播放端解码器能容忍的波动范围内；
所述判断模块判断所述差值是否大于所述标准媒体帧间隔，若所述判断结果为是，则所述补偿模块根据补偿系数对更新后的所述当前媒体帧时间戳进行正向补偿，若所述判断结果为否，则所述补偿模块根据补偿系数对更新后的所述当前媒体帧时间戳进行反向补偿；
所述输出模块输出所述正向补偿或所述反向补偿后的时间戳作为所述当前媒体帧目标时间戳；
其中，根据补偿系数对更新后的所述当前媒体帧时间戳进行正向补偿或反向补偿包括：
所述正向补偿为将更新后的所述当前媒体帧时间戳与所述补偿系数之和作为所述当前媒体帧目标时间戳；
所述反向补偿为将更新后的所述当前媒体帧时间戳与所述补偿系数之差作为所述当前媒体帧目标时间戳；
其中，所述补偿系数的取值使所述正向补偿或所述反向补偿后，所述当前媒体帧目标时间戳与上一媒体帧的时间戳在播放端解码器能容忍的波动范围内。
7.根据权利要求6所述的系统，其特征在于，所述调整模块将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和之前，所述判断模块还用于判断所述差值是否大于最大误差允许系数，若所述判断结果为是，则所述输出模块输出所述当前媒体帧时间戳作为当前媒体帧目标时间戳，若所述判断结果为否，则所述调整模块将所述当前媒体帧时间戳更新为所述上一媒体帧时间戳和所述标准媒体帧间隔之和，其中，所述最大误差允许系数为n倍的所述标准媒体帧间隔，n为大于1的数值。
8.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行权利要求1至5中任一项所述的时间戳均匀化处理的方法。
9.一种存储介质，其特征在于，所述存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行权利要求1至5中任一项所述的时间戳均匀化处理的方法。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110611537.1A CN113055718B (zh) | 2021-06-02 | 2021-06-02 | 时间戳均匀化处理的方法、系统、电子装置和存储介质 |
| PCT/CN2021/118485 WO2022142481A1 (zh) | 2020-12-31 | 2021-09-15 | 音视频数据的处理方法、直播装置、电子设备和存储介质 |
| US18/345,209 US20230345089A1 (en) | 2020-12-31 | 2023-06-30 | Audio and Video Data Processing Method, Live Streaming Apparatus, Electronic Device, and Storage Medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110611537.1A CN113055718B (zh) | 2021-06-02 | 2021-06-02 | 时间戳均匀化处理的方法、系统、电子装置和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113055718A CN113055718A (zh) | 2021-06-29 |
| CN113055718B true CN113055718B (zh) | 2021-08-27 |
Family
ID=76518684
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110611537.1A Active CN113055718B (zh) | 2020-12-31 | 2021-06-02 | 时间戳均匀化处理的方法、系统、电子装置和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113055718B (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113596549B (zh) * | 2020-10-13 | 2023-09-22 | 杭州涂鸦信息技术有限公司 | 基于不同参考时钟的音视频同步方法、装置和计算机设备 |
| WO2022142481A1 (zh) * | 2020-12-31 | 2022-07-07 | 杭州星犀科技有限公司 | 音视频数据的处理方法、直播装置、电子设备和存储介质 |
| CN113453054B (zh) * | 2021-06-30 | 2022-11-29 | 深圳万兴软件有限公司 | 音视频丢帧方法、装置、计算机设备及存储介质 |
| CN113949898B (zh) * | 2021-10-13 | 2024-03-08 | 北京奇艺世纪科技有限公司 | 多媒体处理方法、装置、设备和存储介质 |
| CN114339453B (zh) * | 2022-01-06 | 2023-11-03 | 北京金山云网络技术有限公司 | 时间戳校准方法和装置、电子设备和存储介质 |
| CN114900720B (zh) * | 2022-04-02 | 2023-11-21 | 杭州星犀科技有限公司 | 媒体流的流畅性评估方法、系统、电子装置和存储介质 |
| CN114979681A (zh) * | 2022-04-11 | 2022-08-30 | 上海哔哩哔哩科技有限公司 | 流媒体数据的时间戳更新方法及装置 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000216813A (ja) * | 1999-01-20 | 2000-08-04 | Nippon Telegr & Teleph Corp <Ntt> | 誤り補償方法、並びに該方法を用いた誤り補償装置 |
| EP1441517A1 (en) * | 2001-10-31 | 2004-07-28 | Panasonic Mobile Communications Co., Ltd. | Time stamp value controller |
| CN101902649A (zh) * | 2010-07-15 | 2010-12-01 | 浙江工业大学 | 一种基于h.264标准的音视频同步控制方法 |
| CN102547390A (zh) * | 2011-12-26 | 2012-07-04 | 深圳创维数字技术股份有限公司 | 一种媒体流播放方法及系统 |
| CN103384263A (zh) * | 2012-05-03 | 2013-11-06 | 三星电子株式会社 | 用于数据同步的时间戳管理方法及其终端 |
| CN111464256A (zh) * | 2020-04-14 | 2020-07-28 | 北京百度网讯科技有限公司 | 时间戳的校正方法、装置、电子设备和存储介质 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7733919B2 (en) * | 2004-07-12 | 2010-06-08 | General Instrument Corporation | Method and apparatus for processing transport stream packets to compensate for jitter |
| CN107241155A (zh) * | 2016-03-28 | 2017-10-10 | 中兴通讯股份有限公司 | 一种自适应时钟恢复方法及装置 |
-
2021
- 2021-06-02 CN CN202110611537.1A patent/CN113055718B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000216813A (ja) * | 1999-01-20 | 2000-08-04 | Nippon Telegr & Teleph Corp <Ntt> | 誤り補償方法、並びに該方法を用いた誤り補償装置 |
| EP1441517A1 (en) * | 2001-10-31 | 2004-07-28 | Panasonic Mobile Communications Co., Ltd. | Time stamp value controller |
| CN101902649A (zh) * | 2010-07-15 | 2010-12-01 | 浙江工业大学 | 一种基于h.264标准的音视频同步控制方法 |
| CN102547390A (zh) * | 2011-12-26 | 2012-07-04 | 深圳创维数字技术股份有限公司 | 一种媒体流播放方法及系统 |
| CN103384263A (zh) * | 2012-05-03 | 2013-11-06 | 三星电子株式会社 | 用于数据同步的时间戳管理方法及其终端 |
| CN111464256A (zh) * | 2020-04-14 | 2020-07-28 | 北京百度网讯科技有限公司 | 时间戳的校正方法、装置、电子设备和存储介质 |
Non-Patent Citations (2)
| Title |
|---|
| Evaluating time synchronization using application-layer time-stamping;Osameh Al-Kofahi;《2016 IEEE Wireless Communications and Networking Conference》;20160406;全文 * |
| 一种改进的动态时间戳分析方法;杨延军，池亚平，方勇;《网络安全技术与应用》;20080315;全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113055718A (zh) | 2021-06-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN113055718B (zh) | 时间戳均匀化处理的方法、系统、电子装置和存储介质 | |
| CN111464256A (zh) | 时间戳的校正方法、装置、电子设备和存储介质 | |
| EP3136732B1 (en) | Converting adaptive bitrate chunks to a streaming format | |
| US20210344584A1 (en) | Method for Measuring Network Speed, Computing Device, and Computer-Program Product | |
| US20170111465A1 (en) | Freshness-aware presentation of content in communication terminals | |
| CN108156500B (zh) | 多媒体数据时间修正方法、计算机装置、计算机可读存储介质 | |
| CN113596549B (zh) | 基于不同参考时钟的音视频同步方法、装置和计算机设备 | |
| CN114067800B (zh) | 语音识别方法、装置和电子设备 | |
| JP2017175261A (ja) | 受信装置、データ処理方法、及び、送受信システム | |
| US10069584B2 (en) | Frequency calibration apparatus and method | |
| CN113132256B (zh) | 一种数据传输方法、终端及存储介质 | |
| CN113395561A (zh) | 基于不同参考时钟的音视频同步方法、装置和计算机设备 | |
| US11089386B1 (en) | Accommodating irregular timing information in streamed media data | |
| CN113286099A (zh) | 显示屏画面控制系统和方法 | |
| US20090138933A1 (en) | Use of a Feedback Channel for Image Broadcasting | |
| CN112929201A (zh) | 一种带宽调整方法、装置、电子设备及存储介质 | |
| CN113992295A (zh) | 多ntp服务器校时实现方法及系统、计算机设备与存储介质 | |
| JP2023506796A (ja) | 検出方法、装置、端末及びコンピュータプログラム | |
| CN107017964B (zh) | 用于检测交错播送中的分组丢失的方法和装置 | |
| CN114339453B (zh) | 时间戳校准方法和装置、电子设备和存储介质 | |
| CN113946377B (zh) | 一种服务器参数配置方法、装置及存储介质 | |
| CN113949898B (zh) | 多媒体处理方法、装置、设备和存储介质 | |
| CN116112734A (zh) | 一种视频传输方法、装置、存储介质及电子设备 | |
| CN114900720A (zh) | 媒体流的流畅性评估方法、系统、电子装置和存储介质 | |
| TW202410700A (zh) | 訊號補償裝置以及用來動態地補償訊號的方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |