CN109729403A - 音视频同步的方法、装置及存储介质 - Google Patents
音视频同步的方法、装置及存储介质 Download PDFInfo
- Publication number
- CN109729403A CN109729403A CN201811654559.0A CN201811654559A CN109729403A CN 109729403 A CN109729403 A CN 109729403A CN 201811654559 A CN201811654559 A CN 201811654559A CN 109729403 A CN109729403 A CN 109729403A
- Authority
- CN
- China
- Prior art keywords
- check value
- identification information
- audio
- current
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Television Signal Processing For Recording (AREA)
Abstract
本申请公开了一种音视频同步的方法、装置及存储介质，应用于音频轨道或者视频轨道，该音视频同步的方法包括：在当前轨道的当前样片的标识信息与参考样片的标识信息相等时，判断所述当前样片的校验值是否与所述参考样片的校验值相等；在所述当前样片的校验值与所述参考样片的校验值不相等时，获取与所述参考样片的校验值相等的目标样片；将所述参考样片的标识信息赋值至所述目标样片。本申请的技术方案，能够解决音视频不同步的问题。
Description
技术领域
本发明涉及媒体技术领域，尤其涉及一种音视频同步的方法、装置及存储介质。
背景技术
所谓流媒体是指采用流式传输的方式在Internet播放的媒体格式。流媒体又叫流式媒体，它是指商家用一个视频传送服务器把节目当成数据包发出，传送到网络上。用户通过解压设备对这些数据进行解压后，节目就会像发送前那样显示出来。所谓自适应流媒体技术：服务端将流媒体内容编码成各种不同码率的，且等份对齐的视音频小片段，如高码率高清视频小片段H，标清内容视频小片段M，低画质视频内容小片段L，客户端感知网络质量，然后动态调节下载视频内容的码率(如在网络带宽大于高清片段的码率时下载高清视频片段，网络带宽在低画质视频内容的码率附近时下载低画质视频内容小片段)，在保证播放流畅的前提下尽可能下载最优质的视频内容，为用户提供最优质、最平滑的视频演播的技术。流媒体大多采用的是时间戳同步技术，播放器demux(解复用)流媒体文件容器时，需要计算好每一个音视频sample(样片)的DTS(解码时间戳)和PTS(时间戳)，然后将音视频sample以及它对应的DTS，PTS推送给解码器，解码器根据DTS进行音视频解码，并根据PTS呈现音视频的内容。流媒体传输技术将音视频片段分开，并且有多个码率，不同码率计算PTS的timescale(时间尺度)可能不同，一旦片段的丢失(如在直播流环境中，网络的掉线导致请求的内容过期)，音视频码率切换带来的timescale的变化以及demux计算纰漏等，都可能导致音视频sample的PTS赋值错误，那么解码器呈现出来的音视频内容就会不同步，如果sample的PTS一直得不到校正，那么音视频同步就不能恢复，给用户带来十分糟糕的观影体验。
发明内容
本申请提供一种音视频同步的方法、装置及存储介质，旨在解决由于音视频的时间戳错误而导致解码器呈现出来的音视频内容不同步的问题。
为实现上述目的，本申请提供一种音视频同步的方法，应用于音频轨道或者视频轨道，所述音视频同步的方法包括：
在当前轨道的当前样片的标识信息与参考样片的标识信息相等时，判断所述当前样片的校验值是否与所述参考样片的校验值相等；
在所述当前样片的校验值与所述参考样片的校验值不相等时，获取与所述参考样片的校验值相等的目标样片；
将所述参考样片的标识信息赋值至所述目标样片。
可选的，所述在所述当前样片的校验值与所述参考样片的校验值不相等时，获取与所述参考样片的校验值相等的目标样片的步骤包括：
在所述当前样片的校验值与所述参考样片的校验值不相等时，计算下一个样片的校验值；
判断所述下一个样片的校验值是否与所述参考样片的校验值相等；
在所述下一个样片的校验值与所述参考样片的校验值相等时，以所述下一个样片作为目标样片。
可选的，所述在目标轨道的当前样片的标识信息与参考样片的标识信息相等时，判断所述当前样片的校验值是否与所述参考样片的校验值相等的步骤之前，还包括：
从服务器中下载目标文件；
解析所述目标文件，获得参考样片及当前轨道；
解析所述当前轨道，获得当前样片；
判断所述当前样片的标识信息是否与所述参考样片的标识信息相等；
在所述当前样片的标识信息与所述参考样片的标识信息相等时，计算所述当前样片的校验值。
可选的，所述判断所述当前样片的标识信息是否与所述参考样片的标识信息相等的步骤之后，还包括：
在所述当前样片的标识信息与所述参考样片的标识信息不相等时，返回执行解析所述当前轨道，获得当前样片的步骤。
可选的，所述将所述参考样片的标识信息赋值至所述目标样片的步骤包括：
获取目标样片的标识信息；
判断所述目标样片的标识信息是否与所述参考样片的标识信息相等；
在所述目标样片的标识信息与所述参考样片的标识信息不相等时，将所述参考样片的标识信息赋值至所述目标样片。
可选的，所述将所述参考样片的标识信息赋值至所述目标样片的步骤之后，还包括：
以所述目标样片的标识信息为基准值，将依次获得的每一个样片的标识信息以预设规则递增；
将递增后的每一所述样片的标识信息发送至解码器。
为实现上述目的，本申请还提供一种音视频同步的方法，应用于音频轨道或者视频轨道，所述音视频同步的方法包括：
计算当前轨道的当前样片的校验值；
判断所述当前样片的校验值是否与参考样片的校验值相等；
在所述当前样片的校验值与所述参考样片的校验值相等时，将所述参考样片的标识信息赋值至所述当前样片。
可选的，所述判断所述当前样片的校验值是否与参考样片的校验值相等的步骤之后，还包括：
在所述当前样片的校验值与所述参考样片的校验值不相等时，计算下一个样片的校验值是否与所述参考样片的校验值相等；
在所述下一个样片的校验值与所述参考样片的校验值相等时，将所述参考样片的标识信息赋值至所述下一个样片。
为实现上述目的，本申请还提供一种音视频同步装置，所述音视频同步装置包括：存储器、处理器及存储在存储器上并可在处理器上运行的音视频同步程序，所述音视频同步程序被所述处理器运行时实现如上任一项所述的音视频同步方法的步骤。
为实现上述目的，本申请还提供一种存储介质，所述存储介质上存储有音视频同步程序，所述音视频同步程序被所述处理器执行时实现如上任一项所述的音视频同步方法的步骤。
本申请的技术方案，在当前轨道的当前样片的标识信息与参考样片的标识信息相等时，进一步判断当前样片的校验值是否与参考样片的校验值相等，在当前样片的校验值与参考样片的校验值不相等时，获取与参考样片的校验值相等的目标样片，并将参考样片的标识信息赋值至目标样片，如此设置，能够解决由于音视频的时间戳错乱而导致解码器呈现出来的音视频内容不同步的问题。
附图说明
图1为本发明实施例方案涉及的硬件运行环境的电子设备结构示意图；
图2为本发明音视频同步方法第一实施例的流程示意图；
图3为本发明一实施例中步骤S2的细化流程示意图；
图4为本发明一实施例中步骤S3的细化流程示意图；
图5为本发明音视频同步方法第二实施例的流程示意图；
图6为本发明音视频同步方法第三实施例的流程示意图；
图7为本发明音视频同步方法第四实施例的流程示意图；
图8为本发明音视频同步方法第五实施例的流程示意图。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示，图1是本发明一实施例方案涉及的硬件运行环境的电子设备结构示意图。
应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
本申请实施例的主要解决方案是：在当前轨道的当前样片的标识信息与参考样片的标识信息相等时，判断所述当前样片的校验值是否与所述参考样片的校验值相等；在所述当前样片的校验值与所述参考样片的校验值不相等时，获取与所述参考样片的校验值相等的目标样片；将所述参考样片的标识信息赋值至所述目标样片。
本申请的技术方案，在当前轨道的当前样片的标识信息与参考样片的标识信息相等，但校验值与参考样片的校验值不相等时，获取与参考样片的校验值相等的目标样片，并将参考样片的标识信息赋值至目标样片，以使得音频轨道或者视频轨道的标识信息得到校正。
作为一种实施方案，音视频同步装置可以如图1所示。
本申请实施例方案涉及的是音视频同步装置，音视频同步装置包括：处理器1001，例如CPU，通信总线1002，存储器1003。其中，通信总线1002用于实现这些组件之间的连接通信。
存储器1003可以是高速RAM存储器，也可以是稳定的存储器(non-volatilememory)，例如磁盘存储器。如图1所示，作为一种计算机存储介质的存储器1003中可以包括音视频同步程序；而处理器1001可以用于调用存储器1003中存储的音视频同步程序，并执行以下操作：
在当前轨道的当前样片的标识信息与参考样片的标识信息相等时，判断所述当前样片的校验值是否与所述参考样片的校验值相等；
在所述当前样片的校验值与所述参考样片的校验值不相等时，获取与所述参考样片的校验值相等的目标样片；
将所述参考样片的标识信息赋值至所述目标样片。
可选的，处理器1001可以用于调用存储器1003中存储的音视频同步程序，并执行以下操作：
在所述当前样片的校验值与所述参考样片的校验值不相等时，计算下一个样片的校验值；
判断所述下一个样片的校验值是否与所述参考样片的校验值相等；
在所述下一个样片的校验值与所述参考样片的校验值相等时，以所述下一个样片作为目标样片。
可选的，处理器1001可以用于调用存储器1003中存储的音视频同步程序，并执行以下操作：
从服务器中下载目标文件；
解析所述目标文件，获得参考样片及当前轨道；
解析所述当前轨道，获得当前样片；
判断所述当前样片的标识信息是否与所述参考样片的标识信息相等；
在所述当前样片的标识信息与所述参考样片的标识信息相等时，计算所述当前样片的校验值。
可选的，处理器1001可以用于调用存储器1003中存储的音视频同步程序，并执行以下操作：
在所述当前样片的标识信息与所述参考样片的标识信息不相等时，返回执行解析所述当前轨道，获得当前样片的步骤。
可选的，处理器1001可以用于调用存储器1003中存储的音视频同步程序，并执行以下操作：
获取目标样片的标识信息；
判断所述目标样片的标识信息是否与所述参考样片的标识信息相等；
在所述目标样片的标识信息与所述参考样片的标识信息不相等时，将所述参考样片的标识信息赋值至所述目标样片。
可选的，处理器1001可以用于调用存储器1003中存储的音视频同步程序，并执行以下操作：
以所述目标样片的标识信息为基准值，将依次获得的每一个样片的标识信息以预设规则递增；
将递增后的每一所述样片的标识信息发送至解码器。
可选的，处理器1001可以用于调用存储器1003中存储的音视频同步程序，并执行以下操作：
计算当前轨道的当前样片的校验值；
判断所述当前样片的校验值是否与参考样片的校验值相等；
在所述当前样片的校验值与所述参考样片的校验值相等时，将所述参考样片的标识信息赋值至所述当前样片。
可选的，处理器1001可以用于调用存储器1003中存储的音视频同步程序，并执行以下操作：
在所述当前样片的校验值与所述参考样片的校验值不相等时，计算下一个样片的校验值是否与所述参考样片的校验值相等；
在所述下一个样片的校验值与所述参考样片的校验值相等时，将所述参考样片的标识信息赋值至所述下一个样片。
图2为本申请音视频同步的方法第一实施例的流程示意图。
该音视频同步的方法应用于音频轨道或者视频轨道，该音视频同步的方法包括：
步骤S1，在当前轨道的当前样片的标识信息与参考样片的标识信息相等时，判断所述当前样片的校验值是否与所述参考样片的校验值相等；
当前轨道，可以为音频轨道或者视频轨道，样片(sample)表示视频的数据结构或者音频的数据结构。样片的标识信息，主要用于标记音视频流的相对位置和持续时间，该标识信息可以为音视频轨道的时基信息，如时间戳(PTS)，本实施例以该标识信息为时间戳为例说明。样片的校验值，用于唯一标识该样片。参考样片，包括音频轨道的参考样片和视频轨道的参考样片，音频轨道的参考样片和视频轨道的参考样片作为判断音视频的时间戳是否错乱的依据，该参考样片的数量为多个，可根据实际需要设置。音视频轨道的各个参考样片的校验值和时间戳可以预先存储至同步索引表中。客户端在解复用时，首先从服务端获取包含参考样片的标识信息及校验值的同步索引表，以及音频轨道和视频轨道，再依次解析每一路轨道的样片，将所解析出来的样片的标识信息与同步索引表中的多个参考样片的标识信息进行比较，若解析出来的样片的标识信息与同步索引表中的其中一个参考样片的标识信息相等，即解析出来的当前样片的时间戳与同步索引表中的其中一个参考样片的时间戳相等时，则进一步计算当前样片的校验值，并将当前样片的校验值与该参考样片的校验值比较，获得比较结果。
另外，本实施例还可以以另外一种方式判断音视频的时间戳是否发生错乱，具体的，由于音视频轨道的样片是一个接着一个依次解析出来的，而同步索引表中的参考样片也是依序存储的，例如，同步索引表中包括5个参考样片，第一个参考样片的时间戳为10.00s，第二个参考样片的时间戳为20.00s，第三个参考样片的时间戳为30.00s，第四个参考样片的时间戳为40.00s，第五个参考样片的时间戳为50.00s，而从当前轨道解析出来的，与第一个参考样片的时间戳最接近的一个样片的时间戳为10.06s，即从当前轨道依次解析出来的样片中，没有出现时间戳为10.00s的样片，例如，当前样片的时间戳为9.05s，下一个解析出来的样片的时间戳为10.06s，当前轨道所解析出来的样片中没有出现时间戳为10.00s的样片，由此可见，当前轨道的时间戳发生了错乱，需要对已经发生错乱的当前轨道的时间戳进行校正。
步骤S2，在所述当前样片的校验值与所述参考样片的校验值不相等时，获取与所述参考样片的校验值相等的目标样片；
若当前样片的时间戳与同步索引表中的参考样片的时间戳相等，且当前样片的校验值与同步索引表中的参考样片的校验值相等，说明当前轨道的时间戳正确无误。但是，若当前样片的时间戳与同步索引表中的参考样片的时间戳相等，而当前样片的校验值与该参考样片的校验值不相等，说明当前轨道的时间戳出现了错乱。此时，需要从当前轨道依次解析出来的样片中选取出与同步索引表中的多个参考样片中的其中一个参考样片的校验值相等的目标样片，该目标样片的校验值与同步索引表中的其中一个参考样片的校验值相等。具体的，参照图3，步骤S2具体包括：
步骤S21，在所述当前样片的校验值与所述参考样片的校验值不相等时，计算下一个样片的校验值；
在当前样片的时间戳与同步索引表中的其中一参考样片的时间戳相等，但是当前样片的校验值与该参考样片的校验值不相等时，则继续解析当前轨道，获得下一个样片，并计算下一个样片的校验值。
步骤S22，判断所述下一个样片的校验值是否与所述参考样片的校验值相等；
将下一个样片的校验值与同步索引表中的多个参考样片的校验值依次比较，获得比较结果。
步骤S23，在所述下一个样片的校验值与所述参考样片的校验值相等时，以所述下一个样片作为目标样片。
若下一个样片的校验值与同步索引表中的多个参考样片中的其中一个参考样片的校验值相等，则以下一个样片作为目标样片。
若下一个样片的校验值与同步索引表中的多个参考样片中的任意一个参考样片的校验值均不相等，则继续解析当前轨道，获得又一个样片，并计算该样片的校验值，将该样片的校验值与同步索引表中的多个参考样片的校验值依次比较，依次类推，直至解析出来的样片与同步索引表中的多个参考样片中的其中一个参考样片的校验值相等时，则以该样片作为目标样片。
步骤S3，将所述参考样片的标识信息赋值至所述目标样片。
当解析出来的样片的校验值与同步索引表中的多个参考样片中的其中一个参考样片的校验值相等时，即目标样片的校验值与同步索引表中的多个参考样片中的其中一个参考样片的校验值相等时，将同步索引表中的与该目标样片的校验值相等的参考样片的标识信息赋值给目标样片，也就是说，将同步索引表中的与该目标样片的校验值相等的参考样片的时间戳赋值给目标样片。具体的，参照图4，步骤S3包括：
步骤S31，获取目标样片的标识信息；
当目标样片的校验值与同步索引表中的多个参考样片中的其中一个参考样片的校验值相等时，进一步获取该目标样片的标识信息，即该目标样片的时间戳，以及，获取与该目标样片的校验值相等的参考样片的时间戳。
步骤S32，判断所述目标样片的标识信息是否与所述参考样片的标识信息相等；
将目标样片的标识信息与该参考样片的标识信息进行比较，即将目标样片的时间戳与该参考样片的时间戳进行比较，获得比较结果。
步骤S33，在所述目标样片的标识信息与所述参考样片的标识信息不相等时，将所述参考样片的标识信息赋值至所述目标样片。
在目标样片的标识信息与该参考样片的标识信息不相等时，则将该参考样片的标识信息赋值给该目标样片，以使目标样片的标识信息及校验值与参考样片的标识信息及校验值相等。进一步的，参照图5，步骤S3之后，还包括：
步骤S4，以所述目标样片的标识信息为基准值，将依次获得的每一个样片的标识信息以预设规则递增；
当目标样片的标识信息，即目标样片的时间戳得到修正后，系统以该目标样片的时间戳为基准值，将后续依次解析出来的样片以预设规则递增。例如，视频轨道在正常情况下，是以1秒的时间间隔对视频帧进行播放，即第1秒播放第一帧，第2秒播放第二帧，第3秒播放第三帧，以此类推；当视频轨道的时间戳出现错乱时，例如，第5秒播放了第6帧，则将第六帧的时间戳调整为第6秒，使得在第6秒时播放第6帧数据，而后续帧则以第6秒为基准值继续递增播放，即第7秒播放第7帧，第8秒播放第八帧，依次类推。
步骤S5，将递增后的每一所述样片的标识信息发送至解码器。
系统将递增后的样片的标识信息，即时间戳发送至解码器，以使解码器根据调整后的样片的时间戳进行音视频的重新同步，使得视频与音频不同步的问题得到解决。
本实施例的技术方案，在检测到当前轨道的样片的标识信息与同步索引表中的参考样片的标识信息相等而校验值不相等时，从依次解析出来的样片中选取与参考样片的校验值相等的目标样片，并将与该目标样片的校验值相等的参考样片的标识信息赋值至目标样片，以使得不同步的音视频能够重新同步，提高了媒体播放的质量，提升了用户体验。
如图6所示，图6为本发明音视频同步方法的第三实施例的流程示意图。
基于上述实施例，步骤S1之前，还包括：
步骤S101，从服务器中下载目标文件；
音视频制作方在制作音视频内容时，往往按照一定的时间间隔，例如每隔20秒，选取音频轨道或者视频轨道的参考样片，该参考样片的选取，以特殊的样片为最佳，例如，H264编码的视频，可以选取包含关键帧的样片作为参考样片。并记录下音频轨道和视频轨道的每一个参考样片的校验值和标识信息，即记录下音频轨道和视频轨道的每一个参考样片的校验值和时间戳，然后在流媒体内容封装文件容器中加入一个标识音视频样片的同步信息索引表，将所选取的每一个参考样片的校验值和时间戳依次存入该同步索引表中，并将该同步索引表以及音视频轨道数据上传服务端。客户端在解复用时，先从服务端下载包括同步索引表以及音视频轨道数据的目标文件。
步骤S102，解析所述目标文件，获得参考样片及当前轨道；
当下载目标文件后，客户端解析该目标文件，获得包括各个参考样片的同步索引表及音视频轨道数据，并以音频轨道或者视频轨道作为当前轨道。
步骤S103，解析所述当前轨道，获得当前样片；
解析当前轨道，获得这一时刻所对应的样片，即当前样片。
步骤S104，判断所述当前样片的标识信息是否与所述参考样片的标识信息相等；
进一步的，将所解析获得的当前样片的标识信息与同步索引表中的多个参考样片的标识信息依次比较，即将当前样片的时间戳与同步索引表中的各个参考样片的时间戳逐一比较，获得比较结果。
步骤S105，在所述当前样片的标识信息与所述参考样片的标识信息相等时，计算所述当前样片的校验值。
若当前样片的标识信息与同步索引表中的其中一个参考样片的标识信息相等，则进一步计算当前样片的校验值。
其中，若当前样片的标识信息与同步索引表中的每一个参考样片的标识信息均不相等，则继续解析当前轨道，将解析获得的样片与与同步索引表中的多个参考样片的标识信息依次比较，依次类推，直至解析出来的样片的标识信息与同步索引表中的其中一个参考样片的标识信息相等，以该样片作为当前样片。
本实施列，在计算当前样片的校验值之前，还包括从服务端下载包括音视频轨道数据以及参考样片，并通过解析音频轨道或者视频轨道，从解析出来的样片中选取出与参考样片的标识信息相等的当前样片。
如图7所示，图7为本发明音视频同步方法的第四实施例的流程示意图。
该音视频同步的方法，应用于音频轨道或者视频轨道，该音视频同步的方法包括：
步骤S6，计算当前轨道的当前样片的校验值；
当前轨道，可以为音频轨道或者视频轨道，样片(sample)表示视频的数据结构或者音频的数据结构。样片的校验值，用于唯一标识该样片。客户端在复用时，首先从服务端获取包含参考样片的标识信息及校验值的同步索引表，以及音频轨道和视频轨道，再依次解析每一路轨道的样片，并计算所解析出来的样片的校验值。其中，参考样片，包括音频轨道的参考样片和视频轨道的参考样片，音频轨道的参考样片和视频轨道的参考样片作为判断音视频的时间戳是否错乱的依据，该参考样片的数量为多个，可根据实际需要设置。音视频轨道的各个参考样片的校验值和时间戳可以预先存储至同步索引表中。
步骤S7，判断所述当前样片的校验值是否与参考样片的校验值相等；
将解析出来的每一个样片的校验值均与同步索引表中的多个参考样片的校验值进行比较，获得比较结果。
步骤S8，在所述当前样片的校验值与所述参考样片的校验值相等时，将所述参考样片的标识信息赋值至所述当前样片。
样片的标识信息，主要用于标记音视频流的相对位置和持续时间，该标识信息可以为音视频轨道的时基信息，如时间戳(PTS)，本实施例以该标识信息为时间戳为例说明。当解析出来的当前样片的校验值与同步索引表中的多个参考样片中的其中一个参考样片的校验值相等时，则将与当前样片的校验值相等的所述参考样片的标识信息，即时间戳赋值至当前样片。即不比较当前样片与参考样片的时间戳是否相等，只要检测到当前样片的校验值与同步索引表中的其中一个参考样片的校验值相等时，则直接将该参考样片的标识信息赋值至当前样片。进一步的，参照图8，步骤S7之后，还包括：
步骤S9，在所述当前样片的校验值与所述参考样片的校验值不相等时，计算下一个样片的校验值是否与所述参考样片的校验值相等；
当解析出来的当前样片的校验值与同步索引表中的多个参考样片中的任意一个参考样片的校验值均不相等时，系统继续解析当前轨道，获取下一个样片，并计算下一个样片的校验值，并将下一个样片的校验值以同样的方式与同步索引表中的多个参考样片的校验值一一对比。
步骤S10，在所述下一个样片的校验值与所述参考样片的校验值相等时，将所述参考样片的标识信息赋值至所述下一个样片。
当解析出来的下一个样片的校验值与同步索引表中的多个参考样片中的其中一个参考样片的校验值相等时，则将与下一个样片的校验值相等的所述参考样片的标识信息，即时间戳赋值至下一个样片。当解析出来的下一个样片的校验值与同步索引表中的多个参考样片中的任意一个参考样片的校验值均不相等时，系统继续解析当前轨道，获取又一个样片，并计算该样片的校验值，且继续将该样片的校验值以同样的方式与同步索引表中的多个参考样片的校验值一一对比，依次类推，直至获得与同步索引表中的其中一个参考样片的校验值相等的目标样片，进而将与该目标样片的校验值相等的参考样片的标识信息，即时间戳赋值给该目标样片。系统在每解析出一个与同步索引表中的参考样片的校验值相等的目标样片时，将则与该目标样片的校验值相等的参考样片的标识信息赋值给该目标样片，如此设置，在音视频的时间戳发生错乱时，系统能够自动发现并及时的校正音视频的时间戳，提升用户的体验，提高音视频播放的可靠性。
本实施例的技术方案，将音频轨道以及视频轨道的每一个样片的校验值均与参考样片的校验值进行比较，系统在每解析出一个与多个参考样片中的其中一个参考样片的校验值相等的目标样片时，将则与该目标样片的校验值相等的参考样片的标识信息赋值给该目标样片，如此设置，在音视频的时间戳发生错乱时，系统能够自动并及时的校正音视频的时间戳，提升用户的体验。
本申请还提供一种音视频同步装置，该音视频同步装置包括：存储器、处理器及存储在存储器上并可在处理器上运行的音视频同步程序，所述音视频同步程序被所述处理器运行时实现如上任一项所述的音视频同步方法的步骤。
以上仅为本发明的可选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种音视频同步的方法，应用于音频轨道或者视频轨道，其特征在于，所述音视频同步的方法包括：
在当前轨道的当前样片的标识信息与参考样片的标识信息相等时，判断所述当前样片的校验值是否与所述参考样片的校验值相等；
在所述当前样片的校验值与所述参考样片的校验值不相等时，获取与所述参考样片的校验值相等的目标样片；
将所述参考样片的标识信息赋值至所述目标样片。
2.如权利要求1所述的音视频同步的方法，其特征在于，所述在所述当前样片的校验值与所述参考样片的校验值不相等时，获取与所述参考样片的校验值相等的目标样片的步骤包括：
在所述当前样片的校验值与所述参考样片的校验值不相等时，计算下一个样片的校验值；
判断所述下一个样片的校验值是否与所述参考样片的校验值相等；
在所述下一个样片的校验值与所述参考样片的校验值相等时，以所述下一个样片作为目标样片。
3.如权利要求1所述的音视频同步的方法，其特征在于，所述在目标轨道的当前样片的标识信息与参考样片的标识信息相等时，判断所述当前样片的校验值是否与所述参考样片的校验值相等的步骤之前，还包括：
从服务器中下载目标文件；
解析所述目标文件，获得参考样片及当前轨道；
解析所述当前轨道，获得当前样片；
判断所述当前样片的标识信息是否与所述参考样片的标识信息相等；
在所述当前样片的标识信息与所述参考样片的标识信息相等时，计算所述当前样片的校验值。
4.如权利要求3所述的音视频同步的方法，其特征在于，所述判断所述当前样片的标识信息是否与所述参考样片的标识信息相等的步骤之后，还包括：
在所述当前样片的标识信息与所述参考样片的标识信息不相等时，返回执行解析所述当前轨道，获得当前样片的步骤。
5.如权利要求1至4任一项所述的音视频同步的方法，其特征在于，所述将所述参考样片的标识信息赋值至所述目标样片的步骤包括：
获取目标样片的标识信息；
判断所述目标样片的标识信息是否与所述参考样片的标识信息相等；
在所述目标样片的标识信息与所述参考样片的标识信息不相等时，将所述参考样片的标识信息赋值至所述目标样片。
6.如权利要求1所述的音视频同步的方法，其特征在于，所述将所述参考样片的标识信息赋值至所述目标样片的步骤之后，还包括：
以所述目标样片的标识信息为基准值，将依次获得的每一个样片的标识信息以预设规则递增；
将递增后的每一所述样片的标识信息发送至解码器。
7.一种音视频同步的方法，应用于音频轨道或者视频轨道，其特征在于，所述音视频同步的方法包括：
计算当前轨道的当前样片的校验值；
判断所述当前样片的校验值是否与参考样片的校验值相等；
在所述当前样片的校验值与所述参考样片的校验值相等时，将所述参考样片的标识信息赋值至所述当前样片。
8.如权利要求7所述的音视频同步的方法，其特征在于，所述判断所述当前样片的校验值是否与参考样片的校验值相等的步骤之后，还包括：
在所述当前样片的校验值与所述参考样片的校验值不相等时，计算下一个样片的校验值是否与所述参考样片的校验值相等；
在所述下一个样片的校验值与所述参考样片的校验值相等时，将所述参考样片的标识信息赋值至所述下一个样片。
9.一种音视频同步装置，其特征在于，所述音视频同步装置包括：存储器、处理器及存储在存储器上并可在处理器上运行的音视频同步程序，所述音视频同步程序被所述处理器运行时实现如权利要求1至8任一项所述的音视频同步方法的步骤。
10.一种存储介质，其特征在于，所述存储介质上存储有音视频同步程序，所述音视频同步程序被所述处理器执行时实现如权利要求1至8任一项所述的音视频同步方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811654559.0A CN109729403A (zh) | 2018-12-29 | 2018-12-29 | 音视频同步的方法、装置及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811654559.0A CN109729403A (zh) | 2018-12-29 | 2018-12-29 | 音视频同步的方法、装置及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109729403A true CN109729403A (zh) | 2019-05-07 |
Family
ID=66299568
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811654559.0A Pending CN109729403A (zh) | 2018-12-29 | 2018-12-29 | 音视频同步的方法、装置及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109729403A (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102231803A (zh) * | 2011-03-14 | 2011-11-02 | 新奥特（北京）视频技术有限公司 | 一种支持ts流媒体文件的容错方法 |
| US20130139674A1 (en) * | 2011-12-02 | 2013-06-06 | Brian Whitman | Musical fingerprinting |
| CN105208395A (zh) * | 2015-09-16 | 2015-12-30 | 北京暴风科技股份有限公司 | 对安卓系统硬件视频解码的时间戳进行纠错的方法及系统 |
| CN106034263A (zh) * | 2015-03-09 | 2016-10-19 | 腾讯科技（深圳）有限公司 | 媒体文件中音视频的校准方法及装置 |
-
2018
- 2018-12-29 CN CN201811654559.0A patent/CN109729403A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102231803A (zh) * | 2011-03-14 | 2011-11-02 | 新奥特（北京）视频技术有限公司 | 一种支持ts流媒体文件的容错方法 |
| US20130139674A1 (en) * | 2011-12-02 | 2013-06-06 | Brian Whitman | Musical fingerprinting |
| CN106034263A (zh) * | 2015-03-09 | 2016-10-19 | 腾讯科技（深圳）有限公司 | 媒体文件中音视频的校准方法及装置 |
| CN105208395A (zh) * | 2015-09-16 | 2015-12-30 | 北京暴风科技股份有限公司 | 对安卓系统硬件视频解码的时间戳进行纠错的方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105916058B (zh) | 一种流媒体缓冲播放方法、装置及显示设备 | |
| US9699522B2 (en) | Method for transceiving media files and device for transmitting/receiving using same | |
| CN104885473B (zh) | 用于经由http的动态自适应流式传输(dash)的实况定时方法 | |
| JP6116906B2 (ja) | 部分化を利用した適応的なストリーミング方法及びその装置 | |
| CN106134208B (zh) | 发送设备、发送方法、接收设备以及接收方法 | |
| KR100406122B1 (ko) | 디지털 데이터 방송을 위한 동기화 데이터 삽입 장치 및그 방법 | |
| CN107147919B (zh) | 直播快速启播方法及系统 | |
| EP1793586A2 (en) | Method and system for audio and video transport | |
| EP3258697B1 (en) | Transmission apparatus, transmission method, reception apparatus, and reception method | |
| KR20160030133A (ko) | 실시간 전송 프로토콜 기반의 방송 시스템에서 미디어 방송 신호의 송수신 방법 및 장치 | |
| CN107659538A (zh) | 一种视频处理的方法及设备 | |
| US7801182B2 (en) | Transmission data structure, and method and device for transmitting the same | |
| CN113225597A (zh) | 一种网络传输中的多路音视频的同步播放的方法 | |
| KR102171652B1 (ko) | 송신 장치, 송신 방법, 수신 장치 및 수신 방법 | |
| CN105916011A (zh) | 视频实时播放方法及装置 | |
| CN109729403A (zh) | 音视频同步的方法、装置及存储介质 | |
| CN114697712B (zh) | 一种媒体流的下载方法、装置、设备及存储介质 | |
| CN106998478B (zh) | 一种用于智能电视当前播放列表的偏移校正方法和装置 | |
| EP2524502B1 (en) | Method and apparatus for processing transport streams | |
| JP5137975B2 (ja) | グローバルシーン時間を使用する探索および同期 | |
| CN105451100A (zh) | 一种播放视频流的方法及装置 | |
| US20200404395A1 (en) | Signal transmitting device, signal receiving device, signal transmitting method, and signal receiving method | |
| CN106303503A (zh) | 一种判定mpeg2-ts vbr码流质量的方法 | |
| AU2015101273A4 (en) | A computer implemented system and method for transferring multimedia content | |
| CN106454547A (zh) | 一种实时字幕播出方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190507 |
|
| RJ01 | Rejection of invention patent application after publication |