CN110225385A - 一种音视频同步调整方法和装置 - Google Patents

一种音视频同步调整方法和装置 Download PDF

Info

Publication number
CN110225385A
CN110225385A CN201910530009.6A CN201910530009A CN110225385A CN 110225385 A CN110225385 A CN 110225385A CN 201910530009 A CN201910530009 A CN 201910530009A CN 110225385 A CN110225385 A CN 110225385A
Authority
CN
China
Prior art keywords
audio
buff
video flowing
stream
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910530009.6A
Other languages
English (en)
Other versions
CN110225385B (zh
Inventor
丁长文
方伟
李智
王亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TD Tech Ltd
Original Assignee
TD Tech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TD Tech Ltd filed Critical TD Tech Ltd
Priority to CN201910530009.6A priority Critical patent/CN110225385B/zh
Publication of CN110225385A publication Critical patent/CN110225385A/zh
Application granted granted Critical
Publication of CN110225385B publication Critical patent/CN110225385B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

本申请公开了一种音视频同步调整方法和装置，包括：录制端向播放端发送音频流发送端报告(SR)和视频流SR，音频流SR和视频流SR均携带当前系统的NTP时间和对应的RTP时间戳；当播放端从录制端接收到当前音视频业务的第一个音频流SR和第一个视频流SR时，根据本次接收到的音频流SR和视频流SR携带的NTP时间，确定当前的音视频同步方式，所述音视频同步方式包括基于时间戳的音视频同步方式和基于缓存的音视频同步方式；当播放端从录制端再次接收到当前音视频业务的音频流SR和视频流SR时，根据本次接收到的音频流SR和视频流SR携带的NTP时间和上一次接收的音频流SR和视频流SR的NTP时间，确定当前的音视频同步方式。采用本发明，可以实现接收端的音视频同步。

Description

一种音视频同步调整方法和装置
技术领域
本发明涉及计算机应用技术，特别是涉及一种音视频同步调整方法和装置。
背景技术
音视频同步业务是影响视频业务感知的关键指标，目前主流的音视频同步算法，都是基于发送端报告(Sender Report，SR)中的网络时间协议(Network Time Protocol，NTP)时间和时间戳进行同步的。基于时间戳的音视频同步算法实现简单，同步效果好，但是算法本身要求音频流和视频流SR报告中NTP时间参考同一时钟源且正确填写，一旦音视频流的NTP时间源不一致，接收端继续采用时间戳的方式进行同步，会导致卡顿快进等异常现象，严重影响业务感知。
虽然现有协议规定音频和视频流SR报告中NTP时间采用同一个时钟源，但是，在实际应用中各个厂家的实现不一致，如此，可能会导致音频和视频流的NTP时间填写不一致，或者在其中一个流在传输过程中发生了重新打包的场景，从而导致接收端收到的音频和视频流的NTP时间不能对应。
发明内容
有鉴于此，本发明的主要目的在于提供一种音视频同步调整方法和装置，可以实现接收端的音视频同步。
为了达到上述目的，本发明提出的技术方案为：
一种音视频同步调整方法，包括：
录制端向播放端发送音频流发送端报告SR和视频流SR，其中，音频流SR和视频流SR均携带当前系统的网络时间协议NTP时间和对应的实时传输协议RTP时间戳；
当播放端从所述录制端接收到当前音视频业务的第一个音频流SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的NTP时间，确定当前采用的音视频同步方式，所述音视频同步方式包括基于时间戳的音视频同步方式和基于缓存的音视频同步方式；
当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，确定当前采用的音视频同步方式，i>1。
较佳地，所述当播放端从所述录制端接收到当前音视频业务的第一个音频流SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的NTP时间，确定当前采用的音视频同步方式包括：
计算其中，为当前接收的第1个视频流SR与第1个音频流SR各自携带的NTP时间的差的绝对值，为当前接收的第1个视频流SR中的NTP时间；为当前接收的第1个音频流SR中的NTP时间；
如果则确定当前采用的音视频同步方式为基于缓存的音视频同步方式，其中，为预设的同时发送的音视频流之间的NTP时间差的门限值；
如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
较佳地，所述当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，确定当前采用的音视频同步方式包括：
计算其中，为当前接收的第i个音频流SR与上一次接收的第i-1个音频流SR各自携带的NTP时间的差的绝对值；为当前接收的第i个音频流SR中的NTP时间；为上一次接收的第i-1个音频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与上一次接收的第i-1个视频流SR各自携带的NTP时间的差的绝对值；为当前接收的第i个视频流SR中的NTP时间；NTPi v为上一次接收的第i-1个视频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与第i个音频流SR各自携带的NTP时间的差的绝对值，NTPi v为当前接收的第i个视频流SR中的NTP时间；
当且时，如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式，否则，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；其中，为预设的相邻两次发送的音频流之间的NTP时间差的门限值，为预设的相邻两次发送的视频流之间的NTP时间差的门限值；为预设的同时发送的音视频流之间的NTP时间差的门限值；
当或时，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；
当且时，确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
较佳地，所述基于缓存的音视频同步方式包括：
按照预设的统计周期，分别计算当前周期内的音频流平均帧间隔和视频流的平均帧间隔
对于音频流和视频流，分别根据各自数据流的缓存量，以预设的目标缓存量Buff_tar为基准，并结合当前相应数据流的所述平均帧间隔，调节相应数据流的播放速度。
较佳地，所述以预设的目标缓存量Buff_tar为基准，调节相应数据流的播放速度包括：
如果当前的数据流缓存量Buff满足：Buff_tar-Buff>Buffth，则触发播放器对当前的数据流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前的数据流缓存量Buff满足：Buff_tar-Buff<-Buffth，则触发所述播放器对当前的数据流进行快进；
如果当前的数据流缓存量Buff满足：-Buffth<Buff_tar-Buff<Buffth，则按照相应数据流当前的所述平均帧间隔，将相应数据流的数据送到所述播放器播放。
较佳地，所述基于缓存的音视频同步方式包括：
按照预设的统计周期，计算视频流的平均帧间隔
对于音频流，按照预设的时间间隔T0，将数据送到播放器播放；
对于视频流，根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度。
较佳地，所述根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度包括：
如果当前视频流的缓存量Buffv满足：Buffa-Buffv>Buffth，则触发播放器对当前的视频流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前视频流的缓存量Buffv满足：Buffa-Buffv<-Buffth，则触发所述播放器对当前的视频流进行快进；
如果当前的数据流缓存量Buffv满足-Buffth<Buffa-Buffv<Buffth，则按照视频流当前的所述平均帧间隔，将视频流的数据送到所述播放器播放。
一种音视频同步调整装置，设于播放端的设备中，包括：处理器，所述处理器用于：
当播放端从录制端接收到当前音视频业务的第一个音频流发送端报告SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的网络时间协议NTP时间，确定当前采用的音视频同步方式；其中，所述录制端发送的音频流SR和视频流SR均携带当前系统的网络时间协议NTP时间和对应的实时传输协议RTP时间戳；所述音视频同步方式包括基于时间戳的音视频同步方式和基于缓存的音视频同步方式；
当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，确定当前采用的音视频同步方式，i>1。
较佳地，所述处理器具体用于：当播放端从所述录制端接收到当前音视频业务的第一个音频流SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的NTP时间，确定当前采用的音视频同步方式，包括：
计算其中，为当前接收的第1个视频流SR与第1个音频流SR各自携带的NTP时间的差的绝对值，为当前接收的第1个视频流SR中的NTP时间；为当前接收的第1个音频流SR中的NTP时间；
如果则确定当前采用的音视频同步方式为基于缓存的音视频同步方式，其中，为预设的同时发送的音视频流之间的NTP时间差的门限值；
如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
较佳地，所述处理器具体用于当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，确定当前采用的音视频同步方式，包括：
计算其中，为当前接收的第i个音频流SR与上一次接收的第i-1个音频流SR各自携带的NTP时间的差的绝对值；NTPi a为当前接收的第i个音频流SR中的NTP时间；为上一次接收的第i-1个音频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与上一次接收的第i-1个视频流SR各自携带的NTP时间的差的绝对值；为当前接收的第i个视频流SR中的NTP时间；NTPi v为上一次接收的第i-1个视频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与第i个音频流SR各自携带的NTP时间的差的绝对值，NTPi v为当前接收的第i个视频流SR中的NTP时间；
当且时，如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式，否则，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；其中，为预设的相邻两次发送的音频流之间的NTP时间差的门限值，为预设的相邻两次发送的视频流之间的NTP时间差的门限值；为预设的同时发送的音视频流之间的NTP时间差的门限值；
当或时，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；
当且时，确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
较佳地，所述处理器具体用于基于缓存的音视频同步方式进行音视频同步，包括：
按照预设的统计周期，分别计算当前周期内的音频流平均帧间隔和视频流的平均帧间隔
对于音频流和视频流，分别根据各自数据流的缓存量，以预设的目标缓存量Buff_tar为基准，并结合当前相应数据流的所述平均帧间隔，调节相应数据流的播放速度。
较佳地，所述处理器具体用于以预设的目标缓存量Buff_tar为基准，调节相应数据流的播放速度,包括：
如果当前的数据流缓存量Buff满足：Buff_tar-Buff>Buffth，则触发播放器对当前的数据流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前的数据流缓存量Buff满足：Buff_tar-Buff<-Buffth，则触发所述播放器对当前的数据流进行快进；
如果当前的数据流缓存量Buff满足：-Buffth<Buff_tar-Buff<Buffth，则按照相应数据流当前的所述平均帧间隔，将相应数据流的数据送到所述播放器播放。
较佳地，所述处理器具体用于基于缓存的音视频同步方式进行音视频同步，包括：
按照预设的统计周期，计算视频流的平均帧间隔
对于音频流，按照预设的时间间隔T0，将数据送到播放器播放；
对于视频流，根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度。
较佳地，所述处理器具体用于根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度，包括：
如果当前视频流的缓存量Buffv满足：Buffa-Buffv>Buffth，则触发播放器对当前的视频流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前视频流的缓存量Buffv满足：Buffa-Buffv<-Buffth，则触发所述播放器对当前的视频流进行快进；
如果当前的数据流缓存量Buffv满足-Buffth<Buffa-Buffv<Buffth，则按照视频流当前的所述平均帧间隔，将视频流的数据送到所述播放器播放。
本发明还提供了一种非易失性计算机可读存储介质，所述非易失性计算机可读存储介质存储指令，其特征在于，所述指令在由处理器执行时使得所述处理器执行如前所述的音视频同步调整方法的步骤。
另外，本发明还提供了一种电子设备，包括如前所述的非易失性计算机可读存储介质、以及可访问所述非易失性计算机可读存储介质的所述处理器。
综上所述，本发明提出的音视频同步调整方法和装置，当播放端首次从所述录制端接收到当前音视频业务的音频流SR和视频流SR时，需要根据本次接收到的所述音频流SR和所述视频流SR携带的NTP时间，选择当前采用的音视频同步方式，如此，通过比较两个音频流SR和所述视频流SR携带的NTP时间可以对当前音视频流是否参考同一时钟源进行准确判断，进而可以根据判断结果选择合适的音视频同步方式，以确保音视频的同步播放。而此后播放端再次从所述录制端接收到当前音视频业务的音频流SR和视频流SR时，会综合考虑本次接收到的所述音频流SR和视频流SR携带的NTP时间以及上一次接收到的音频流SR和视频流SR中的NTP时间，判断出音频和视频流的NTP时间是否发生跳变，进而可以依据该判断结果选择出合适的音视频同步方式，以确保音视频的播放可以始终保持同步。因此，采用本发明，可以实现接收端的音视频同步。
附图说明
图1为本发明实施例的方法流程示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图及具体实施例对本发明作进一步地详细描述。
图1为本发明实施例的方法流程示意图，如图1所示，该实施例实现的音视频同步调整方法主要包括：
步骤101、录制端向播放端发送音频流发送端报告(SR)和视频流SR，其中，音频流SR和视频流SR均携带当前系统的网络时间协议(NTP)时间和对应的实时传输协议(RTP)时间戳。
本步骤中，为了确使得播放端可以准确选择当前采用的音视频同步方式，以确保播放端的音视频的播放可以始终保持同步，录制端在向播放端发送的音频流SR和视频流SR中需要同时携带当前系统的网络时间协议(NTP)时间和对应的实时传输协议(RTP)时间戳。
步骤102、当播放端从所述录制端接收到当前音视频业务的第一个音频流SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的NTP时间，确定当前采用的音视频同步方式，所述音视频同步方式包括基于时间戳的音视频同步方式和基于缓存的音视频同步方式。
本步骤中，当播放端首次从所述录制端接收到当前音视频业务的音频流SR和视频流SR时，需要根据本次接收到的所述音频流SR和所述视频流SR携带的NTP时间，选择当前采用的音视频同步方式，如此，通过比较两个音频流SR和所述视频流SR携带的NTP时间可以对当前音视频流是否参考同一时钟源进行准确判断，进而可以根据判断结果选择合适的音视频同步方式，以确保当前音视频的同步播放。
较佳地，当播放端从所述录制端接收到当前音视频业务的第一个音频流SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的NTP时间，可以采用下述方法确定当前采用的音视频同步方式，包括：
计算其中，为当前接收的第1个视频流SR与第1个音频流SR各自携带的NTP时间的差的绝对值，为当前接收的第1个视频流SR中的NTP时间；为当前接收的第1个音频流SR中的NTP时间；
如果则确定当前采用的音视频同步方式为基于缓存的音视频同步方式，其中，为预设的同时发送的音视频流之间的NTP时间差的门限值；
如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
上述方法中，当时，说明当前音视频流参考的时钟源不一致，因此，本次业务需要采用基于缓存的音视频同步方式，以避免采用基于时间戳的音视频同步方式导致的音视频不同步问题。而当时，说明当前音视频流参考的时钟源一致，因此，本次业务可以采用时间戳的音视频同步方式，以便充分利用该同步方式易于实现且同步效果好的优势。
步骤103、当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，确定当前采用的音视频同步方式，i>1。
本步骤中，当播放端再次从所述录制端接收到当前音视频业务的音频流SR和视频流SR时，会综合考虑本次接收到的所述音频流SR和视频流SR携带的NTP时间以及上一次接收到的音频流SR和视频流SR中的NTP时间，判断出音频流和视频流的NTP时间是否发生跳变，进而可以依据该判断结果选择出合适的音视频同步方式，从而可以确保当前音视频业务的播放能够始终保持音视频的同步。
较佳地，当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，可以采用下述方法确定当前采用的音视频同步方式：
计算其中，为当前接收的第i个音频流SR与上一次接收的第i-1个音频流SR各自携带的NTP时间的差的绝对值；NTPi a为当前接收的第i个音频流SR中的NTP时间；为上一次接收的第i-1个音频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与上一次接收的第i-1个视频流SR各自携带的NTP时间的差的绝对值；为当前接收的第i个视频流SR中的NTP时间；NTPi v为上一次接收的第i-1个视频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与第i个音频流SR各自携带的NTP时间的差的绝对值，NTPi v为当前接收的第i个视频流SR中的NTP时间；
当且时，如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式，否则，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；其中，为预设的相邻两次发送的音频流之间的NTP时间差的门限值，为预设的相邻两次发送的视频流之间的NTP时间差的门限值；为预设的同时发送的音视频流之间的NTP时间差的门限值；
当或时，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；
当且时，确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
上述方法中，在业务过程中，当且时，说明音视频流的NTP时间同时发生跳变，此时，如果则说明两者的跳变是同步的，此时，采用基于时间戳的音视频同步方式，也可以实现音频视频播放的同步，否则，如果则说明两者的跳变不是同步的，此时再采用基于时间戳的音视频同步方式将会出现音频视频播放不同步的问题，因此，需要采用基于缓存的音视频同步方式，利用缓存来实现音频视频播放的同步。
当或时，说明其中一种数据流的NTP时间发生跳变，需要退出基于时间戳的音视频同步方式，采用基于缓存的音视频同步方式，以确保音视频播放的同步。
当且时，说明音频视频两种数据流的NTP时间都未发生跳变，因此，此时，可以采用基于时间戳的音视频同步方式，获得更好的同步效果。
对于上述方法中的门限值：和可由本领域技术人员根据实际需要进行设置，只要能准确地反映出当前的数据流接收状态即可。
在实际应用中，较佳地可以采用下述两种方法实现基于缓存的音视频同步方式：
方法一：
按照预设的统计周期，分别计算当前周期内的音频流平均帧间隔和视频流的平均帧间隔
对于音频流和视频流，分别根据各自数据流的缓存量，以预设的目标缓存量Buff_tar为基准，并结合当前相应数据流的所述平均帧间隔，调节相应数据流的播放速度。
上述方法中，具体可以按照计算音频流的平均帧间隔按照计算视频流的平均帧间隔其中，P为一个统计周期的长度，Na为统计周期内接收端的音频帧个数；Nv为统计周期内接收端的视频帧个数。
较佳地，对于视频流或音频流，可以采用下述方法以预设的目标缓存量Buff_tar为基准，根据该视频流或音频流的数据流缓存量，调节相应数据流的播放速度：
如果当前的数据流缓存量Buff满足：Buff_tar-Buff>Buffth，则触发播放器对当前的数据流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前的数据流缓存量Buff满足：Buff_tar-Buff<-Buffth，则触发所述播放器对当前的数据流进行快进；
如果当前的数据流缓存量Buff满足：-Buffth<Buff_tar-Buff<Buffth，则按照相应数据流当前的所述平均帧间隔，将相应数据流的数据送到所述播放器播放。
方法二：
按照预设的统计周期，计算视频流的平均帧间隔
对于音频流，按照预设的时间间隔T0，将数据送到播放器播放；
对于视频流，根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度。
较佳地，对于上述根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度，可以采用下述方法实现：
如果当前视频流的缓存量Buffv满足：Buffa-Buffv>Buffth，则触发播放器对当前的视频流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前视频流的缓存量Buffv满足：Buffa-Buffv<-Buffth，则触发所述播放器对当前的视频流进行快进；
如果当前的数据流缓存量Buffv满足-Buffth<Buffa-Buffv<Buffth，则按照视频流当前的所述平均帧间隔，将视频流的数据送到所述播放器播放。
上述方法中，对于目标缓存量Buff_tar、数据流缓存量差值门限Buffth，可由本领域技术人员通过仿真根据实际需要设置合适取值。
通过上述方法可以看出，基于缓存的音视频同步方式可以在音视频流参考的时钟源不一致时或音视频流的NTP时间发生跳变时，通过根据数据流的缓存量对相应流的播放速度进行适应性调整，可以有效确保音视频流播放的同步。
其中，上述方法一更适用于传输波动较小，音视频数据能够均匀到达的场景(如有线传输环境)。在此场景下，采用上述方法一，音频和视频独立进行音视频的播放，可以在实现音视频同步的同时，保证接收端音视频流匀速播放，获得更好的用户体验。
上述方法二更适用于传输链路有时延波动的场景(例如无线传输环境)。在此场景下，采用上述方法二，视频流数据参考音频流进行播放，可以保证在网络环境差的情况下音视频仍然能够保持同步播放。
在实际应用中，上述基于缓存的音视频同步方式的两种方法可以都配置于播放端，通过开关设置当前使用的哪种方式，以满足不同场景的应用需要。
与上述方法实施例相对应，本发明还提供了一种音视频同步调整装置实施例，设于播放端的设备中，包括：处理器，所述处理器用于：
当播放端从录制端接收到当前音视频业务的第一个音频流发送端报告SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的网络时间协议NTP时间，确定当前采用的音视频同步方式；其中，所述录制端发送的音频流SR和视频流SR均携带当前系统的网络时间协议NTP时间和对应的实时传输协议RTP时间戳；所述音视频同步方式包括基于时间戳的音视频同步方式和基于缓存的音视频同步方式；
当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，确定当前采用的音视频同步方式，i>1。
较佳地，所述处理器具体用于：当播放端从所述录制端接收到当前音视频业务的第一个音频流SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的NTP时间，确定当前采用的音视频同步方式，包括：
计算其中，为当前接收的第1个视频流SR与第1个音频流SR各自携带的NTP时间的差的绝对值，为当前接收的第1个视频流SR中的NTP时间；为当前接收的第1个音频流SR中的NTP时间；
如果则确定当前采用的音视频同步方式为基于缓存的音视频同步方式，其中，为预设的同时发送的音视频流之间的NTP时间差的门限值；
如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
较佳地，所述处理器具体用于当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，确定当前采用的音视频同步方式，包括：
计算其中，为当前接收的第i个音频流SR与上一次接收的第i-1个音频流SR各自携带的NTP时间的差的绝对值；NTPi a为当前接收的第i个音频流SR中的NTP时间；为上一次接收的第i-1个音频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与上一次接收的第i-1个视频流SR各自携带的NTP时间的差的绝对值；为当前接收的第i个视频流SR中的NTP时间；NTPi v为上一次接收的第i-1个视频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与第i个音频流SR各自携带的NTP时间的差的绝对值，NTPi v为当前接收的第i个视频流SR中的NTP时间；
当且时，如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式，否则，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；其中，为预设的相邻两次发送的音频流之间的NTP时间差的门限值，为预设的相邻两次发送的视频流之间的NTP时间差的门限值；为预设的同时发送的音视频流之间的NTP时间差的门限值；
当或时，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；
当且时，确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
较佳地，所述处理器具体用于基于缓存的音视频同步方式进行音视频同步，包括：
按照预设的统计周期，分别计算当前周期内的音频流平均帧间隔和视频流的平均帧间隔
对于音频流和视频流，分别根据各自数据流的缓存量，以预设的目标缓存量Buff_tar为基准，并结合当前相应数据流的所述平均帧间隔，调节相应数据流的播放速度。
较佳地，所述处理器具体用于以预设的目标缓存量Buff_tar为基准，调节相应数据流的播放速度,包括：
如果当前的数据流缓存量Buff满足：Buff_tar-Buff>Buffth，则触发播放器对当前的数据流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前的数据流缓存量Buff满足：Buff_tar-Buff<-Buffth，则触发所述播放器对当前的数据流进行快进；
如果当前的数据流缓存量Buff满足：-Buffth<Buff_tar-Buff<Buffth，则按照当前相应数据流的所述平均帧间隔，将相应数据流的数据送到所述播放器播放。
较佳地，所述处理器具体用于基于缓存的音视频同步方式进行音视频同步，包括：
按照预设的统计周期，计算视频流的平均帧间隔
对于音频流，按照预设的时间间隔T0，将数据送到播放器播放；
对于视频流，根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度。
较佳地，所述处理器具体用于根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度，包括：
如果当前视频流的缓存量Buffv满足：Buffa-Buffv>Buffth，则触发播放器对当前的视频流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前视频流的缓存量Buffv满足：Buffa-Buffv<-Buffth，则触发所述播放器对当前的视频流进行快进；
如果当前的数据流缓存量Buffv满足-Buffth<Buffa-Buffv<Buffth，则按照视频流当前的所述平均帧间隔，将视频流的数据送到所述播放器播放。
本发明实施例还提供了一种非易失性计算机可读存储介质，所述非易失性计算机可读存储介质存储指令，其特征在于，所述指令在由处理器执行时使得所述处理器执行如前所述的音视频同步调整方法的步骤。
另外，本发明实施例提供了一种电子设备，包括如前所述的非易失性计算机可读存储介质、以及可访问所述非易失性计算机可读存储介质的所述处理器。
综上所述，以上仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (16)

1.一种音视频同步调整方法，其特征在于，包括：
录制端向播放端发送音频流发送端报告SR和视频流SR，其中，音频流SR和视频流SR均携带当前系统的网络时间协议NTP时间和对应的实时传输协议RTP时间戳；
当播放端从所述录制端接收到当前音视频业务的第一个音频流SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的NTP时间，确定当前采用的音视频同步方式，所述音视频同步方式包括基于时间戳的音视频同步方式和基于缓存的音视频同步方式；
当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，确定当前采用的音视频同步方式，i>1。
2.根据权利要求1所述的方法，其特征在于，所述当播放端从所述录制端接收到当前音视频业务的第一个音频流SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的NTP时间，确定当前采用的音视频同步方式包括：
计算其中，为当前接收的第1个视频流SR与第1个音频流SR各自携带的NTP时间的差的绝对值，为当前接收的第1个视频流SR中的NTP时间；为当前接收的第1个音频流SR中的NTP时间；
如果则确定当前采用的音视频同步方式为基于缓存的音视频同步方式，其中，为预设的同时发送的音视频流之间的NTP时间差的门限值；
如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
3.根据权利要求1所述的方法，其特征在于，所述当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，确定当前采用的音视频同步方式包括：
计算其中，为当前接收的第i个音频流SR与上一次接收的第i-1个音频流SR各自携带的NTP时间的差的绝对值；NTPi a为当前接收的第i个音频流SR中的NTP时间；为上一次接收的第i-1个音频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与上一次接收的第i-1个视频流SR各自携带的NTP时间的差的绝对值；为当前接收的第i个视频流SR中的NTP时间；NTPi v为上一次接收的第i-1个视频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与第i个音频流SR各自携带的NTP时间的差的绝对值，NTPi v为当前接收的第i个视频流SR中的NTP时间；
当且时，如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式，否则，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；其中，为预设的相邻两次发送的音频流之间的NTP时间差的门限值，为预设的相邻两次发送的视频流之间的NTP时间差的门限值；为预设的同时发送的音视频流之间的NTP时间差的门限值；
当或时，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；
当且时，确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
4.根据权利要求1所述的方法，其特征在于，所述基于缓存的音视频同步方式包括：
按照预设的统计周期，分别计算当前周期内的音频流平均帧间隔和视频流的平均帧间隔
对于音频流和视频流，分别根据各自数据流的缓存量，以预设的目标缓存量Buff_tar为基准，并结合当前相应数据流的所述平均帧间隔，调节相应数据流的播放速度。
5.根据权利要求4所述的方法，其特征在于，所述以预设的目标缓存量Buff_tar为基准，调节相应数据流的播放速度包括：
如果当前的数据流缓存量Buff满足：Buff_tar-Buff>Buffth，则触发播放器对当前的数据流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前的数据流缓存量Buff满足：Buff_tar-Buff<-Buffth，则触发所述播放器对当前的数据流进行快进；
如果当前的数据流缓存量Buff满足：-Buffth<Buff_tar-Buff<Buffth，则按照相应数据流当前的所述平均帧间隔，将相应数据流的数据送到所述播放器播放。
6.根据权利要求1所述的方法，其特征在于，所述基于缓存的音视频同步方式包括：
按照预设的统计周期，计算视频流的平均帧间隔
对于音频流，按照预设的时间间隔T0，将数据送到播放器播放；
对于视频流，根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度。
7.根据权利要求6所述的方法，其特征在于，所述根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度包括：
如果当前视频流的缓存量Buffv满足：Buffa-Buffv>Buffth，则触发播放器对当前的视频流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前视频流的缓存量Buffv满足：Buffa-Buffv<-Buffth，则触发所述播放器对当前的视频流进行快进；
如果当前的数据流缓存量Buffv满足-Buffth<Buffa-Buffv<Buffth，则按照视频流当前的所述平均帧间隔，将视频流的数据送到所述播放器播放。
8.一种音视频同步调整装置，于播放端的设备中，其特征在于，包括：处理器，所述处理器用于：
当播放端从录制端接收到当前音视频业务的第一个音频流发送端报告SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的网络时间协议NTP时间，确定当前采用的音视频同步方式；其中，所述录制端发送的音频流SR和视频流SR均携带当前系统的网络时间协议NTP时间和对应的实时传输协议RTP时间戳；所述音视频同步方式包括基于时间戳的音视频同步方式和基于缓存的音视频同步方式；
当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，确定当前采用的音视频同步方式，i>1。
9.根据权利要求8所述的装置，其特征在于，所述处理器具体用于：当播放端从所述录制端接收到当前音视频业务的第一个音频流SR和第一个视频流SR时，根据本次接收到的所述音频流SR和所述视频流SR携带的NTP时间，确定当前采用的音视频同步方式，包括：
计算其中，为当前接收的第1个视频流SR与第1个音频流SR各自携带的NTP时间的差的绝对值，为当前接收的第1个视频流SR中的NTP时间；为当前接收的第1个音频流SR中的NTP时间；
如果则确定当前采用的音视频同步方式为基于缓存的音视频同步方式，其中，为预设的同时发送的音视频流之间的NTP时间差的门限值；
如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
10.根据权利要求8所述的装置，其特征在于，所述处理器具体用于当播放端从所述录制端接收到当前音视频业务的第i个音频流SR和第i个视频流SR时，根据本次接收到的所述音频流SR和视频流SR携带的NTP时间和上一次接收到的音频流SR和视频流SR中的NTP时间，确定当前采用的音视频同步方式，包括：
计算其中，为当前接收的第i个音频流SR与上一次接收的第i-1个音频流SR各自携带的NTP时间的差的绝对值；NTPi a为当前接收的第i个音频流SR中的NTP时间；为上一次接收的第i-1个音频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与上一次接收的第i-1个视频流SR各自携带的NTP时间的差的绝对值；为当前接收的第i个视频流SR中的NTP时间；NTPi v为上一次接收的第i-1个视频流SR中的NTP时间；
计算其中，为当前接收的第i个视频流SR与第i个音频流SR各自携带的NTP时间的差的绝对值，NTPi v为当前接收的第i个视频流SR中的NTP时间；
当且时，如果则确定当前采用的音视频同步方式为基于时间戳的音视频同步方式，否则，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；其中，为预设的相邻两次发送的音频流之间的NTP时间差的门限值，为预设的相邻两次发送的视频流之间的NTP时间差的门限值；为预设的同时发送的音视频流之间的NTP时间差的门限值；
当或时，确定当前采用的音视频同步方式为基于缓存的音视频同步方式；
当且时，确定当前采用的音视频同步方式为基于时间戳的音视频同步方式。
11.根据权利要求8所述的装置，其特征在于，所述处理器具体用于基于缓存的音视频同步方式进行音视频同步，包括：
按照预设的统计周期，分别计算当前周期内的音频流平均帧间隔和视频流的平均帧间隔
对于音频流和视频流，分别根据各自数据流的缓存量，以预设的目标缓存量Buff_tar为基准，并结合当前相应数据流的所述平均帧间隔，调节相应数据流的播放速度。
12.根据权利要求11所述的装置，其特征在于，所述处理器具体用于以预设的目标缓存量Buff_tar为基准，调节相应数据流的播放速度,包括：
如果当前的数据流缓存量Buff满足：Buff_tar-Buff>Buffth，则触发播放器对当前的数据流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前的数据流缓存量Buff满足：Buff_tar-Buff<-Buffth，则触发所述播放器对当前的数据流进行快进；
如果当前的数据流缓存量Buff满足：-Buffth<Buff_tar-Buff<Buffth，则按照当前相应数据流的所述平均帧间隔，将相应数据流的数据送到所述播放器播放。
13.根据权利要求8所述的装置，其特征在于，所述处理器具体用于基于缓存的音视频同步方式进行音视频同步，包括：
按照预设的统计周期，计算视频流的平均帧间隔
对于音频流，按照预设的时间间隔T0，将数据送到播放器播放；
对于视频流，根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度。
14.根据权利要求13所述的装置，其特征在于，所述处理器具体用于根据当前音频流的缓存量，结合当前视频流的所述平均帧间隔调节视频流的播放速度，包括：
如果当前视频流的缓存量Buffv满足：Buffa-Buffv>Buffth，则触发播放器对当前的视频流进行慢放；其中，Buffth为预设的数据流缓存量差值门限，Buffth>0；
如果当前视频流的缓存量Buffv满足：Buffa-Buffv<-Buffth，则触发所述播放器对当前的视频流进行快进；
如果当前的数据流缓存量Buffv满足-Buffth<Buffa-Buffv<Buffth，则按照视频流当前的所述平均帧间隔，将视频流的数据送到所述播放器播放。
15.一种非易失性计算机可读存储介质，所述非易失性计算机可读存储介质存储指令，其特征在于，所述指令在由处理器执行时使得所述处理器执行如权利要求1至7中任一项所述的音视频同步调整方法的步骤。
16.一种电子设备，其特征在于，包括如权利要求15所述的非易失性计算机可读存储介质、以及可访问所述非易失性计算机可读存储介质的所述处理器。
CN201910530009.6A 2019-06-19 2019-06-19 一种音视频同步调整方法和装置 Active CN110225385B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910530009.6A CN110225385B (zh) 2019-06-19 2019-06-19 一种音视频同步调整方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910530009.6A CN110225385B (zh) 2019-06-19 2019-06-19 一种音视频同步调整方法和装置

Publications (2)

Publication Number Publication Date
CN110225385A true CN110225385A (zh) 2019-09-10
CN110225385B CN110225385B (zh) 2021-09-10

Family

ID=67817658

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910530009.6A Active CN110225385B (zh) 2019-06-19 2019-06-19 一种音视频同步调整方法和装置

Country Status (1)

Country Link
CN (1) CN110225385B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114339353A (zh) * 2021-12-31 2022-04-12 晶晨半导体科技(北京)有限公司 音视频同步方法和装置及电子设备和计算机可读存储介质
CN115174979A (zh) * 2022-06-20 2022-10-11 阿里巴巴（中国）有限公司 流媒体传输网络及传输控制方法、装置、设备及存储介质
WO2023236767A1 (zh) * 2022-06-06 2023-12-14 中兴通讯股份有限公司 音视频处理方法及其装置、存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1738437A (zh) * 2004-06-22 2006-02-22 Lg电子株式会社 同步移动通信终端的视频/音频数据
US20070116057A1 (en) * 2003-07-04 2007-05-24 Liam Murphy System and method for determining clock skew in a packet -based telephony session
CN102665141A (zh) * 2012-05-16 2012-09-12 哈尔滨工业大学深圳研究生院 一种基于rtp封装的avs音视频预同步方法
CN103338386A (zh) * 2013-07-10 2013-10-02 航天恒星科技有限公司 基于简化时间戳的音视频同步方法
CN103414957A (zh) * 2013-07-30 2013-11-27 广东工业大学 一种音视频数据同步的方法和装置
CN106791271A (zh) * 2016-12-02 2017-05-31 福建星网智慧科技股份有限公司 一种音视频同步方法
CN107517401A (zh) * 2016-06-15 2017-12-26 成都鼎桥通信技术有限公司 多媒体数据播放方法及装置
CN107801080A (zh) * 2017-11-10 2018-03-13 普联技术有限公司 一种音视频同步方法、装置及设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070116057A1 (en) * 2003-07-04 2007-05-24 Liam Murphy System and method for determining clock skew in a packet -based telephony session
CN1738437A (zh) * 2004-06-22 2006-02-22 Lg电子株式会社 同步移动通信终端的视频/音频数据
CN102665141A (zh) * 2012-05-16 2012-09-12 哈尔滨工业大学深圳研究生院 一种基于rtp封装的avs音视频预同步方法
CN103338386A (zh) * 2013-07-10 2013-10-02 航天恒星科技有限公司 基于简化时间戳的音视频同步方法
CN103414957A (zh) * 2013-07-30 2013-11-27 广东工业大学 一种音视频数据同步的方法和装置
CN107517401A (zh) * 2016-06-15 2017-12-26 成都鼎桥通信技术有限公司 多媒体数据播放方法及装置
CN106791271A (zh) * 2016-12-02 2017-05-31 福建星网智慧科技股份有限公司 一种音视频同步方法
CN107801080A (zh) * 2017-11-10 2018-03-13 普联技术有限公司 一种音视频同步方法、装置及设备

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114339353A (zh) * 2021-12-31 2022-04-12 晶晨半导体科技(北京)有限公司 音视频同步方法和装置及电子设备和计算机可读存储介质
CN114339353B (zh) * 2021-12-31 2023-09-29 晶晨半导体科技(北京)有限公司 音视频同步方法和装置及电子设备和计算机可读存储介质
WO2023236767A1 (zh) * 2022-06-06 2023-12-14 中兴通讯股份有限公司 音视频处理方法及其装置、存储介质
CN115174979A (zh) * 2022-06-20 2022-10-11 阿里巴巴（中国）有限公司 流媒体传输网络及传输控制方法、装置、设备及存储介质
CN115174979B (zh) * 2022-06-20 2023-12-29 阿里巴巴（中国）有限公司 流媒体传输网络及传输控制方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN110225385B (zh) 2021-09-10

Similar Documents

Publication Publication Date Title
US7400653B2 (en) Maintaining synchronization of streaming audio and video using internet protocol
CN110225385A (zh) 一种音视频同步调整方法和装置
CN1489356B (zh) 媒体源、媒体接收器、媒体处理系统及同步播放媒体数据包的方法
US7424209B2 (en) System and method for real-time data archival
KR101535827B1 (ko) 무선 통신 네트워크에서 오디오 및 비디오 동기화 장치 및 방법
KR100750669B1 (ko) 멀티미디어 스트리밍 방법 및 장치
JP4838273B2 (ja) メディア内同期化のための適応型メディア再生方法および装置
CN101827271B (zh) 音频视频同步方法、装置以及数据接收终端
US9621682B2 (en) Reduced latency media distribution system
CN201781583U (zh) 多路服务器录像回放同步控制系统
CN107529097A (zh) 一种自适应调整视频缓冲大小的方法及装置
JP2006115477A (ja) メディアストリームから得られるメディアの提示を行う方法およびシステム
CN105744334A (zh) 一种音视频同步和同步播放的方法及设备
CN107438192A (zh) 音视频播放同步的方法及相关系统和多媒体播放终端
KR101180540B1 (ko) 스트리밍 서비스 송/수신 장치 및 방법
CN105429983A (zh) 采集媒体数据的方法、媒体终端及音乐教学系统
CN105791735A (zh) 用于视频通话码流动态调整的方法和系统
Huang et al. Tsync: A new synchronization framework for multi-site 3d tele-immersion
CN112995720B (zh) 一种音视频同步方法和装置
US8854964B2 (en) Method and apparatus for determining a transport bit rate for a Multiprogram transport stream
CN107517401B (zh) 多媒体数据播放方法及装置
JP5218995B2 (ja) 動画再生端末，動画再生方法及びプログラム
JP2008092161A (ja) 通信端末、マルチメディア再生制御方法、およびプログラム
CN105323653B (zh) 一种播放片段视频的方法及设备
CN110381351A (zh) 数据处理方法及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant