CN109819303B - 数据输出方法及相关设备 - Google Patents
数据输出方法及相关设备 Download PDFInfo
- Publication number
- CN109819303B CN109819303B CN201910168199.1A CN201910168199A CN109819303B CN 109819303 B CN109819303 B CN 109819303B CN 201910168199 A CN201910168199 A CN 201910168199A CN 109819303 B CN109819303 B CN 109819303B
- Authority
- CN
- China
- Prior art keywords
- stream data
- time
- delay
- data frame
- audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请公开了一种数据输出方法及相关设备,应用于视频播放系统包括的主机设备,所述视频播放系统还包括音频播放设备和包括显示屏的子机设备,方法包括:主机设备给视频流数据帧和音频流数据帧均打上时间戳,然后将打上时间戳的视频流数据帧发送给子机设备和将打上时间戳的音频流数据帧发送给音频播放设备,再然后子机设备提取到视频流数据帧中的数据时给主机设备反馈一个延迟时长,音频播放设备提取到音频流数据帧中的数据时给主机设备反馈一个延迟时长,最后主机设备基于两个延迟时长调整音频数据和视频数据的输出时刻。采用本申请实施例可提高音频数据和视频数据同步播放的概率。
Description
技术领域
本申请涉及电子技术领域,尤其涉及一种数据输出方法及相关设备。
背景技术
目前,手机已成为人们生活中不可缺少的一部分。人们可使用手机播放视频、播放音频等。在播放视频时,如果使用外置音频播放设备(如蓝牙耳机,蓝牙音箱等)播放音频,或由于手机的布局原因,手机的音频播放设备(如扩音器等)离手机处理器有一定距离和/或手机的显示器离手机处理器有一定距离,可能会出现音频数据和视频数据不同步播放的问题。
发明内容
本申请实施例提供一种数据输出方法及相关设备,用于提高音频数据和视频数据同步播放的概率。
第一方面,本申请实施例提供一种数据输出方法,应用于视频播放系统包括的主机设备,所述视频播放系统还包括音频播放设备和包括显示屏的子机设备,所述方法包括:
向所述子机设备发送目标视频的第一视频流数据帧,同时向所述音频播放设备发送所述第一视频流数据帧对应的第一音频流数据帧,所述第一视频流数据帧和所述第一音频流数据帧均打上第一时间戳;
接收所述子机设备发送的第一延迟时长,以及接收所述音频播放设备发送的第二延迟时长,所述第一延迟时长是基于所述第一时间戳与提取到所述第一视频流数据帧中的数据的时刻确定的,所述第二延迟时长是基于所述第一时间戳与提取到所述第一音频流数据帧中的数据的时刻确定的;
向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令,所述第一指令携带用于指示在第一时刻输出所述第一视频流数据帧中的数据,所述第二指令携带用于指示在第二时刻输出所述第一音频流数据帧中的数据,所述第一时刻和所述第二时刻是基于所述第一延迟时长和所述第二延迟时长确定的。
第二方面,本申请实施例提供一种数据输出装置,应用于视频播放系统包括的主机设备,所述视频播放系统还包括音频播放设备和包括显示屏的子机设备,所述数据输出装置包括处理单元和通信单元,其中:
所述处理单元,用于通过所述通信单元向所述子机设备发送目标视频的第一视频流数据帧,同时向所述音频播放设备发送所述第一视频流数据帧对应的第一音频流数据帧,所述第一视频流数据帧和所述第一音频流数据帧均打上第一时间戳;通过所述接收单元接收所述子机设备发送的第一延迟时长,以及接收所述音频播放设备发送的第二延迟时长,所述第一延迟时长是基于所述第一时间戳与提取到所述第一视频流数据帧中的数据的时刻确定的,所述第二延迟时长是基于所述第一时间戳与提取到所述第一音频流数据帧中的数据的时刻确定的;通过所述接收单元向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令,所述第一指令携带用于指示在第一时刻输出所述第一视频流数据帧中的数据,所述第二指令携带用于指示在第二时刻输出所述第一音频流数据帧中的数据,所述第一时刻和所述第二时刻是基于所述第一延迟时长和所述第二延迟时长确定的。
第三方面,本申请实施例提供一种主机设备,包括处理器、存储器、通信接口以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述处理器执行,上述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。
第四方面,本申请实施例提供了一种计算机可读存储介质,其中,上述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。
第五方面,本申请实施例提供了一种计算机程序产品,其中,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
可以看出,在本申请实施例中,主机设备给视频流数据帧和音频流数据帧均打上时间戳,然后将打上时间戳的视频流数据帧发送给子机设备和将打上时间戳的音频流数据帧发送给音频播放设备,再然后子机设备提取到视频流数据帧中的数据时给主机设备反馈一个延迟时长,音频播放设备提取到音频流数据帧中的数据时给主机设备反馈一个延迟时长,最后主机设备基于两个延迟时长调整音频数据和视频数据的输出时刻,相较于现有技术提取到音频数据和视频数据时直接输出数据,本方案基于两个延迟时长进一步调整数据输出时刻,可提高音频数据和视频数据同步播放的概率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1A是本申请实施例提供的一种视频播放系统的系统架构示意图;
图1B是本申请实施例提供的一种主机设备与子机设备和音频播放设备的信号交互示例图;
图1C是本申请实施例提供的另一种主机设备与子机设备和音频播放设备的信号交互示例图;
图1D是本申请实施例提供的另一种主机设备与子机设备和音频播放设备的信号交互示例图;
图1E是本申请实施例提供的另一种主机设备与子机设备和音频播放设备的信号交互示例图;
图2是本申请实施例提供的一种数据输出方法的流程示意图;
图3是本申请实施例提供的另一种数据输出方法的流程示意图;
图4是本申请实施例提供的一种主机设备的结构示意图;
图5是本申请实施例提供的一种数据输出装置的功能单元组成框图。
具体实施方式
下面对本申请实施例进行详细介绍。
请参阅图1A,图1A是本申请实施例提供了一种视频播放系统100的系统架构示意图,该视频播放系统100包括主机设备110、音频播放设备120和子机设备130。主机设备110与音频播放设备120和子机设备130通信连接,主机设备110具有蜂窝通信能力,子机设备包括显示屏,音频播放设备可以是蓝牙耳机、蓝牙音箱等。主机设备110和子机设备130可以组合成可拆分式终端设备,或者主机设备110、音频播放设备120和子机设备130可以组合成可拆分式终端设备。本申请实施例所涉及到的主机设备110可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备,以及各种形式的用户设备(User Equipment,UE),移动台(Mobile Station,MS),终端设备(terminal device)等等。下面对主机设备与音频播放设备和子机设备的内部架构和三者之间的通信模式进行示例说明。
示例1:如图1B所示,主机设备包括无线调制解调模块、主机主控制器、主机无线收发模块;所述子机设备包括子机主控制器、子机显示屏、与主机设备的主机无线收发模块能够通信的子机无线收发模块;音频播放设备包括音频主控制器、听筒、与主机设备的主机无线收发模块能够通信的音频无线收发模块。来自空中的信号,经无线调制解调模块解调后,再经主机的主控制器解析后,再经主机的主机无线收发模块调制后,将视频流数据帧发射到子机设备中,以及将音频流数据帧发射到音频播放设备中,经子机的子机无线收发模块解调后,再经子机主控制器解析出视频流数据帧中的数据,在子机主控制器控制下,由子机显示屏输出解析得到的数据,经音频播放设备的音频无线收发模块解调后,再经音频主控制器解析出音频流数据帧中的数据,在音频主控制器控制下,由音频播放设备的听筒输出解析得到的数据。
示例2:如图1C所示,所述主机设备包括无线调制解调模块、主机主控制器、主机无线收发模块;所述子机设备包括子机主控制器、子机显示屏、能够与主机的无线收发模块通信的子机无线收发模块、视频解码器;音频播放设备包括音频主控制器、听筒、与主机设备的主机无线收发模块能够通信的音频无线收发模块、音频解码器。来自空中的信号,经无线调制解调模块解调后,再经主机的主控制器解析后,再经主机的主机无线收发模块调制后,将视频流数据帧发射到子机设备中,以及将音频流数据帧发射到音频播放设备中,经子机的子机无线收发模块解调后,再经子机主控制器解析出视频流数据帧中的视频信号,在子机主控制器控制下,经视频解码器解码后,由子机显示屏输出,经音频播放设备的音频无线收发模块解调后,再经音频主控制器解析出音频流数据帧中的音频信号,在音频主控制器控制下,经音频解码器解码后,由音频播放设备的听筒输出。
示例3:如图1D所示,所述主机设备包括无线调制解调模块、主机主控制器、主机第一无线收发模块、主机第二无线收发模块;所述子机设备包括子机主控制器、与主机的主机第一无线收发模块能够通信的子机第一无线收发模块;所述音频播放设备包括音频主控制器、与主机的主机第一无线收发模块能够通信的音频第一无线收发模块;所述子机设备和所述音频播放设备能够通过所述主机设备接入通信网络。
示例4:如图1E所示,所述主机设备包括无线调制解调模块、主机主控制器、主机第一无线收发模块、主机第二无线收发模块;所述子机设备包括子机主控制器、与主机的主机第一无线收发模块能够通信的子机第一无线收发模块;所述音频播放设备包括音频主控制器、与主机的主机第一无线收发模块能够通信的音频第一无线收发模块;所述主机第二无线通信模块能够与基站(Base Station)和音频播放设备的音频第一无线收发模块通信。
需要说明的是,上述主机设备和子机设备的形态和功能仅为示例,此处不做唯一限定。
请参阅图2,图2是本申请实施例提供了一种数据输出方法的流程示意图,应用于如图1A的视频播放系统包括的主机设备,所述视频播放系统还包括音频播放设备和包括显示屏的子机设备,所述主机设备与所述子机设备和音频播放设备通信连接,所述主机设备具有蜂窝通信能力;如图所示,本数据输出方法包括:
步骤201:所述主机设备向所述子机设备发送目标视频的第一视频流数据帧,同时向所述音频播放设备发送所述第一视频流数据帧对应的第一音频流数据帧,所述第一视频流数据帧和所述第一音频流数据帧均打上第一时间戳。
其中,第一时间戳的时刻所述主机设备发送第一视频流数据帧和第一音频流数据帧的时刻。
步骤202:所述子机设备接收所述第一视频流数据帧;所述子机设备对所述第一视频流数据帧进行处理。
其中,所述子机设备对所述第一视频流数据帧进行处理是指对所述第一视频流数据帧进行解码处理,以提取所述第一视频流数据帧中的数据。
步骤203:在提取到所述第一视频流数据帧中的数据时,所述子机设备确定第一延迟时长,以及向所述主机设备发送所述第一延迟时长,所述第一延迟时长是基于所述第一时间戳与提取到所述第一视频流数据帧中的数据的时刻确定的。
其中,第一延迟时长=(提取到所述第一视频流数据帧中的数据的时刻-所述第一时间戳的时刻)。
步骤204:所述音频播放设备接收所述第一音频流数据帧;所述子机设备对所述第一音频数据帧进行处理。
其中,所述音频播放设备对所述第一音频流数据帧进行处理是指对所述第一音频流数据帧进行解码处理,以提取所述第一音频流数据帧中的数据。
步骤205:在提取到所述第一音频流数据帧中的数据时,所述音频播放设备确定第二延迟时长,以及向所述主机设备发送所述第二延迟时长,所述第二延迟时长是基于所述第一时间戳与提取到所述第一音频流数据帧中的数据的时刻确定的。
其中,第二延迟时长=(提取到所述第一音频流数据帧中的数据的时刻-所述第一时间戳的时刻)。
需要说明的是,步骤202~步骤203和步骤204~步骤205是并行执行的。
步骤206:所述主机设备接收所述子机设备发送的所述第一延迟时长,所述主机设备接收所述音频播放设备发送的第二延迟时长;所述主机设备向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令,所述第一指令携带用于指示在第一时刻输出所述第一视频流数据帧中的数据,所述第二指令携带用于指示在第二时刻输出所述第一音频流数据帧中的数据,所述第一时刻和所述第二时刻是基于所述第一延迟时长和所述第二延迟时长确定的。
在本申请的一实施例中,在所述第一延迟时长大于所述第二延迟时长时,所述第一时刻为接收到所述第一指令的时刻,所述第二时刻=[发送所述第二指令的时刻+(所述第一延迟时长-所述第二延迟时长)+第一阈值],所述第一阈值≤(所述第一延迟时长-所述第二延迟时长)。
在所述第一延迟时长小于所述第二延迟时长时,所述第二时刻为接收到所述第二指令的时刻,所述第一时刻=[发送所述第一指令的时刻+(所述第二延迟时长-所述第一延迟时长)+第二阈值],所述第二阈值≤(所述第二延迟时长-所述第一延迟时长)。
需要说明的是,目标视频包括多个视频流数据帧和多个视频流数据帧,这多个视频流数据帧和这多个音频流数据帧是一一对应的,主机设备是依次向子机设备发送视频流数据帧的,主机设备是依次向蓝牙耳机发送音频流数据帧的,每个视频流数据帧和该每个视频流数据帧对应的音频流数据帧的处理方式是相同的。
举例来说,假设主机设备和子机设备组合成可拆分式终端设备,音频播放设备为蓝牙耳机,主机设备向子机设备发送目标视频的视频流数据帧1,同时向蓝牙耳机发送视频流数据帧1对应的音频流数据帧1,主机设备在即将要发送视频流数据帧1和音频流数据帧1时给视频流数据帧1和音频流数据帧1打上同样的时间戳1;子机设备在接收到视频流数据帧1之后,对视频流数据帧1进行处理,以提取视频流数据帧1中的数据,在提取到视频流数据帧1中的数据时,子机设备确定延迟时长1,以及将延迟时长1发送给主机设备,假设时间戳1上的时刻为10:38:50.156,子机设备提取到视频流数据帧1中的数据的时刻为10:38:50.560,那么延迟时长1=404ms;蓝牙耳机在接收到音频流数据帧1之后,对音频流数据帧1进行处理,以提取音频流数据帧1中的数据,在提取到音频流数据帧1中的数据时,蓝牙耳机确定延迟时长2,以及将延迟时长2发送给主机设备,假设音频播放设备提取到音频流数据帧1中的数据的时刻为10:38:50.500那么延迟时长2=344ms;主机设备向子机设备发送控制指令1,同时向音频播放设备发送控制指令2,控制指令1用于控制在时刻1输出视频流数据帧中的数据,控制指令2用于控制音频播放设备在时刻2输出音频流数据帧中的数据,假设第一阈值=50ms,发送控制指令2的时刻为时刻1为10:38:50.660,子机设备接收到控制指令2的时刻,时刻2为10:38:50.770。
可以看出,在本申请实施例中,主机设备给视频流数据帧和音频流数据帧均打上时间戳,然后将打上时间戳的视频流数据帧发送给子机设备和将打上时间戳的音频流数据帧发送给音频播放设备,再然后子机设备提取到视频流数据帧中的数据时给主机设备反馈一个延迟时长,音频播放设备提取到音频流数据帧中的数据时给主机设备反馈一个延迟时长,最后主机设备基于两个延迟时长调整音频数据和视频数据的输出时刻,相较于现有技术提取到音频数据和视频数据时直接输出数据,本方案基于两个延迟时长进一步调整数据输出时刻,可提高音频数据和视频数据同步播放的概率。
在本申请的一实施例中,所述主机设备向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令之后,所述方法还包括:
若连续检测到所述目标视频的N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且连续检测到所述N个第二视频流数据帧一一对应的N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,所述主机设备向所述子机设备发送第三指令,同时向所述音频播放设备发送第四指令,所述N为大于1的整数。
其中,所述第三指令用于指示暂停反馈在所述N个第二视频流数据帧之后的连续的W个第三视频流数据帧的延迟时长,以及指示在第三时刻输出第三视频流数据帧中的数据,所述第四指令用于指示暂停反馈在所述N个第二音频流数据帧之后的连续的W个第三音频流数据帧的延迟时长,以及指示在第四时刻输出第三音频流数据帧中的数据,所述第三时刻和所述第四时刻是基于所述第一延迟时长和所述第二延迟时长确定的,所述W为大于1的整数。
进一步地,在所述第一延迟时长大于所述第二延迟时长时,所述第三时刻为所述子机设备提取到所述第三视频流数据帧的数据的时刻,所述第四时刻=[所述音频播放设备提取到所述第三音频流数据帧的数据的时刻+(所述第一延迟时长-所述第二延迟时长)]。
在所述第一延迟时长大于所述第二延迟时长时,所述第四时刻为所述音频播放设备提取到所述第三音频流数据帧的数据的时刻,所述第三时刻=[所述子机设备提取到所述第三视频流数据帧的数据的时刻+(所述第二延迟时长-所述第一延迟时长)]。
其中,第二视频流数据帧i在目标视频中的播放时间与第三视频流数据帧j在目标视频中的播放时间相邻,第二视频流数据帧i为N个第二视频流数据帧中在目标视频中播放时间最晚的第二视频流数据帧。第三视频流数据帧j为W个第三视频流数据帧中在目标视频中播放时间最早的第三视频流数据帧。
需要说明的是,每个第二视频流数据帧的数据输出处理方式与第一视频流数据帧的数据输出处理方式是相同的,以及第二音频数据帧的数据输出处理方式与第一音频数据帧的数据输出处理方式是相同的。
具体地,如果在第一视频流数据帧之后的连续的多个视频流数据帧对应的延迟时长与第一视频流数据帧对应的延迟时长差不多代表子机设备处于一个比较稳定的状态,同样如果在第一音频流数据帧之后的连续的多个音频数据帧对应的延迟时长与第一音频数据帧对应的延迟时长差不多代表音频播放设备处于一个比较稳定的状态。在该种情况下,可控制子机设备和音频播放设备暂停反馈延迟时长,以及控制子机设备和音频设备基于之前确定的延迟时长来控制视频流数据帧中的数据的输出,这样可减少信令的开销,进而降低资源的消耗。
在本申请的一实现方式中,所述向所述子机设备发送第三指令,同时向所述音频播放设备发送第四指令之后,所述方法还包括:
若检测到第四视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且检测到所述第四视频流数据帧对应的第四音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,向所述子机设备发送第五指令,同时向所述音频播放设备发送第六指令,所述第四视频流数据帧为所述W个第三视频流数据帧之后的第一个视频流数据帧。
其中,所述第五指令用于指示暂停反馈在所述第四视频流数据帧之后的连续的K个第五视频流数据帧的延迟时长,以及指示在第三时刻输出第五视频流数据帧中的数据,所述第六指令用于指示暂停反馈在所述第四音频流数据帧之后的连续的K个第五音频流数据帧的延迟时长,以及指示在第四时刻输出第五音频流数据帧中的数据,所述K大于所述W。
其中,第四视频流数据帧在目标视频中的播放时间与第三视频流数据帧k在目标视频中的播放时间相邻,第三视频流数据帧k为W个第三视频流数据帧中在目标视频中播放时间最晚的第三视频流数据帧。
第四视频流数据帧的数据输出处理方式与第一视频流数据帧的数据输出处理方式是相同的,以及第四音频数据帧的数据输出处理方式与第一音频数据帧的数据输出处理方式是相同的。
具体地,如果第四视频流数据帧对应的延迟时长与第一视频流数据帧对应的延迟时长差不多代表子机设备仍然处于一个比较稳定的状态,同样如果第四音频数据帧对应的延迟时长与第一音频流数据帧对应的延迟时长差不多代表子机设备仍然处于一个比较稳定的状态,在该种情况下,可控制子机设备和音频播放设备暂停反馈延迟时长,以及控制子机设备和音频设备基于之前确定的延迟时长来控制视频流数据帧中的数据的输出,这样可减少信令的开销,进而降低资源的消耗。
在本申请的一实现方式中,所述向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令之后,所述方法还包括:
若连续检测到所述N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且未连续检测到所述N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,向所述子机设备发送第七指令,以及基于所述第一迟延时长确定每个第三视频流数据帧的数据的播放时刻,所述第七指令用于指示暂停反馈所述W个第三视频流数据帧的延迟时长。
具体地,如果在第一视频流数据帧之后的连续的多个视频流数据帧对应的延迟时长与第一视频流数据帧对应的延迟时长差不多代表子机设备处于一个比较稳定的状态。在该种情况下,可控制子机设备暂停反馈延迟时长,以及控制子机设备基于之前确定的延迟时长来控制视频流数据帧中的数据的输出,这样可减少信令的开销,进而降低资源的消耗。
在本申请的一实现方式中,所述向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令之后,所述方法还包括:
若未连续检测到所述N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且连续检测到所述N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,向所述音频播放设备发送第八指令,以及基于所述第二迟延时长确定每个第三音频流数据帧的数据的播放时刻,所述第八指令用于指示暂停反馈所述W个第三音频流数据帧的延迟时长。
具体地,如果在第一音频流数据帧之后的连续的多个音频数据帧对应的延迟时长与第一音频数据帧对应的延迟时长差不多代表音频播放设备处于一个比较稳定的状态。在该种情况下,可控制音频播放设备暂停反馈延迟时长,以及控制音频设备基于之前确定的延迟时长来控制视频流数据帧中的数据的输出,这样可减少信令的开销,进而降低资源的消耗。
与上述图2所示的实施例一致的,请参阅图3,图3是本申请实施例提供的一种数据输出方法的流程示意图,应用于如图1A的视频播放系统包括的主机设备,所述视频播放系统还包括音频播放设备和包括显示屏的子机设备,所述主机设备与所述子机设备和音频播放设备通信连接,所述主机设备具有蜂窝通信能力;如图所示,本数据输出方法包括:
步骤301:所述主机设备向所述子机设备发送目标视频的第一视频流数据帧,同时向所述音频播放设备发送所述第一视频流数据帧对应的第一音频流数据帧,所述第一视频流数据帧和所述第一音频流数据帧均打上第一时间戳。
步骤302:所述子机设备接收所述第一视频流数据帧;所述子机设备对所述第一视频流数据帧进行处理。
步骤303:在提取到所述第一视频流数据帧中的数据时,所述子机设备确定第一延迟时长,以及向所述主机设备发送所述第一延迟时长,所述第一延迟时长是基于所述第一时间戳与提取到所述第一视频流数据帧中的数据的时刻确定的。
步骤304:所述音频播放设备接收所述第一音频流数据帧;所述子机设备对所述第一音频数据帧进行处理。
步骤305:在提取到所述第一音频流数据帧中的数据时,所述音频播放设备确定第二延迟时长,以及向所述主机设备发送所述第二延迟时长,所述第二延迟时长是基于所述第一时间戳与提取到所述第一音频流数据帧中的数据的时刻确定的。
步骤306:所述主机设备接收所述子机设备发送的所述第一延迟时长,所述主机设备接收所述音频播放设备发送的第二延迟时长;所述主机设备向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令,所述第一指令携带用于指示在第一时刻输出所述第一视频流数据帧中的数据,所述第二指令携带用于指示在第二时刻输出所述第一音频流数据帧中的数据,所述第一时刻和所述第二时刻是基于所述第一延迟时长和所述第二延迟时长确定的。
步骤307:若连续检测到所述目标视频的N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且连续检测到所述N个第二视频流数据帧一一对应的N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,所述主机设备向所述子机设备发送第三指令,同时向所述音频播放设备发送第四指令,所述N为大于1的整数。
其中,所述第三指令用于指示暂停反馈在所述N个第二视频流数据帧之后的连续的W个第三视频流数据帧的延迟时长,以及指示在第三时刻输出第三视频流数据帧中的数据,所述第四指令用于指示暂停反馈在所述N个第二音频流数据帧之后的连续的W个第三音频流数据帧的延迟时长,以及指示在第四时刻输出第三音频流数据帧中的数据,所述第三时刻和所述第四时刻是基于所述第一延迟时长和所述第二延迟时长确定的,所述W为大于1的整数。
步骤308:若检测到第四视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且检测到所述第四视频流数据帧对应的第四音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,所述主机设备向所述子机设备发送第五指令,同时向所述音频播放设备发送第六指令,所述第四视频流数据帧为所述W个第三视频流数据帧之后的第一个视频流数据帧。
其中,所述第五指令用于指示暂停反馈在所述第四视频流数据帧之后的连续的K个第五视频流数据帧的延迟时长,以及指示在第三时刻输出第五视频流数据帧中的数据,所述第六指令用于指示暂停反馈在所述第四音频流数据帧之后的连续的K个第五音频流数据帧的延迟时长,以及指示在第四时刻输出第五音频流数据帧中的数据,所述K大于所述W。
需要说明的是,本实施例的具体实现过程可参见上述方法实施例所述的具体实现过程,在此不再叙述。
与上述图2和图3所示的实施例一致的,请参阅图4,图4是本申请实施例提供的一种主机设备400的结构示意图,所述主机设备400为视频播放设备中的,所述视频播放设备还包括子机设备和音频播放设备,如图所示,所述主机设备400包括应用处理器410、存储器420、通信接口430以及一个或多个程序421,其中,所述一个或多个程序421被存储在上述存储器420中,并且被配置由上述应用处理器410执行,所述一个或多个程序421包括用于执行以下步骤的指令:
向所述子机设备发送目标视频的第一视频流数据帧,同时向所述音频播放设备发送所述第一视频流数据帧对应的第一音频流数据帧,所述第一视频流数据帧和所述第一音频流数据帧均打上第一时间戳;
接收所述子机设备发送的第一延迟时长,以及接收所述音频播放设备发送的第二延迟时长,所述第一延迟时长是基于所述第一时间戳与提取到所述第一视频流数据帧中的数据的时刻确定的,所述第二延迟时长是基于所述第一时间戳与提取到所述第一音频流数据帧中的数据的时刻确定的;
向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令,所述第一指令携带用于指示在第一时刻输出所述第一视频流数据帧中的数据,所述第二指令携带用于指示在第二时刻输出所述第一音频流数据帧中的数据,所述第一时刻和所述第二时刻是基于所述第一延迟时长和所述第二延迟时长确定的。
在本申请的一实现方式中,在所述第一延迟时长大于所述第二延迟时长时,所述第一时刻为接收到所述第一指令的时刻,所述第二时刻=[发送所述第二指令的时刻+(所述第一延迟时长-所述第二延迟时长)+第一阈值],所述第一阈值≤(所述第一延迟时长-所述第二延迟时长)。
在所述第一延迟时长小于所述第二延迟时长时,所述第二时刻为接收到所述第二指令的时刻,所述第一时刻=[发送所述第一指令的时刻+(所述第二延迟时长-所述第一延迟时长)+第二阈值],所述第二阈值≤(所述第二延迟时长-所述第一延迟时长)。
在本申请的一实现方式中,在向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令之后,所述一个或多个程序421包括还用于执行以下步骤的指令:
若连续检测到所述目标视频的N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且连续检测到所述N个第二视频流数据帧一一对应的N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,向所述子机设备发送第三指令,同时向所述音频播放设备发送第四指令,所述N为大于1的整数。
其中,所述第三指令用于指示暂停反馈在所述N个第二视频流数据帧之后的连续的W个第三视频流数据帧的延迟时长,以及指示在第三时刻输出第三视频流数据帧中的数据,所述第四指令用于指示暂停反馈在所述N个第二音频流数据帧之后的连续的W个第三音频流数据帧的延迟时长,以及指示在第四时刻输出第三音频流数据帧中的数据,所述第三时刻和所述第四时刻是基于所述第一延迟时长和所述第二延迟时长确定的,所述W为大于1的整数。
在本申请的一实现方式中,在所述第一延迟时长大于所述第二延迟时长时,所述第三时刻为所述子机设备提取到所述第三视频流数据帧的数据的时刻,所述第四时刻=[所述音频播放设备提取到所述第三音频流数据帧的数据的时刻+(所述第一延迟时长-所述第二延迟时长)]。
在所述第一延迟时长大于所述第二延迟时长时,所述第四时刻为所述音频播放设备提取到所述第三音频流数据帧的数据的时刻,所述第三时刻=[所述子机设备提取到所述第三视频流数据帧的数据的时刻+(所述第二延迟时长-所述第一延迟时长)]。
在本申请的一实现方式中,在向所述子机设备发送第三指令,同时向所述音频播放设备发送第四指令之后,所述一个或多个程序421包括还用于执行以下步骤的指令:
若检测到第四视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且检测到所述第四视频流数据帧对应的第四音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,向所述子机设备发送第五指令,同时向所述音频播放设备发送第六指令,所述第四视频流数据帧为所述W个第三视频流数据帧之后的第一个视频流数据帧。
其中,所述第五指令用于指示暂停反馈在所述第四视频流数据帧之后的连续的K个第五视频流数据帧的延迟时长,以及指示在第三时刻输出第五视频流数据帧中的数据,所述第六指令用于指示暂停反馈在所述第四音频流数据帧之后的连续的K个第五音频流数据帧的延迟时长,以及指示在第四时刻输出第五音频流数据帧中的数据,所述K大于所述W。
在本申请的一实现方式中,在向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令之后,所述一个或多个程序421包括还用于执行以下步骤的指令:
若连续检测到所述N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且未连续检测到所述N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,向所述子机设备发送第七指令,以及基于所述第一迟延时长确定每个第三视频流数据帧的数据的播放时刻,所述第七指令用于指示暂停反馈所述W个第三视频流数据帧的延迟时长。
在本申请的一实现方式中,在向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令之后,所述一个或多个程序421包括还用于执行以下步骤的指令:
若未连续检测到所述N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且连续检测到所述N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,向所述音频播放设备发送第八指令,以及基于所述第二迟延时长确定每个第三音频流数据帧的数据的播放时刻,所述第八指令用于指示暂停反馈所述W个第三音频流数据帧的延迟时长。
需要说明的是,本实施例的具体实现过程可参见上述方法实施例所述的具体实现过程,在此不再叙述。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是,主机设备为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所提供的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对主机设备进行功能单元的划分,例如,可以对应各个功能划分各个功能单元,也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。需要说明的是,本申请实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
图5是本申请实施例中所涉及的数据输出装置500的功能单元组成框图。该数据输出装置500应用于视频播放系统包括的主机设备,所述视频播放系统还包括音频播放设备和包括显示屏的子机设备,所述数据输出装置500包括处理单元501和通信单元502,其中:
所述处理单元501,用于通过所述通信单元向所述子机设备发送目标视频的第一视频流数据帧,同时向所述音频播放设备发送所述第一视频流数据帧对应的第一音频流数据帧,所述第一视频流数据帧和所述第一音频流数据帧均打上第一时间戳;通过所述接收单元接收所述子机设备发送的第一延迟时长,以及接收所述音频播放设备发送的第二延迟时长,所述第一延迟时长是基于所述第一时间戳与提取到所述第一视频流数据帧中的数据的时刻确定的,所述第二延迟时长是基于所述第一时间戳与提取到所述第一音频流数据帧中的数据的时刻确定的;通过所述接收单元向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令,所述第一指令携带用于指示在第一时刻输出所述第一视频流数据帧中的数据,所述第二指令携带用于指示在第二时刻输出所述第一音频流数据帧中的数据,所述第一时刻和所述第二时刻是基于所述第一延迟时长和所述第二延迟时长确定的。
在本申请的一实现方式中,在所述第一延迟时长大于所述第二延迟时长时,所述第一时刻为接收到所述第一指令的时刻,所述第二时刻=[发送所述第二指令的时刻+(所述第一延迟时长-所述第二延迟时长)+第一阈值],所述第一阈值≤(所述第一延迟时长-所述第二延迟时长)。
在所述第一延迟时长小于所述第二延迟时长时,所述第二时刻为接收到所述第二指令的时刻,所述第一时刻=[发送所述第一指令的时刻+(所述第二延迟时长-所述第一延迟时长)+第二阈值],所述第二阈值≤(所述第二延迟时长-所述第一延迟时长)。
在本申请的一实现方式中,在向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令之后,所述处理单元501,还用于若连续检测到所述目标视频的N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且连续检测到所述N个第二视频流数据帧一一对应的N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,通过所述通信单元502向所述子机设备发送第三指令,同时向所述音频播放设备发送第四指令,所述N为大于1的整数。
其中,所述第三指令用于指示暂停反馈在所述N个第二视频流数据帧之后的连续的W个第三视频流数据帧的延迟时长,以及指示在第三时刻输出第三视频流数据帧中的数据,所述第四指令用于指示暂停反馈在所述N个第二音频流数据帧之后的连续的W个第三音频流数据帧的延迟时长,以及指示在第四时刻输出第三音频流数据帧中的数据,所述第三时刻和所述第四时刻是基于所述第一延迟时长和所述第二延迟时长确定的,所述W为大于1的整数。
在本申请的一实现方式中,在所述第一延迟时长大于所述第二延迟时长时,所述第三时刻为所述子机设备提取到所述第三视频流数据帧的数据的时刻,所述第四时刻=[所述音频播放设备提取到所述第三音频流数据帧的数据的时刻+(所述第一延迟时长-所述第二延迟时长)]。
在所述第一延迟时长大于所述第二延迟时长时,所述第四时刻为所述音频播放设备提取到所述第三音频流数据帧的数据的时刻,所述第三时刻=[所述子机设备提取到所述第三视频流数据帧的数据的时刻+(所述第二延迟时长-所述第一延迟时长)]。
在本申请的一实现方式中,在向所述子机设备发送第三指令,同时向所述音频播放设备发送第四指令之后,所述处理单元501,还用于若检测到第四视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且检测到所述第四视频流数据帧对应的第四音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,通过所述通信单元502向所述子机设备发送第五指令,同时向所述音频播放设备发送第六指令,所述第四视频流数据帧为所述W个第三视频流数据帧之后的第一个视频流数据帧。
其中,所述第五指令用于指示暂停反馈在所述第四视频流数据帧之后的连续的K个第五视频流数据帧的延迟时长,以及指示在第三时刻输出第五视频流数据帧中的数据,所述第六指令用于指示暂停反馈在所述第四音频流数据帧之后的连续的K个第五音频流数据帧的延迟时长,以及指示在第四时刻输出第五音频流数据帧中的数据,所述K大于所述W。
在本申请的一实现方式中,在向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令之后,所述处理单元501,还用于若连续检测到所述N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且未连续检测到所述N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,通过所述通信单元502向所述子机设备发送第七指令,以及基于所述第一迟延时长确定每个第三视频流数据帧的数据的播放时刻,所述第七指令用于指示暂停反馈所述W个第三视频流数据帧的延迟时长。
在本申请的一实现方式中,在向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令之后,所述处理单元501,还用于若未连续检测到所述N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且连续检测到所述N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,通过所述通信单元向所述音频播放设备发送第八指令,以及基于所述第二迟延时长确定每个第三音频流数据帧的数据的播放时刻,所述第八指令用于指示暂停反馈所述W个第三音频流数据帧的延迟时长。
其中,所述数据输出装置500还包括存储单元503,所述处理单元501可以是处理器,所述通信单元502可以是通信接口,所述存储单元503可以是存储器。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤,上述计算机包括主机设备。
本申请实施例还提供一种计算机程序产品,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包,上述计算机包括主机设备。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (9)
1.一种数据输出方法,其特征在于,应用于视频播放系统包括的主机设备,所述视频播放系统还包括音频播放设备和包括显示屏的子机设备,所述方法包括:
向所述子机设备发送目标视频的第一视频流数据帧,同时向所述音频播放设备发送所述第一视频流数据帧对应的第一音频流数据帧,所述第一视频流数据帧和所述第一音频流数据帧均打上第一时间戳;
接收所述子机设备发送的第一延迟时长,以及接收所述音频播放设备发送的第二延迟时长,所述第一延迟时长是基于所述第一时间戳与提取到所述第一视频流数据帧中的数据的时刻确定的,所述第二延迟时长是基于所述第一时间戳与提取到所述第一音频流数据帧中的数据的时刻确定的;
向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令,所述第一指令携带用于指示在第一时刻输出所述第一视频流数据帧中的数据,所述第二指令携带用于指示在第二时刻输出所述第一音频流数据帧中的数据,所述第一时刻和所述第二时刻是基于所述第一延迟时长和所述第二延迟时长确定的;
若连续检测到所述目标视频的N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且连续检测到所述N个第二视频流数据帧一一对应的N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,向所述子机设备发送第三指令,同时向所述音频播放设备发送第四指令,所述N为大于1的整数;
其中,所述第三指令用于指示暂停反馈在所述N个第二视频流数据帧之后的连续的W个第三视频流数据帧的延迟时长,以及指示在第三时刻输出第三视频流数据帧中的数据,所述第四指令用于指示暂停反馈在所述N个第二音频流数据帧之后的连续的W个第三音频流数据帧的延迟时长,以及指示在第四时刻输出第三音频流数据帧中的数据,所述第三时刻和所述第四时刻是基于所述第一延迟时长和所述第二延迟时长确定的,所述W为大于1的整数。
2.根据权利要求1所述的方法,其特征在于,在所述第一延迟时长大于所述第二延迟时长时,所述第一时刻为接收到所述第一指令的时刻,所述第二时刻=[发送所述第二指令的时刻+(所述第一延迟时长-所述第二延迟时长)+第一阈值],所述第一阈值≤(所述第一延迟时长-所述第二延迟时长);
在所述第一延迟时长小于所述第二延迟时长时,所述第二时刻为接收到所述第二指令的时刻,所述第一时刻=[发送所述第一指令的时刻+(所述第二延迟时长-所述第一延迟时长)+第二阈值],所述第二阈值≤(所述第二延迟时长-所述第一延迟时长)。
3.根据权利要求1所述的方法,其特征在于,在所述第一延迟时长大于所述第二延迟时长时,所述第三时刻为所述子机设备提取到所述第三视频流数据帧的数据的时刻,所述第四时刻=[所述音频播放设备提取到所述第三音频流数据帧的数据的时刻+(所述第一延迟时长-所述第二延迟时长)];
在所述第一延迟时长大于所述第二延迟时长时,所述第四时刻为所述音频播放设备提取到所述第三音频流数据帧的数据的时刻,所述第三时刻=[所述子机设备提取到所述第三视频流数据帧的数据的时刻+(所述第二延迟时长-所述第一延迟时长)]。
4.根据权利要求3所述的方法,其特征在于,所述向所述子机设备发送第三指令,同时向所述音频播放设备发送第四指令之后,所述方法还包括:
若检测到第四视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且检测到所述第四视频流数据帧对应的第四音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,向所述子机设备发送第五指令,同时向所述音频播放设备发送第六指令,所述第四视频流数据帧为所述W个第三视频流数据帧之后的第一个视频流数据帧;
其中,所述第五指令用于指示暂停反馈在所述第四视频流数据帧之后的连续的K个第五视频流数据帧的延迟时长,以及指示在第三时刻输出第五视频流数据帧中的数据,所述第六指令用于指示暂停反馈在所述第四音频流数据帧之后的连续的K个第五音频流数据帧的延迟时长,以及指示在第四时刻输出第五音频流数据帧中的数据,所述K大于所述W。
5.根据权利要求1、3、4任一项所述的方法,其特征在于,所述向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令之后,所述方法还包括:
若连续检测到所述N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且未连续检测到所述N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,向所述子机设备发送第七指令,以及基于所述第一延迟时长确定每个第三视频流数据帧的数据的播放时刻,所述第七指令用于指示暂停反馈所述W个第三视频流数据帧的延迟时长。
6.根据权利要求1、3、4任一项所述的方法,其特征在于,所述向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令之后,所述方法还包括:
若未连续检测到所述N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且连续检测到所述N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,向所述音频播放设备发送第八指令,以及基于所述第二延迟时长确定每个第三音频流数据帧的数据的播放时刻,所述第八指令用于指示暂停反馈所述W个第三音频流数据帧的延迟时长。
7.一种数据输出装置,其特征在于,应用于视频播放系统包括的主机设备,所述视频播放系统还包括音频播放设备和包括显示屏的子机设备,所述数据输出装置包括处理单元和通信单元,其中:
所述处理单元,用于通过所述通信单元向所述子机设备发送目标视频的第一视频流数据帧,同时向所述音频播放设备发送所述第一视频流数据帧对应的第一音频流数据帧,所述第一视频流数据帧和所述第一音频流数据帧均打上第一时间戳;通过接收单元接收所述子机设备发送的第一延迟时长,以及接收所述音频播放设备发送的第二延迟时长,所述第一延迟时长是基于所述第一时间戳与提取到所述第一视频流数据帧中的数据的时刻确定的,所述第二延迟时长是基于所述第一时间戳与提取到所述第一音频流数据帧中的数据的时刻确定的;通过所述接收单元向所述子机设备发送第一指令,同时向所述音频播放设备发送第二指令,所述第一指令携带用于指示在第一时刻输出所述第一视频流数据帧中的数据,所述第二指令携带用于指示在第二时刻输出所述第一音频流数据帧中的数据,所述第一时刻和所述第二时刻是基于所述第一延迟时长和所述第二延迟时长确定的;
所述处理单元,还用于若连续检测到所述目标视频的N个第二视频流数据帧的延迟时长与所述第一延迟时长的差值的绝对值均小于第三阈值,且连续检测到所述N个第二视频流数据帧一一对应的N个第二音频流数据帧的延迟时长与所述第二延迟时长的差值的绝对值均小于所述第三阈值,通过所述通信单元向所述子机设备发送第三指令,同时向所述音频播放设备发送第四指令,所述N为大于1的整数;
其中,所述第三指令用于指示暂停反馈在所述N个第二视频流数据帧之后的连续的W个第三视频流数据帧的延迟时长,以及指示在第三时刻输出第三视频流数据帧中的数据,所述第四指令用于指示暂停反馈在所述N个第二音频流数据帧之后的连续的W个第三音频流数据帧的延迟时长,以及指示在第四时刻输出第三音频流数据帧中的数据,所述第三时刻和所述第四时刻是基于所述第一延迟时长和所述第二延迟时长确定的,所述W为大于1的整数。
8.一种主机设备,其特征在于,包括处理器、存储器、通信接口,以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置由所述处理器执行,所述程序包括用于执行如权利要求1-6任一项所述的方法中的步骤的指令。
9.一种计算机可读存储介质,其特征在于,存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行如权利要求1-6任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910168199.1A CN109819303B (zh) | 2019-03-06 | 2019-03-06 | 数据输出方法及相关设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910168199.1A CN109819303B (zh) | 2019-03-06 | 2019-03-06 | 数据输出方法及相关设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109819303A CN109819303A (zh) | 2019-05-28 |
CN109819303B true CN109819303B (zh) | 2021-04-23 |
Family
ID=66608253
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910168199.1A Active CN109819303B (zh) | 2019-03-06 | 2019-03-06 | 数据输出方法及相关设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109819303B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110062281B (zh) * | 2019-05-29 | 2021-08-24 | 维沃移动通信有限公司 | 一种播放进度调节方法及其终端设备 |
CN110557226A (zh) * | 2019-09-05 | 2019-12-10 | 北京云中融信网络科技有限公司 | 一种音频传输方法和装置 |
CN110704340B (zh) * | 2019-09-26 | 2022-02-11 | 支付宝(杭州)信息技术有限公司 | 数据传输设备、系统和方法 |
CN114760275A (zh) * | 2020-03-05 | 2022-07-15 | 华为技术有限公司 | 一种分布式数据传输的方法、装置和系统 |
EP4260568A4 (en) * | 2020-12-11 | 2024-05-15 | QUALCOMM Incorporated | MULTIMEDIA PLAYBACK SYNCHRONIZATION |
CN114827696B (zh) * | 2021-01-29 | 2023-06-27 | 华为技术有限公司 | 一种跨设备的音视频数据同步播放的方法和电子设备 |
CN115474082A (zh) * | 2022-10-13 | 2022-12-13 | 闪耀现实(无锡)科技有限公司 | 播放媒体数据的方法和装置、系统、车辆、设备和介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101448164A (zh) * | 2007-11-27 | 2009-06-03 | 佳能株式会社 | 音频处理设备、视频处理设备及其控制方法 |
CN103402136A (zh) * | 2013-07-29 | 2013-11-20 | 重庆大学 | 自适应调整缓存的控制方法、装置及自适应播放器 |
WO2015002586A1 (en) * | 2013-07-04 | 2015-01-08 | Telefonaktiebolaget L M Ericsson (Publ) | Audio and video synchronization |
CN104980820A (zh) * | 2015-06-17 | 2015-10-14 | 小米科技有限责任公司 | 多媒体文件播放方法及装置 |
CN108377406A (zh) * | 2018-04-24 | 2018-08-07 | 青岛海信电器股份有限公司 | 一种调整音画同步的方法及装置 |
CN109168059A (zh) * | 2018-10-17 | 2019-01-08 | 上海赛连信息科技有限公司 | 一种在不同设备上分别播放音频与视频的唇音同步方法 |
CN109309831A (zh) * | 2018-12-13 | 2019-02-05 | 苏州科达科技股份有限公司 | 视频会议中视频延时的测试方法及装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106331562B (zh) * | 2015-06-16 | 2020-04-24 | 南宁富桂精密工业有限公司 | 云端服务器、控制设备及音频视频同步方法 |
-
2019
- 2019-03-06 CN CN201910168199.1A patent/CN109819303B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101448164A (zh) * | 2007-11-27 | 2009-06-03 | 佳能株式会社 | 音频处理设备、视频处理设备及其控制方法 |
WO2015002586A1 (en) * | 2013-07-04 | 2015-01-08 | Telefonaktiebolaget L M Ericsson (Publ) | Audio and video synchronization |
CN103402136A (zh) * | 2013-07-29 | 2013-11-20 | 重庆大学 | 自适应调整缓存的控制方法、装置及自适应播放器 |
CN104980820A (zh) * | 2015-06-17 | 2015-10-14 | 小米科技有限责任公司 | 多媒体文件播放方法及装置 |
CN108377406A (zh) * | 2018-04-24 | 2018-08-07 | 青岛海信电器股份有限公司 | 一种调整音画同步的方法及装置 |
CN109168059A (zh) * | 2018-10-17 | 2019-01-08 | 上海赛连信息科技有限公司 | 一种在不同设备上分别播放音频与视频的唇音同步方法 |
CN109309831A (zh) * | 2018-12-13 | 2019-02-05 | 苏州科达科技股份有限公司 | 视频会议中视频延时的测试方法及装置 |
Non-Patent Citations (1)
Title |
---|
视频会议系统的研究与设计;冯晓倩;《中国优秀硕士学位论文全文数据库(电子期刊)信息科技辑》;20080915;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN109819303A (zh) | 2019-05-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109819303B (zh) | 数据输出方法及相关设备 | |
CN107481709B (zh) | 音频数据传输方法及装置 | |
CN109842917B (zh) | 系统信息块的传输方法和用户终端 | |
EP2827600B1 (en) | Image processing device, image reproduction device, and image reproduction system | |
CN110381463B (zh) | 一种旁链路信息的传输方法及设备 | |
CN111817831B (zh) | 一种传输方法和通信设备 | |
KR20160090909A (ko) | 무선 도킹을 위한 무선 대역폭의 효율적 사용을 위한 원격 렌더링 | |
CN111435901A (zh) | 混合自动重传请求确认反馈方法、终端和网络设备 | |
EP4152816A1 (en) | Information transmission method and apparatus, and electronic device | |
CN107438990B (zh) | 用于递送定时信息的方法和设备 | |
CN112423076A (zh) | 一种音频投屏同步控制方法、设备及计算机可读存储介质 | |
CN114466099B (zh) | 蓝牙设备的控制方法、装置和存储介质 | |
CN112565876B (zh) | 投屏方法、装置、设备、系统及存储介质 | |
CN109039994B (zh) | 一种计算音频和视频异步时差的方法及设备 | |
US20210092731A1 (en) | Resource indication method, apparatus, and system | |
CN114640740B (zh) | 通信处理方法、装置、电子设备以及存储介质 | |
CN107948443B (zh) | 通信中防止扬声器干扰的方法、装置以及计算机存储介质 | |
CN110475367B (zh) | 一种传输方法、移动通信终端及网络侧设备 | |
US20220248271A1 (en) | Information processing method and terminal | |
CN110945827B (zh) | 下行控制信息配置方法、装置、通信设备及存储介质 | |
CN110856162B (zh) | 网络配置方法及相关装置 | |
CN114126032A (zh) | 信息同步方法、智能终端及存储介质 | |
EP3624356A1 (en) | Wireless headset and signal transmission method for the same | |
CN114363943B (zh) | 用于确定传输时延的方法和电子设备 | |
US20230275723A1 (en) | Reference signal configuration method and apparatus, electronic device, and readable storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |