CN112040225A - 播放延时差测量方法、装置、设备、系统及存储介质 - Google Patents

播放延时差测量方法、装置、设备、系统及存储介质 Download PDF

Info

Publication number
CN112040225A
CN112040225A CN202010911570.1A CN202010911570A CN112040225A CN 112040225 A CN112040225 A CN 112040225A CN 202010911570 A CN202010911570 A CN 202010911570A CN 112040225 A CN112040225 A CN 112040225A
Authority
CN
China
Prior art keywords
audio
video
signal
preset
delay difference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010911570.1A
Other languages
English (en)
Other versions
CN112040225B (zh
Inventor
成家雄
王冬冬
周二永
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bigo Technology Singapore Pte Ltd
Original Assignee
Guangzhou Baiguoyuan Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Baiguoyuan Information Technology Co Ltd filed Critical Guangzhou Baiguoyuan Information Technology Co Ltd
Priority to CN202010911570.1A priority Critical patent/CN112040225B/zh
Publication of CN112040225A publication Critical patent/CN112040225A/zh
Application granted granted Critical
Publication of CN112040225B publication Critical patent/CN112040225B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明实施例公开了播放延时差测量方法、装置、设备、系统及存储介质。其中,播放延时差测量系统包括第一音视频设备、第二音视频设备和计算机设备,第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号,第二音视频设备用于同时对声音信号和图像信号进行采集,得到音视频文件,计算机设备用于获取音视频文件,根据预设音频信号在音视频文件中出现的第一时间点与预设视频信号在音视频文件中出现的第二时间点的差值,确定第一音视频设备对应的音视频播放延时差。本发明实施例提供的技术方案,可以快速准确地测量到音视频设备的音频视频输出延时差,节约测量成本,提高测量效率。

Description

播放延时差测量方法、装置、设备、系统及存储介质
技术领域
本发明实施例涉及音视频设备技术领域,尤其涉及播放延时差测量方法、装置、设备、系统及存储介质。
背景技术
随着图像处理技术、音频处理技术以及终端技术的飞速发展和不断进步,手机及平板电脑等终端均已具备音视频播放功能,成为用户常用的音视频播放设备。
音视频设备不仅可以进行音视频播放,还可以利用摄像头和麦克风等实现视频通话或在线直播等,在此过程中,音频和视频播放延时会由于存在网络抖动并且各自对抗抖动的策略不一致或其他原因导致发生偏差,当偏差超出一定范围,需要进行音视频同步调整,而调整需要参考音视频设备播放延时差。
目前,对于一个音视频设备而言,现有技术中通常采用声音回环延时测试方案和视频回环延时分别得到音频输入延时和输出延时之和以及视频输入延时和输出延时之和,但无法分别得出音频输出延时和视频输出延时,如果需要分别得到音频输出延时和视频输出延时,则需要借助示波器等专业测量设备在终端设备主板上进行测量,测量过程中还需要引入声光传感器等辅助硬件设备,测试成本高,且测试方法复杂。
发明内容
本发明实施例提供了播放延时差测量方法、装置、设备及存储介质,可以实现快速准确地测量到音视频设备的播放延时差。
第一方面,本发明实施例提供了一种播放延时差测量系统,包括第一音视频设备、第二音视频设备和计算机设备;
所述第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号;
所述第二音视频设备用于同时对所述声音信号和所述图像信号进行采集,得到音视频文件;
所述计算机设备用于获取所述音视频文件,根据所述预设音频信号在所述音视频文件中出现的第一时间点与所述预设视频信号在所述音视频文件中出现的第二时间点的差值,确定所述第一音视频设备对应的音视频播放延时差。
第二方面,本发明实施例提供了一种播放延时差测量方法,应用于播放延时差测量系统中的计算机设备;所述播放延时差测量系统还包括第一音视频设备和第二音视频设备;所述第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号;所述第二音视频设备用于同时对所述声音信号和所述图像信号进行采集,得到音视频文件;
所述方法包括:
获取所述音视频文件;
获取所述预设音频信号在所述音视频文件中出现的第一时间点,以及获取所述预设视频信号在所述音视频文件中出现的第二时间点;
根据所述第一时间点和所述第二时间点的差值确定所述第一音视频设备对应的音视频播放延时差。
第三方面,本发明实施例提供了一种播放延时差测量装置,配置于播放延时差测量系统中的计算机设备;所述播放延时差测量系统还包括第一音视频设备和第二音视频设备;所述第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号;所述第二音视频设备用于同时对所述声音信号和所述图像信号进行采集,得到音视频文件;
所述装置包括:
文件获取模块,用于获取所述音视频文件;
时间点获取模块,用于获取所述预设音频信号在所述音视频文件中出现的第一时间点,以及获取所述预设视频信号在所述音视频文件中出现的第二时间点;
播放延时差确定模块,用于根据所述第一时间点和所述第二时间点的差值确定所述第一音视频设备对应的音视频播放延时差。
第四方面,本发明实施例提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如本发明实施例提供的播放延时差测量方法。
第五方面,本发明实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明实施例提供的播放延时差测量方法。
本发明实施例中提供的播放延时差测量方案,测量系统中包括第一音视频设备、第二音视频设备和计算机设备,第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号,第二音视频设备用于同时对声音信号和图像信号进行采集,得到音视频文件,计算机设备用于获取音视频文件,根据预设音频信号在音视频文件中出现的第一时间点与预设视频信号在音视频文件中出现的第二时间点的差值,确定第一音视频设备对应的音视频播放延时差。通过采用上述技术方案,不需要对音视频设备的音频输出延时和视频输出延时进行分别测量,不需要借助示波器等专业测量设备,也不需要在音视频设备的主板上进行测量,可以快速准确地测量到音视频设备的音频视频输出延时差,节约测量成本,提高测量效率。
附图说明
图1为现有技术中利用示波器测量音频输出延时的方案示意图;
图2为本发明实施例提供的一种播放延时差测量系统的结构示意图;
图3为本发明实施例提供的一种播放延时差测量原理示意图;
图4为本发明实施例提供的一种播放延时差测量方法的流程示意图;
图5为本发明实施例提供的一种播放延时差测量装置的结构框图;
图6为本发明实施例提供的一种计算机设备的结构框图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。此外,在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。
为了便于理解本发明实施例,下面对相关概念和相关技术进行介绍。
音视频设备的音频输出延时(简称音频输出延时或音频播放延时)可以理解为音频数据从输入到系统接口(例如应用层通过调用系统音频输出接口来输出音频数据)到人耳能听到音频数据对应的声音所经过的延时,也即声音从程序写入系统播放缓冲区到声音输出的延时。具体的,应用层在生成音频数据后,将音频数据发送至系统接口,系统接口需要对音频数据进行相应的处理,再将数字信号转换成模拟信号,通过声音播放部件(如扬声器等)播出,播出后外部就能听到或采集到相应的声音,这个过程经历的时长即为音频输出延时,简单来说就是音视频设备的系统从应用层获取到音频数据开始将音频数据转换成声音信号并播出所需要的时间,由于不同音视频设备的硬件配置以及操作系统等可能存在差异,因此,不同音视频设备的音频输出延时一般是不同的,对于一些低端配置的终端来说,音频输出延时通常比较长。
音视频设备的视频输出延时(简称视频输出延时或视频播放延时)可以理解为视频数据(可相当于图像数据)从输入到系统接口(例如应用层通过调用系统视频输出接口来输出视频数据)到人眼能看到视频数据对应的画面所经过的延时,也即视频从程序写入系统播放缓冲区到视频输出的延时。具体的,应用层在生成视频数据后,将视频数据发送至系统接口,系统接口需要对视频数据进行相应的处理,再将数字信号转换成模拟信号,通过视频播放部件(如显示屏等)播出,播出后外部就能看到或采集到相应的图像,这个过程经历的时长即为视频输出延时,简单来说就是音视频设备的系统从应用层获取到视频数据开始将视频数据转换成图像信号并播出所需要的时间,由于不同音视频设备的硬件配置以及操作系统等可能存在差异,因此,不同音视频设备的视频输出延时一般是不同的,对于一些低端配置的终端来说,视频输出延时通常比较长。
音视频设备播放延时差(简称音视频播放延时差)可以指音频播放延时与视频播放延时的差值。
图1为现有技术中利用示波器测量音频输出延时的方案示意图,如图1所示,可以将音视频设备主板上的输入输出(Input Output,IO)接口(具体形式可以是焊点或芯片引脚等)和示波器连接,在程序写音频信号到系统缓冲区的时候,同时发送信号给该IO,示波器记录这个信号出现的时间戳T0,然后该音频信号被输出至音频输出设备(如扬声器等设备),对应的声音信号经过音频输出设备从音视频设备输出时,通过声电传感器监测该声音信号,并把该声音信号转换成电信号传送到示波器,示波器记录接收到该电信号的时间戳T1,两个时间戳T1和T0相减,即得到音视频设备输出延时的值。
对于视频输出延时来说,目前没有单独测量的方案,一般可以利用视频回环延时方案测量得到视频输入输出总延时,然后再基于经验等估计出视频输出延时。
由上述利用示波器测量音频输出延时的方案可以得知,被测的音视频设备的主板需要开源,且还需要借助专业的示波器以及声光传感器等硬件设备,实现成本高,不便于对任意一个音视频设备进行测量,且操作过程复杂,测量效率低。另外,视频输出延时基于经验估计得出,数值不够准确,则会进一步导致音频输出延时和视频输出延时的差值不准确,也即无法得到准确的播放延时差。
图2为本发明实施例提供的一种播放延时差测量系统的结构示意图,如图2所示,播放延时差测量系统200,包括第一音视频设备210、第二音视频设备220和计算机设备230。其中,所述第一音视频设备210用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号;所述第二音视频设备220用于同时对所述声音信号和所述图像信号进行采集,得到音视频文件;所述计算机设备230用于获取所述音视频文件,根据所述预设音频信号在所述音视频文件中出现的第一时间点与所述预设视频信号在所述音视频文件中出现的第二时间点的差值,确定所述第一音视频设备对应的音视频播放延时差。
本发明实施例中的第一音频设备可以是任意的具备音视频播放功能的设备,可内置或外置有扬声器等声音播放部件以及内置或外置有显示屏等图像播放部件,第一音视频设备例如可以为手机、智能手表、平板电脑以及个人数字助理等移动设备,也可为台式计算机等其他设备。第二音频设备可以是任意的具备音视频采集功能的设备,可以对声音和图像进行录制,具体可内置或外置有麦克风等声音采集部件以及内置或外置有摄像头等图像采集部件,第二音视频设备例如可以为手机、智能手表、平板电脑以及个人数字助理等移动设备,也可为台式计算机等其他设备。计算机设备可以是任意的具备计算能力的设备,计算机设备可以是除第一音视频设备和第二音视频设备之外的独立设备,也可以将第一音视频设备或第二音视频设备复用为计算机设备。
本发明实施例中,第一音视频设备可理解为系统中的待测设备。第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号,预设音频信号和预设视频信号可以根据实际需求设置,预设音频信号一般是比较容易识别的音频信号,如“do”,预设视频信号一般是比较容易识别的图像信号,如白色或红色等纯色画面。第一音视频设备的播放动作可以由测量人员来控制,也可以由第一音视频设备中内置的程序来自动控制,例如,该程序可以在接收到其他设备(如计算机设备)发送的播放指令时,触发播放动作。其中,同步播放预设音频信号和预设视频信号,可以理解为应用层同时将预设音频信号和预设视频信号输出到相应的系统接口。
本发明实施例中,第二音视频设备用于同时对所述声音信号和所述图像信号进行采集,得到音视频文件。需要说明的是,这里的同时指将所采集到的声音信号和所述采集到的图像信号对应的数据均存储于音视频文件中,采集声音信号和图像信号的时机不一定是相同的,与第一音视频播放设备播出声音信号和图像信号的时机相关。第二音视频设备可以开启音视频采集功能,当第一音视频设备播放预设音频信号对应的声音信号以及播放预设视频信号对应的图像信号时,对该声音信号和该图像进行采集,并将采集到的声音信号进行相应的转换和处理得到对应的音频数据,将采集到的图像信号进行相应的转换和处理得到对应的视频数据,将音频数据和视频数据保存到音视频文件中,其中,上述转换、处理以及保存等操作的耗时一般由第二音视频设备本身系统性能决定,本发明实施例可以不针对上述耗时进行干预,针对声音信号的处理以及针对图像信号的处理可以是同步的。音视频文件的具体格式不做限定,可以根据第二音视频设备所支持的格式确定,例如第二音视频设备为性能较高手机时,可以是MOV格式。第二音视频设备开启音视频采集功能的动作可以由测量人员来控制,也可以由第二音视频设备中内置的程序来自动控制,例如,该程序可以在接收到其他设备(如计算机设备)发送的开启指令时,触发开启动作。在得到音视频文件后,第二音视频设备可以在本地保存音视频文件,由测量人员来导出,也可以自动发送给其他设备,如计算机设备。第二音视频设备可视为测量系统中的测量设备。可选的,所述第二音视频设备采用预设帧率同时对所述声音信号和所述图像信号进行采集,所述预设帧率大于或等于预设帧率阈值,所述预设帧率阈值对应于所述第二音视频设备所需要满足的最低性能。这样设置的好处在于,采用较高帧率进行声音和图像采集,也即采用较高的帧率进行视频录制,可以有效降低第二音视频设备本身所带来的测量误差。示例性的,预设帧率阈值为100每秒传输帧数(frames per second,fps)。
本发明实施例中,计算机设备获取音视频文件的具体方式不做限定,例如可以由测量人员导入,也可由第二音视频设备进行发送。在计算机设备中,可以采用现有软件(如Adobe等)或专门开发的软件自动对音视频文件进行分析,提取预设音频信号和预设视频信号,并记录预设音频信号在音视频文件中出现的第一时间点以及预设视频信号在音视频文件中出现的第二时间点,第一时间点和第二时间点可以时间戳的形式表示。当然,也可以由测试人员手动利用软件对音视频文件进行分析,得到第一时间点和第二时间点,再将第一时间点和第二时间点输入至计算机设备中。
本发明实施例中提供的播放延时差测量系统,包括第一音视频设备、第二音视频设备和计算机设备,第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号,第二音视频设备用于同时对声音信号和图像信号进行采集,得到音视频文件,计算机设备用于获取音视频文件,根据预设音频信号在音视频文件中出现的第一时间点与预设视频信号在音视频文件中出现的第二时间点的差值,确定第一音视频设备对应的音视频播放延时差。通过采用上述技术方案,不需要分别对音视频设备的音频输出延时和视频输出延时分别进行测量,不需要借助示波器等专业测量设备,也不需要在音视频设备的主板上进行测量,可以快速准确地测量到音视频设备的音频视频输出延时差,节约测量成本,提高测量效率。在得到准确的音视频播放延时差后,可准确确定音视频同步所需补偿值,提升音视频同步率,从而提升音视频通话或直播等场景的用户体验。
在一些实施例中,所述预设音频信号包含至少两个不同的音频信号,所述预设视频信号包含至少两个不同的视频信号,所述至少两个不同的音频信号与所述至少两个不同的视频信号存在一对一关系,将相互对应的一个音频信号和一个视频信号记为音视频信号对。所述根据所述预设音频信号在所述音视频文件中出现的第一时间点与所述预设视频信号在所述音视频文件中出现的第二时间点的差值,确定所述第一音视频设备对应的音视频播放延时差,包括:对于每个音视频信号对,计算当前音视频信号对中的当前音频信号在所述音视频文件中出现的第一时间点与所述当前音视频信号对中的当前视频信号在所述音视频文件中出现的第二时间点的差值,得到当前音视频信号对对应的延时差;根据至少两个音视频信号对对应的延时差,确定所述第一音视频设备对应的音视频播放延时差。
示例性的,所述至少两个不同的音频信号包括至少两个频率不同的音频信号,以三个为例,可以分别是“do”、“re”和“mi”。所述至少两个不同的视频信号包括至少两个画面颜色不同的视频信号,仍以三个为例,可以分别是白光画面、红光画面和蓝光画面。预设对应关系例如可以是:“do”对应白光画面,“re”对应红光画面,“mi”对应蓝光画面。例如,“do”和白光画面为第一个音视频信号对,“re”和红光画面为第二个音视频信号对,“mi”和蓝光画面为第三个音视频信号对。每两个不同的音频信号之间的时间间隔可以相同,例如,可以每20ms切换一次特征,播放“do”之后经过20ms再播放“re”,之后经过20ms再播放“mi”。同样的,视频信号与音频信号是同步播放的,因此,每两个不同的视频信号之间的时间间隔也可以相同,例如,同样每20ms切换一次特征,播放白光画面之后经过20ms再播放红光画面,之后经过20ms再播放蓝光画面。
图3为本发明实施例提供的一种播放延时差测量原理示意图,如图3所示,假设第一音视频设备为手机A,第二音视频设备为手机B,手机A输出上述音视频同步信号。在手机A中,音频信号可以在系统播放回调(也即系统可以通过回调的方式从应用层获取到对应的音频信号)的时候写入到播放缓冲区,视频信号跟随音频信号变化,当视频信号的播放帧率较高时,可以保证音视频信号输出瞬间的一对一关系(可理解为绑定关系)是稳定的,如60fps或以上。由图3可知,存在一对一对应关系的音频信号(如“do”)和视频信号(如白光)是同一时刻输出的。手机B在手机A播放启动之前开启摄像功能,该摄像功能对应的录制帧率可以为100fps,由于音频播放延时(Nms)和视频播放延时(Mms)不等,所以会导致“do”和白光能够被录制到的时刻不同,如图3所示,先采集到白光画面(T1时刻),再采集到“do”(T2时刻),则音频播放延时与视频播放延时的差值为T=T2-T1。
在一些实施例中,为了提高测量准确度,可以进行多次测量并求取平均值作为最终的测量结果;也可以通过第一音视频设备周期性同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号,例如,每隔80ms顺次播放“do”、“re”和“mi”,以及每隔80ms顺次播放白光画面、红光画面和蓝光画面,针对每个播放周期(如80ms)分别计算对应的测量结果,并求取平均值作为最终的测量结果。
本发明实施例中,采用多对不同的音视频信号进行多个差值的计算,可以有效减少测量误差。可选的,根据至少两个音视频信号对对应的延时差,确定所述第一音视频设备对应的音视频播放延时差,具体可以是利用预设计算方法根据至少两个音视频信号对对应的延时差计算得到所述第一音视频设备对应的音视频播放延时差,其中,所述预设计算方法包括求平均值、求加权平均值或取中间值。当然,还可以有其他计算方式,本发明实施例不做限定。以求平均值为例,假设第一个音视频信号对对应的延时差为10ms,第二个音视频信号对对应的延时差为11ms,第三个音视频信号对对应的延时差为9ms,则第一音视频设备对应的音视频播放延时差为(10+11+9)/3=10ms。
图4为本发明实施例提供的一种播放延时差测量方法的流程示意图,该方法可以由播放延时差测量装置执行,其中该装置可由软件和/或硬件实现,一般可集成在计算机设备中。计算机设备可包含于本发明实施例提供的播放延时差测量系统中。播放延时差测量系统还包括第一音视频设备和第二音视频设备;所述第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号;所述第二音视频设备用于同时对所述声音信号和所述图像信号进行采集,得到音视频文件。
如图4所示,该方法包括:
步骤401、获取音视频文件。
步骤402、获取预设音频信号在音视频文件中出现的第一时间点,以及获取预设视频信号在音视频文件中出现的第二时间点。
示例性的,计算机设备可以自动对获取到的音视频文件进行分析,提取预设音频信号和预设视频信号,并记录预设音频信号在音视频文件中出现的第一时间点以及预设视频信号在音视频文件中出现的第二时间点。
步骤403、根据所述第一时间点和所述第二时间点的差值确定所述第一音视频设备对应的音视频播放延时差。
上述各步骤的相关细节可参考上文中音频输入延时测量系统中的相关内容,此处不再赘述。
本发明实施例提供的播放延时差测量方法,应用于播放延时差测量系统中的计算机设备,测量系统中还包括第一音视频设备和第二音视频设备,第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号,第二音视频设备用于同时对声音信号和图像信号进行采集,得到音视频文件,计算机设备用于获取音视频文件,根据预设音频信号在音视频文件中出现的第一时间点与预设视频信号在音视频文件中出现的第二时间点的差值,确定第一音视频设备对应的音视频播放延时差。通过采用上述技术方案,不需要对音视频设备的音频输出延时和视频输出延时进行分别测量,不需要借助示波器等专业测量设备,也不需要在音视频设备的主板上进行测量,可以快速准确地测量到音视频设备的音频视频输出延时差,节约测量成本,提高测量效率。
在一些实施例中,所述预设音频信号包含至少两个不同的音频信号,所述预设视频信号包括至少两个不同的视频信号,所述至少两个不同的音频信号与所述至少两个不同的视频信号存在一对一关系,将相互对应的一个音频信号和一个视频信号记为音视频信号对;所述获取所述预设音频信号在所述音视频文件中出现的第一时间点,以及获取所述预设视频信号在所述音视频文件中出现的第二时间点,包括:对于每个音视频信号对,获取当前音视频信号对中的当前音频信号在所述音视频文件中出现的第一时间点,以及获取所述当前音视频信号对中的当前视频信号在所述音视频文件中出现的第二时间点;所述根据所述第一时间点和所述第二时间点的差值确定所述第一音视频设备对应的音视频播放延时差,包括:对于每个音视频信号对,计算当前音视频信号对中的当前音频信号对应的第一时间点和所述当前音视频信号对中的当前视频信号对应的第二时间点的差值,得到所述当前音视频信号对对应的延时差;根据至少两个音视频信号对对应的延时差,确定所述第一音视频设备对应的音视频播放延时差。这样设置的好处在于,采用多对不同的音视频信号进行多个差值的计算,可以有效减少测量误差。
在一些实施例中,所述根据至少个音视频信号对对应的延时差,确定所述第一音视频设备对应的音视频播放延时差,包括:利用预设计算方法根据至少两个音视频信号对对应的延时差计算得到所述第一音视频设备对应的音视频播放延时差,其中,所述预设计算方法包括求平均值、求加权平均值或取中间值。
在一些实施例中,所述计算机设备分别与所述第一音视频设备和所述第二音视频设备通信连接。在获取所述音视频文件之前,还包括:控制所述第二音视频设备开启音视频采集功能,并控制所述第一音视频设备同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号,以使得所述第二音视频设备同时对所述声音信号和所述图像信号进行采集,得到音视频文件。这样设置的好处在于,可以由计算机设备统一对第一音视频设备的播放以及第二音视频设备的音视频采集功能的开启进行控制,提升测试过程的自动化程度,提高测试效率。其中,所述通信连接可以是基于蓝牙或无线保真(Wireless Fidelity,WiFi)等技术的通信连接,具体不做限定。
在一些实施例中,所述获取所述音视频文件,包括:获取第二音视频设备发送的音视频文件。这样设置的好处在于,第二音视频设备在生成对应的音视频文件后,可以自动发送给计算机设备,进一步提高测试效率。
在一些实施例中,所述控制所述第二音视频设备开启音视频采集功能,包括:控制所述第二音视频设备开启预设帧率的音视频采集功能,其中,所述预设帧率的音视频采集功能用于采用预设帧率同时对所述声音信号和所述图像信号进行采集,所述预设帧率大于或等于预设帧率阈值,所述预设帧率阈值对应于所述第二音视频设备所需要满足的最低性能。
在一些实施例中,所述第一音视频设备或所述第二音视频设备被复用为所述计算机设备。通过设备之间的复用,可以减少系统中包含的设备数量,进一步节约测试成本。需要说明的是,在某个设备被复用为计算机设备后,上文所述的该设备与计算机设备之间的基于通信连接的数据交互过程变更为设备内部的数据交互过程。
图5为本发明实施例提供的一种播放延时差测量装置的结构框图,该装置可由软件和/或硬件实现,一般可集成在计算机设备中,可通过执行播放延时差测量方法来进行播放延时差的测量。具体的,该装置配置于播放延时差测量系统中的计算机设备;所述播放延时差测量系统还包括第一音视频设备和第二音视频设备;所述第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号;所述第二音视频设备用于同时对所述声音信号和所述图像信号进行采集,得到音视频文件。
如图5所示,该装置包括:
文件获取模块501,用于获取所述音视频文件;
时间点获取模块502,用于获取所述预设音频信号在所述音视频文件中出现的第一时间点,以及获取所述预设视频信号在所述音视频文件中出现的第二时间点;
播放延时差确定模块503,用于根据所述第一时间点和所述第二时间点的差值确定所述第一音视频设备对应的音视频播放延时差。
本发明实施例提供的播放延时差测量装置,通过采用上述技术方案,不需要对音视频设备的音频输出延时和视频输出延时进行分别测量,不需要借助示波器等专业测量设备,也不需要在音视频设备的主板上进行测量,可以快速准确地测量到音视频设备的音频视频输出延时差,节约测量成本,提高测量效率。
本发明实施例提供了一种计算机设备,该计算机设备中可集成本发明实施例提供的播放延时差测量装置。图6为本发明实施例提供的一种计算机设备的结构框图。计算机设备600包括存储器601、处理器602及存储在存储器601上并可在处理器602上运行的计算机程序,所述处理器602执行所述计算机程序时实现本发明实施例提供的播放延时差测量方法。
本发明实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行本发明实施例提供的播放延时差测量方法。
上述实施例中提供的播放延时差测量装置、设备以及存储介质可执行本发明任意实施例所提供的播放延时差测量方法,具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节,可参见本发明任意实施例所提供的播放延时差测量方法。
注意,上述仅为本发明的较佳实施例。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由权利要求范围决定。

Claims (10)

1.一种播放延时差测量系统,其特征在于,包括第一音视频设备、第二音视频设备和计算机设备;
所述第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号;
所述第二音视频设备用于同时对所述声音信号和所述图像信号进行采集,得到音视频文件;
所述计算机设备用于获取所述音视频文件,根据所述预设音频信号在所述音视频文件中出现的第一时间点与所述预设视频信号在所述音视频文件中出现的第二时间点的差值,确定所述第一音视频设备对应的音视频播放延时差。
2.根据权利要求1所述的系统,其特征在于,所述第二音视频设备采用预设帧率同时对所述声音信号和所述图像信号进行采集,其中,所述预设帧率大于或等于预设帧率阈值,所述预设帧率阈值对应于所述第二音视频设备所需要满足的最低性能。
3.一种播放延时差测量方法,其特征在于,应用于播放延时差测量系统中的计算机设备;所述播放延时差测量系统还包括第一音视频设备和第二音视频设备;所述第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号;所述第二音视频设备用于同时对所述声音信号和所述图像信号进行采集,得到音视频文件;
所述方法包括:
获取所述音视频文件;
获取所述预设音频信号在所述音视频文件中出现的第一时间点,以及获取所述预设视频信号在所述音视频文件中出现的第二时间点;
根据所述第一时间点和所述第二时间点的差值确定所述第一音视频设备对应的音视频播放延时差。
4.根据权利要求3所述的方法,其特征在于,所述预设音频信号包含至少两个不同的音频信号,所述预设视频信号包括至少两个不同的视频信号,所述至少两个不同的音频信号与所述至少两个不同的视频信号存在一对一关系,将相互对应的一个音频信号和一个视频信号记为音视频信号对;
所述获取所述预设音频信号在所述音视频文件中出现的第一时间点,以及获取所述预设视频信号在所述音视频文件中出现的第二时间点,包括:
对于每个音视频信号对,获取当前音视频信号对中的当前音频信号在所述音视频文件中出现的第一时间点,以及获取所述当前音视频信号对中的当前视频信号在所述音视频文件中出现的第二时间点;
所述根据所述第一时间点和所述第二时间点的差值确定所述第一音视频设备对应的音视频播放延时差,包括:
对于每个音视频信号对,计算当前音视频信号对中的当前音频信号对应的第一时间点和所述当前音视频信号对中的当前视频信号对应的第二时间点的差值,得到所述当前音视频信号对对应的延时差;
根据至少两个音视频信号对对应的延时差,确定所述第一音视频设备对应的音视频播放延时差。
5.根据权利要求4所述的方法,其特征在于,所述根据至少两个音视频信号对对应的延时差,确定所述第一音视频设备对应的音视频播放延时差,包括:
利用预设计算方法根据至少两个音视频信号对对应的延时差计算得到所述第一音视频设备对应的音视频播放延时差,其中,所述预设计算方法包括求平均值、求加权平均值或取中间值。
6.根据权利要求3所述的方法,其特征在于,所述计算机设备分别与所述第一音视频设备和所述第二音视频设备通信连接;
在获取所述音视频文件之前,还包括:
控制所述第二音视频设备开启音视频采集功能,并控制所述第一音视频设备同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号,以使得所述第二音视频设备同时对所述声音信号和所述图像信号进行采集,得到音视频文件。
7.根据权利要求6所述的方法,其特征在于,所述控制所述第二音视频设备开启音视频采集功能,包括:
控制所述第二音视频设备开启预设帧率的音视频采集功能,其中,所述预设帧率的音视频采集功能用于采用预设帧率同时对所述声音信号和所述图像信号进行采集,所述预设帧率大于或等于预设帧率阈值,所述预设帧率阈值对应于所述第二音视频设备所需要满足的最低性能。
8.一种播放延时差测量装置,其特征在于,配置于播放延时差测量系统中的计算机设备;所述播放延时差测量系统还包括第一音视频设备和第二音视频设备;所述第一音视频设备用于同步播放预设音频信号对应的声音信号和预设视频信号对应的图像信号;所述第二音视频设备用于同时对所述声音信号和所述图像信号进行采集,得到音视频文件;
所述装置包括:
文件获取模块,用于获取所述音视频文件;
时间点获取模块,用于获取所述预设音频信号在所述音视频文件中出现的第一时间点,以及获取所述预设视频信号在所述音视频文件中出现的第二时间点;
播放延时差确定模块,用于根据所述第一时间点和所述第二时间点的差值确定所述第一音视频设备对应的音视频播放延时差。
9.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求4-7任一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求4-7中任一所述的方法。
CN202010911570.1A 2020-09-02 2020-09-02 播放延时差测量方法、装置、设备、系统及存储介质 Active CN112040225B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010911570.1A CN112040225B (zh) 2020-09-02 2020-09-02 播放延时差测量方法、装置、设备、系统及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010911570.1A CN112040225B (zh) 2020-09-02 2020-09-02 播放延时差测量方法、装置、设备、系统及存储介质

Publications (2)

Publication Number Publication Date
CN112040225A true CN112040225A (zh) 2020-12-04
CN112040225B CN112040225B (zh) 2022-08-05

Family

ID=73591263

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010911570.1A Active CN112040225B (zh) 2020-09-02 2020-09-02 播放延时差测量方法、装置、设备、系统及存储介质

Country Status (1)

Country Link
CN (1) CN112040225B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113612988A (zh) * 2021-07-20 2021-11-05 深圳市拔超科技有限公司 一种自动测试视频延迟的方法、装置及视频传输设备
CN114363644A (zh) * 2021-12-15 2022-04-15 广州波视信息科技股份有限公司 一种延时方法及延时器装置
CN114422825A (zh) * 2022-01-26 2022-04-29 科大讯飞股份有限公司 音视频同步方法、装置、介质、设备及程序产品
CN114630256A (zh) * 2020-12-14 2022-06-14 深圳市万普拉斯科技有限公司 耳返延时测试方法及系统
CN115811628A (zh) * 2022-11-03 2023-03-17 深圳创维-Rgb电子有限公司 声音与画面的同步处理方法及相关装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103237203A (zh) * 2013-04-09 2013-08-07 广东欧珀移动通信有限公司 一种基于移动终端的音视频同步方法及系统
CN106060534A (zh) * 2016-06-03 2016-10-26 公安部第三研究所 一种音视频同步测试的系统及方法
CN110267083A (zh) * 2019-06-18 2019-09-20 广州虎牙科技有限公司 音视频同步的检测方法、装置、设备及存储介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103237203A (zh) * 2013-04-09 2013-08-07 广东欧珀移动通信有限公司 一种基于移动终端的音视频同步方法及系统
CN106060534A (zh) * 2016-06-03 2016-10-26 公安部第三研究所 一种音视频同步测试的系统及方法
CN110267083A (zh) * 2019-06-18 2019-09-20 广州虎牙科技有限公司 音视频同步的检测方法、装置、设备及存储介质

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114630256A (zh) * 2020-12-14 2022-06-14 深圳市万普拉斯科技有限公司 耳返延时测试方法及系统
CN113612988A (zh) * 2021-07-20 2021-11-05 深圳市拔超科技有限公司 一种自动测试视频延迟的方法、装置及视频传输设备
CN114363644A (zh) * 2021-12-15 2022-04-15 广州波视信息科技股份有限公司 一种延时方法及延时器装置
CN114363644B (zh) * 2021-12-15 2022-09-06 广州波视信息科技股份有限公司 一种延时方法、延时器装置及存储介质
CN114422825A (zh) * 2022-01-26 2022-04-29 科大讯飞股份有限公司 音视频同步方法、装置、介质、设备及程序产品
CN115811628A (zh) * 2022-11-03 2023-03-17 深圳创维-Rgb电子有限公司 声音与画面的同步处理方法及相关装置

Also Published As

Publication number Publication date
CN112040225B (zh) 2022-08-05

Similar Documents

Publication Publication Date Title
CN112040225B (zh) 播放延时差测量方法、装置、设备、系统及存储介质
RU2648262C2 (ru) Способ и устройство для выполнения синхронизации мультимедийных данных
US20140376873A1 (en) Video-audio processing device and video-audio processing method
CN110335590B (zh) 语音识别测试方法、装置及系统
CN102014126A (zh) 一种基于QoS的语音体验质量评测平台及评测方法
CN105100794B (zh) 音视频同步测试方法及装置
CN106504770A (zh) 通话质量的测试系统及测试方法、测试装置
CN105979255B (zh) 一种音频采集工装、方法和云端服务器
CN104284098A (zh) 视频数据的处理方法及系统
CN109168059A (zh) 一种在不同设备上分别播放音频与视频的唇音同步方法
CN111314780B (zh) 回声消除功能的测试方法、装置及存储介质
US20230209255A1 (en) Electronic device and control method
CN112188259B (zh) 用于音视频同步测试和校正的方法、装置及电子设备
CN112039612B (zh) 延时测量方法、装置、设备、系统及存储介质
CN109830247A (zh) 用于测试通话质量的方法和装置
CN109246664B (zh) 一种语音测试方法及装置
WO2022199613A1 (zh) 同步播放方法及装置
CN112235690B (zh) 音频信号的调整方法及装置、耳机组件、可读存储介质
CN113572898B (zh) 语音通话中的无声异常检测方法及对应的装置
CN113840131B (zh) 视频通话质量评估方法、装置、电子设备及可读存储介质
CN110753261B (zh) 音视频时延测试方法、装置、计算机设备和存储介质
CN114039890A (zh) 一种语音识别时延测试方法、系统及存储介质
CN103974020B (zh) 音视频数据采集方法及装置
JP6189988B1 (ja) 音声通信品質を測定する方法及びそのシステム
CN116055711B (zh) 一种帧率动态调节性能的评估系统、方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20221201

Address after: 31a, 15 / F, building 30, maple mall, bangrang Road, Brazil, Singapore

Patentee after: Baiguoyuan Technology (Singapore) Co.,Ltd.

Address before: 511402 5-13 / F, West Tower, building C, 274 Xingtai Road, Shiqiao street, Panyu District, Guangzhou City, Guangdong Province

Patentee before: GUANGZHOU BAIGUOYUAN INFORMATION TECHNOLOGY Co.,Ltd.