CN109600564B - 用于确定时间戳的方法和装置 - Google Patents
用于确定时间戳的方法和装置 Download PDFInfo
- Publication number
- CN109600564B CN109600564B CN201810866765.1A CN201810866765A CN109600564B CN 109600564 B CN109600564 B CN 109600564B CN 201810866765 A CN201810866765 A CN 201810866765A CN 109600564 B CN109600564 B CN 109600564B
- Authority
- CN
- China
- Prior art keywords
- frame
- time
- video data
- determining
- timestamp
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本申请实施例公开了用于确定时间戳的方法和装置。该方法的一具体实施方式包括:采集视频数据并播放目标音频数据;获取该视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定该视频数据的帧的延迟时长;对于该视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将该数据量对应的播放时长与该延迟时长的差值确定为该帧的时间戳。该实施方式提升了所录制的配乐视频的音视频同步效果。
Description
技术领域
本申请实施例涉及计算机技术领域,具体涉及用于确定时间戳的方法和装置。
背景技术
录制配乐视频时,通常在利用摄像头进行视频采集的同时进行音频(配乐)播放。例如,播放某歌曲过程中录制用户表演的演唱动作,所录制的视频以该歌曲为背景音乐。在具有视频录制功能的应用中,录制的配乐视频出现音视频不同步的情况较为常见。以安卓(Android)设备为例,由于不同设备之间存在较大差异性,且碎片化较为严重,因而在不同设备上实现所录制的音视频同步,具有较高的难度。
在对配乐视频进行录制时,相关的方式通常基于视频数据中的帧的采集时间确定该帧的时间戳。例如,将首帧的采集时间作为起始时间(即0时刻),并认为视频数据中的相邻两帧的间隔时间是固定的,将上一帧的时间戳与该间隔时间之和确定为当前帧的时间戳。
发明内容
本申请实施例提出了用于确定时间戳的方法和装置。
第一方面,本申请实施例提供了一种用于确定时间戳的方法,该方法包括:采集视频数据并播放目标音频数据;获取视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定视频数据的帧的延迟时长;对于视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将数据量对应的播放时长与延迟时长的差值确定为该帧的时间戳。
在一些实施例中,获取视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定视频数据的帧的延迟时长,包括:获取视频数据中的至少一帧的采集时间和传输就绪时间;对于至少一帧中的帧,确定该帧的传输就绪时间与采集时间的差值;将所确定的差值的平均值确定为视频数据的帧的延迟时长。
在一些实施例中,至少一帧包括首帧;以及获取视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定视频数据的帧的延迟时长,包括:获取视频数据中的首帧的采集时间和传输就绪时间;将传输就绪时间与采集时间的差值确定为视频数据的帧的延迟时长。
在一些实施例中,至少一帧包括多个目标帧;以及获取视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定视频数据的帧的延迟时长,包括:获取视频数据中的首帧的采集时间和传输就绪时间;将传输就绪时间与采集时间的差值确定为视频数据的帧的延迟时长。
在一些实施例中,传输就绪时间通过如下步骤获取:调用第一预置接口获取所采集的视频数据中的帧,其中,第一预置接口用于获取所采集到的帧;响应于获取到帧,调用第二预置接口获取当前时间戳,将当前时间戳确定为该帧的传输就绪时间,其中,第二预置接口用于获取时间戳。
在一些实施例中,获取视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定视频数据的帧的延迟时长,包括:确定视频数据中的多个目标帧的采集时间和传输就绪时间;将多个目标帧的采集时间的平均值确定为第一平均值,将多个目标帧的传输就绪时间的平均值确定为第二平均值;将第二平均值与第一平均值的差值确定为视频数据的帧的延迟时长。
在一些实施例中,在确定视频数据的帧的延迟时长之后,该方法还包括:响应于确定延迟时长小于预设延迟时长阈值,将延迟时长设定为预设数值,其中,预设数值不小于预设延迟时长阈值。
在一些实施例中,该方法还包括:将采集到视频数据的尾帧时已播放的目标音频数据作为目标音频数据区间,提取目标音频数据区间;将包含时间戳的视频数据和目标音频数据区间进行存储。
第二方面,本申请实施例提供了一种用于确定时间戳的装置,该装置包括:采集单元,被配置成采集视频数据并播放目标音频数据;第一确定单元,被配置成获取视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定视频数据的帧的延迟时长;第二确定单元,被配置成对于视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将数据量对应的播放时长与延迟时长的差值确定为该帧的时间戳。
在一些实施例中,第一确定单元,包括:第一获取模块,被配置成获取视频数据中的至少一帧的采集时间和传输就绪时间;第一确定模块,被配置成对于至少一帧中的帧,确定该帧的传输就绪时间与采集时间的差值;第二确定模块,被配置成将所确定的差值的平均值确定为视频数据的帧的延迟时长。
在一些实施例中,至少一帧包括首帧;以及第一确定单元,包括:第二获取模块,被配置成获取视频数据中的首帧的采集时间和传输就绪时间;第三确定模块,被配置成将传输就绪时间与采集时间的差值确定为视频数据的帧的延迟时长。
在一些实施例中,至少一帧包括多个目标帧;以及第一确定单元,包括:第三获取模块,被配置成获取视频数据中的多个目标帧的采集时间和传输就绪时间;第四确定模块,被配置成将多个目标帧的采集时间的平均值确定为第一平均值,将多个目标帧的传输就绪时间的平均值确定为第二平均值;第五确定模块,被配置成将第二平均值与第一平均值的差值确定为视频数据的帧的延迟时长。
在一些实施例中,传输就绪时间通过如下步骤获取:调用第一预置接口获取所采集的视频数据中的帧,其中,第一预置接口用于获取所采集到的帧;响应于获取到帧,调用第二预置接口获取当前时间戳,将当前时间戳确定为该帧的传输就绪时间,其中,第二预置接口用于获取时间戳。
在一些实施例中,装置还包括:设定单元,被配置成响应于确定延迟时长小于预设延迟时长阈值,将延迟时长设定为预设数值,其中,预设数值不小于预设延迟时长阈值。
在一些实施例中,方法还包括:提取单元,被配置成将采集到视频数据的尾帧时已播放的目标音频数据作为目标音频数据区间,提取目标音频数据区间;存储单元,被配置成将包含时间戳的视频数据和目标音频数据区间进行存储。
第三方面,本申请实施例提供了一种终端设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如用于确定时间戳的方法中任一实施例的方法。
第四方面,本申请实施例提供了一种计算机可读介质,其上存储有计算机程序,该程序被处理器执行时实现如用于确定时间戳的方法中任一实施例的方法。
本申请实施例提供的用于确定时间戳的方法和装置,通过采集视频数据并播放目标音频数据,而后基于视频数据中的至少一帧的采集时刻和传输就绪时刻,确定视频数据的帧的延迟时长,最后对于视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将数据量对应的播放时长与延迟时长的差值确定为该帧的时间戳,从而,当采集到某一帧时,可以将该帧采集时刻已播放的目标音频数据的播放量确定该帧时间戳,且所确定的时间戳消除了帧从采集到传输就绪的延迟时长,提高了视频数据中的帧的时间戳的准确性,提升了所录制的配乐视频的音视频同步效果。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1是本申请的一个实施例可以应用于其中的示例性系统架构图;
图2是根据本申请的用于确定时间戳的方法的一个实施例的流程图;
图3是根据本申请的用于确定时间戳的方法的一个应用场景的示意图;
图4是根据本申请的用于确定时间戳的方法的又一个实施例的流程图;
图5是根据本申请的用于确定时间戳的装置的一个实施例的结构示意图;
图6是适于用来实现本申请实施例的终端设备的计算机系统的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
图1示出了可以应用本申请的用于确定时间戳的方法或用于确定时间戳的装置的示例性系统架构100。
如图1所示,系统架构100可以包括终端设备101、102、103,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息(例如音视频数据上传请求、音频数据获取请求)等。终端设备101、102、103上可以安装有各种通讯客户端应用,例如视频录制类应用、音频播放类应用、即时通信工具、邮箱客户端、社交平台软件等。
终端设备101、102、103可以是硬件,也可以是软件。当终端设备101、102、103为硬件时,可以是具有显示屏并且视频录制和音频播放的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。当终端设备101、102、103为软件时,可以安装在上述所列举的电子设备中。其可以实现成多个软件或软件模块(例如用来提供分布式服务),也可以实现成单个软件或软件模块。在此不做具体限定。
终端设备101、102、103可以安装有图像采集装置(例如摄像头),以采集视频数据。实践中,组成视频的最小视觉单位是帧(Frame)。每一帧是一幅静态的图像。将时间上连续的帧序列合成到一起便形成动态视频。此外,终端设备101、102、103也可以安装有用于将电信号转换为声音的装置(例如扬声器),以播放声音。实践中,音频数据是以一定的频率对模拟音频信号进行模数转换(Analogue-to-Digital Conversion,ADC)后所得到的数据。音频数据的播放,是将数字音频信号进行数模转换,还原为模拟音频信号,再将模拟音频信号(模拟音频信号为电信号)转化为声音进行输出的过程。
终端设备101、102、103可以利用安装于其上的图像采集装置进行视频数据的采集,并可以利用安装于其上的支持音频播放的(例如将数字音频信号转换为模拟音频信号)的音频处理组件和扬声器播放音频数据。并且,终端设备101、102、103可以对所采集到的视频数据进行时间戳计算等处理,最终将处理结果(例如包含时间戳的视频数据和已播放的音频数据)进行存储。
服务器105可以是提供各种服务的服务器,例如对终端设备101、102、103上所安装的视频录制类应用提供支持的后台服务器。后台服务器可以对所接收到的音视频数据上传请求等数据进行解析、存储等处理。还可以接收终端设备101、102、103所发送的音视频数据获取请求,并将该音视频数据获取请求所指示的音视频数据反馈至终端设备101、102、103。
需要说明的是,服务器可以是硬件,也可以是软件。当服务器为硬件时,可以实现成多个服务器组成的分布式服务器集群,也可以实现成单个服务器。当服务器为软件时,可以实现成多个软件或软件模块(例如用来提供分布式服务),也可以实现成单个软件或软件模块。在此不做具体限定。
需要说明的是,本申请实施例所提供的用于确定时间戳的方法一般由终端设备101、102、103执行,相应地,用于确定时间戳的装置一般设置于终端设备101、102、103中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
继续参考图2,示出了根据本申请的用于确定时间戳的方法的一个实施例的流程200。该用于确定时间戳的方法,包括以下步骤:
步骤201,采集视频数据并播放目标音频数据。
在本实施例中,用于确定时间戳的方法的执行主体(例如图1所示的终端设备101、102、103)可以预先获取并存储目标音频数据。此处,上述目标音频数据可以是用户预先指定作为视频的配乐的音频数据(voice data),例如某个指定歌曲对应的音频数据。
实践中,音频数据是对声音信号进行数字化后的数据。声音信号的数字化过程是以一定的频率将连续的模拟音频信号转换成数字信号得到音频数据的过程。通常,声音信号的数字化过程包含采样、量化和编码三个步骤。其中,采样是指用每隔一定时间间隔的信号样本值序列来代替原来在时间上连续的信号。量化是指用有限幅度近似表示原来在时间上连续变化的幅度值,把模拟信号的连续幅度变为有限数量、有一定时间间隔的离散值。编码则是指按照一定的规律,把量化后的离散值用二进制数码表示。此处,脉冲编码调制(Pulse Code Modulation,PCM)可以实现将模拟音频信号经过采样、量化、编码转换成的数字化的音频数据。因此,上述目标音频数据可以是PCM编码格式的数据流。此时,记载目标音频数据的文件的格式可以是wav格式。需要说明的是,记载上述目标音频数据的文件的格式还可以是其他格式,例如mp3格式、ape格式等。此时,上述目标音频数据可以是其他编码格式(例如AAC(Advanced Audio Coding,高级音频编码)等有损压缩格式)的数据,不限于PCM编码格式。上述执行主体可对该文件进行格式转换,将其转换为记录wav格式。此时,转换后的文件中的目标音频文件则为PCM编码格式的数据流。
需要指出的是,音频数据的播放,可以是将数字化的音频数据进行数模转换,将其还原为模拟音频信号,再将模拟音频信号(电信号)转换为声音进行输出的过程。
在本实施例中,上述执行主体可以安装有图像采集装置,例如摄像头。上述执行主体可以利用上述摄像头进行视频数据(vision data)的采集。实践中,视频数据可以用帧(Frame)来描述。这里,帧是组成视频的最小视觉单位。每一帧是一幅静态的图像。将时间上连续的帧序列合成到一起便形成动态视频。此外,上述执行主体还可以安装有用于将电信号转换为声音的装置,例如扬声器。在获取到上述目标音频数据后,上述执行主体可以开启上述摄像头进行视频数据的采集,同时,可以将上述目标音频数据转换为模拟音频信号,利用上述扬声器输出声音,以实现目标音频数据的播放。
在本实施例中,上述执行主体可以利用各种方式进行目标音频数据的播放。作为示例,上述执行主体可以基于用于播放PCM编码格式的数据流的类(例如Android开发包中的Audio Track类)实现目标音频数据的播放。在播放之前,可以预先调用该类,对该类进行实例化,以创建用于播放目标音频数据的目标对象。在进行目标音频数据的播放时,可以采用流式传输的方式(例如单位时间传输固定的数据量),向上述目标对象传输上述目标音频数据,以利用上述目标对象进行目标音频数据的播放。
实践中,Android开发包中的AudioTrack是管理和播放单一音频资源的类。它可以用于PCM音频流的播放。通常,通过把音频数据利用push的方式传输到对AudioTrack实例化后的对象,进行音频数据播放。AudioTrack对象可以在两种模式下运行。分别为静态模式(static)和流模式(streaming)。在流模式下,把连续的PCM编码格式的数据流写入(通过调用write方法)到AudioTrack对象。在上述实现方式中,可以利用流模式进行目标音频数据的写入。需要说明的是,上述执行主体还可以利用现有的其它支持音频数据播放的组件或工具进行目标音频数据的播放,不限于上述方式。
实践中,上述执行主体中可以安装有视频录制类应用。该视频录制类应用可以支持配乐视频的录制。上述配乐视频可以是在视频数据采集的同时进行音频数据播放的视频。所录制的配乐视频中的声音为该音频数据对应的声音。例如,播放某歌曲过程中录制用户表演的演唱动作,所录制的视频以该歌曲为背景音乐。上述视频录制类应用可以支持配乐视频的连续录制和分段录制。在分段录制时,用户可以首先点击录制按键,进行第一段视频的录制。接着,再次点击录制按键,触发暂停视频录制的指令。接着,再次点击录制按键,触发恢复录制指令,以进行第二段视频的录制。接着,再次点击录制按键,触发暂停视频录制的指令。以此类推。需要说明的是,还可以通过其他方式触发录制指令、暂停录制指令以及恢复录制指令。例如,可以通过长按录制按键进行每段视频的录制。当松开录制按键时,触发暂停视频录制的指令。此处不再赘述。
步骤202,获取视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定视频数据的帧的延迟时长。
在本实施例中,上述执行主体在其所安装的图像采集装置采集到视频数据的帧时,可以记录该帧的采集时间。帧的采集时间可以是图像采集装置采集到该帧时的系统时间戳(例如unix时间戳)。实践中,时间戳(timestamp)是能表示一份数据在某个特定时间之前已经存在的、完整的、可验证的数据。通常,时间戳是一个字符序列,唯一地标识某一刻的时间。
在图像采集装置采集到帧后,需要将该帧传输至应用层,以便应用层对该帧进行处理。在将帧传输至应用层后,上述执行主体可以记录该帧的传输就绪时间。其中,每一个帧的传输就绪时间,可以是该帧被传输至应用层时的系统时间戳。
由于上述执行主体中可以记录有所采集到的视频数据中的帧的采集时间和传输就绪时间,因此,上述执行主体可以直接从本地获取视频数据中的至少一帧的采集时间和传输就绪时间。需要说明的是,上述至少一帧,可以是随机获取的一个或多个帧,也可以是所采集的视频数据中的全部的帧。此处不作限定。
在本实施例中,在获取到上述至少一帧的采集时间和传输就绪时间之后,上述执行主体可以基于所获取的采集时间和传输就绪时间,确定视频数据的帧的延迟时长。此处,可以利用各种方式进行延迟时长的确定。作为又一示例,首先,可以确定上述至少一帧的数量。不同的数量,可以使用不同的方法确定延迟时长。具体地,若上述至少一帧的数量为1,则可以直接将该帧的传输就绪时间与采集时间的差值确定为视频数据的帧的延迟时长。若上述至少一帧的数量大于1,则可以首先确定上述至少一帧中各帧的传输就绪时间与采集时间的差值;而后,将该差值的平均值确定为视频数据的帧的延迟时长。作为又一示例,若上述至少一帧的数量不大于预设数值(例如3),则可以首先确定上述至少一帧中各帧的传输就绪时间与采集时间的差值;而后,将该差值的平均值确定为视频数据的帧的延迟时长。若上述至少一帧的数量大于上述预设数值,则可以首先确定上述至少一帧中各帧的传输就绪时间与采集时间的差值;而后,可以从所确定的差值中,删除差值的最大值和最小值;最后,将余下的差值的平均值确定为视频数据的帧的延迟时长。
在本实施例的一些可选的实现方式中,上述执行主体可以通过如下步骤确定帧的传输就绪时间:首先,可以调用第一预置接口(例如updateTexlmage()接口)获取所采集的视频数据中的帧。其中,所述第一预置接口可以用于获取所采集到的帧。实践中,第一预置接口可以获取来自于图像采集装置所采集的帧。而后,响应于获取到帧,可以调用第二预置接口(例如getTimestamp()接口)获取当前时间戳,将所述当前时间戳确定为该帧的传输就绪时间。其中,所述第二预置接口可以用于获取时间戳。实践中,当获取到帧后,利用该第二预置接口所获取的时间戳即为该帧被传输至应用层时的系统时间戳。
在本实施例的一些可选的实现方式中,所述执行主体可以通过如下步骤确定延迟时长:首先,可以获取所述视频数据中的至少一帧的采集时间和传输就绪时间。而后,对于所述至少一帧中的帧,确定该帧的传输就绪时间与采集时间的差值。最后,可以将所确定的差值的平均值确定为视频数据的帧的延迟时长。
在本实施例的一些可选的实现方式中,上述执行主体所获取的至少一帧的采集时间和传输就绪时间,可以包括上述视频数据中的首帧的采集时间和传输就绪时间。此时,上述执行主体可以将首帧的传输就绪时间与上述采集时间的差值确定为视频数据的帧的延迟时长。
在本实施例的一些可选的实现方式中,上述执行主体所获取的至少一帧的采集时间和传输就绪时间,可以包括上述视频数据中的多个目标帧的采集时间和传输就绪时间。需要说明的是,上述多个目标帧可以是两个或两个以上的预先指定的帧。例如,可以是视频数据的前三帧、或者视频数据的首帧和尾帧等。此外,上述多个目标帧也可以是所采集的视频数据中的随机选取的两个或两个以上的帧。在获取到上述多个目标帧的采集时间和传输就绪时间后,上述执行主体可以首先确定上述多个目标帧的采集时间的平均值,将该平均值确定为第一平均值。而后,可以确定上述多个目标帧的传输就绪时间的平均值,将该平均值确定为第二平均值。最后,可以将上述第二平均值与上述第一平均值的差值确定为上述视频数据的帧的延迟时长。
在本实施例的一些可选的实现方式中,在确定延迟时长之后,上述执行主体还可以确定该延迟时长是否小于预设延迟时长阈值(例如0)。响应于确定上述延迟时长小于预设延迟时长阈值,可以将上述延迟时长设定为预设数值。其中,上述预设数值不小于上述预设延迟时长阈值。
步骤203,对于上述视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将上述数据量对应的播放时长与上述延迟时长的差值确定为该帧的时间戳。
在本实施例中,对于上述视频数据中的帧,上述执行主体可以首先读取该帧的采集时间。而后,可以确定在该采集时间时,已播放的目标音频数据的数据量。此处,上述执行主体可以确定采集到该帧时已传输至上述目标对象的目标音频数据的数据量,可以将上述数据量确定为采集到该帧时已播放的目标音频数据的数据量。
此处,由于目标音频数据是按照设定的采样频率(Sampling Rate)、设定的采样大小(Sampling Size)对声音信号进行采样、量化等操作后得到的,并且播放目标音频数据的声道数是预先确定的,因此,可以基于某帧图像的采集时间已播放的目标音频数据的数据量,以及采样频率、采样大小和声道数,计算出采集到该帧时目标音频数据的播放时长。上述执行主体可以将该播放时长与上述延迟时长的差值确定为该帧的时间戳。实践中,采样频率也称为采样速度或者采样率。采样频率可以是每秒从连续信号中提取并组成离散信号的采样个数。采样频率可以用赫兹(Hz)来表示。采样大小可以用比特(bit)来表示。此处,确定播放时长的步骤如下:首先,可以确定采样频率、采样大小和声道数三者的乘积。而后,可以将已播放的目标音频数据的数据量与该乘积的比值确定为目标音频数据的播放时长。
在本实施例的一些可选的实现方式中,上述执行主体还可以将采集到视频数据的尾帧时已播放的目标音频数据作为目标音频数据区间,提取目标音频数据区间。具体地,上述执行主体可以首先获取所采集到的视频数据的尾帧的采集时间。而后,可以确定该采集时间时已播放的目标音频数据的数据量。之后,可以按照该数据量,从目标音频数据的播放的起始位置对目标音频数据进行截取,将所截取的数据作为目标音频数据区间进行提取。在提取目标频数据区间之后,可以将包含时间戳的视频数据和目标音频数据区间进行存储。此处,可以将上述目标音频数据区间和包含时间戳的视频数据分别进行存储至两个文件中,并建立上述两个文件的映射。此外,也可以将上述目标音频数据区间和包含时间戳的视频数据存储至同一个文件中。
在本实施例的一些可选的实现方式中,上述执行主体可以通过如下步骤进行上述目标音频数据区间和包含时间戳的视频数据的存储:首先,可以将包含时间戳的视频数据进行编码。之后,将上述目标音频数据区间和编码后的视频数据存储在同一文件中。实践中,视频编码可以是指通过特定的压缩技术,将某个视频格式的文件转换成另一种视频格式文件的方式。需要说明的是,视频编码技术是目前广泛研究和应用的公知技术,在此不再赘述。
在本实施例的一些可选的实现方式中,在将上述目标音频数据区间和包含时间戳的上述视频数据存储之后,上述执行主体还可以将所存储的数据上传至服务器。
继续参见图3,图3是根据本实施例的用于确定时间戳的方法的应用场景的一个示意图。在图3的应用场景中,用户手持终端设备301,进行配乐视频的录制。终端设备301中运行有短视频录制类应用。用户在该短视频录制类应用的界面中首先选择了某个配乐(例如歌曲《小苹果》)。而后终端设备301获取该配乐对应的目标音频数据302。在用户点击了配乐视频录制按键之后,终端设备301开启摄像头进行视频数据303的采集,同时,播放上述目标音频数据302。之后,终端设备301可以获取上述视频数据303中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定视频数据的帧的延迟时长。最后,对于上述视频数据中的帧,端设备301可以确定采集到该帧时已播放的目标音频数据的数据量,将上述数据量对应的播放时长与上述延迟时长的差值确定为该帧的时间戳。
本申请的上述实施例提供的方法,通过采集视频数据并播放目标音频数据,而后基于视频数据中的至少一帧的采集时刻和传输就绪时刻,确定视频数据的帧的延迟时长,最后对于上述视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将上述数据量对应的播放时长与上述延迟时长的差值确定为该帧的时间戳,从而,当采集到某一帧时,可以该帧采集时刻已播放的目标音频数据的播放量确定该帧时间戳,且所确定的时间戳消除了帧从采集到传输就绪的延迟时长,提高了视频数据中的帧的时间戳的准确性,提升了所录制的配乐视频的音视频同步效果。
进一步参考图4,其示出了用于确定时间戳的方法的又一个实施例的流程400。该用于确定时间戳的方法的流程400,包括以下步骤:
步骤401,采集视频数据并播放目标音频数据。
在本实施例中,用于确定时间戳的方法的执行主体(例如图1所示的终端设备101、102、103)可以利用其所安装的摄像头采集视频数据,同时,播放目标音频数据。
此处,上述目标音频数据可以是PCM编码格式的数据流。播放目标音频数据可以采用如下方式:首先,对目标类(例如Android开发包中的Audio Track类)进行实例化,以创建用于播放目标音频数据的目标对象。其中,上述目标类可以用于播放PCM编码格式的数据流。之后,可以采用流式传输的方式,向上述目标对象传输上述目标音频数据,以利用上述目标对象播放上述目标音频数据。
步骤402,获取视频数据中的首帧的采集时间和传输就绪时间。
在本实施例中,上述执行主体在其所安装的图像采集装置采集到视频数据的帧时,可以记录该帧的采集时间。在将视频数据的首帧传输至应用层后,可以记录上述首帧的传输就绪时间。由于上述执行主体中可以记录有所采集到的视频数据中的帧的采集时间和传输就绪时间,因此,上述执行主体可以直接从本地获取视频数据的首帧的采集时间和传输就绪时间。
步骤403,将传输就绪时间与采集时间的差值确定为视频数据的帧的延迟时长。
在本实施例中,上述执行主体可以将上述传输就绪时间与上述采集时间的差值确定为视频数据的帧的延迟时长。
步骤404,响应于确定上述延迟时长小于预设延迟时长阈值,将上述延迟时长设定为预设数值。
在本实施例中,上述执行主体可以确定该延迟时长是否小于预设延迟时长阈值(例如0)。响应于确定上述延迟时长小于预设延迟时长阈值,可以将上述延迟时长设定为预设数值。其中,上述预设数值不小于上述预设延迟时长阈值。此处,上述预设数值可以是技术人员基于大量数据进行统计和分析之后所指定的数值。
步骤405,对于视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将数据量对应的播放时长与延迟时长的差值确定为该帧的时间戳。
在本实施例中,对于所采集到的视频数据中的帧,上述执行主体可以首先读取该帧的采集时间。而后,可以确定采集到该帧时已传输至上述目标对象的目标音频数据的数据量,并将上述数据量确定为采集到该帧时已播放的目标音频数据的数据量。之后,可以确定该数据量对应的播放时长。最后,可以将该播放时长与上述延迟时长的差值确定为该帧的时间戳。此处,确定播放时长的步骤如下:首先,可以确定采样频率、采样大小和声道数三者的乘积。而后,可以将已播放的目标音频数据的数据量与该乘积的比值确定为目标音频数据的播放时长。
步骤406,将采集到视频数据的尾帧时已播放的目标音频数据作为目标音频数据区间,提取目标音频数据区间。
在本实施例中,上述执行主体可以首先获取所采集到的视频数据的尾帧(即所采集到的视频数据中的最后一帧)的采集时间。而后,可以确定该采集时间时已播放的目标音频数据的数据量。之后,可以按照该数据量,从目标音频数据的播放的起始位置对目标音频数据进行截取,将所截取的数据作为目标音频数据区间进行提取。
步骤407,将包含时间戳的视频数据和目标音频数据区间进行存储。
在本实施例中,上述执行主体可以将包含时间戳的视频数据和上述目标音频数据区间进行存储。此处,可以将上述目标音频数据区间和包含时间戳的视频数据分别进行存储至两个文件中,并建立上述两个文件的映射。此外,也可以将上述目标音频数据区间和包含时间戳的视频数据存储至同一个文件中。
从图4中可以看出,与图2对应的实施例相比,本实施例中的用于确定时间戳的方法的流程400体现了基于视频数据的首帧的采集时间和传输就绪时间确定延迟时长的步骤。由此,本实施例描述的方案可以减少数据计算量,提高数据处理效率。另一方面还体现了提取目标音频数据区间的步骤,以及存储音视频数据的步骤。由此,本实施例描述的方案可以实现对配乐视频的录制并保存所录制的数据。
进一步参考图5,作为对上述各图所示方法的实现,本申请提供了一种用于确定时间戳的装置的一个实施例,该装置实施例与图2所示的方法实施例相对应,该装置具体可以应用于各种电子设备中。
如图5所示,本实施例所述的用于确定时间戳的装置500包括:采集单元501,被配置成采集视频数据并播放目标音频数据;第一确定单元502,被配置成获取上述视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定上述视频数据的帧的延迟时长;第二确定单元503,被配置成对于上述视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将上述数据量对应的播放时长与上述延迟时长的差值确定为该帧的时间戳。
在本实施例的一些可选的实现方式中,所述第一确定单元502可以包括第一获取模块、第一确定模块和第二确定模块(图中未示出)。其中,所述第一获取模块可以被配置成获取所述视频数据中的至少一帧的采集时间和传输就绪时间。所述第一确定模块可以被配置成对于所述至少一帧中的帧,确定该帧的传输就绪时间与采集时间的差值。所述第二确定模块可以被配置成将所确定的差值的平均值确定为视频数据的帧的延迟时长。
在本实施例的一些可选的实现方式中,所述至少一帧可以包括首帧。所述第一确定单元502可以包括第二获取模块和第三确定模块(图中未示出)。其中,所述第二获取模块可以被配置成获取所述视频数据中的首帧的采集时间和传输就绪时间。所述第三确定模块可以被配置成将所述传输就绪时间与所述采集时间的差值确定为视频数据的帧的延迟时长。
在本实施例的一些可选的实现方式中,所述至少一帧可以包括多个目标帧。所述第一确定单元502可以包括第三获取模块、第四确定模块和第五确定模块(图中未示出)。其中,所述第三获取模块可以被配置成获取所述视频数据中的多个目标帧的采集时间和传输就绪时间。所述第四确定模块可以被配置成将所述多个目标帧的采集时间的平均值确定为第一平均值,将所述多个目标帧的传输就绪时间的平均值确定为第二平均值。所述第五确定模块可以被配置成将所述第二平均值与所述第一平均值的差值确定为所述视频数据的帧的延迟时长。
在本实施例的一些可选的实现方式中,传输就绪时间可以通过如下步骤获取:调用第一预置接口获取所采集的视频数据中的帧,其中,所述第一预置接口用于获取所采集到的帧;响应于获取到帧,调用第二预置接口获取当前时间戳,将所述当前时间戳确定为该帧的传输就绪时间,其中,所述第二预置接口用于获取时间戳。
在本实施例的一些可选的实现方式中,所述装置还可以包括设定单元(图中未示出)。其中,所述设定单元可以被配置成响应于确定所述延迟时长小于预设延迟时长阈值,将所述延迟时长设定为预设数值,其中,所述预设数值不小于所述预设延迟时长阈值。在本实施例的一些可选的实现方式中,该装置还可以包括提取单元和存储单元(图中未示出)。其中,上述提取单元可以被配置成将采集到上述视频数据的尾帧时已播放的目标音频数据作为目标音频数据区间,提取上述目标音频数据区间。上述存储单元可以被配置成将包含时间戳的视频数据和上述目标音频数据区间进行存储。
本申请的上述实施例提供的装置,通过采集单元501采集视频数据并播放目标音频数据,而后第一确定单元502基于视频数据中的至少一帧的采集时刻和传输就绪时刻,确定视频数据的帧的延迟时长,最后第二确定单元503对于上述视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将上述数据量对应的播放时长与上述延迟时长的差值确定为该帧的时间戳,从而,当采集到某一帧时,可以该帧采集时刻已播放的目标音频数据的播放量确定该帧时间戳,且所确定的时间戳消除了帧从采集到传输就绪的延迟时长,提高了视频数据中的帧的时间戳的准确性,提升了所录制的配乐视频的音视频同步效果。
下面参考图6,其示出了适于用来实现本申请实施例的终端设备的计算机系统600的结构示意图。图6示出的终端设备/服务器仅仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图6所示,计算机系统600包括中央处理单元(CPU)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有系统600操作所需的各种程序和数据。CPU 601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
以下部件连接至I/O接口605:包括触摸屏、触摸板等的输入部分606;包括诸如液晶显示器(LCD)等以及扬声器等的输出部分607;包括硬盘等的存储部分608;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611,诸如半导体存储器等等,根据需要安装在驱动器610上,以便于从其上读出的计算机程序根据需要被安装入存储部分608。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分609从网络上被下载和安装,和/或从可拆卸介质611被安装。在该计算机程序被中央处理单元(CPU)601执行时,执行本申请的方法中限定的上述功能。需要说明的是,本申请所述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括采集单元、第一确定单元和第二确定单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,采集单元还可以被描述为“采集视频数据并播放目标音频数据的单元”。
作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的装置中所包含的;也可以是单独存在,而未装配入该装置中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该装置执行时,使得该装置:采集视频数据并播放目标音频数据;获取该视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定该视频数据的帧的延迟时长;对于该视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将该数据量对应的播放时长与该延迟时长的差值确定为该帧的时间戳。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (16)
1.一种用于确定时间戳的方法,包括:
采集视频数据并播放目标音频数据;
获取所述视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定所述视频数据的帧的延迟时长,其中,每一个帧的传输就绪时间,是该帧被传输至应用层时的系统时间戳;
对于所述视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将所述数据量对应的播放时长与所述延迟时长的差值确定为该帧的时间戳。
2.根据权利要求1所述的用于确定时间戳的方法,其中,所述获取所述视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定所述视频数据的帧的延迟时长,包括:
获取所述视频数据中的至少一帧的采集时间和传输就绪时间;
对于所述至少一帧中的帧,确定该帧的传输就绪时间与采集时间的差值;
将所确定的差值的平均值确定为视频数据的帧的延迟时长。
3.根据权利要求1所述的用于确定时间戳的方法,其中,所述至少一帧包括首帧;以及
所述获取所述视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定所述视频数据的帧的延迟时长,包括:
获取所述视频数据中的首帧的采集时间和传输就绪时间;
将所述传输就绪时间与所述采集时间的差值确定为视频数据的帧的延迟时长。
4.根据权利要求1所述的用于确定时间戳的方法,其中,所述至少一帧包括多个目标帧;以及
所述获取所述视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定所述视频数据的帧的延迟时长,包括:
获取所述视频数据中的多个目标帧的采集时间和传输就绪时间;
将所述多个目标帧的采集时间的平均值确定为第一平均值,将所述多个目标帧的传输就绪时间的平均值确定为第二平均值;
将所述第二平均值与所述第一平均值的差值确定为所述视频数据的帧的延迟时长。
5.根据权利要求1所述的用于确定时间戳的方法,其中,传输就绪时间通过如下步骤获取:
调用第一预置接口获取所采集的视频数据中的帧,其中,所述第一预置接口用于获取所采集到的帧;
响应于获取到帧,调用第二预置接口获取当前时间戳,将所述当前时间戳确定为该帧的传输就绪时间,其中,所述第二预置接口用于获取时间戳。
6.根据权利要求1所述的用于确定时间戳的方法,其中,在所述确定所述视频数据的帧的延迟时长之后,所述方法还包括:
响应于确定所述延迟时长小于预设延迟时长阈值,将所述延迟时长设定为预设数值,其中,所述预设数值不小于所述预设延迟时长阈值。
7.根据权利要求1所述的用于确定时间戳的方法,其中,所述方法还包括:
将采集到所述视频数据的尾帧时已播放的目标音频数据作为目标音频数据区间,提取所述目标音频数据区间;
将包含时间戳的视频数据和所述目标音频数据区间进行存储。
8.一种用于确定时间戳的装置,包括:
采集单元,被配置成采集视频数据并播放目标音频数据;
第一确定单元,被配置成获取所述视频数据中的至少一帧的采集时间和传输就绪时间,基于所获取的采集时间和传输就绪时间,确定所述视频数据的帧的延迟时长,其中,每一个帧的传输就绪时间,是该帧被传输至应用层时的系统时间戳;
第二确定单元,被配置成对于所述视频数据中的帧,确定采集到该帧时已播放的目标音频数据的数据量,将所述数据量对应的播放时长与所述延迟时长的差值确定为该帧的时间戳。
9.根据权利要求8所述的用于确定时间戳的装置,其中,所述第一确定单元,包括:
第一获取模块,被配置成获取所述视频数据中的至少一帧的采集时间和传输就绪时间;
第一确定模块,被配置成对于所述至少一帧中的帧,确定该帧的传输就绪时间与采集时间的差值;
第二确定模块,被配置成将所确定的差值的平均值确定为视频数据的帧的延迟时长。
10.根据权利要求8所述的用于确定时间戳的装置,其中,所述至少一帧包括首帧;以及
所述第一确定单元,包括:
第二获取模块,被配置成获取所述视频数据中的首帧的采集时间和传输就绪时间;
第三确定模块,被配置成将所述传输就绪时间与所述采集时间的差值确定为视频数据的帧的延迟时长。
11.根据权利要求8所述的用于确定时间戳的装置,其中,所述至少一帧包括多个目标帧;以及
所述第一确定单元,包括:
第三获取模块,被配置成获取所述视频数据中的多个目标帧的采集时间和传输就绪时间;
第四确定模块,被配置成将所述多个目标帧的采集时间的平均值确定为第一平均值,将所述多个目标帧的传输就绪时间的平均值确定为第二平均值;
第五确定模块,被配置成将所述第二平均值与所述第一平均值的差值确定为所述视频数据的帧的延迟时长。
12.根据权利要求8所述的用于确定时间戳的装置,其中,传输就绪时间通过如下步骤获取:
调用第一预置接口获取所采集的视频数据中的帧,其中,所述第一预置接口用于获取所采集到的帧;
响应于获取到帧,调用第二预置接口获取当前时间戳,将所述当前时间戳确定为该帧的传输就绪时间,其中,所述第二预置接口用于获取时间戳。
13.根据权利要求8所述的用于确定时间戳的装置,其中,所述装置还包括:
设定单元,被配置成响应于确定所述延迟时长小于预设延迟时长阈值,将所述延迟时长设定为预设数值,其中,所述预设数值不小于所述预设延迟时长阈值。
14.根据权利要求8所述的用于确定时间戳的装置,其中,所述装置还包括:
提取单元,被配置成将采集到所述视频数据的尾帧时已播放的目标音频数据作为目标音频数据区间,提取所述目标音频数据区间;
存储单元,被配置成将包含时间戳的视频数据和所述目标音频数据区间进行存储。
15.一种终端设备,包括:
一个或多个处理器;
存储装置,其上存储有一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
16.一种计算机可读存储介质,其上存储有计算机程序,其中,该程序被处理器执行时实现如权利要求1-7中任一所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810866765.1A CN109600564B (zh) | 2018-08-01 | 2018-08-01 | 用于确定时间戳的方法和装置 |
PCT/CN2019/098431 WO2020024945A1 (zh) | 2018-08-01 | 2019-07-30 | 确定时间戳的方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810866765.1A CN109600564B (zh) | 2018-08-01 | 2018-08-01 | 用于确定时间戳的方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109600564A CN109600564A (zh) | 2019-04-09 |
CN109600564B true CN109600564B (zh) | 2020-06-02 |
Family
ID=65956133
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810866765.1A Active CN109600564B (zh) | 2018-08-01 | 2018-08-01 | 用于确定时间戳的方法和装置 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN109600564B (zh) |
WO (1) | WO2020024945A1 (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109600564B (zh) * | 2018-08-01 | 2020-06-02 | 北京微播视界科技有限公司 | 用于确定时间戳的方法和装置 |
CN110324643B (zh) * | 2019-04-24 | 2021-02-02 | 网宿科技股份有限公司 | 一种视频录制方法及系统 |
TWI735890B (zh) * | 2019-06-17 | 2021-08-11 | 瑞昱半導體股份有限公司 | 音訊播放系統與方法 |
CN110225279B (zh) * | 2019-07-15 | 2022-08-16 | 北京小糖科技有限责任公司 | 一种移动终端的视频制作系统和视频制作方法 |
CN110381316B (zh) * | 2019-07-17 | 2023-09-19 | 腾讯科技(深圳)有限公司 | 一种视频传输控制方法、装置、设备及存储介质 |
CN112423075B (zh) * | 2020-11-11 | 2022-09-16 | 广州华多网络科技有限公司 | 音视频时间戳的处理方法、装置、电子设备及存储介质 |
CN112541472B (zh) * | 2020-12-23 | 2023-11-24 | 北京百度网讯科技有限公司 | 一种目标检测方法、装置及电子设备 |
CN114554269A (zh) * | 2022-02-25 | 2022-05-27 | 深圳Tcl新技术有限公司 | 数据处理方法、电子设备及计算机可读存储介质 |
CN115065860B (zh) * | 2022-07-01 | 2023-03-14 | 广州美录电子有限公司 | 适用于舞台的音频数据处理方法、装置、设备及介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101237586A (zh) * | 2008-02-22 | 2008-08-06 | 上海华平信息技术股份有限公司 | 音视频缓存同步播放的方法 |
CN103237191A (zh) * | 2013-04-16 | 2013-08-07 | 成都飞视美视频技术有限公司 | 在视频会议中同步推送音视频的方法 |
WO2017141977A1 (ja) * | 2016-02-17 | 2017-08-24 | ヤマハ株式会社 | オーディオ機器および制御方法 |
CN108282685A (zh) * | 2018-01-04 | 2018-07-13 | 华南师范大学 | 一种音视频同步的方法及监控系统 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003169292A (ja) * | 2001-11-30 | 2003-06-13 | Victor Co Of Japan Ltd | アフレコ装置、コンピュータプログラム、記録媒体、伝送方法及び再生装置 |
JP4375313B2 (ja) * | 2005-09-16 | 2009-12-02 | セイコーエプソン株式会社 | 画像音声出力システム、画像音声データ出力装置、音声処理プログラム、及び記録媒体 |
CN100499823C (zh) * | 2006-02-15 | 2009-06-10 | 中国科学院声学研究所 | 实现mxf视频文件与pcm音频文件同步播放的方法 |
CN103208298A (zh) * | 2012-01-11 | 2013-07-17 | 三星电子(中国)研发中心 | 一种摄像方法及系统 |
US9154834B2 (en) * | 2012-11-06 | 2015-10-06 | Broadcom Corporation | Fast switching of synchronized media using time-stamp management |
US9892759B2 (en) * | 2012-12-28 | 2018-02-13 | Cbs Interactive Inc. | Synchronized presentation of facets of a game event |
JP6287315B2 (ja) * | 2014-02-20 | 2018-03-07 | 富士通株式会社 | 動画像音声同期装置、動画像音声同期方法及び動画像音声同期用コンピュータプログラム |
CN103905877A (zh) * | 2014-03-13 | 2014-07-02 | 北京奇艺世纪科技有限公司 | 音视频数据的播放方法、智能电视和移动设备 |
CN103888748B (zh) * | 2014-03-24 | 2015-09-23 | 中国人民解放军国防科学技术大学 | 用于众视点三维显示系统的视频帧同步方法 |
US10178281B2 (en) * | 2014-07-28 | 2019-01-08 | Starkey Laboratories, Inc. | System and method for synchronizing audio and video signals for a listening system |
CN105049917B (zh) * | 2015-07-06 | 2018-12-07 | 深圳Tcl数字技术有限公司 | 录制音视频同步时间戳的方法和装置 |
CN107517401B (zh) * | 2016-06-15 | 2019-11-19 | 成都鼎桥通信技术有限公司 | 多媒体数据播放方法及装置 |
CN107690089A (zh) * | 2016-08-05 | 2018-02-13 | 阿里巴巴集团控股有限公司 | 数据处理方法、直播方法及装置 |
CN106658133B (zh) * | 2016-10-26 | 2020-04-14 | 广州市百果园网络科技有限公司 | 一种音视频同步播放的方法及终端 |
CN106792073B (zh) * | 2016-12-29 | 2019-09-17 | 北京奇艺世纪科技有限公司 | 跨设备的音视频数据同步播放的方法、播放设备及系统 |
CN107613357B (zh) * | 2017-09-13 | 2020-05-19 | 广州酷狗计算机科技有限公司 | 声画同步优化方法、装置及可读存储介质 |
CN107509100A (zh) * | 2017-09-15 | 2017-12-22 | 深圳国微技术有限公司 | 音视频同步方法、系统、计算机装置及计算机可读存储介质 |
CN107995503B (zh) * | 2017-11-07 | 2020-07-14 | 西安万像电子科技有限公司 | 音视频播放方法和装置 |
CN109600564B (zh) * | 2018-08-01 | 2020-06-02 | 北京微播视界科技有限公司 | 用于确定时间戳的方法和装置 |
-
2018
- 2018-08-01 CN CN201810866765.1A patent/CN109600564B/zh active Active
-
2019
- 2019-07-30 WO PCT/CN2019/098431 patent/WO2020024945A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101237586A (zh) * | 2008-02-22 | 2008-08-06 | 上海华平信息技术股份有限公司 | 音视频缓存同步播放的方法 |
CN103237191A (zh) * | 2013-04-16 | 2013-08-07 | 成都飞视美视频技术有限公司 | 在视频会议中同步推送音视频的方法 |
WO2017141977A1 (ja) * | 2016-02-17 | 2017-08-24 | ヤマハ株式会社 | オーディオ機器および制御方法 |
CN108282685A (zh) * | 2018-01-04 | 2018-07-13 | 华南师范大学 | 一种音视频同步的方法及监控系统 |
Also Published As
Publication number | Publication date |
---|---|
WO2020024945A1 (zh) | 2020-02-06 |
CN109600564A (zh) | 2019-04-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109600564B (zh) | 用于确定时间戳的方法和装置 | |
CN109600650B (zh) | 用于处理数据的方法和装置 | |
CN109600665B (zh) | 用于处理数据的方法和装置 | |
US11114133B2 (en) | Video recording method and device | |
CN109600661B (zh) | 用于录制视频的方法和装置 | |
WO2023125169A1 (zh) | 音频处理方法、装置、设备及存储介质 | |
CN109600563B (zh) | 用于确定时间戳的方法和装置 | |
WO2023051246A1 (zh) | 视频录制方法、装置、设备及存储介质 | |
CN109600660B (zh) | 用于录制视频的方法和装置 | |
WO2020024960A1 (zh) | 处理数据的方法和装置 | |
CN111385576B (zh) | 视频编码方法、装置、移动终端及存储介质 | |
CN110912948B (zh) | 一种问题上报的方法和装置 | |
CN109618198A (zh) | 直播内容举报方法及装置、存储介质、电子设备 | |
US11302308B2 (en) | Synthetic narrowband data generation for narrowband automatic speech recognition systems | |
CN109600562B (zh) | 用于录制视频的方法和装置 | |
CN109413492B (zh) | 一种直播过程中音频数据混响处理方法及系统 | |
CN114495941A (zh) | 单通道音频转文本的方法、装置、电子设备及存储介质 | |
WO2020087788A1 (zh) | 音频处理方法和装置 | |
CN115065852B (zh) | 音画同步方法、装置、电子设备及可读存储介质 | |
Xin et al. | Live Signal Recording and Segmenting Solution Based on Cloud Architecture | |
CN117556066A (zh) | 多媒体内容生成方法和电子设备 | |
CN113436632A (zh) | 语音识别方法、装置、电子设备和存储介质 | |
CN112581993A (zh) | 音频的录制方法、装置、可读介质和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |