CN110933349B - 一种音频数据生成方法、装置、系统及控制器 - Google Patents
一种音频数据生成方法、装置、系统及控制器 Download PDFInfo
- Publication number
- CN110933349B CN110933349B CN201911137162.9A CN201911137162A CN110933349B CN 110933349 B CN110933349 B CN 110933349B CN 201911137162 A CN201911137162 A CN 201911137162A CN 110933349 B CN110933349 B CN 110933349B
- Authority
- CN
- China
- Prior art keywords
- time
- audio signal
- audio data
- video
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
Abstract
本发明实施例提供了一种音频数据生成方法、装置、系统及控制器，包括：在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，并且将时间戳写入音频输出芯片，以使音频输出芯片生成音频信号，以使摄像机按照时间音频信号，生成表示时间音频信号的音频数据，由于根据时间戳生成音频信号，使得摄像机按照音频信号录制的视频的音频数据中记录有时间戳，当需要对多个视频进行同步时，可以根据音频数据中记录的时间戳，确定各视频的视频同步点，由于每个视频只需进行一次处理，从而提高了对多个视频进行同步的效率。
Description
技术领域
本发明涉及音频处理技术领域，特别是涉及一种音频数据生成方法、装置、系统及控制器。
背景技术
在录制影视节目的过程中，往往需要多台摄像机在不同的位置、不同的场景进行节目拍摄，例如在录制综艺时，第一台摄像机负责面向舞台进行拍摄，可以拍摄节目的整个全部过程，第二台摄像机负责面向指定的明星进行拍摄，第三台摄像机负责捕捉精彩瞬间。而然，由于每个摄像机开始拍摄的时间可能不一样，并且部分摄像机中途可能还会暂停拍摄，造成这些摄像机产生的大量视频是没有一个统一的时间信息的，后期剪辑制作节目时，需要人工对各视频进行时间上的同步。
现有技术中，存在一种人工智能的方法对两个视频进行时间上的同步，首先获取需要进行时间同步的两个视频的音频数据，再对两个视频的音频数据进行处理，通过计算得到两个视频之间的匹配程度，从而对这两个视频进行时间上的同步。
发明人在实现本发明的过程中发现，现有技术至少存在如下问题：
现有技术只能两两音视频进行计算，当视频数量过多时，其需要的计算次数也大大增加，效率低，例如：当存在5个需要处理的视频时，需要的计算次数为
当存在10个需要处理的视频时，需要的计算次数为
发明内容
本发明实施例的目的在于提供一种音频信息生成方法，以提高对多个视频进行同步的效率。具体技术方案如下：
本发明实施例提供一种音频数据生成方法，应用于摄像机辅助设备中的控制器，其中，所述摄像机辅助设备还包括音频输出芯片，包括：
在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，所述时间戳由多个字节组成；
将所述时间戳写入所述音频输出芯片，以使所述音频输出芯片，根据组成所述时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将所述时间音频信号输入至所述摄像机，以使所述摄像机按照所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
进一步的，所述在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，包括：
在摄像机录制视频的过程中，基于预设的时间单位与字节数量之间的对应关系，将当前录制时刻对应的各时间单位的数值，编码成由对应时间单位的字节数量个字节组成的第一字节串；
按照预设的组合规则，将编码后的各第一字节串组合为第二字节串；
按照预设的校验算法，处理所述第二字节串，得到校验字节；
将所述第二字节串和所述校验字节组合，生成第三字节串，作为时间戳。
进一步的，在所述将所述时间戳写入所述音频输出芯片之前，还包括：
向所述音频输出芯片中写入预设的时间戳预备标识，以使所述音频输出芯片，根据组成所述时间戳预备标识的各比特位表示的比特位数值生成音频信号，作为预备音频信号，以及将所述预备音频信号输入至所述摄像机，以使所述摄像机按照所述预备音频信号，生成表示所述预备音频信号的音频数据，作为预备音频数据，作为与所述当前录制时刻所录制视频对应的预备音频数据。
进一步的，在所述将所述时间戳写入所述音频输出芯片之后，还包括：
在预设时长内，持续地向所述音频输出芯片写入预设参考字节，以使所述音频输出芯片，根据组成所述预设参考字节的比特串中各比特位表示的比特位数值生成音频信号，作为参考音频信号，以及将所述参考音频信号输入至所述摄像机，以使所述摄像机按照所述参考音频信号，生成表示所述参考音频信号的音频数据，作为参考音频数据，作为与所述预设时长内所录制视频对应的参考音频数据。
本发明实施例还提供一种音频数据生成方法，应用于摄像机，包括：
在录制视频的过程中，接收摄像机辅助设备输入的时间音频信号，所述时间音频信号为所述摄像机辅助设备根据表示当前录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
按照所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
本发明实施例还提供一种视频录制时刻确定方法，包括：
获取待确定录制时间的视频，作为待确定视频，其中，所述待确定视频的音频数据包含时间音频数据，所述时间音频数据为录制所述待确定视频的摄像机按照输入的时间音频信号生成的表示所述时间音频信号的音频数据，所述时间音频信号为摄像机辅助设备，在所述摄像机录制视频的过程中，根据表示录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
基于所述待确定视频的时间音频数据，还原表示所述时间音频数据录制时刻的时间戳；
确定所述时间戳所表示的录制时刻，作为所述时间音频数据对应的视频播放点的录制时刻。
进一步的，所述方法还包括：
在各已确定录制时刻的待确定视频中，确定具有相同录制时刻的待确定视频，作为目标视频；
在各目标视频中，将录制时刻相同的视频播放点确定为视频同步点；
按照所述视频同步点，同步所述各目标视频。
本发明实施例还提供一种音频数据生成装置，应用于摄像机辅助设备中的控制器，其中，所述摄像机辅助设备还包括音频输出芯片，所述装置包括：
时间戳生成模块，用于在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，所述时间戳由多个字节组成；
时间戳输出模块，用于将所述时间戳写入所述音频输出芯片，以使所述音频输出芯片，根据组成所述时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将所述时间音频信号输入至所述摄像机，以使所述摄像机按照所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
进一步的，所述时间戳生成模块，具体用于在摄像机录制视频的过程中，基于预设的时间单位与字节数量之间的对应关系，将当前录制时刻对应的各时间单位的数值，编码成由对应时间单位的字节数量个字节组成的第一字节串，并且按照预设的组合规则，将编码后的各第一字节串组合为第二字节串，以及按照预设的校验算法，处理所述第二字节串，得到校验字节，以及将所述第二字节串和所述校验字节组合，生成第三字节串，作为时间戳。
进一步的，所述时间戳输出模块，还用于在执行所述将所述时间戳写入所述音频输出芯片之前，向所述音频输出芯片中写入预设的时间戳预备标识，以使所述音频输出芯片，根据组成所述时间戳预备标识的各比特位表示的比特位数值生成音频信号，作为预备音频信号，以及将所述预备音频信号输入至所述摄像机，以使所述摄像机按照所述预备音频信号，生成表示所述预备音频信号的音频数据，作为预备音频数据，作为与所述当前录制时刻所录制视频对应的预备音频数据。
进一步的，所述时间戳输出模块，还用于在执行所述将所述时间戳写入所述音频输出芯片之后，在预设时长内，持续地向所述音频输出芯片写入预设参考字节，以使所述音频输出芯片，根据组成所述预设参考字节的比特串中各比特位表示的比特位数值生成音频信号，作为参考音频信号，以及将所述参考音频信号输入至所述摄像机，以使所述摄像机按照所述参考音频信号，生成表示所述参考音频信号的音频数据，作为参考音频数据，作为与所述预设时长内所录制视频对应的参考音频数据。
本发明实施例还提供一种音频数据生成装置，应用于摄像机，所述装置包括：
时间音频信号接收模块，用于在录制视频的过程中，接收摄像机辅助设备输入的时间音频信号，所述时间音频信号为所述摄像机辅助设备根据表示当前录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
音频数据生成模块，用于按照所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
本发明实施例还提供一种视频录制时刻确定装置，所述装置包括：
待确定视频获取模块，用于获取待确定录制时间的视频，作为待确定视频，其中，所述待确定视频的音频数据包含时间音频数据，所述时间音频数据为录制所述待确定视频的摄像机按照输入的时间音频信号生成的表示所述时间音频信号的音频数据，所述时间音频信号为摄像机辅助设备，在所述摄像机录制视频的过程中，根据表示录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
时间戳还原模块，用于基于所述待确定视频的时间音频数据，还原表示所述时间音频数据录制时刻的时间戳；
录制时刻确定模块，用于确定所述时间戳所表示的录制时刻，作为所述时间音频数据对应的视频播放点的录制时刻。
进一步的，所述装置还包括：
目标视频确定模块，用于在各已确定录制时刻的待确定视频中，确定具有相同录制时刻的待确定视频，作为目标视频；
视频同步点确定模块，用于在各目标视频中，将录制时刻相同的视频播放点确定为视频同步点；
目标视频同步模块，用于按照所述视频同步点，同步所述各目标视频。
本发明实施例还提供一种音频数据生成系统，所述系统包括摄像机和摄像机辅助设备，所述摄像机辅助设备包括控制器和音频输出芯片；
所述控制器，用于在所述摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，所述时间戳由多个字节组成，以及将所述时间戳写入所述音频输出芯片；
所述音频输出芯片，用于根据接收到的组成所述时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将所述时间音频信号输入至所述摄像机；
所述摄像机，用于按照接收到的所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
进一步的，所述控制器，具体用于在摄像机录制视频的过程中，基于预设的时间单位与字节数量之间的对应关系，将当前录制时刻对应的各时间单位的数值，编码成由对应时间单位的字节数量个字节组成的第一字节串，并且按照预设的组合规则，将编码后的各第一字节串组合为第二字节串，以及按照预设的校验算法，处理所述第二字节串，得到校验字节，以及将所述第二字节串和所述校验字节组合，生成第三字节串，作为时间戳。
进一步的，所述控制器，还用于在执行所述将所述时间戳写入所述音频输出芯片之前，向所述音频输出芯片中写入预设的时间戳预备标识；
所述音频输出芯片，还用于根据组成所述时间戳预备标识的的各比特位表示的比特位数值生成音频信号，作为预备音频信号，以及将所述预备音频信号输入至所述摄像机；
所述摄像机，还用于按照所述预备音频信号，生成表示所述预备音频信号的音频数据，作为预备音频数据，作为与所述当前录制时刻所录制视频对应的预备音频数据。
进一步的，所述控制器，还用于在执行所述将所述时间戳写入所述音频输出芯片之后，在预设时长内，持续地向所述音频输出芯片写入预设参考字节；
所述音频输出芯片，还用于根据组成所述预设参考字节的比特串中各比特位表示的比特位数值生成音频信号，作为参考音频信号，以及将所述参考音频信号输入至所述摄像机；
所述摄像机，还用于按照所述参考音频信号，生成表示所述参考音频信号的音频数据，作为参考音频数据，作为与所述预设时长内所录制视频对应的参考音频数据。
本发明实施例还提供一种控制器，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现上述应用于控制器的音频数据生成方法的步骤。
本发明实施例还提供一种摄像机，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现上述应用于摄像机的音频数据生成方法的步骤。
本发明实施例还提供一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现上述任一视频录制时刻确定方法的步骤。
本发明实施还提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述应用于控制器的音频数据生成方法的步骤。
本发明实施还提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述应用于服务器的音频数据生成方法的步骤。
本发明实施还提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一视频录制时刻确定方法的步骤。
本发明实施例还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述任一应用于控制器的音频数据生成方法。
本发明实施例还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述任一应用于摄像机的音频数据生成方法。
本发明实施例还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述任一视频录制时刻确定方法。
本发明实施例提供的一种应用于摄像机辅助设备中的控制器音频数据生成方法，其中，摄像机辅助设备还包括音频输出芯片，方案中，在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，时间戳由多个字节组成，并且将时间戳写入音频输出芯片，以使音频输出芯片，根据组成时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将时间音频信号输入至摄像机，以使摄像机按照时间音频信号，生成表示时间音频信号的音频数据，作为时间音频数据，作为与当前录制时刻所录制视频对应的时间音频数据，由于根据时间戳生成音频信号，使得摄像机按照音频信号录制的视频的音频数据中记录有时间戳，当需要对多个视频进行同步时，可以根据音频数据中记录的时间戳，确定各视频的视频同步点，由于每个视频只需进行一次处理，从而提高了对多个视频进行同步的效率。
当然，实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明一个实施例提供的应用于控制器的音频数据生成方法的流程图；
图2为本发明另一个实施例提供的应用于控制器的音频数据生成方法的流程图；
图3为本发明一个实施例提供的时间戳生成方法的流程图；
图4为本发明一个实施例提供的应用于摄像机的音频数据生成方法的流程图；
图5为本发明一个实施例提供的视频录制时刻确定方法的流程图；
图6为本发明一个实施例提供的视频同步方法的流程图；
图7为本发明一个实施例提供的应用于控制器的音频数据生成装置的结构示意图；
图8为本发明一个实施例提供的应用于摄像机的音频数据生成装置的结构示意图；
图9为本发明一个实施例提供的视频录制时刻确定装置的结构示意图；
图10为本发明一个实施例提供的视频同步装置的结构示意图；
图11为本发明一个实施例提供的音频数据生成系统的示意图；
图12为本发明实施例提供的控制器的结构示意图；
图13为本发明实施例提供的摄像机的结构示意图；
图14为本发明实施例提供的电子设备的结构示意图。
具体实施方式
为了给出提高对多个视频进行同步的效率的实现方案，本发明实施例提供了一种音频数据生成方法、装置、系统及控制器，以下结合说明书附图对本发明的实施例进行说明。并且在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。
本发明实施例提供一种音频数据生成方法，该方法可以应用于摄像机辅助设备中的控制器，其中，摄像机辅助设备还包括音频输出芯片。
为了便于理解，首先对本发明实施例中的音频输出芯片做简单介绍：
本发明实施例中，音频输出芯片是可以根据输入的控制信号输出PCM(脉冲编码调制，Pulse Code Modulation)音频信号的芯片。
其中，音频输出芯片可以在每个设置的时钟周期内，输入根据被写入的字节表示的比特位数值生成音频信号，其中，一个比特位数值生成的音频信号可以为在一个时钟周期内输出的电压大小。
在一个实施例中，音频输出芯片的频率被设置为44.1kHZ，则该音频输出芯片每秒可以输出44100次不同的模拟量，并将音频输出芯片输出的音频信号输出与比特位表示的比特位数值对应，本领域的技术人员所知的，比特位数值只分为0和1两种，因此，音频输出芯片输出的音频信号的电压等级可以分为两种情况，设置比特位对应的比特位数值为0时，对应输出第一预设电压等级的音频信号，比特位对应的比特位数值为1时，对应输出第二预设电压等级的音频信号。
示例性的，若音频输出芯片输出的模拟量的电压范围是在-5V到5V，当输入的比特位的表示的比特位数值为0时，则输出的电压等级为-5V，当输入比特位表示的比特位数值为1时，则输出的电压等级为5V。
在一个实施例中，当音频输出芯片不输出音频信号时，可以理解为输出的是电压等级为0V的音频信号，此时，音频输出芯片可以输出三种类型电压等级的音频信号，分别为-5V、0V和5V。
示例性的，当音频输出芯片接收到的输入字节为0x55，对应的比特串为01010101，则音频输出芯片在8个时钟周期内容分别输出电压等级为-5V、5V、-5V、5V、-5V、5V、-5V和5V的音频信号。
当音频输出芯片接收到的输入字节为0xFE，对应的比特串为11111110，则音频输出芯片在8个时钟周期内容分别输出电压等级为5V、5V、5V、5V、5V、5V、5V和-5V的音频信号。
下面，对本发明的应用场景作简要介绍：
在本发明实施例的一个拍摄场景中，包含多台摄像机，各台摄像机通过不同角度对舞台场景进行拍摄，在每台摄像机的拍摄过程中，摄像机辅助设备持续的向摄像机输入包含时间信息的音频信号，从而使得摄像机拍摄的视频的音频数据中也包含有时间信息。这样在后期处理的过程中，可以通过视频的音频数据确定视频的录制时间，从而可以提高对多个视频进行同步的效率。
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。
在本发明的一个实施例中，提供一种音频数据生成方法，应用于摄像机辅助设备中的控制器，其中，摄像机辅助设备还包括音频输出芯片，如图1所示，该方法包括以下步骤：
S101：在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，时间戳由多个字节组成。
本步骤中，本领域的技术人员可知，时间戳用于唯一地标识某一刻的时间，例如2018年7月23日。
在本发明一个实施例中，为了避免频繁的生成时间戳，可以通过设置时间戳生成周期来控制时间戳的生成的频率，例如，可以设置时间戳生成周期为100ms，从而使得在摄像机录制视频的过程中，可以每隔100ms生成一次表示当前录制时刻的时间戳。
为了确定当前实时的录制时间，可以通过读取RTC(Real time clock，实时时钟)时间获取当前时间，本领域的技术人员所知的，通过RTC时钟获取的时间通常是以yyyy-mm-dd，hr:mi:se:ms的形式表示，其中yyyy用以表示年份，mm用以表示月份，dd用以表示日期，hr用以表示日期，mi用以表示小时数，se用以表示秒数，ms用以表示毫秒数。
示例性的，读取RTC获取当前时刻为2019-11-29，16-26-50-842，则表示当前时刻为2019年11月29日，16时26分50秒842毫秒。
在本发明一个实施例中，时间戳可以是由多个字节组成的，例如，可以使用9个字节表示当前录制时刻，在一个实施例中，为了确保时间戳的准确性，可以在9个字节的基础再加上一位校验字节。
示例性的，上述示例中，当前时刻为2019年11月29日，16时26分50秒842毫秒，则表示该当前时刻的时间戳可以为0x073E0B1D101A32034A，具体的时间戳生成方法在后续实施例详细介绍。
S102：将时间戳写入音频输出芯片，以使音频输出芯片，根据组成时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将时间音频信号输入至摄像机，以使摄像机按照时间音频信号，生成表示时间音频信号的音频数据，作为时间音频数据，作为与当前录制时刻所录制视频对应的时间音频数据。
本步骤中，由前述关于音频输出芯片的描述可知，音频输出芯片可以在每个时钟周期内，输入根据被写入的比特位表示的比特位数值生成音频信号，其中，音频输出芯片的时钟周期可用根据音频输出芯片的频率计算得到。
示例性的，当音频输出芯片的频率为44.1kHZ，则该音频输出芯片的时钟周期约为0.002ms，即每0.002ms该音频输出芯片输出一个比特位表示的比特位数值对应的音频信号。
示例性的，当时间戳为0x073E时，其对应的比特串为0000 0111 0011 1110，当音频输出芯片被设置为比特位数值为0对应-5V，比特位数值为1对应5V，则将该时间戳输入到音频输出芯片，可以在第1个0.002ms内输出电压等级为-5V的音频信号，在第2个0.002ms内输出电压等级为-5V的音频信号，依次计算，可确定在第3-第9个0.002ms内分别输出电压等级为-5V、-5V、-5V、5V、5V、5V、-5V、-5V、5V、5V、5V、5V、5V和-5V。
本领域的技术人员所知的，现有技术中，摄像机在录制视频时会通过镜头采集录制现场的图像信息，并转换为图像/视频数据存储，通过麦克风采集录制现场的声音，麦克风将采集到的声音转换为模拟量的音频信息输入至摄像机，摄像机将麦克风采集到的声音信息转换为音频数据进行存储。在生成视频时，一个视频可以具有多路音频轨道的音频数据，每一路音频轨道的音频数据相互独立，其采集的来源可以是相同也可以是不同的，从而在播放视频时，播放人员可以根据自身的需求灵活的配置需要播放的音频数据。
在本发明的一个实施例中，摄像机不仅可以通过麦克风采集录制现场的声音，也可以接收摄像机辅助设备中音频输出芯片输出的时间音频信号，并按照该时间音频信号，生成表示时间音频信号的音频数据。
在一个实施例中，摄像机可以按照预先的设置将时间音频数据写入当前录制视频的指定音频轨道。
本发明实施例提供的上述应用于摄像机辅助设备中的控制器音频数据生成方法中，在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，时间戳由多个字节组成，并且将时间戳写入音频输出芯片，以使音频输出芯片，根据组成时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将时间音频信号输入至摄像机，以使摄像机按照时间音频信号，生成表示时间音频信号的音频数据，作为时间音频数据，作为与当前录制时刻所录制视频对应的时间音频数据，由于根据时间戳生成音频信号，使得摄像机按照音频信号录制的视频的音频数据中记录有时间戳，当需要对多个视频进行同步时，可以根据音频数据中记录的时间戳，确定各视频的视频同步点，由于每个视频只需进行一次处理，从而提高了对多个视频进行同步的效率。
本发明的一个实施例中，在上述如图1所示音频数据生成方法的基础上，还提供另一种音频数据生成方法，应用于摄像机辅助设备中的控制器，其中，摄像机辅助设备还包括音频输出芯片，如图2所示，该方法包括以下步骤：
S201：在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，时间戳由多个字节组成。
本步骤中，与步骤S101相同，在此不再赘述。
S202：向音频输出芯片中写入预设的时间戳预备标识，以使音频输出芯片，根据组成时间戳预备标识的各比特位表示的比特位数值生成音频信号，作为预备音频信号，以及将预备音频信号输入至摄像机，以使摄像机按照预备音频信号，生成表示预备音频信号的音频数据，作为预备音频数据，作为与当前录制时刻所录制视频对应的预备音频数据。
本步骤中，为了后续在确定视频录制时刻可以准确的识别到时间戳，可以在向音频输出芯片写入时间戳之前，向音频输出芯片中写入预设的时间戳预备标识。
其中，上述时间戳预备标识可以是事先约定的任意字节串，为了进一步的保证时间戳预备标识不会对时间戳造成影响，可以将事先约定的时间戳预备标识设置为具有一定规则的字节。
示例性的，时间戳预备标识可以为0x55FF，其对应2个字节，表示该个各字节的比特串为0101 0101 1111 1111 0101 0101 1111 1111，其由16个比特位组成，当音频输出芯片被设置为比特位数值为0对应-5V，比特位数值为1对应5V，则将该时间戳输入到音频输出芯片可以第1-16个时钟周期内分别输出电压等级为-5V、5V、-5V、5V、-5V、5V、-5V、5V、5V、5V、5V、5V、5V、5V、5V和5V的音频信号。
在一个实施例中，摄像机可以按照预备音频信号，生成表示预备音频信号的音频数据，作为预备音频数据，作为与预设时长内所录制视频对应的预备音频数据。
S203：将时间戳写入音频输出芯片，以使音频输出芯片，根据组成时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将时间音频信号输入至摄像机，以使摄像机按照时间音频信号，生成表示时间音频信号的音频数据，作为时间音频数据，作为与当前录制时刻所录制视频对应的时间音频数据。
本步骤中，与步骤S102相同，在此不再赘述。
S204：在预设时长内，持续地向音频输出芯片写入预设参考字节，以使音频输出芯片，根据组成预设参考字节的比特串中各比特位表示的比特位数值生成音频信号，作为参考音频信号，以及将参考音频信号输入至摄像机，以使摄像机按照参考音频信号，生成表示参考音频信号的音频数据，作为参考音频数据，作为与预设时长内所录制视频对应的参考音频数据。
本步骤中，为了避免频繁的生成时间戳，可以在时间戳被写入音频输出芯片后，持续的预设时长的向音频输出芯片写入预设参考字节，。
其中，预设时长可以是根据实际需求和经验确定的，例如，可以为100ms，从而保证每过100ms，音频输出芯片可以被写入一次时间戳。
上述预设参考字节可以是事先约定的一个字节，也可以是事先约定的多个字节，同样的，为了进一步的确定预设参考字节不会对时间戳造成影响，可以将事先约定的预设参考字节设置一些特殊的字节。
示例性的，预设参考字节可以为0xFF，组成该参考字节的比特串中各比特位表示的比特位数值大小为均为1，当音频输出芯片被设置为比特位数值为0对应-5V，比特位数值为1对应5V，则音频输出芯片可以输出持续100ms的电压等级为5V的音频信号。
在一个实施例中，音频输出芯片可以在预设时长内不输出任何音频信号，从而相当于执行的向摄像机输入电压等价为0V的音频信号。
在一个实施例中，摄像机可以按照参考音频信号，生成表示参考音频信号的音频数据，作为参考音频数据，作为与预设时长内所录制视频对应的参考音频数据。
本发明实施例提供的上述另一种应用于摄像机辅助设备中的控制器音频数据生成方法中，在摄像机录制视频的过程中，由于可以根据时间戳生成音频信号，使得摄像机按照音频信号录制的视频的音频数据中记录有时间戳，当需要对多个视频进行同步时，可以根据音频数据中记录的时间戳，确定各视频的视频同步点，由于每个视频只需进行一次处理，从而提高了对多个视频进行同步的效率。
本发明的一个实施例中，还提供一种时间戳生成方法，以实现上述步骤S101和S201，如图3所述，包括：
S301：在摄像机录制视频的过程中，基于预设的时间单位与字节数量之间的对应关系，将当前录制时刻对应的各时间单位的数值，编码成由对应时间单位的字节数量个字节组成的第一字节串。
本步骤中，时间单位为表示各维度时间的单位，如年、月、日、时、分、秒和毫秒等。
预设的时间单位与字节数量之间的对应关系可以包括：
时间单位年对应的字节数量为2个字节，即年份使用2个字节表示；
时间单位月对应的字节数量为1个字节，即月份使用1个字节表示；
时间单位日对应的字节数量为1个字节，即日期使用1个字节表示；
时间单位时对应的字节数量为1个字节，即时钟使用1个字节表示；
时间单位分对应的字节数量为1个字节，即分钟使用1个字节表示；
时间单位秒对应的字节数量为1个字节，即秒钟使用1个字节表示；
时间单位毫秒对应的字节数量为2个字节，即毫秒使用2个字节表示。
示例性的，当前时刻为2019年8月16日10时52分6秒128毫秒时，时间单位年的数值为2019，其对应的字节数量为2个字节，则将2019编码为0x073E，对应的将时间单位月、日、时、分、秒和毫秒的数值分别编码为0x08，0x10，0x0A，0x34，0x06，0x0080。当前时刻为2019年11月29日16时26分50秒842毫秒时，经过编码后得到的第一字节串为：0x073E，0x0B，0x1D，0x10，0x1A，0x32，0x034A。
S302：按照预设的组合规则，将编码后的各第一字节串组合为第二字节串。
本步骤中，可以按照时间单位的大小顺序对第一字节串进行组合，示例性的，上述示例中，可以组合得到0x07E308100A34060080和0x073E0B1D101A32034A。
S303：按照预设的校验算法，处理第二字节串，得到校验字节。
本步骤中，为了确保经过传输后，时间戳的准确性，可以增加校验字节，在一个实施例中，可以将上述9为字节中各比特位表示的数值大小相加，并与0xff做与操作，得到校验和。
例如，当第二字节串为0x073E0B1D101A32034A，经过上述处理后，可以得到校验字节为0xABB。
S304：将第二字节串和校验字节组合，生成第三字节串，作为时间戳。
本步骤中，可以将第二字节串和校验字节组合，生成第三字节串，作为时间戳。
示例性的，将0x073E0B1D101A32034A和0xABB组合，得到的时间戳为0x073E0B1D101A32034ABB。
本发明实施例提供的上述一种时间戳生成方法中，可以在摄像机录制视频的过程中，基于预设的时间单位与字节数量之间的对应关系，将当前录制时刻对应的各时间单位的数值，编码成由对应时间单位的字节数量个字节组成的第一字节串，并且按照预设的组合规则，将编码后的各第一字节串组合为第二字节串，以及按照预设的校验算法，处理第二字节串，得到校验字节，以及将第二字节串和校验字节组合，生成第三字节串，作为时间戳，从而可以准确、高效的生成时间戳。
本发明实施例还提供一种音频数据生成方法，应用于摄像机，如图4所示，包括：
S401：在录制视频的过程中，接收摄像机辅助设备输入的时间音频信号，时间音频信号为摄像机辅助设备根据表示当前录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的。
本步骤中，摄像机在录制视频的过程中，可以接收摄像机辅助设备输入的时间音频信号。
在一个实施例中，在接收摄像机辅助设备输入的时间音频信号之前，还可以接收摄像机辅助设备输入的预备音频信号，并在接收到摄像机辅助设备输入的时间音频信号之后，在预设时长内容，持续地接收摄像机辅助设备输入的参考音频信号。
S402：按照时间音频信号，生成表示时间音频信号的音频数据，作为时间音频数据，作为与当前录制时刻所录制视频对应的时间音频数据。
本步骤中，将生成的时间音频数据作为所录制视频的特定音频轨道的音频数据。
在一个实施例中，还可以在生成时间音频数据之前，还可按照接收摄像机辅助设备输入的预备音频信号，生成表示预备音频信号的音频数据，作为预备音频数据。以及在生成时间音频数据之后，按照接收摄像机辅助设备输入的参考音频信号，生成表示参考音频信号的音频数据，作为参考音频数据。
本发明实施例提供的上述应用于摄像机的时间戳生成方法中，可以在录制视频的过程中，接收摄像机辅助设备输入的时间音频信号，时间音频信号为摄像机辅助设备根据表示当前录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的，并且按照时间音频信号，生成表示时间音频信号的音频数据，作为时间音频数据，作为与当前录制时刻所录制视频对应的时间音频数据，从而使得生成的音频数据中携带有时间戳，从而，当需要对多个视频进行同步时，可以根据音频数据中记录的时间戳，确定各视频的视频同步点，由于每个视频只需进行一次处理，从而提高了对多个视频进行同步的效率。
本发明实施例还提供一种视频录制时刻确定方法，如图5所示，包括：
S501：获取待确定录制时间的视频，作为待确定视频，其中，待确定视频的音频数据包含时间音频数据，时间音频数据为录制待确定视频的摄像机按照输入的时间音频信号生成的表示时间音频信号的音频数据，时间音频信号为摄像机辅助设备，在摄像机录制视频的过程中，根据表示录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的。
本步骤中，待确定视频为需要确定视频录制时刻的视频，其是通过与摄像机辅助设备连接的摄像机录制的。
本领域的技术人员所知的，摄像机录制的视频包含有视频数据和音频数据，且任意时刻录制的视频的视频数据和音频数据是对应的，即确定了音频数据的录制时间即可确定该音频数据对应的视频数据的录制时间。
在一个实施例中，在时间音频数据之前，还可以包括预备音频数据，在时间音频数据之后，还可以包括参考音频数据。
在一个实施例中，待确定视频的在特定音频轨道的音频数据可以由预备音频数据、时间音频数据和参考音频数据组成，每相邻的预备音频数据、时间音频数据和参考音频数据可以被视为一个周期。
S502：基于待确定视频的时间音频数据，还原表示时间音频数据录制时刻的时间戳。
本步骤中，待确定视频的时间音频数据可以是通过读取待确定视频的预设的音频轨道的音频数据获取的，其中，预设的音频轨道是摄像机辅助设备输入音频信号生成的音频数据所在的音轨。
在一个实施例中，为了能够准确，快速的定位到时间音频数据，当读取到的音频数据为预先约定的预备音频数据，将后续读取到的与时间戳长度对应的音频数据作为时间音频数据。
在一个实施例中，由前述实施例可知，时间音频数据为根据时间音频信号生成的，因此通过时间音频数据可以确定对应时间音频信息的字节串，及可以通过时间音频数据还原出时间戳。
S503：确定时间戳所表示的录制时刻，作为时间音频数据对应的视频播放点的录制时刻。
本步骤中，可以通过时间戳确定对应该时间戳的时间音频数据的录制时刻，从而进一步确定时间音频数据对应的视频播放点的录制时刻。
在一个实施例中，为了对多个视频进行同步，可以在确定出多个视频的各录制时刻后，通过各视频的录制时刻确定各视频的视频同步点，其中，视频同步点为各视频在同一时刻所录制视频的同步点，用于对各视频进行时间上的匹配。
本发明实施例提供的上述视频录制时刻确定方法中，可以获取待确定录制时间的视频，作为待确定视频，其中，待确定视频的音频数据包含时间音频数据，时间音频数据为录制待确定视频的摄像机按照输入的时间音频信号生成的表示时间音频信号的音频数据，时间音频信号为摄像机辅助设备，在摄像机录制视频的过程中，根据表示录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的，并且基于待确定视频的时间音频数据，还原表示时间音频数据录制时刻的时间戳，以及确定时间戳所表示的录制时刻，作为时间音频数据对应的视频播放点的录制时刻，由于直接通过视频的音频数据就可以确定视频的录制时刻，进而可以确定各视频的视频同步点，由于每个视频只需进行一次处理，从而提高了对多个视频进行同步的效率。
在步骤S503确定视频的录制时刻之后，本发明实施例还提供一种视频同步方法，如图6所示，包括：
S601：在各已确定录制时刻的待确定视频中，确定具有相同录制时刻的待确定视频，作为目标视频。
本步骤中，待确定视频至少包括一个录制时刻。
示例性的，待确定视频的播放时长从10分钟，确定的录制时间点为：第2分钟的播放时间点的录制时刻为2019年7月26日14时26分，第8分钟的播放时间点的录制时刻为2019年7月26日14时32分。
在一个实施例中，各已确定录制时刻的待确定视频中，存在相同录制时刻的待确定视频均可作为目标视频。
S602：在各目标视频中，将具有相同录制时刻的时间音频数据确定为视频同步点。
本步骤中，可以将将具有相同录制时刻的时间音频数据确定为视频同步点。
示例性的，第一目标视频的播放时长从10分钟，其确定的第2分钟的录制时刻为2019年7月26日14时26分，第二目标视频的播放时长从20分钟，其确定的第10分钟的录制时刻为2019年7月26日14时26分，则可以将第一目标视频的第2分钟和第二目标视频的第10分钟作为视频同步点。
S603：按照视频同步点，同步各目标视频。
本步骤中，可以按照各目标视频的视频同步点，同步各目标视频。
示例性的，第一目标视频的的第2分钟和第二目标视频的的第10分钟为视频同步点，则可以确定第一目标视频和第二目标视频在相同录制时刻对应的各视频播放点。
本发明实施例提供的上述视频同步方法中，可以在各已确定录制时刻的待确定视频中，确定具有相同录制时刻的待确定视频，作为目标视频，并且在各目标视频中，将具有相同录制时刻的时间音频数据确定为视频同步点，以及按照视频同步点，同步各目标视频，由于直接可以根据各视频的录制时刻确定各视频的视频同步点，即可实现各视频的同步，从而每个视频只需进行一次处理，从而提高了对多个视频进行同步的效率。
基于同一发明构思，根据本发明实施例提供的应用于摄像机辅助设备中的控制器的音频数据生成方法，本发明实施例还提供了一种音频数据生成装置，应用于摄像机辅助设备中的控制器，如图7所示，该装置包括：
时间戳生成模块701，用于在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，时间戳由多个字节组成；
时间戳输出模块702，用于将时间戳写入音频输出芯片，以使音频输出芯片，根据组成时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将时间音频信号输入至摄像机，以使摄像机按照时间音频信号，生成表示时间音频信号的音频数据，作为时间音频数据，作为与当前录制时刻所录制视频对应的时间音频数据。
进一步的，时间戳生成模块701，具体用于在摄像机录制视频的过程中，基于预设的时间单位与字节数量之间的对应关系，将当前录制时刻对应的各时间单位的数值，编码成由对应时间单位的字节数量个字节组成的第一字节串，并且按照预设的组合规则，将编码后的各第一字节串组合为第二字节串，以及按照预设的校验算法，处理第二字节串，得到校验字节，以及将第二字节串和校验字节组合，生成第三字节串，作为时间戳。
进一步的，时间戳输出模块702，还用于在执行将时间戳写入音频输出芯片之前，向音频输出芯片中写入预设的时间戳预备标识，以使音频输出芯片，根据组成时间戳预备标识的各比特位表示的比特位数值生成音频信号，作为预备音频信号，以及将预备音频信号输入至摄像机，以使摄像机按照预备音频信号，生成表示预备音频信号的音频数据，作为预备音频数据，作为与当前录制时刻所录制视频对应的预备音频数据。
进一步的，时间戳输出模块702，还用于在执行将时间戳写入音频输出芯片之后，在预设时长内，持续地向音频输出芯片写入预设参考字节，以使音频输出芯片，根据组成预设参考字节的比特串中各比特位表示的比特位数值生成音频信号，作为参考音频信号，以及将参考音频信号输入至摄像机，以使摄像机按照参考音频信号，生成表示参考音频信号的音频数据，作为参考音频数据，作为与预设时长内所录制视频对应的参考音频数据。
基于同一发明构思，根据本发明实施例提供的应用于摄像机的音频数据生成方法，本发明实施例还提供了一种音频数据生成装置，应用于摄像机，如图8所示，该装置包括：
时间音频信号接收模块801，用于在录制视频的过程中，接收摄像机辅助设备输入的时间音频信号，时间音频信号为摄像机辅助设备根据表示当前录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
音频数据生成模块802，用于按照时间音频信号，生成表示时间音频信号的音频数据，作为时间音频数据，作为与当前录制时刻所录制视频对应的时间音频数据。
基于同一发明构思，根据本发明实施例提供的视频录制时刻确定方法，本发明实施例还提供了一种视频录制时刻确定装置，如图9所示，该装置包括：
待确定视频获取模块901，用于获取待确定录制时间的视频，作为待确定视频，其中，待确定视频的音频数据包含时间音频数据，时间音频数据为录制待确定视频的摄像机按照输入的时间音频信号生成的表示时间音频信号的音频数据，时间音频信号为摄像机辅助设备，在摄像机录制视频的过程中，根据表示录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
时间戳还原模块902，用于基于待确定视频的时间音频数据，还原表示时间音频数据录制时刻的时间戳；
录制时刻确定模块903，用于确定时间戳所表示的录制时刻，作为时间音频数据对应的视频播放点的录制时刻。
基于同一发明构思，根据本发明实施例提供的视频同步方法，本发明实施例还提供了一种视频同步装置，如图10所示，该装置包括：
目标视频确定模块1001，用于在各已确定录制时刻的待确定视频中，确定具有相同录制时刻的待确定视频，作为目标视频；
视频同步点确定模块1002，用于在各目标视频中，将录制时刻相同的视频播放点确定为视频同步点；
目标视频同步模块1003，用于按照视频同步点，同步各目标视频。
基于同一发明构思，本发明实施例还提供一种音频数据生成系统，如图11所示，系统包括摄像机1101和摄像机辅助设备1102，摄像机辅助设备1102包括控制器11021和音频输出芯片11022；
控制器11021，用于在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，时间戳由多个字节组成，以及将时间戳写入音频输出芯片；
音频输出芯片11022，用于根据接收到的组成时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将时间音频信号输入至摄像机；
摄像机1101，用于按照接收到的时间音频信号，生成表示时间音频信号的音频数据，作为时间音频数据，作为与当前录制时刻所录制视频对应的时间音频数据。
进一步的，控制器11021，具体用于在摄像机录制视频的过程中，基于预设的时间单位与字节数量之间的对应关系，将当前录制时刻对应的各时间单位的数值，编码成由对应时间单位的字节数量个字节组成的第一字节串，并且按照预设的组合规则，将编码后的各第一字节串组合为第二字节串，以及按照预设的校验算法，处理第二字节串，得到校验字节，以及将第二字节串和校验字节组合，生成第三字节串，作为时间戳。
进一步的，控制器11021，还用于在执行将时间戳写入音频输出芯片之前，向音频输出芯片中写入预设的时间戳预备标识；
音频输出芯片11022，还用于根据组成时间戳预备标识的的各比特位表示的比特位数值生成音频信号，作为预备音频信号，以及将预备音频信号输入至摄像机；
摄像机1101，还用于按照预备音频信号，生成表示预备音频信号的音频数据，作为预备音频数据，作为与当前录制时刻所录制视频对应的预备音频数据。
进一步的，控制器11021，还用于在执行将时间戳写入音频输出芯片之后，在预设时长内，持续地向音频输出芯片写入预设参考字节；
音频输出芯片11022，还用于根据组成预设参考字节的比特串中各比特位表示的比特位数值生成音频信号，作为参考音频信号，以及将参考音频信号输入至摄像机1101；
摄像机1101，还用于按照参考音频信号，生成表示参考音频信号的音频数据，作为参考音频数据，作为与预设时长内所录制视频对应的参考音频数据。
本发明实施例还提供了一种控制器，如图12所示，包括处理器1201、通信接口1202、存储器1203和通信总线1204，其中，处理器1201，通信接口1202，存储器1203通过通信总线1204完成相互间的通信，
存储器1203，用于存放计算机程序；
处理器1201，用于执行存储器1203上所存放的程序时，实现如下步骤：
在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，所述时间戳由多个字节组成；
将所述时间戳写入所述音频输出芯片，以使所述音频输出芯片，根据组成所述时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将所述时间音频信号输入至所述摄像机，以使所述摄像机按照所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
本发明实施例还提供了一种摄像机，如图13所示，包括处理器1301、通信接口1302、存储器1303和通信总线1304，其中，处理器1301，通信接口1302，存储器1303通过通信总线1304完成相互间的通信，
存储器1303，用于存放计算机程序；
处理器1301，用于执行存储器1303上所存放的程序时，实现如下步骤：
在录制视频的过程中，接收摄像机辅助设备输入的时间音频信号，所述时间音频信号为所述摄像机辅助设备根据表示当前录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
按照所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
本发明实施例还提供了一种电子设备，如图14所示，包括处理器1401、通信接口1402、存储器1403和通信总线1404，其中，处理器1401，通信接口1402，存储器1403通过通信总线1404完成相互间的通信，
存储器1403，用于存放计算机程序；
处理器1401，用于执行存储器1403上所存放的程序时，实现如下步骤：
获取待确定录制时间的视频，作为待确定视频，其中，所述待确定视频的音频数据包含时间音频数据，所述时间音频数据为录制所述待确定视频的摄像机按照输入的时间音频信号生成的表示所述时间音频信号的音频数据，所述时间音频信号为摄像机辅助设备，在所述摄像机录制视频的过程中，根据表示录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
基于所述待确定视频的时间音频数据，还原表示所述时间音频数据录制时刻的时间戳；
确定所述时间戳所表示的录制时刻，作为所述时间音频数据对应的视频播放点的录制时刻。
上述控制器、摄像机和电子设备提到的通信总线可以是外设部件互连标准(Peripheral Component Interconnect，PCI)总线或扩展工业标准结构(ExtendedIndustry Standard Architecture，EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory，RAM)，也可以包括非易失性存储器(Non-Volatile Memory，NVM)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(Network Processor，NP)等；还可以是数字信号处理器(Digital SignalProcessing，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一应用于摄像机辅助设备的控制器的音频数据生成方法的步骤。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一应用于摄像机的音频数据生成方法的步骤。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一视频录制时刻方法的步骤。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一应用于摄像机辅助设备的控制器的音频数据生成方法。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一应用于摄像机音频数据生成方法。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一视频录制时刻方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置、系统、控制器、摄像机、电子设备、计算机可读存储介质、计算机程序产品而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。
Claims (21)
1.一种音频数据生成方法，其特征在于，应用于摄像机辅助设备中的控制器，其中，所述摄像机辅助设备还包括音频输出芯片，包括：
在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，所述时间戳由多个字节组成；
将所述时间戳写入所述音频输出芯片，以使所述音频输出芯片，根据组成所述时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将所述时间音频信号输入至所述摄像机，以使所述摄像机按照所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
2.根据权利要求1所述的方法，其特征在于，所述在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，包括：
在摄像机录制视频的过程中，基于预设的时间单位与字节数量之间的对应关系，将当前录制时刻对应的各时间单位的数值，编码成由对应时间单位的字节数量个字节组成的第一字节串；
按照预设的组合规则，将编码后的各第一字节串组合为第二字节串；
按照预设的校验算法，处理所述第二字节串，得到校验字节；
将所述第二字节串和所述校验字节组合，生成第三字节串，作为时间戳。
3.根据权利要求1或2所述的方法，其特征在于，在所述将所述时间戳写入所述音频输出芯片之前，还包括：
向所述音频输出芯片中写入预设的时间戳预备标识，以使所述音频输出芯片，根据组成所述时间戳预备标识的各比特位表示的比特位数值生成音频信号，作为预备音频信号，以及将所述预备音频信号输入至所述摄像机，以使所述摄像机按照所述预备音频信号，生成表示所述预备音频信号的音频数据，作为预备音频数据，作为与所述当前录制时刻所录制视频对应的预备音频数据。
4.根据权利要求3所述的方法，其特征在于，在所述将所述时间戳写入所述音频输出芯片之后，还包括：
在预设时长内，持续地向所述音频输出芯片写入预设参考字节，以使所述音频输出芯片，根据组成所述预设参考字节的比特串中各比特位表示的比特位数值生成音频信号，作为参考音频信号，以及将所述参考音频信号输入至所述摄像机，以使所述摄像机按照所述参考音频信号，生成表示所述参考音频信号的音频数据，作为参考音频数据，作为与所述预设时长内所录制视频对应的参考音频数据。
5.一种音频数据生成方法，其特征在于，应用于摄像机，包括：
在录制视频的过程中，接收摄像机辅助设备输入的时间音频信号，所述时间音频信号为所述摄像机辅助设备根据表示当前录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
按照所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
6.一种视频录制时刻确定方法，其特征在于，包括：
获取待确定录制时间的视频，作为待确定视频，其中，所述待确定视频的音频数据包含时间音频数据，所述时间音频数据为录制所述待确定视频的摄像机按照输入的时间音频信号生成的表示所述时间音频信号的音频数据，所述时间音频信号为摄像机辅助设备，在所述摄像机录制视频的过程中，根据表示录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
基于所述待确定视频的时间音频数据，还原表示所述时间音频数据录制时刻的时间戳；
确定所述时间戳所表示的录制时刻，作为所述时间音频数据对应的视频播放点的录制时刻。
7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
在各已确定录制时刻的待确定视频中，确定具有相同录制时刻的待确定视频，作为目标视频；
在各目标视频中，将录制时刻相同的视频播放点确定为视频同步点；
按照所述视频同步点，同步所述各目标视频。
8.一种音频数据生成装置，其特征在于，应用于摄像机辅助设备中的控制器，其中，所述摄像机辅助设备还包括音频输出芯片，包括：
时间戳生成模块，用于在摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，所述时间戳由多个字节组成；
时间戳输出模块，用于将所述时间戳写入所述音频输出芯片，以使所述音频输出芯片，根据组成所述时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将所述时间音频信号输入至所述摄像机，以使所述摄像机按照所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
9.根据权利要求8所述的装置，其特征在于，所述时间戳生成模块，具体用于在摄像机录制视频的过程中，基于预设的时间单位与字节数量之间的对应关系，将当前录制时刻对应的各时间单位的数值，编码成由对应时间单位的字节数量个字节组成的第一字节串，并且按照预设的组合规则，将编码后的各第一字节串组合为第二字节串，以及按照预设的校验算法，处理所述第二字节串，得到校验字节，以及将所述第二字节串和所述校验字节组合，生成第三字节串，作为时间戳。
10.根据权利要求8或9所述的装置，其特征在于，所述时间戳输出模块，还用于在执行所述将所述时间戳写入所述音频输出芯片之前，向所述音频输出芯片中写入预设的时间戳预备标识，以使所述音频输出芯片，根据组成所述时间戳预备标识的各比特位表示的比特位数值生成音频信号，作为预备音频信号，以及将所述预备音频信号输入至所述摄像机，以使所述摄像机按照所述预备音频信号，生成表示所述预备音频信号的音频数据，作为预备音频数据，作为与所述当前录制时刻所录制视频对应的预备音频数据。
11.根据权利要求10任所述的装置，其特征在于，所述时间戳输出模块，还用于在执行所述将所述时间戳写入所述音频输出芯片之后，在预设时长内，持续地向所述音频输出芯片写入预设参考字节，以使所述音频输出芯片，根据组成所述预设参考字节的比特串中各比特位表示的比特位数值生成音频信号，作为参考音频信号，以及将所述参考音频信号输入至所述摄像机，以使所述摄像机按照所述参考音频信号，生成表示所述参考音频信号的音频数据，作为参考音频数据，作为与所述预设时长内所录制视频对应的参考音频数据。
12.一种音频数据生成装置，其特征在于，应用于摄像机，包括：
时间音频信号接收模块，用于在录制视频的过程中，接收摄像机辅助设备输入的时间音频信号，所述时间音频信号为所述摄像机辅助设备根据表示当前录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
音频数据生成模块，用于按照所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
13.一种视频录制时刻确定装置，其特征在于，包括：
待确定视频获取模块，用于获取待确定录制时间的视频，作为待确定视频，其中，所述待确定视频的音频数据包含时间音频数据，所述时间音频数据为录制所述待确定视频的摄像机按照输入的时间音频信号生成的表示所述时间音频信号的音频数据，所述时间音频信号为摄像机辅助设备，在所述摄像机录制视频的过程中，根据表示录制时刻的时间戳的各字节对应的比特串中各比特位表示的比特位数值生成的；
时间戳还原模块，用于基于所述待确定视频的时间音频数据，还原表示所述时间音频数据录制时刻的时间戳；
录制时刻确定模块，用于确定所述时间戳所表示的录制时刻，作为所述时间音频数据对应的视频播放点的录制时刻。
14.根据权利要求13所述的装置，其特征在于，所述装置还包括：
目标视频确定模块，用于在各已确定录制时刻的待确定视频中，确定具有相同录制时刻的待确定视频，作为目标视频；
视频同步点确定模块，用于在各目标视频中，将录制时刻相同的视频播放点确定为视频同步点；
目标视频同步模块，用于按照所述视频同步点，同步所述各目标视频。
15.一种音频数据生成系统，其特征在于，所述系统包括摄像机和摄像机辅助设备，所述摄像机辅助设备包括控制器和音频输出芯片；
所述控制器，用于在所述摄像机录制视频的过程中，生成表示当前录制时刻的时间戳，其中，所述时间戳由多个字节组成，以及将所述时间戳写入所述音频输出芯片；
所述音频输出芯片，用于根据接收到的组成所述时间戳各字节的比特串中各比特位表示的比特位数值生成音频信号，作为时间音频信号，以及将所述时间音频信号输入至所述摄像机；
所述摄像机，用于按照接收到的所述时间音频信号，生成表示所述时间音频信号的音频数据，作为时间音频数据，作为与所述当前录制时刻所录制视频对应的时间音频数据。
16.根据权利要求15所述的系统，其特征在于，所述控制器，具体用于在摄像机录制视频的过程中，基于预设的时间单位与字节数量之间的对应关系，将当前录制时刻对应的各时间单位的数值，编码成由对应时间单位的字节数量个字节组成的第一字节串，并且按照预设的组合规则，将编码后的各第一字节串组合为第二字节串，以及按照预设的校验算法，处理所述第二字节串，得到校验字节，以及将所述第二字节串和所述校验字节组合，生成第三字节串，作为时间戳。
17.根据权利要求15或16所述的系统，其特征在于，所述控制器，还用于在执行所述将所述时间戳写入所述音频输出芯片之前，向所述音频输出芯片中写入预设的时间戳预备标识；
所述音频输出芯片，还用于根据组成所述时间戳预备标识的各比特位表示的比特位数值生成音频信号，作为预备音频信号，以及将所述预备音频信号输入至所述摄像机；
所述摄像机，还用于按照所述预备音频信号，生成表示所述预备音频信号的音频数据，作为预备音频数据，作为与所述当前录制时刻所录制视频对应的预备音频数据。
18.根据权利要求17所述的系统，其特征在于，所述控制器，还用于在执行所述将所述时间戳写入所述音频输出芯片之后，在预设时长内，持续地向所述音频输出芯片写入预设参考字节；
所述音频输出芯片，还用于根据组成所述预设参考字节的比特串中各比特位表示的比特位数值生成音频信号，作为参考音频信号，以及将所述参考音频信号输入至所述摄像机；
所述摄像机，还用于按照所述参考音频信号，生成表示所述参考音频信号的音频数据，作为参考音频数据，作为与所述预设时长内所录制视频对应的参考音频数据。
19.一种控制器，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求1-4任一所述的方法步骤。
20.一种摄像机，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求5所述的方法步骤。
21.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求6-7任一所述的方法步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911137162.9A CN110933349B (zh) | 2019-11-19 | 2019-11-19 | 一种音频数据生成方法、装置、系统及控制器 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911137162.9A CN110933349B (zh) | 2019-11-19 | 2019-11-19 | 一种音频数据生成方法、装置、系统及控制器 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110933349A CN110933349A (zh) | 2020-03-27 |
| CN110933349B true CN110933349B (zh) | 2022-03-04 |
Family
ID=69851195
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201911137162.9A Active CN110933349B (zh) | 2019-11-19 | 2019-11-19 | 一种音频数据生成方法、装置、系统及控制器 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110933349B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110896464B (zh) * | 2019-11-19 | 2022-03-04 | 北京奇艺世纪科技有限公司 | 一种音频数据生成方法、装置、系统及控制器 |
| CN112601132A (zh) * | 2020-12-07 | 2021-04-02 | 北京奇艺世纪科技有限公司 | 音视频文件生成、采集时刻确定方法、装置及电子设备 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105049917A (zh) * | 2015-07-06 | 2015-11-11 | 深圳Tcl数字技术有限公司 | 录制音视频同步时间戳的方法和装置 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101516850B1 (ko) * | 2008-12-10 | 2015-05-04 | 뮤비 테크놀로지스 피티이 엘티디. | 여러 개 비디오 클립을 인터커팅하여 새로운 비디오 제작 생성기 |
| JP2011223359A (ja) * | 2010-04-09 | 2011-11-04 | Sony Corp | 遅延制御装置、制御方法、及び通信システム |
| CN104378675B (zh) * | 2014-12-08 | 2019-07-30 | 厦门雅迅网络股份有限公司 | 一种多通道音视频同步播放处理方法 |
| CN105245977B (zh) * | 2015-10-10 | 2020-09-25 | 上海慧体网络科技有限公司 | 一种多组摄像头同步直播的方法 |
| US9813783B2 (en) * | 2016-04-01 | 2017-11-07 | Intel Corporation | Multi-camera dataset assembly and management with high precision timestamp requirements |
| CN106027886B (zh) * | 2016-05-17 | 2019-08-06 | 深圳市极酷威视科技有限公司 | 一种全景视频实现同步帧的方法及系统 |
| CN109873921B (zh) * | 2019-02-14 | 2023-04-07 | 魔门塔(苏州)科技有限公司 | 一种图像时间戳的传输方法、解析方法和装置 |
| CN110191368A (zh) * | 2019-05-31 | 2019-08-30 | 北京奇艺世纪科技有限公司 | 视频数据采集及对齐方法、装置、电子设备及系统 |
| CN110418183B (zh) * | 2019-08-05 | 2022-11-15 | 北京字节跳动网络技术有限公司 | 音视频同步方法、装置、电子设备及可读介质 |
| CN110896464B (zh) * | 2019-11-19 | 2022-03-04 | 北京奇艺世纪科技有限公司 | 一种音频数据生成方法、装置、系统及控制器 |
-
2019
- 2019-11-19 CN CN201911137162.9A patent/CN110933349B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105049917A (zh) * | 2015-07-06 | 2015-11-11 | 深圳Tcl数字技术有限公司 | 录制音视频同步时间戳的方法和装置 |
Non-Patent Citations (1)
| Title |
|---|
| "基于RTP/RTCP的空间多媒体通信音视频同步算法";张斌;《工业技术创新》;20180425;全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110933349A (zh) | 2020-03-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110933349B (zh) | 一种音频数据生成方法、装置、系统及控制器 | |
| CN110896464B (zh) | 一种音频数据生成方法、装置、系统及控制器 | |
| CN107277594B (zh) | 一种视音频与弹幕同步方法及装置 | |
| WO2020215453A1 (zh) | 一种视频录制方法及系统 | |
| CN108174133B (zh) | 一种庭审录像展示方法、装置、电子设备及存储介质 | |
| CN104092920A (zh) | 一种音视频同步方法 | |
| US10284888B2 (en) | Multiple live HLS streams | |
| CN108989875B (zh) | 一种生成弹幕文件的方法及装置 | |
| JP2012513736A (ja) | カメラ事象記録機 | |
| CN110830823A (zh) | 播放进度修正方法、装置、电子设备及可读存储介质 | |
| CN110234029B (zh) | 多传感器数据的播放处理方法、装置、设备和存储介质 | |
| US20160142456A1 (en) | Method and Device for Acquiring Media File | |
| CN116233411A (zh) | 音视频同步测试的方法、装置、设备及计算机存储介质 | |
| US10957360B1 (en) | Using optical character recognition to synchronize recorded videos | |
| CN110809169A (zh) | 互联网评论信息定向屏蔽系统及方法 | |
| US10529378B2 (en) | Information storage device and falsification prevention method for information storage device | |
| CN114915840A (zh) | 适用于嵌入式设备的音视频处理方法、装置、设备及介质 | |
| WO2017049474A1 (zh) | 一种拍摄方法以及智能手环 | |
| US10536685B2 (en) | Method and apparatus for generating lens-related metadata | |
| JP6485238B2 (ja) | タギング装置、タギングシステム、タギング方法及びプログラム | |
| KR102264745B1 (ko) | 블록체인 네트워크 기반 저작권 관리 시스템 | |
| CN110336804B (zh) | 多媒体文件的恢复方法、装置及设备 | |
| CN114025229A (zh) | 处理音视频文件的方法、装置、计算设备及存储介质 | |
| CN112601132A (zh) | 音视频文件生成、采集时刻确定方法、装置及电子设备 | |
| CN106330922B (zh) | 一种视频碎片命名方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |