CN116266858A - 音视频录制方法、装置、设备及介质 - Google Patents

Abstract

本申请公开了一种音视频录制方法、装置、设备及介质，该方法可以应用于视频会议场景下支持播放FLV格式文件的设备中，该方法包括：接收音频数据流和视频数据流；接收开始录制指令；确定开始录制指令接收时刻后接收的音频数据流和视频数据流；对确定的音频数据流和视频数据流进行解析处理；将解析后的音频数据流和视频数据流封装为FLV格式文件。这样可以实现将视频会议中录制的音视频文件实时存储为可播放的FLV文件，从而保证视频会议软件在发生异常中断的情况下，无需进行二次转码，即可播放，实现已录制视频内容的及时获取。

Description

音视频录制方法、装置、设备及介质

技术领域

本申请实施例涉及视频会议领域，尤其涉及一种音视频录制方法、装置、设备及介质。

背景技术

在进行实时音视频会议的过程中，需要将会议过程中通信交流的音视频内容进行保存。例如，常用的视频会议采用的音视频信息保存方式是将音视频的码流数据上传到云端进行保存，这种保存方式在视频会议软件发生非正常崩溃时，只能通过特有的转码软件，运用音视频编解码技术，对音视频的码流进行解码，之后才能正常播放已经录制的视频内容。但是若录制端未安装有这种特殊的转码软件时，无法播放已录制的视频，因此，现有方式存在局限性。

发明内容

本申请提供了一种音视频录制方法、装置、设备及介质，实现将视频会议中录制的音视频文件实时存储为可播放的FLV文件，从而保证视频会议软件在发生异常中断的情况下，无需进行二次转码，即可播放，实现已录制视频内容的及时获取。

第一方面，本申请实施例提供了一种音视频录制方法，应用于视频会议场景下支持播放FLV格式文件的设备中，该方法包括：

接收音频数据流和视频数据流；

接收开始录制指令；

确定开始录制指令接收时刻后接收的音频数据流和视频数据流；

对确定的音频数据流和视频数据流进行解析处理；

将解析后的音频数据流和视频数据流封装为FLV格式文件。

第二方面，本申请实施例还提供了一种音视频录制装置，集成于视频会议场景下支持播放FLV格式文件的设备中，该装置包括：

接收模块，用于接收音频数据流和视频数据流；

接收模块，还用于接收开始录制指令；

确定模块，用于确定开始录制指令接收时刻后接收的音频数据流和视频数据流；

处理模块，用于对确定的音频数据流和视频数据流进行解析处理；

处理模块，还用于将解析后的音频数据流和视频数据流封装为FLV格式文件。

第三方面，本申请实施例还提供了一种计算机设备，该设备包括：存储器、处理器，当存储器存储有计算机程序，处理器执行计算机程序时，实现如本申请实施例提供的一种音视频录制方法。

第四方面，本申请实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，当该计算机程序被处理器执行时，实现如本申请实施例提供的一种音视频录制方法。

本申请提供了一种音视频录制方法、装置、设备及介质，该方法可以应用于视频会议场景下支持播放FLV格式文件的设备中，该方法包括：接收音频数据流和视频数据流；接收开始录制指令；确定开始录制指令接收时刻后接收的音频数据流和视频数据流；对确定的音频数据流和视频数据流进行解析处理；将解析后的音频数据流和视频数据流封装为FLV格式文件。这样可以实现将视频会议中录制的音视频文件实时存储为可播放的FLV文件，从而保证视频会议软件在发生异常中断的情况下，无需进行二次转码，即可播放，实现已录制视频内容的及时获取。

附图说明

图1是本申请实施例提供的一种音视频录制方法的流程图；

图2是本申请实施例提供的转换FLV格式文件的方法流程图；

图3是本申请实施例提供的接收音频数据流和视频数据流的方法流程图；

图4是本申请实施例提供的一种音视频录制装置的结构示意图；

图5是本申请实施例提供的另一种音视频录制装置的结构示意图；

图6是本申请实施例提供的计算机设备的结构示意图。

具体实施方式

下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本申请，而非对本申请的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本申请相关的部分而非全部结构。

另外，在本申请实施例中，“可选地”或者“示例性地”等词用于表示作例子、例证或说明。本申请实施例中被描述为“可选地”或者“示例性地”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“可选地”或者“示例性地”等词旨在以具体方式呈现相关概念。

在现有的音视频会议录制过程中，若采用特定厂商的录制软件进行会议录制，那么在软件发生非正常退出的情况下，由于之前录制的音视频会议内容依赖于所采用软件的属性保存在预先设计的路径中，则需要采用与该录制软件对应的特定解析工具才能恢复录制软件非正常退出之前录制、保存的信息，这样操作流程比较繁琐，并且对应用场景有极大的限制。

基于上述技术缺陷，本申请实施例提供了一种音视频录制方法的流程图，该方法可以应用于视频会议场景下，由支持播放FLV格式文件的设备执行，实现将视频会议中录制的音视频文件实时存储为可播放的FLV文件，从而保证视频会议软件在发生异常中断的情况下，也能够及时播放给参会人员观看，无需二次转码处理录制的音视频内容。如图1所示，该方法可以包括但不限于以下步骤：

S101、接收音频数据流和视频数据流。

本申请实施例中的音频数据流和视频数据流为视频会议场景下，接收的关于参会人员基于会议内容进行讨论的音频信息和视频信息。可以理解的是，这里的音频信息和视频信息为视频会议中所有参会人员的音频信息和视频信息。

S102、接收开始录制指令。

本步骤中的开始录制指令即为开始录制视频会议内容的指令，该指令可以在会议开始时同步发出，也可以在会议开始后，即会议进行到某一时刻后发出。这里的发出指令可以为参会人员基于会议进行的实际情况在音视频录制设备(该设备也可同时支持视频会议功能，即在一个设备上开启视频会议并同步进行会议内容录制)上通过点击录制按钮发出，此时该设备接收到开始录制指令，即可开始录制视频会议内容。也就是说，上述接收开始录制指令的时间等于或晚于视频会议的开始时间。

S103、确定开始录制指令接收时刻后接收的音频数据流和视频数据流。

在本申请实施例中，在视频会议场景下可以依据音频数据流和视频数据流的传输顺序依次接收传输的各数据流。在接收到开始录制指令后，可以将开始录制指令后的传输的音频数据流和视频数据流做额外的标记处理。例如，将开始录制指令后传输的音频数据流和视频数据流存储至与开始录制指令之前接收的音频数据流和视频数据流不同的存储区域，或者，对开始录制指令后传输的音频数据流和视频数据流进行标记，以与开始录制指令之前接收的音频数据流和视频数据流进行区分。可选地，也可以通过时间戳等方式标记开始录制指令接收时刻后接收的音频数据流和视频数据流。本申请实施例对此不作限定。

S104、对确定的音频数据流和视频数据流进行解析处理。

可以理解的是，为了节约传输资源，在传输音频数据流和视频数据流时，可以对要传输的音频数据流和视频数据流进行压缩、打包处理。那么，在获取开始录制指令之后，可以对开始录制指令之后确定的音频数据流和视频数据进行解析。

S105、将解析后的音频数据流和视频数据流封装为FLV格式文件。

本步骤即为在接收到开始录制指令后，开始视频会议内容录制，并将录制过程中接收到的音频数据流和视频数据流进行音视频容器封装处理，实时生成FLV格式文件，那么设备可以基于FLV格式文件的文件头中的FLV类型、版本等信息识别可读取的多媒体数据的格式类型。

进一步地，在本申请实施例中，上述设备中可以安装有支持播放FLV格式文件的通用视频播放器，那么在设备获取并存储FLV格式文件后，可以在任意情况下，随时支持播放FLV格式文件的音视频内容，并不需要额外的转码、解码等处理过程。这样在视频会议内容录制过程中，即使发生异常，导致视频会议软件异常退出，参会人员也无需对录制的会议内容进行额外处理，而直接使用上述设备中安装的支持FLV格式的通用视频播放器播放，即可正常观看录制的视频会议内容，从而节约找回已录制视频内容的时间。

也就是说，基于本申请实施例提供的上述方案，在接收音频数据流和视频数据流中断的情况下，例如，网络中断或设备上运行的录制软件非正常退出，导致设备无法接收到视频数据流和音频数据流，则设备判断音频数据流和视频数据流接收中断，若录制设备接收到播放指令，则可以根据播放指令调用流媒体播放生成的FLV格式文件。

本申请实施例提供了一种音视频录制方法，该方法可以应用于视频会议场景下支持播放FLV格式文件的设备中，该方法包括：接收音频数据流和视频数据流；接收开始录制指令；确定开始录制指令接收时刻后接收的音频数据流和视频数据流；对确定的音频数据流和视频数据流进行解析处理；将解析后的音频数据流和视频数据流封装为FLV格式文件。这样可以实现将视频会议中录制的音视频文件实时存储为可播放的FLV文件，从而保证视频会议软件在发生异常中断的情况下，无需进行二次转码，即可播放，实现已录制视频内容的及时获取。

在一种示例中，如图2所示，本申请实施例还进一步提供了一种可选实现方式，包括但不限于以下步骤：

S201、接收结束录制指令。

与上述开始录制指令相同的是，本步骤中的结束录制指令也可以是参会人员基于会议进行的实际情况在音视频录制设备上通过点击停止录制按钮发出的，该按钮被点击之后，录制设备即可接收到结束录制指令，并停止录制接收到的音频数据流和视频数据流。

可选地，接收该结束录制指令的时间也可以等于或早于视频会议的结束时间。即可以录制整个视频会议的内容，并将获取的视频会议的视频数据流和音频数据流实时保存为FLV格式文件，也可以仅录制视频会议中的某一段会议内容并保存为FLV格式文件。

S202、根据结束录制指令将FLV格式文件转换为MP4格式文件。

在录制设备接收到结束录制指令后确定视频会议录制结束，则可以将FLV格式文件转换为MP4格式文件。由于可以接收到结束录制指令，表示视频会议录制过程中并没有发生任何异常(例如，断网、视频会议软件崩溃退出等)，这样在录制结束后，将FLV格式文件转换为MP4格式文件，还可以通过支持播放MP4格式文件的播放器播放录制好的视频会议内容。

在一种示例中，如图3所示，在上述实施例步骤S101中接收音频数据流和视频数据流的实现方式可以包括但不限于以下步骤：

S301、获取关于视频会议中参会人员的多路视频画面和多路音频数据。

本步骤中的多路视频画面包括远端视频画面和本地视频画面，多路音频数据包括远端音频数据和本地音频数据，其中，本地视频画面和本地音频数据可以理解为录制设备本地获取的视频画面和音频数据，远端视频画面和远端音频数据可以理解为其他设备向录制设备传输的对应参会人员的视频画面和音频数据。

S302、将多路视频画面合并为一路视频画面，并对合并后的一路视频画面进行视频编码，生成视频数据流。

将接收的远端视频画面和本地视频画面进行拼接、合并，得到一路视频画面，将该一路视频画面通过视频编码器进行视频编码，生成视频数据流。

S303、将多路音频数据进行混音，生成一路音频数据流。

在一种示例中，本申请实施例还提供了一种上述步骤S103中确定开始录制指令接收时刻后接收的音频数据流和视频数据流的可选实现方式，具体包括：接收携带有录制时间间隔的开启指令，根据该开始录制指令接收时刻和开启指令中的录制时间间隔，确定开始录制时刻，将开始录制时刻后接收的音频数据流和视频数据流确定为开始录制指令接收时刻后接收的音频数据流和视频数据流。

例如，上述设备可以以显示界面的形式向用户提供会议录制正式开始的时间填充框，用户可以根据实际需求在时间填充框中填写录制时间间隔并确定填写的录制时间间隔。进一步地，用户确认填写的录制时间间隔后，即可生成开启指令，即录制设备即可接收到开启指令，该开启指令中携带有录制时间间隔。示例性地，该录制时间间隔可以为0，也可以为3分钟或5分钟等，设备根据接收到的开启指令中的录制时间间隔和开始录制指令接收时刻，确定开始录制时刻，并在开始录制时刻到达后，将开始录制时刻后接收的音频数据流和视频数据流确定为上述开始录制指令接收时刻后接收的音频数据流和视频数据流。

例如，若用户填写的录制时间间隔为0，表示在开始录制指令接收时刻到达后，录制正式开始。若用户填写的录制时间间隔为3分钟，表示在开始录制指令接收时刻到达，间隔3分钟之后，录制正式开始，并将开始录制指令接收时刻3分钟后接收的音频数据流和视频数据流确定为开始录制指令接收时刻后接收的音频数据流和视频数据流。

图4为本申请实施例提供的一种音视频录制装置的结构示意图，如图4所示，该装置包括：接收模块401、确定模块402、处理模块403；

其中，接收模块，用于接收音频数据流和视频数据流；

接收模块，还用于接收开始录制指令；

确定模块，用于确定开始录制指令接收时刻后接收的音频数据流和视频数据流；

处理模块，用于对确定的音频数据流和视频数据流进行解析处理；

处理模块，还用于将解析后的音频数据流和视频数据流封装为FLV格式文件。

在一种示例中，如图5所示，上述装置还包括播放模块404；

在接收音频数据流和视频数据流中断的情况下，接收模块若接收到播放指令，则播放模块，用于根据播放指令调用流媒体播放FLV格式文件。

在一种示例中，接收模块，用于接收结束录制指令；

封装模块，用于根据结束录制指令将FLV格式文件转换为MP4格式文件。

可选地，上述接收开始录制指令的时间等于或晚于视频会议的开始时间；接收结束录制指令的时间等于或早于视频会议的结束时间。

在一种示例中，接收模块包括获取单元和生成单元；

其中，获取单元，用于获取关于视频会议中参会人员的多路视频画面和多路音频数据；

生成单元，用于将多路视频画面合并为一路视频画面，并对合并后的一路视频画面进行视频编码，生成视频数据流；以及，将多路音频数据进行混音，生成一路音频数据流。

上述多路视频画面包括远端视频画面和本地视频画面，上述多路音频数据包括远端音频数据和本地音频数据。

在一种示例中，上述确定模块还可以包括接收单元和确定单元；

其中，接收单元，用于接收携带有录制时间间隔的开启指令；

确定单元，用于根据开始录制指令接收时刻和录制时间间隔，确定开始录制时刻；

确定单元，还用于将开始录制时刻后接收的音频数据流和视频数据流确定为开始录制指令接收时刻后接收的音频数据流和视频数据流。

本申请实施例所提供的音视频录制装置可执行本申请图1实施例所提供的音视频录制方法，具备执行方法相应的功能单元和有益效果。

图6为本申请实施例提供的一种计算机设备的结构示意图，如图6所示，该计算机设备包括处理器601、存储器602、输入装置603、输出装置604；计算机设备中处理器601的数量可以是一个或多个，图6中以一个处理器601为例；计算机设备中的处理器601、存储器602、输入装置603和输出装置604可以通过总线或其他方式连接，图6中以通过总线连接为例。

存储器602作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本申请实施例图1中的音视频录制方法对应的程序指令/模块(例如，音视频录制装置中的接收模块401、封装模块402)。处理器601通过运行存储在存储器602中的软件程序、指令以及模块，从而执行计算机设备的各种功能以及数据处理，即实现上述的音视频录制方法。

存储器602可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据云服务器的使用所创建的数据等。此外，存储器602可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器602可进一步包括相对于处理器601远程设置的存储器，这些远程存储器可以通过网络连接至计算机设备/终端/服务器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

输入装置603可用于接收输入的数字或字符信息，以及产生与计算机设备的用户设置以及功能控制有关的键信号输入。输出装置604可包括显示屏等显示计算机设备。

本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由处理器执行时用于执行一种音视频录制方法，该方法包括：

接收音频数据流和视频数据流；

接收开始录制指令；

确定开始录制指令接收时刻后接收的音频数据流和视频数据流；

对确定的音频数据流和视频数据流进行解析处理；

将解析后的音频数据流和视频数据流封装为FLV格式文件。

当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本申请任意实施例所提供的音视频录制方法。

通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本申请可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。

值得注意的是，上述音视频录制装置的实施例中，所包括的各个模块、单元只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。

注意，上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解，本申请不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此，虽然通过以上实施例对本申请进行了较为详细的说明，但是本申请不仅仅限于以上实施例，在不脱离本申请构思的情况下，还可以包括更多其他等效实施例，而本申请的范围由所附的权利要求范围决定。

Claims (10)

1.一种音视频录制方法，应用于视频会议场景下支持播放流媒体FLV格式文件的设备中，其特征在于，包括：

接收音频数据流和视频数据流；

接收开始录制指令；

确定所述开始录制指令接收时刻后接收的所述音频数据流和视频数据流；

对确定的所述音频数据流和视频数据流进行解析处理；

将解析后的所述音频数据流和视频数据流封装为FLV格式文件。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

在接收音频数据流和视频数据流中断的情况下，若接收到播放指令；

根据所述播放指令调用流媒体播放所述FLV格式文件。

3.根据权利要求1所述的方法，其特征在于，所述方法还包括：

接收结束录制指令；

根据所述结束录制指令将所述FLV格式文件转换为MP4格式文件。

4.根据权利要求1或3所述的方法，其特征在于，所述接收开始录制指令的时间等于或晚于所述视频会议的开始时间；

所述接收结束录制指令的时间等于或早于所述视频会议的结束时间。

5.根据权利要求1所述的方法，其特征在于，所述接收音频数据流和视频数据流，包括：

获取关于视频会议中参会人员的多路视频画面和多路音频数据；

将所述多路视频画面合并为一路视频画面，并对合并后的一路视频画面进行视频编码，生成视频数据流；

将所述多路音频数据进行混音，生成一路音频数据流。

6.根据权利要求5所述的方法，其特征在于，所述多路视频画面包括远端视频画面和本地视频画面；

所述多路音频数据包括远端音频数据和本地音频数据。

7.根据权利要求4所述的方法，其特征在于，所述确定所述开始录制指令接收时刻后接收的所述音频数据流和视频数据流，包括：

接收携带有录制时间间隔的开启指令；

根据所述开始录制指令接收时刻和所述录制时间间隔，确定开始录制时刻；

将所述开始录制时刻后接收的所述音频数据流和视频数据流确定为所述开始录制指令接收时刻后接收的所述音频数据流和视频数据流。

8.一种音视频录制装置，集成于视频会议场景下支持播放FLV格式文件的设备中，其特征在于，包括：

接收模块，用于接收音频数据流和视频数据流；

所述接收模块，还用于接收开始录制指令；

确定模块，用于确定所述开始录制指令接收时刻后接收的所述音频数据流和视频数据流；

处理模块，用于对确定的所述音频数据流和视频数据流进行解析处理；

所述处理模块，还用于将解析后的所述音频数据流和视频数据流封装为FLV格式文件。

9.一种计算机设备，包括存储器、处理器，其特征在于，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时，实现如权利要求1-7任一项所述的音视频录制方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现如权利要求1-7任一项所述的音视频录制方法。

Images