CN108881765A - 轻量录播方法、装置及系统 - Google Patents

Abstract

本发明提供了一种轻量录播方法、装置及系统，涉及录播的技术领域，该方法包括获取现场的第一视频信息、音频信息及屏幕显示信息；识别第一视频信息中目标对象的动作；将动作与动作库中的动作数据进行对比，确定与动作匹配的目标动作；根据目标动作调整摄像头的焦距及方向，以生成缩放或多视角的第二视频信息；对第一视频信息、第二视频信息、音频信息及屏幕显示信息进行同步处理，生成录播文件。本发明使用一台摄像机可以实现对现场视频信息的多焦距、多方向的录制，节省了摄像设备的使用量，减轻后期录播文件的合成及制作难度，降低录播的实施成本，便于优质教育资源的分享和使用。

Description

轻量录播方法、装置及系统

技术领域

本发明涉及录播技术领域，尤其是涉及一种轻量录播方法、装置及系统。

背景技术

目前，标准的录播教室通常造价昂贵，需要配备多台摄影录音设备，采集到录播的内容之后，需要对数据进行剪辑合成，用于合成的设备往往造价较高，每个学校通常只有少数的示范课可以在录播教室上，不利于录播的大范围实施，不利于优质教育资源的分享与利用。降低录播设备的成本，实现录播的广泛实施，目前尚未提出更好的解决方案。

发明内容

有鉴于此，本发明的目的在于提供一种轻量录播方法、装置及系统，以降低录播的成本，使录播可以广泛实施，便于优质教育资源的利用。

第一方面，本发明实施例提供了一种一种轻量录播方法，包括：获取现场的第一视频信息、音频信息及屏幕显示信息；识别第一视频信息中目标对象的动作；将动作与动作库中的动作数据进行对比，确定与动作匹配的目标动作；根据目标动作调整摄像头的焦距及方向，以生成缩放或多视角的第二视频信息；对第一视频信息、第二视频信息、音频信息及屏幕显示信息进行同步处理，生成录播文件。

结合第一方面，本发明实施例提供了第一方面的第一种可能的实施方式，其中，获取现场的第一视频信息、音频信息及屏幕显示信息的步骤，包括：获取预存储的时间列表；根据时间列表启动或停止采集现场的第一视频信息、音频信息及屏幕显示信息。

结合第一方面或其第一种可能的实施方式，本发明实施例提供了第一方面的第二种可能的实施方式，其中，对第一视频信息、第二视频信息、音频信息及屏幕显示信息进行同步处理，生成录播文件的步骤，包括：对第一视频信息、第二视频信息、音频信息及屏幕显示信息分别进行编码、封装和存储，以生成录播文件，录播文件包括：录播视频文件、录播音频文件及录播讲义文件。

结合第一方面，本发明实施例提供了第一方面的第三种可能的实施方式，该方法还包括：将音频信息转化成文字信息；根据文字信息生成录播文字文件。

第二方面，本发明实施例还提供一种轻量录播系统，包括：摄像头、麦克风和显示屏；显示屏设有内置处理器，用于采集屏幕显示信息；摄像头和内置处理器通信连接，用于采集视频信息；麦克风和内置处理器通信连接，用于采集音频信息；内置处理器用于执行第一方面的实施方式中的任一种。

第三方面，本发明实施例还提供一种轻量录播装置，包括：采集模块，用于获取现场的第一视频信息、音频信息及屏幕显示信息；识别模块，用于识别第一视频信息中目标对象的动作；匹配模块，用于将动作与动作库中的动作数据进行对比，确定与动作匹配的目标动作；调整模块，用于根据目标动作调整摄像头的焦距及方向，以生成缩放或多视角的第二视频信息；文件生成模块，用于对第一视频信息、第二视频信息、音频信息及屏幕显示信息进行同步处理，生成录播文件。

结合第三方面，本发明实施例提供了第二方面的第一种可能的实施方式，其中，采集模块，还用于：获取预存的储时间列表；根据时间列表启动或停止采集现场的第一视频信息、音频信息及屏幕显示信息。

结合第三方面，本发明实施例提供了第二方面的第二种可能的实施方式，其中，文件生成模块，还用于：对第一视频信息、第二视频信息、音频信息及屏幕显示信息分别进行编码、封装和存储，以生成录播文件，录播文件包括：录播视频文件、录播音频文件及录播讲义文件。

结合第三方面，本发明实施例提供了第二方面的第三种可能的实施方式，还包括翻译模块，翻译模块用于：将音频信息转化成文字信息；根据文字信息生成录播文字文件。

第四方面，本发明实施例还提供一种电子设备，包括存储器、处理器，存储器中存储有可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述第一方面的实施方式中的任一种。

本发明实施例带来了以下有益效果：本发明实施例提供的一种轻量录播方法，根据目标对象的动作，控制摄像头自动调整教具及拍摄的方向，使用一台摄像机可以实现对现场视频信息的多焦距、多方向的录制，节省了摄像设备的使用量，减轻后期录播文件的合成及制作难度，降低录播的实施成本，便于优质教育资源的分享和使用。

本公开的其他特征和优点将在随后的说明书中阐述，或者，部分特征和优点可以从说明书推知或毫无疑义地确定，或者通过实施本公开的上述技术即可得知。

为使本公开的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的轻量录播方法流程框图；

图2为本发明实施例提供的一种轻量录播方法流程图；

图3为本发明实施例提供的轻量录播系统结构框图；

图4为本发明实施例提供的轻量录播装置结构框图；

图5为本发明实施例提供的另一种轻量录播装置结构框图；

图6为本发明实施例提供的电子设备结构框图。

图标：

31-摄像头；32-显示屏；33-内置处理器；34-麦克风；41-采集模块；42-识别模块；43-匹配模块；44-调整模块；45-文件生成模块；51-翻译模块；61-存储器；62-处理器。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

目前，知识共享、资源共享已成为人们的重点关注内容之一。许多优质的教育资源，可以通过录播形成录播文件，为更多人学习和共享。然而标准的录播教室通常造价昂贵，需要配备多台摄影录音设备，采集到录播的内容之后，需要对数据进行剪辑合成，用于合成的设备往往造价较高，每个学校通常只有少数的示范课可以在录播教室上，不利于录播的大范围实施，不利于优质教育资源的分享与利。基于此，本发明实施例提供的一种轻量录播方法、装置及系统，可以使用一台摄像机可以实现对现场视频信息的多焦距、多方向的录制，节省了摄像设备的使用量，减轻后期录播文件的合成及制作难度，降低录播的实施成本，便于优质教育资源的分享和使用，另外，还能够即时生成与音频信息同步的文字信息，为更多录播信息的使用者提供便利。

为便于对本实施例进行理解，首先对本发明实施例所公开的一种轻量录播方法进行详细介绍。

实施例1

本发明实施例1提供了一种轻量录播方法，结合图1所示的轻量录播方法流程框图，该方法包括：

步骤S102，获取现场的第一视频信息、音频信息及屏幕显示信息；

现场可以是教室，也可以是其他适合录播的场地。参见图2所示的一种轻量录播方法流程图，通过设置在现场的视频设备，比如教室后部的单一摄像头获取获取现场的第一视频信息；通过音频设备，比如麦克风获取现场的音频信息；通过软件抓取屏幕显示信息，例如，抓取桌面可以用windows系统自带的函数GDI+，或者用软件框架QT带的函数，屏幕显示信息即为教师的电子讲义信息。

步骤S104，识别第一视频信息中目标对象的动作。

第一视频信息采集现场的录播内容。目标对象是指录播内容中的人物，比如教师。教师在录播课程的过程中会做出不同的动作，比如书写板书、打手势或者其他肢体动作。

步骤S106，将动作与动作库中的动作数据进行对比，确定与动作匹配的目标动作。

预先生成一个动作库，动作库包括多种可能的及常用的动作数据，将步骤S104中识别到的动作与动作库中的动作数据进行对比，确定动作库中与识别到的动作相匹配的动作数据为目标动作。例如，教师本来面向学生讲课，然后在黑板书写板书，识别教师写板书的动作，并将写板书的动作与动作库中的动作数据进行对比与匹配，确定动作库中的写板书这一动作数据为目标动作。

步骤S108，根据目标动作调整摄像头的焦距及方向，以生成缩放或多视角的第二视频信息。

例如，确定的目标动作为写板书时，根据预存的写板书对应的指令，控制摄像头调整焦距，将教书书写的板书内容放大，生成放大的板书内容的视频特写即第二视频信息；当确定的目标动作为面向学生讲课时，根据预存的面向学生讲课对应的指令，控制摄像头调整焦距，自动聚焦到教师特写，生成内容以教师特写为主的第二视频信息；当确定的目标动作为移动时，根据预存的移动的指令，控制摄像头跟随教师的移动而转动，以保证教师不出镜，生成多视角的第二视频信息，从而保证录播的效果。

根据目标动作控制摄像头的焦距及拍摄的方向，使用一台摄像装置实现多台摄像装置的功能，不仅降低了摄像装置的资金成本，还降低了后期剪辑合成的设备成本和时间成本，使录播的实施可以更加广泛，方便更多优质教育资源的传播与共享。

步骤S110，对第一视频信息、第二视频信息、音频信息及屏幕显示信息进行同步处理，生成录播文件。

对视频信息、音频信息及屏幕显示信息分3个线程进行同步处理，减少因硬件等其他原因导致的3个线程间产生的时间差而导致的不同步的情况。

本发明实施例提供的一种轻量录播方法，根据目标对象的动作，控制摄像头自动调整教具及拍摄的方向，使用一台摄像机可以实现对现场视频信息的多焦距、多方向的录制，节省了摄像设备的使用量，减轻后期录播文件的合成及制作难度，降低录播的实施成本，便于优质教育资源的分享和使用。

为了便于用户的操作，设置自动开启或停止采集现场信息的步骤，具体执行以下步骤：

(1)获取预存储的时间列表。

预存的时间列表可以是课程表。

(2)根据时间列表启动或停止采集现场的第一视频信息、音频信息及屏幕显示信息。

获取预存的时间列表的时间信息，包括开始上课的时间和下课的时间，根据课程开始的时间控制视频设备、音频设备及屏幕信息抓取软件开始工作，根据课程结束的时间控制视频设备、音频设备及屏幕信息抓取软件停止采集相应信息。

在获取到第一视频信息、第二视频信息、音频信息及屏幕显示信息之后，需要进行同步处理，以保证用户接收到的录播文件效果，具体的处理方法为：

对第一视频信息、第二视频信息、音频信息及屏幕显示信息分别进行编码、封装和存储，以生成录播文件，录播文件包括：录播视频文件、录播音频文件及录播讲义文件。

使用ffmpeg(Fast Forward Mpeg)等语言开发包等对采集到的视频信息或音频信息等进行编码，编码方式可以使用AAC(Advanced Audio Coding，高级音频编码)等，对编码后的文件进行封装和存储以生成录播文件。存储包括本地存储和云端存储，方便对录播文件的使用和分享。参见图2所示的一种轻量录播方法流程图，对视频信息、音频信息及屏幕显示信息分别生成录播视频文件、录播音频文件及录播讲义文件，其中，录播视频文件包括教室全景视频等第一视频信息和教师特写视频等第二视频信息。

为了便于用户使用，对录播文件进行优化的一种方法包括以下的执行步骤：

(1)将音频信息转化成文字信息。

将采集到的音频信息转化为文字信息，用于生成录播文字文件。

(2)根据文字信息生成录播文字文件。

对文字信息进行编码、封装和存储，得到录播文字文件，录播文字文件，并添加到录播文件的列表中。参见图2所示的一种轻量录播方法流程图，对最终生成的录播文件进行三分屏播放，以保证录播视频文件、录播视频文件、录播文字文件及录播讲义文件的同步播放。

本发明实施例提供的一种轻量录播方法、装置及系统，利用教室的电子大屏，和一个安装在教室中后部的摄像头，完成教师讲课视频、教师语音的录制。录播后台能够实时整合视频、语音和课程讲义，并且将将教师语音转写为文字，形成同步讲义。从单个摄像头中提取全景视频和特写镜头视频，实现轻量级录播，不需要额外的改造教室，即可完成教室录播系统。

实施例2

本发明实施例2提供了一种轻量录播系统，参见图3所示的轻量录播系统结构框图，该系统包括：

摄像头31、麦克风34和显示屏32；显示屏32设有内置处理器33，用于采集屏幕显示信息；摄像头31和内置处理器33通信连接，用于采集视频信息；麦克风34和内置处理器33通信连接，用于采集音频信息；内置处理器33用于执行实施例1中的任一种方法。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

实施例3

本发明实施例3提供了一种轻量录播装置，参见图4所示的轻量录播装置结构框图，该装置包括：

采集模块41，用于获取现场的第一视频信息、音频信息及屏幕显示信息；识别模块42，用于识别第一视频信息中目标对象的动作；匹配模块43，用于将动作与动作库中的动作数据进行对比，确定与动作匹配的目标动作；调整模块44，用于根据目标动作调整摄像头的焦距及方向，以生成缩放或多视角的第二视频信息；文件生成模块45，用于对第一视频信息、第二视频信息、音频信息及屏幕显示信息进行同步处理，生成录播文件。

采集模块41，还用于：获取预存的储时间列表；根据时间列表启动或停止采集现场的第一视频信息、音频信息及屏幕显示信息。

文件生成模块45，还用于：对第一视频信息、第二视频信息、音频信息及屏幕显示信息分别进行编码、封装和存储，以生成录播文件，录播文件包括：录播视频文件、录播音频文件及录播讲义文件。

参见图5所示的另一种轻量录播装置结构框图，该装置还包括翻译模块51，翻译模块51用于：将音频信息转化成文字信息；根据文字信息生成录播文字文件。

本发明实施例所提供的装置，其实现原理及产生的技术效果和前述方法实施例相同，为简要描述，装置实施例部分未提及之处，可参考前述方法实施例中相应内容。

实施例4

本发明实施例4提供了一种电子设备，参见图6所示的电子设备结构框图，该设备包括存储器61、处理器62，存储器61中存储有可在处理器62上运行的计算机程序，处理器62执行计算机程序时实现上述实施例1中的任一种方法。

本发明实施例提供的电子设备，与上述实施例提供的方法具有相同的技术特征，所以也能解决相同的技术问题，达到相同的技术效果。

第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性，因此不能理解为对本发明的限制。。

最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种轻量录播方法，其特征在于，包括：

获取现场的第一视频信息、音频信息及屏幕显示信息；

识别所述第一视频信息中目标对象的动作；

将所述动作与动作库中的动作数据进行对比，确定与所述动作匹配的目标动作；

根据所述目标动作调整摄像头的焦距及方向，以生成缩放或多视角的第二视频信息；

对所述第一视频信息、所述第二视频信息、所述音频信息及所述屏幕显示信息进行同步处理，生成录播文件。

2.根据权利要求1所述的轻量录播方法，其特征在于，所述获取现场的第一视频信息、音频信息及屏幕显示信息的步骤，包括：

获取预存储的时间列表；

根据所述时间列表启动或停止采集现场的第一视频信息、音频信息及屏幕显示信息。

3.根据权利要求1或2所述的轻量录播方法，其特征在于，所述对所述第一视频信息、所述第二视频信息、所述音频信息及所述屏幕显示信息进行同步处理，生成录播文件的步骤，包括：

对所述第一视频信息、所述第二视频信息、所述音频信息及所述屏幕显示信息分别进行编码、封装和存储，以生成录播文件，所述录播文件包括：录播视频文件、录播音频文件及录播讲义文件。

4.根据权利要求1所述的轻量录播方法，其特征在于，所述方法还包括：

将所述音频信息转化成文字信息；

根据所述文字信息生成录播文字文件。

5.一种轻量录播系统，其特征在于，包括：摄像头、麦克风和显示屏；

所述显示屏设有内置处理器，用于采集屏幕显示信息；

所述摄像头和所述内置处理器通信连接，用于采集视频信息；

所述麦克风和所述内置处理器通信连接，用于采集音频信息；

所述内置处理器用于执行权利要求1-4任一项所述的方法。

6.一种轻量录播装置，其特征在于，包括：

采集模块，用于获取现场的第一视频信息、音频信息及屏幕显示信息；

识别模块，用于识别所述第一视频信息中目标对象的动作；

匹配模块，用于将所述动作与动作库中的动作数据进行对比，确定与所述动作匹配的目标动作；

调整模块，用于根据所述目标动作调整摄像头的焦距及方向，以生成缩放或多视角的第二视频信息；

文件生成模块，用于对所述第一视频信息、所述第二视频信息、所述音频信息及所述屏幕显示信息进行同步处理，生成录播文件。

7.根据权利要求6所述的轻量录播装置，其特征在于，所述采集模块，还用于：

获取预存的储时间列表；

根据所述时间列表启动或停止采集现场的第一视频信息、音频信息及屏幕显示信息。

8.根据权利要求6所述的轻量录播装置，其特征在于，所述文件生成模块，还用于：

对所述第一视频信息、所述第二视频信息、所述音频信息及所述屏幕显示信息分别进行编码、封装和存储，以生成录播文件，所述录播文件包括：录播视频文件、录播音频文件及录播讲义文件。

9.根据权利要求6所述的轻量录播装置，其特征在于，还包括翻译模块，所述翻译模块用于：

将所述音频信息转化成文字信息；

根据所述文字信息生成录播文字文件。

10.一种电子设备，包括存储器、处理器，所述存储器中存储有可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现上述权利要求1至4任一项所述的方法的步骤。