CN114095747B - 直播互动系统和方法 - Google Patents

直播互动系统和方法 Download PDF

Info

Publication number
CN114095747B
CN114095747B CN202111428369.9A CN202111428369A CN114095747B CN 114095747 B CN114095747 B CN 114095747B CN 202111428369 A CN202111428369 A CN 202111428369A CN 114095747 B CN114095747 B CN 114095747B
Authority
CN
China
Prior art keywords
video
current scene
current
type
remote
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111428369.9A
Other languages
English (en)
Other versions
CN114095747A (zh
Inventor
王珂晟
黄劲
黄钢
许巧龄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oook Beijing Education Technology Co ltd
Original Assignee
Oook Beijing Education Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oook Beijing Education Technology Co ltd filed Critical Oook Beijing Education Technology Co ltd
Priority to CN202111428369.9A priority Critical patent/CN114095747B/zh
Publication of CN114095747A publication Critical patent/CN114095747A/zh
Application granted granted Critical
Publication of CN114095747B publication Critical patent/CN114095747B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开提供了一种直播互动系统和方法，本公开所述系统中的服务端接收远程授课室中的第一视频采集终端采集的第一视频，以及远程实验室中的第二视频采集终端采集的第二视频，基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，通过播放参数使当前情景视频显示在多场景黑板的显示区域中。从而根据课堂场景突出显示相关视频，使听课学生能够通过当前情景视频清晰地了解授课过程和授课教师的授课意图。提高了授课的互动性，以及学生的听课体验。

Description

直播互动系统和方法
技术领域
本公开涉及信息处理领域，具体而言，涉及一种直播互动系统和方法。
背景技术
随着计算机技术的发展，基于互联网的网络教学开始在兴起。
网络教学，是利用网络作为教师和学生的通讯工具进行的以讲授为主的教学模式。网络教学包括直播教学和录播教学。直播教学与传统教学模式一样，学生可在同一时间聆听教师讲课，师生间有一些简单的交流。录播教学利用互联网的服务，将教师事先录制的课程存放在服务端上，学生通过可在任意时间点播和观看该课程达到学习的目的。录播教学的特点在于教学活动可以全天24小时进行，每个学生都可以根据自己的实际情况确定学习的时间、内容和进度，可随时在网上下载学习内容。在网络教学中每个课程可能拥有大量的听课学生。
当前有一种教学方式，听课学生集中在一个教室中，通过多场景黑板中的显示屏参与远程授课教师的教学活动。在多场景黑板中只能显示授课教师的授课视频，例如，在多场景黑板中显示授课教师端坐在摄像头前的固定位置上，全程通过语言进行授课；在必要时，在视频中插入课程文字的演示图像。但是，这种教学方式缺少了现场教学的师生互动，增加了教学活动的距离感，常常导致授课过程枯燥乏味，学生的听课体验不理想。
因此，本公开提供了一种直播互动系统，以解决上述技术问题之一。
发明内容
本公开的目的在于提供一种直播互动系统、方法、介质和电子设备，能够解决上述提到的至少一个技术问题。具体方案如下：
根据本公开的具体实施方式，第一方面，本公开提供一种直播互动系统，包括：
第一视频采集终端，与服务端电通讯，设置于远程授课室中，配置为采集所述远程授课室的全景视频；
第二视频采集终端，与所述服务端电通讯，设置于远程实验室中，配置为采集所述远程实验室的全景视频；
第三视频采集终端，与所述服务端电通讯，设置于远程教室中，配置为采集所述远程教室的全景视频；
第四视频采集终端，与所述服务端电通讯，设置于所述远程教室中，配置为采集所述远程教室中发言学生的特写视频；
第五视频采集终端，与所述服务端电通讯，且与所述第二视频采集终端配套设置于所述远程实验室中，配置为采集所述远程实验室中授课教师演示实验的特写视频；
服务端，设置于数据中心，配置为接收远程授课室中的第一视频采集终端采集的第一视频，以及远程实验室中的第二视频采集终端采集的第二视频，并基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，其中，所述第一视频为所述远程授课室的全景视频，所述第二视频为所述远程实验室的全景视频，所述当前情景视频由所述第一视频采集终端至第五视频采集终端之一采集的；
多场景黑板，与所述服务端电通讯，且与所述第三视频采集终端和所述第四视频采集终端配套设置于所述远程教室中，所述多场景黑板包括一个显示模块；
所述多场景黑板，配置为：
获取所述服务端传送的所述播放参数和所述至少一个当前情景视频；
基于所述播放参数确定所述显示模块中所述当前情景视频的显示区；
将所述当前情景视频显示在所述显示模块的显示区中。
根据本公开的具体实施方式，第二方面，本公开提供一种直播互动方法，应用于如第一方面中任一项所述系统的服务端，包括：
接收远程授课室中的第一视频采集终端采集的第一视频，以及远程实验室中的第二视频采集终端采集的第二视频，其中，所述第一视频为所述远程授课室的全景视频，所述第二视频为所述远程实验室的全景视频；
基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，其中，所述当前情景视频由所述第一视频采集终端至第五视频采集终端之一采集的；
将所述当前情景视频以及所述当前情景视频的播放参数传送至多场景黑板。
根据本公开的具体实施方式，第三方面，本公开提供一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如上任一项所述直播互动方法。
根据本公开的具体实施方式，第四方面，本公开提供一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如上任一项所述直播互动方法。
本公开实施例的上述方案与现有技术相比，至少具有以下有益效果：
本公开提供了一种直播互动系统和方法，本公开所述系统中的服务端接收远程授课室中的第一视频采集终端采集的第一视频，以及远程实验室中的第二视频采集终端采集的第二视频，基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，通过播放参数使当前情景视频显示在多场景黑板的显示区域中。从而根据课堂场景突出显示相关视频，使听课学生能够通过当前情景视频清晰地了解授课过程和授课教师的授课意图。提高了授课的互动性，以及学生的听课体验。
附图说明
图1示出了根据本公开实施例的直播互动系统的组成示意图；
图2示出了根据本公开实施例的多场景黑板的一显示示意图；
图3示出了根据本公开实施例的多场景黑板的又一显示示意图；
图4示出了根据本公开实施例的多场景黑板的又一显示示意图；
图5示出了根据本公开实施例的直播互动方法的流程图；
图6示出了根据本公开实施例提供的一种电子设备连接结构示意图；
附图标记说明
11-第一视频采集终端，12-第二视频采集终端，13-第三视频采集终端，14-第四视频采集终端，15-第五视频采集终端，16-多场景黑板的显示模块，17-服务端，18-演示终端；
161-第一区域，162-第二区域，163-第三区域，164-第四区域，165-第五区域，166-第六区域，167-第六视频，168-当前主视频。
具体实施方式
为了使本公开的目的、技术方案和优点更加清楚，下面将结合附图对本公开作进一步地详细描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本公开保护的范围。
在本公开实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本公开。在本公开实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义，“多种”一般包含至少两种。
应当理解，本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
应当理解，尽管在本公开实施例中可能采用术语第一、第二、第三等来描述，但这些描述不应限于这些术语。这些术语仅用来将描述区分开。例如，在不脱离本公开实施例范围的情况下，第一也可以被称为第二，类似地，第二也可以被称为第一。
取决于语境，如在此所使用的词语“如果”、“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地，取决于语境，短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的商品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种商品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的商品或者装置中还存在另外的相同要素。
特别需要说明的是，在说明书中存在的符号和/或数字，如果在附图说明中未被标记的，均不是附图标记。
下面结合附图详细说明本公开的可选实施例。
实施例1
对本公开提供的实施例，即一种直播互动系统的实施例。
下面对本公开实施例进行详细说明。
如图1所示，本公开实施例提供了一种直播互动系统，包括：第一视频采集终端11、第二视频采集终端12、第三视频采集终端13、第四视频采集终端14、第五视频采集终端15、多场景黑板和服务端17。
本公开实施例所述直播互动系统被分别设置于远程授课室、远程实验室、远程教室和数据中心。
远程授课室主要是授课教师讲课的场所。
所述第一视频采集终端11，与所述服务端17电通讯，设置于远程授课室中，用于采集所述远程授课室的全景视频。例如，如果授课教师在远程授课室讲课时，则该全景视频中包括授课教师的全身影像，为了提高该全景视频的显示效果，可以采用抠图的方式，将授课教师的全身影像从该全景视频中抠出，然后为全身影像配置一个虚拟背景，从而提高该全景视频显示效果。
远程实验室主要是授课教师演示实验过程的场所。为了方便授课教师讲课和演示实验过程的需要，可以使远程实验室紧邻远程授课室。例如，远程实验室与远程授课室仅仅是一个空间划分，而实际上将远程实验室和远程授课室设置在同一个房间内。
所述第二视频采集终端12，与所述服务端17电通讯，设置于远程实验室中，用于采集所述远程实验室的全景视频。例如，如果授课教师演示实验时，所述远程实验室的全景视频包括远程实验室中授课教师的全身影像以及所有设备的影像。
而所述第五视频采集终端15，与所述服务端17电通讯，且与所述第二视频采集终端12配套设置于所述远程实验室中，用于采集所述远程实验室中所述授课教师演示实验的特写视频。例如，如果授课教师演示实验时，所述授课教师演示实验的特写视频包括授课教师的局部影像，比如，操作的手部影像，以及实验现象的影像，比如，显示数据的影像、物理变化的影像、化学变化的影像。
远程教室是学生集中听课的场所。
所述第三视频采集终端13，与所述服务端17电通讯，设置于远程教室中，用于采集所述远程教室的全景视频。例如，所述远程教室的全景视频包括远程教室中所有听课学生的听课影像以及远程教室内的教具。
而第四视频采集终端14，与所述服务端17电通讯，设置于所述远程教室中，用于采集所述远程教室中发言学生的特写视频。例如，如果有学生发言时，该特写视频记录发言学生的上半身影像。
服务端17，设置于数据中心，配置为接收远程授课室中的第一视频采集终端11采集的第一视频，以及远程实验室中的第二视频采集终端12采集的第二视频，并基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数。
其中，所述第一视频为所述远程授课室的全景视频，所述第二视频为所述远程实验室的全景视频，所述当前情景视频由所述第一视频采集终端11至第五视频采集终端15之一采集的。
所述当前情景类型用于对当前教学过程的进展进行场景分类。包括：第一静音类型、实验类型、问答类型和讲课类型。
第一静音类型表示授课教师没有讲课；实验类型表示授课教师正在做实验；问答类型表示授课教师与听课学生正在进行问答互动；讲课类型表示授课教师正在讲课。
本公开实施例通过当前情景类型获取与其相关的至少一个当前情景视频。所述当前情景视频也就是服务端17确定的用于在多场景黑板显示的视频，所述当前情景视频随着讲课过程的推进而发生变化。例如，在一堂教学课上，当授课教师利用演示文稿进行授课时，只有一个当前情景视频，即所述远程授课室的全景视频；当该教学课进展到授课教师进行实验演示阶段时，有两个当前情景视频，一个是远程实验室中所述授课教师演示实验的特写视频，一个是远程实验室的全景视频。
所述播放参数用于限定当前情景视频在多场景黑板中的显示区。每个当前情景视频均具有一个播放参数。服务端17利用当前情景视频构造一个教学的视频场景，通过播放参数在多场景黑板表现出该视频场景。所述播放参数可以是在多场景黑板中显示区的像素位置，也可以是在多场景黑板上的显示比例，也可以是多场景黑板中预设显示区的标识信息，本公开实施例不作限制。
多场景黑板，与所述服务端17电通讯，且与所述第三视频采集终端13和所述第四视频采集终端14配套设置于所述远程教室中。所述多场景黑板包括一个显示模块16，可以理解为，所述多场景黑板接收的所有当前情景视频均显示在该显示模块16上。
所述多场景黑板，配置为：
获取所述服务端17传送的所述播放参数和所述至少一个当前情景视频；
基于所述播放参数确定所述显示模块16中所述当前情景视频的显示区；
将所述当前情景视频显示在所述显示模块16的显示区中。
在远程教室中配套设置了第三视频采集终端13、第四视频采集终端14和多场景黑板。为了提高远程教室中听课学生的听课体验，显示模块16根据当前授课过程分别显示不同的视频，使不同空间的人物影像同时显示在同一个显示模块16中，以提高教学视觉的互动性，提高学生的听课体验。
进一步地，所述服务端17配置为所述基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
对所述第一视频的视频图像和所述第二视频的视频图像进行所述授课教师的人像识别，确定包括所述授课教师影像的所述第一视频或所述第二视频为当前主视频168；
基于所述当前主视频168获取当前的多个第一音频特征信息；
对所述多个第一音频特征信息进行授课情景的类型分析，获取当前情景类型；
响应于所述当前情景类型的触发，获取与所述当前情景类型相关的所述至少一个当前情景视频以及所述当前情景视频的播放参数。
由于只有一个授课教师在进行授课，且授课教师在授课过程中的活动空间被局限在远程授课室和远程实验室之一的场所中，因此，授课教师的影像，要么出现在远程授课室的第一视频中，要么出现在远程实验室的第二视频中。
本公开实施例所述确定包括所述授课教师影像的所述第一视频或所述第二视频为当前主视频168，可以理解为，对于第一视频和第二视频来说，只要其中一个视频出现授课教师的影像，就将出现授课教师的影像的视频确定为当前主视频168。当前主视频168用于分析当前授课情景，以便能够从多个不同来源的视频中找到适合多角度显示教学进程的视频。
在直播过程中采集的视频包括影像和音频。所述第一音频特征信息是指当前主视频168中当前音频中的特征信息。例如，如果当前音频中包括授课教师的讲课信息，则在当前音频中包括课程中的多个关键信息，比如，课程中的专有名词，讲课的关键信息也就是音频特征信息；如果当前音频中包括授课教师的实验信息，则在当前音频中包括实验的多个关键信息，比如设备名称，实验的关键信息也就是音频特征信息。
所述对所述多个第一音频特征信息进行授课情景的类型分析，获取当前情景类型，可以将多个第一音频特征信息输入已训练的授课情景识别模型，由授课情景识别模型识别后输出当前情景类型。
授课情景识别模型可以基于授课的多组历史样本(每组历史样本包括多个历史音频特征信息)作为训练样本进行训练。关于根据授课情景识别模型对多个第一音频特征信息进行授课情景的类型分析的过程本实施例不做详述，可参照现有技术中各种实现方式实施。
本公开实施例所述当前情景类型包括：第一静音类型、实验类型、问答类型和讲课类型。下面根据一些具体实施例对各种当前情景类型的应用进行具体说明。
在一些具体实施例中，所述服务端17配置为所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
响应于所述当前情景类型为第一静音类型的触发，接收远程教室中的第三视频采集终端13采集的第三视频，其中，所述第三视频为所述远程教室的全景视频；
基于所述第三视频获取当前的多个第二音频特征信息；
对所述多个第二音频特征信息进行教室情景的类型分析，获取当前教室类型；
响应于所述当前教室类型为第二静音类型的触发，确定所述第三视频为当前情景视频以及所述第三视频的第一播放参数，所述第一播放参数用于将所述第三视频显示于所述显示模块16的中间区域；
响应于所述当前教室类型为发言类型的触发，指示所述远程教室中的第四视频采集终端14采集第四视频，并接收所述第四视频，确定所述第三视频和所述第四视频均为所述当前情景视频。
其中，所述第四视频为所述远程教室中发言学生的特写视频；
基于所述第三视频和所述第四视频的预设第一关系规则，确定所述第三视频的第二播放参数和所述第四视频的第三播放参数。
其中，所述第三播放参数用于将所述第四视频显示于所述显示模块16中间的第一区域161，所述第二播放参数用于将所述第三视频显示于所述第一区域161旁的第二区域162，如图2所示。
所述第一静音类型，也就是在当前主视频168的音频中出现静音信息(即在预设时间内音频数据低于预设静音阈值)，也就是授课教师长时间没有发言。
为了避免偶发事件(比如，咳嗽声)引发的音频数据突变，干扰对第一静音类型的识别，可以在处理音频数据前对音频数据进行数据过滤，清除其中的干扰数据。
当当前情景类型为第一静音类型时，说明授课教师当前并没有对课程进行讲解。本公开实施例将多场景黑板的显示重点集中至远程教室。通过第三视频获取当前的多个第二音频特征信息，并对所述多个第二音频特征信息进行教室情景的类型分析，获取当前教室类型。
所述第二音频特征信息是指第三视频中当前音频中的特征信息。例如，当前音频中包括听课学生的发言信息或远程教室中的静音信息(即在预设时间内音频数据低于预设静音阈值)。
所述对所述多个第二音频特征信息进行教室情景的类型分析，获取当前教室类型，可以将多个第二音频特征信息输入已训练的教室情景识别模型，由教室情景识别模型识别后输出当前教室类型。
教室情景识别模型可以基于教室的多组历史样本(每组历史样本包括多个历史音频特征信息)作为训练样本进行训练。关于根据教室情景识别模型对多个第二音频特征信息进行教室情景的类型分析的过程本实施例不做详述，可参照现有技术中各种实现方式实施。
当前教室类型包括第二静音类型和发言类型。
第二静音类型表示当前教室中没有说活的学生，因此，响应于所述当前教室类型为第二静音类型的触发，确定所述第三视频为当前情景视频，也就是仅仅在多场景黑板中显示远程教室的全景视频。此时，本公开实施例将第三视频显示于多场景黑板的中间区域，用于提示学生重点关注远程教室的全景视频。
所述显示模块16的中间区域，可以是占据显示模块16的整个显示区，也可以以显示模块16的中点为显示窗口的中点，该显示窗口占据显示模块16的大部分区域。
所述预设第一关系规则是预先设定的所述第三视频与所述第四视频在显示模块16中的显示关系规则。
如果当前教室类型为发言类型，本具体实施例将向远程教室中的第四视频采集终端14发出聚焦发言学生的指示，由第四视频采集终端14对发言学生进行聚焦，以便采集发言学生的特写视频。因此，本具体实施例将发言学生的特写视频和远程教室的全景视频同时传送至多场景黑板，由多场景黑板同步显示在两个显示区上。
所述显示模块16中间的第一区域161是指将显示模块16的中点作为第四视频的第一区域161的中点，该第一区域161可以是占据显示模块16的大部分区域。
所述第二区域162是指将在第一区域161外的其他区域中确定一个区域，用于显示第三视频。第二区域162可以是紧贴第一区域161，也就是两者有部分相同的边；也可以第二区域162与第一区域161之间具有一定间隔。
将第三视频和所述第四视频同时传送至多场景黑板，同时显示发言学生的特写视频和远程教室的全景视频。特别是一个处于中心位置，一个处于侧边位置。不仅提高了中心位置的第四视频的关注度，也兼顾了第三视频所需传达的信息。对于在大的远程教室中上课时，能够使听课学生通过多场景黑板直观的看到发言学生和远程教室的情况。
在另一些具体实施例中，所述服务端17配置为所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
响应于所述当前情景类型为实验类型的触发，指示所述远程实验室中的第五视频采集终端15采集的第五视频，并接收所述第五视频，其中，所述第五视频为所述远程实验室中所述授课教师演示实验的特写视频；
确定所述第二视频和所述第五视频均为所述当前情景视频；
基于所述第二视频和所述第五视频的预设第二关系规则，确定所述第二视频的第四播放参数和所述第五视频的第五播放参数，其中，所述第五播放参数用于将所述第五视频显示于所述显示模块16中间的第三区域163，所述第四播放参数用于将所述第二视频显示于所述第三区域163旁的第四区域164，如图2所示。
所述预设第二关系规则是预先设定的所述第二视频和所述第五视频在显示模块16中的显示关系规则。
所述显示模块16中间的第三区域163是指将显示模块16的中点作为第五视频的第三区域163的中点，该第三区域163可以是占据显示模块16的大部分区域。
所述第四区域164是指将在第三区域163外的其他区域中确定一个区域，用于显示第二视频。第四区域164可以是紧贴第三区域163，也就是两者有部分相同的边；也可以第四区域164与第三区域163之间具有一定间隔。
将第二视频和所述第五视频同时传送至多场景黑板，同时显示远程实验室的全景视频和授课教师演示实验的特写视频。特别是一个处于中心位置，一个处于侧边位置。不仅提高了中心位置的第五视频的关注度，也兼顾了第二视频所需传达的信息。
本具体实施例中，当前情景类型为实验类型，表明授课教师在向听课学生演示实验过程。因此，所述远程实验室中的第五视频采集终端15发出聚焦指示，由第五视频采集终端15采集授课教师演示实验的特写视频。
在另一些具体实施例中，所述服务端17配置为所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
响应于所述当前情景类型为问答类型的触发，指示所述远程教室中的第四视频采集终端14采集第六视频167，并接收所述第六视频167，其中，所述第六视频167为所述远程教室中发言学生的特写视频；
确定所述当前主视频168和所述第六视频167均为所述当前情景视频；
基于所述当前主视频168和所述第六视频167的预设第三关系规则，确定所述第六视频167的第六播放参数和所述当前主视频168的第七播放参数，其中，所述第六播放参数和所述第七播放参数将所述第六视频167和所述当前主视频168分别显示于所述显示模块16的两个相同大小的区域，如图3所示。
所述预设第三关系规则是预先设定的所述第六视频167和所述当前主视频168在显示模块16中的显示关系规则。
所述当前主视频168为第一视频或第二视频。
所述将所述第六视频167和所述当前主视频168分别显示于所述显示模块16的两个相同大小的区域，可以理解为，第六视频167和当前主视频168具有相同的观看价值。例如，如图3所示，将远程授课室的全景视频与远程教室中发言学生的特写视频错落显示于所述显示模块的两个区域，其中，远程授课室的全景视频中包括授课教师的影像，使处于两个不同地方的人物在同一个显示模块16中显示，用于模拟真实的问答场景。
本具体实施例中，当前情景类型为问答类型，表明授课教师与听课学生之间正在进行对话。因此，将远程授课室的全景视频(其中包括授课教师的全身影像)和远程教室中发言学生的特写视频传送至多场景黑板中同步显示在两个显示区上，从而实现在线互动的显示效果，提高学生的听课体验。
在另一些具体实施例中，所述服务端17配置为所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
响应于所述当前情景类型为讲课类型的触发，确定所述第一视频为当前情景视频以及所述第一视频的第八播放参数。
由于第一视频为唯一的当前情景视频，第八播放参数可以使远程授课室的全景视频显示在显示模块16中的任一区域中。
可选的，所述系统还包括演示终端18；
所述演示终端18，与所述第一视频采集终端11配套设置于所述远程授课室中，用于演示授课教师结合授课内容播放的当前演示图片。
例如，演示终端18用于播放演示文稿，所述当前演示图片为演示文稿中当前页的演示图片。
相应地，所述服务端17还配置为：
响应于所述当前情景类型为讲课类型的触发，接收所述演示终端18传送的当前演示图片以及所述当前演示图片的第九播放参数，其中，所述第九播放参数用于将所述当前演示图片显示于所述显示模块16的第五区域165，所述第八播放参数用于将所述第一视频显示于所述第五区域165旁的第六区域166，所述第五区域165紧贴所述显示模块16的任意两个相邻边，且所述第五区域165的高宽比小于1，第六区域166高宽比均大于1；
将所述当前演示图片和所述第九播放参数配合所述第一视频的授课内容传送至所述多场景黑板显示。
通常演示文稿的当前演示图片的高宽比均小于1，因此，满足当前演示图片的播放需求，是当前演示图片能够完整的显示在显示模块16中。例如，如图4所示，显示当前演示图片的第五区域165的高宽比小于1，显示于显示屏的右上角；授课教师的第一视频显示于第五区域165左侧的第六区域166。
本具体实施例将第一视频限制在了第六区域166中。为了实现授课教师与当前演示图片的互动效果，可以将第一视频中的授课教师的全身影像提取出来，显示于第六区域166。使听课学生既能观看到授课教师的全身影像，也能同步观看到授课教师当前讲解的演示图片。用于模拟出真实的授课场景，从而提高听课学生的听课体验。
本公开所述系统中的服务端17接收远程授课室中的第一视频采集终端11采集的第一视频，以及远程实验室中的第二视频采集终端12采集的第二视频，基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，通过播放参数使当前情景视频显示在多场景黑板的显示区域中。从而根据课堂场景突出显示相关视频，使听课学生能够通过当前情景视频清晰地了解授课过程和授课教师的授课意图。提高了授课的互动性，以及学生的听课体验。
实施例2
本公开还提供了与上述实施例承接的方法实施例，基于相同的名称含义的解释与如上实施例相同，具有与如上实施例相同的技术效果，此处不再赘述。
如图5所示，本公开提供一种直播互动方法，应用于如实施例1所述系统的服务端，包括以下步骤：
步骤S501，接收远程授课室中的第一视频采集终端采集的第一视频，以及远程实验室中的第二视频采集终端采集的第二视频，其中，所述第一视频为所述远程授课室的全景视频，所述第二视频为所述远程实验室的全景视频；
步骤S502，基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，其中，所述当前情景视频由所述第一视频采集终端至第五视频采集终端之一采集的；
步骤S503，将所述当前情景视频以及所述当前情景视频的播放参数传送至多场景黑板。
可选的，所述基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，包括以下步骤：
步骤S502-1，对所述第一视频的视频图像和所述第二视频的视频图像进行所述授课教师的人像识别，确定包括所述授课教师影像的所述第一视频或所述第二视频为当前主视频；
步骤S502-2，基于所述当前主视频获取当前的多个第一音频特征信息；
步骤S502-3，对所述多个第一音频特征信息进行授课情景的类型分析，获取当前情景类型；
步骤S502-4，响应于所述当前情景类型的触发，获取与所述当前情景类型相关的所述至少一个当前情景视频以及所述当前情景视频的播放参数。
可选的，所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，包括以下步骤：
步骤S502-4a-1，响应于所述当前情景类型为第一静音类型的触发，接收远程教室中的第三视频采集终端采集的第三视频，其中，所述第三视频为所述远程教室的全景视频；
步骤S502-4a-2，基于所述第三视频获取当前的多个第二音频特征信息；
步骤S502-4a-3，对所述多个第二音频特征信息进行教室情景的类型分析，获取当前教室类型；
步骤S502-4a-4，响应于所述当前教室类型为第二静音类型的触发，确定所述第三视频为当前情景视频以及所述第三视频的第一播放参数，所述第一播放参数用于将所述第三视频显示于所述显示模块的中间区域；
步骤S502-4a-5，响应于所述当前教室类型为发言类型的触发，指示所述远程教室中的第四视频采集终端采集第四视频，并接收所述第四视频，确定所述第三视频和所述第四视频均为所述当前情景视频，其中，所述第四视频为所述远程教室中发言学生的特写视频；
步骤S502-4a-6，基于所述第三视频和所述第四视频的预设第一关系规则，确定所述第三视频的第二播放参数和所述第四视频的第三播放参数，其中，所述第三播放参数用于将所述第四视频显示于所述显示模块中间的第一区域，所述第二播放参数用于将所述第三视频显示于所述第一区域旁的第二区域。
所述服务端配置为所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
步骤S502-4b-1，响应于所述当前情景类型为实验类型的触发，指示所述远程实验室中的第五视频采集终端采集的第五视频，并接收所述第五视频，其中，所述第五视频为所述远程实验室中所述授课教师演示实验的特写视频；
步骤S502-4b-2，确定所述第二视频和所述第五视频均为所述当前情景视频；
步骤S502-4b-3，基于所述第二视频和所述第五视频的预设第二关系规则，确定所述第二视频的第四播放参数和所述第五视频的第五播放参数，其中，所述第五播放参数用于将所述第五视频显示于所述显示模块中间的第三区域，所述第四播放参数用于将所述第二视频显示于所述第三区域旁的第四区域。
所述服务端配置为所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
步骤S502-4c-1，响应于所述当前情景类型为问答类型的触发，指示所述远程教室中的第四视频采集终端采集第六视频，并接收所述第六视频，其中，所述第六视频为所述远程教室中发言学生的特写视频；
步骤S502-4c-2，确定所述当前主视频和所述第六视频均为所述当前情景视频；
步骤S502-4c-3，基于所述当前主视频和所述第六视频的预设第三关系规则，确定所述第六视频的第六播放参数和所述当前主视频的第七播放参数，其中，所述第六播放参数和所述第七播放参数将所述第六视频和所述当前主视频分别显示于所述显示模块的两个相同大小的区域。
所述服务端配置为所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
步骤S502-4d-1，响应于所述当前情景类型为讲课类型的触发，确定所述第一视频为当前情景视频以及所述第一视频的第八播放参数。
所述系统还包括演示终端；
所述演示终端，与所述第一视频采集终端配套设置于所述远程授课室中，用于演示授课教师结合授课内容播放的当前演示图片；
所述方法还包括以下步骤：
步骤S502-4d-2，响应于所述当前情景类型为讲课类型的触发，接收演示终端传送的当前演示图片以及所述当前演示图片的第九播放参数，其中，所述第九播放参数用于将所述当前演示图片显示于所述显示模块的第五区域，所述第八播放参数用于将所述第一视频显示于所述第五区域旁的第六区域，所述第五区域紧贴所述显示模块的任意两个相邻的边，且所述第五区域的高宽比均小于1，第六区域高宽比均大于1；
步骤S502-4d-3，将所述当前演示图片和所述第九播放参数配合所述第一视频的授课内容传送至所述多场景黑板显示。
本公开所述系统中的服务端接收远程授课室中的第一视频采集终端采集的第一视频，以及远程实验室中的第二视频采集终端采集的第二视频，基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，通过播放参数使当前情景视频显示在多场景黑板的显示区域中。从而根据课堂场景突出显示相关视频，使听课学生能够通过当前情景视频清晰地了解授课过程和授课教师的授课意图。提高了授课的互动性，以及学生的听课体验。
实施例3
如图6所示，本实施例提供一种电子设备，所述电子设备，包括：至少一个处理器；以及，与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如上实施例所述的方法步骤。
实施例4
本公开实施例提供了一种非易失性计算机存储介质，所述计算机存储介质存储有计算机可执行指令，该计算机可执行指令可执行如上实施例所述的方法步骤。
实施例5
下面参考图6，其示出了适于用来实现本公开实施例的电子设备的结构示意图。本公开实施例中的终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图6示出的电子设备仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。
如图6所示，电子设备可以包括处理装置(例如中央处理器、图形处理器等)601，其可以根据存储在只读存储器(ROM)602中的程序或者从存储装置608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中，还存储有电子设备操作所需的各种程序和数据。处理装置601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
通常，以下装置可以连接至I/O接口605：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置606；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置；包括例如磁带、硬盘等的存储装置608；以及通信装置609。通信装置609可以允许电子设备与其他设备进行无线或有线通信以交换数据。虽然图6示出了具有各种装置的电子设备，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置609从网络上被下载和安装，或者从存储装置608被安装，或者从ROM 602被安装。在该计算机程序被处理装置601执行时，执行本公开实施例的方法中限定的上述功能。
需要说明的是，本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，单元的名称在某种情况下并不构成对该单元本身的限定。

Claims (8)

1.一种直播互动系统，其特征在于，包括：
第一视频采集终端，与服务端电通讯，设置于远程授课室中，配置为采集所述远程授课室的全景视频；
第二视频采集终端，与所述服务端电通讯，设置于远程实验室中，配置为采集所述远程实验室的全景视频；
第三视频采集终端，与所述服务端电通讯，设置于远程教室中，配置为采集所述远程教室的全景视频；
第四视频采集终端，与所述服务端电通讯，设置于所述远程教室中，配置为采集所述远程教室中发言学生的特写视频；
第五视频采集终端，与所述服务端电通讯，且与所述第二视频采集终端配套设置于所述远程实验室中，配置为采集所述远程实验室中授课教师演示实验的特写视频；
服务端，设置于数据中心，配置为接收远程授课室中的第一视频采集终端采集的第一视频，以及远程实验室中的第二视频采集终端采集的第二视频，并基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，其中，所述第一视频为所述远程授课室的全景视频，所述第二视频为所述远程实验室的全景视频，所述当前情景视频由所述第一视频采集终端至第五视频采集终端之一采集的；
多场景黑板，与所述服务端电通讯，且与所述第三视频采集终端和所述第四视频采集终端配套设置于所述远程教室中，所述多场景黑板包括一个显示模块；
所述多场景黑板，配置为：
获取所述服务端传送的所述播放参数和所述至少一个当前情景视频；
基于所述播放参数确定所述显示模块中所述当前情景视频的显示区；
将所述当前情景视频显示在所述显示模块的显示区中；
所述服务端配置为所述基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
对所述第一视频的视频图像和所述第二视频的视频图像进行所述授课教师的人像识别，确定包括所述授课教师影像的所述第一视频或所述第二视频为当前主视频；
基于所述当前主视频获取当前的多个第一音频特征信息；
对所述多个第一音频特征信息进行授课情景的类型分析，获取当前情景类型；
响应于所述当前情景类型的触发，获取与所述当前情景类型相关的所述至少一个当前情景视频以及所述当前情景视频的播放参数。
2.根据权利要求1所述的系统，其特征在于，所述服务端配置为所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
响应于所述当前情景类型为第一静音类型的触发，接收远程教室中的第三视频采集终端采集的第三视频，其中，所述第三视频为所述远程教室的全景视频；
基于所述第三视频获取当前的多个第二音频特征信息；
对所述多个第二音频特征信息进行教室情景的类型分析，获取当前教室类型；
响应于所述当前教室类型为第二静音类型的触发，确定所述第三视频为当前情景视频以及所述第三视频的第一播放参数，所述第一播放参数用于将所述第三视频显示于所述显示模块的中间区域；
响应于所述当前教室类型为发言类型的触发，指示所述远程教室中的第四视频采集终端采集第四视频，并接收所述第四视频，确定所述第三视频和所述第四视频均为所述当前情景视频，其中，所述第四视频为所述远程教室中发言学生的特写视频；
基于所述第三视频和所述第四视频的预设第一关系规则，确定
所述第三视频的第二播放参数和所述第四视频的第三播放参数，其中，所述第三播放参数用于将所述第四视频显示于所述显示模块中间的第一区域，所述第二播放参数用于将所述第三视频显示于所述第一区域旁的第二区域。
3.根据权利要求1所述的系统，其特征在于，所述服务端配置为所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
响应于所述当前情景类型为实验类型的触发，指示所述远程实验室中的第五视频采集终端采集的第五视频，并接收所述第五视频，其中，所述第五视频为所述远程实验室中所述授课教师演示实验的特写视频；
确定所述第二视频和所述第五视频均为所述当前情景视频；
基于所述第二视频和所述第五视频的预设第二关系规则，确定所述第二视频的第四播放参数和所述第五视频的第五播放参数，其中，所述第五播放参数用于将所述第五视频显示于所述显示模块中间的第三区域，所述第四播放参数用于将所述第二视频显示于所述第三区域旁的第四区域。
4.根据权利要求1所述的系统，其特征在于，所述服务端配置为所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
响应于所述当前情景类型为问答类型的触发，指示所述远程教室中的第四视频采集终端采集第六视频，并接收所述第六视频，其中，所述第六视频为所述远程教室中发言学生的特写视频；
确定所述当前主视频和所述第六视频均为所述当前情景视频；
基于所述当前主视频和所述第六视频的预设第三关系规则，确定所述第六视频的第六播放参数和所述当前主视频的第七播放参数，其中，所述第六播放参数和所述第七播放参数将所述第六视频和所述当前主视频分别显示于所述显示模块的两个相同大小的区域。
5.根据权利要求1所述的系统，其特征在于，所述服务端配置为所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，具体配置为：
响应于所述当前情景类型为讲课类型的触发，确定所述第一视频为当前情景视频以及所述第一视频的第八播放参数。
6.根据权利要求5所述的系统，其特征在于，所述系统还包括演示终端；
所述演示终端，与所述第一视频采集终端配套设置于所述远程授课室中，用于演示授课教师结合授课内容播放的当前演示图片；
所述服务端还配置为：
响应于所述当前情景类型为讲课类型的触发，接收所述演示终端传送的当前演示图片以及所述当前演示图片的第九播放参数，其中，所述第九播放参数用于将所述当前演示图片显示于所述显示模块的第五区域，所述第八播放参数用于将所述第一视频显示于所述第五区域旁的第六区域，所述第五区域紧贴所述显示模块的任意两个相邻的边，且所述第五区域的高宽比小于1，第六区域高宽比均大于1；
将所述当前演示图片和所述第九播放参数配合所述第一视频的授课内容传送至所述多场景黑板显示。
7.一种直播互动方法，其特征在于，应用于如权利要求1所述系统的服务端，包括：
接收远程授课室中的第一视频采集终端采集的第一视频，以及远程实验室中的第二视频采集终端采集的第二视频，其中，所述第一视频为所述远程授课室的全景视频，所述第二视频为所述远程实验室的全景视频；
基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，其中，所述当前情景视频由所述第一视频采集终端至第五视频采集终端之一采集的；
将所述当前情景视频以及所述当前情景视频的播放参数传送至多场景黑板；所述基于所述第一视频和所述第二视频获得当前情景类型和与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，包括：
对所述第一视频的视频图像和所述第二视频的视频图像进行所述授课教师的人像识别，确定包括所述授课教师影像的所述第一视频或所述第二视频为当前主视频；
基于所述当前主视频获取当前的多个第一音频特征信息；
对所述多个第一音频特征信息进行授课情景的类型分析，获取当前情景类型；
响应于所述当前情景类型的触发，获取与所述当前情景类型相关的所述至少一个当前情景视频以及所述当前情景视频的播放参数。
8.根据权利要求7所述的方法，其特征在于，所述响应于所述当前情景类型的触发，获取与所述当前情景类型相关的至少一个当前情景视频以及所述当前情景视频的播放参数，包括：
响应于所述当前情景类型为第一静音类型的触发，接收远程教室中的第三视频采集终端采集的第三视频，其中，所述第三视频为所述远程教室的全景视频；
基于所述第三视频获取当前的多个第二音频特征信息；
对所述多个第二音频特征信息进行教室情景的类型分析，获取当前教室类型；
响应于所述当前教室类型为第二静音类型的触发，确定所述第三视频为当前情景视频以及所述第三视频的第一播放参数，所述第一播放参数用于将所述第三视频显示于所述显示模块的中间区域；
响应于所述当前教室类型为发言类型的触发，指示所述远程教室中的第四视频采集终端采集第四视频，并接收所述第四视频，确定所述第三视频和所述第四视频均为所述当前情景视频；
基于所述第三视频和所述第四视频的预设第一关系规则，确定所述第三视频的第二播放参数和所述第四视频的第三播放参数，其中，所述第四视频为所述远程教室中发言学生的特写视频，所述第三播放参数用于将所述第四视频显示于所述显示模块中间的第一区域，所述第二播放参数用于将所述第三视频显示于所述第一区域旁的第二区域。
CN202111428369.9A 2021-11-29 2021-11-29 直播互动系统和方法 Active CN114095747B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111428369.9A CN114095747B (zh) 2021-11-29 2021-11-29 直播互动系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111428369.9A CN114095747B (zh) 2021-11-29 2021-11-29 直播互动系统和方法

Publications (2)

Publication Number Publication Date
CN114095747A CN114095747A (zh) 2022-02-25
CN114095747B true CN114095747B (zh) 2023-12-05

Family

ID=80305275

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111428369.9A Active CN114095747B (zh) 2021-11-29 2021-11-29 直播互动系统和方法

Country Status (1)

Country Link
CN (1) CN114095747B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116567350B (zh) * 2023-05-19 2024-04-19 上海国威互娱文化科技有限公司 全景视频数据处理方法及系统

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2150046A1 (en) * 2008-07-31 2010-02-03 Fujitsu Limited Video reproducing device and video reproducing method
CN103854485A (zh) * 2012-11-29 2014-06-11 西安博康中瑞船舶设备有限公司 一种基于物联网的新型机动车辆识别系统
CN106327929A (zh) * 2016-08-23 2017-01-11 北京汉博信息技术有限公司 一种用于信息化的可视化数据控制方法及系统
CN107193521A (zh) * 2017-06-08 2017-09-22 西安万像电子科技有限公司 数据处理方法、装置和系统
CN107731032A (zh) * 2017-09-08 2018-02-23 蒋翔东 一种音视频切换方法、装置以及远程多点互动教学系统
CN110933489A (zh) * 2019-11-01 2020-03-27 青岛海尔多媒体有限公司 视频播放控制的方法及装置、视频播放设备
US10950052B1 (en) * 2016-10-14 2021-03-16 Purity LLC Computer implemented display system responsive to a detected mood of a person
JP6851663B1 (ja) * 2020-01-07 2021-03-31 エスプレッソ株式会社 教育補助装置、教育システム、およびプログラム
CN113490002A (zh) * 2021-05-26 2021-10-08 深圳点猫科技有限公司 一种在线教学的交互方法、装置、系统及介质
CN113554904A (zh) * 2021-07-12 2021-10-26 江苏欧帝电子科技有限公司 一种多模式协同教育智能处理方法和系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8928772B2 (en) * 2012-09-21 2015-01-06 Eastman Kodak Company Controlling the sharpness of a digital image

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2150046A1 (en) * 2008-07-31 2010-02-03 Fujitsu Limited Video reproducing device and video reproducing method
CN103854485A (zh) * 2012-11-29 2014-06-11 西安博康中瑞船舶设备有限公司 一种基于物联网的新型机动车辆识别系统
CN106327929A (zh) * 2016-08-23 2017-01-11 北京汉博信息技术有限公司 一种用于信息化的可视化数据控制方法及系统
US10950052B1 (en) * 2016-10-14 2021-03-16 Purity LLC Computer implemented display system responsive to a detected mood of a person
CN107193521A (zh) * 2017-06-08 2017-09-22 西安万像电子科技有限公司 数据处理方法、装置和系统
CN107731032A (zh) * 2017-09-08 2018-02-23 蒋翔东 一种音视频切换方法、装置以及远程多点互动教学系统
CN110933489A (zh) * 2019-11-01 2020-03-27 青岛海尔多媒体有限公司 视频播放控制的方法及装置、视频播放设备
JP6851663B1 (ja) * 2020-01-07 2021-03-31 エスプレッソ株式会社 教育補助装置、教育システム、およびプログラム
CN113490002A (zh) * 2021-05-26 2021-10-08 深圳点猫科技有限公司 一种在线教学的交互方法、装置、系统及介质
CN113554904A (zh) * 2021-07-12 2021-10-26 江苏欧帝电子科技有限公司 一种多模式协同教育智能处理方法和系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Fully Integrating Remote Students into a Traditional Classroom using Live-Streaming and TeachBack;William T. Tarimo et al;《2016 IEEE Frontiers in Education Conference (FIE)》;第1-8页 *

Also Published As

Publication number Publication date
CN114095747A (zh) 2022-02-25

Similar Documents

Publication Publication Date Title
CN109801194B (zh) 一种具有远程评价功能的跟随教学方法
Liu et al. Using augmented‐reality‐based mobile learning material in EFL English composition: An exploratory case study
US20190340944A1 (en) Multimedia Interactive Teaching System and Method
CN113055624B (zh) 课程回放的方法、服务器、客户端及电子设备
CN110675674A (zh) 一种基于大数据分析的在线教育方法及在线教育平台
CN114095747B (zh) 直播互动系统和方法
CN114007098B (zh) 一种用于智能课堂中3d全息视频的生成方法和装置
CN111161592B (zh) 课堂监督方法和督课终端
CN115086570A (zh) 教学视频处理方法、装置、存储介质及电子设备
CN109191958B (zh) 信息的交互方法、装置、终端及存储介质
CN110675669A (zh) 录课方法
CN114120729B (zh) 直播授课系统和方法
JP2013109168A (ja) 電子教科書装置、教室システム、およびプログラム
CN112863277B (zh) 一种直播教学的互动方法、装置、介质和电子设备
US10593366B2 (en) Substitution method and device for replacing a part of a video sequence
CN110933510B (zh) 控制系统中的信息交互方法
CN114038255B (zh) 答疑系统和方法
CN113570227A (zh) 一种在线教育质量评估方法、系统、终端及存储介质
CN111081101A (zh) 一种互动录播系统、方法及装置
US20060286535A1 (en) Educational systems and methods
CN114125537B (zh) 直播教学的讨论方法、装置、介质和电子设备
Prince “Panopto” for Lecture Capture–A First Time User’s Perspective
CN111050068A (zh) 一种音视频教学录播系统及其控制方法
CN111415635B (zh) 一种大屏显示方法、装置、介质和电子设备
CN113891026B (zh) 一种录播视频的标记方法、装置、介质和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant