CN117576604A - 基于图像识别的课堂互动方法和装置 - Google Patents

基于图像识别的课堂互动方法和装置 Download PDF

Info

Publication number
CN117576604A
CN117576604A CN202311462676.8A CN202311462676A CN117576604A CN 117576604 A CN117576604 A CN 117576604A CN 202311462676 A CN202311462676 A CN 202311462676A CN 117576604 A CN117576604 A CN 117576604A
Authority
CN
China
Prior art keywords
classroom
teacher
content
interaction
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311462676.8A
Other languages
English (en)
Inventor
彭灵云
朱可夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Xinghai Information Technology Co ltd
Original Assignee
Guangdong Xinghai Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Xinghai Information Technology Co ltd filed Critical Guangdong Xinghai Information Technology Co ltd
Priority to CN202311462676.8A priority Critical patent/CN117576604A/zh
Publication of CN117576604A publication Critical patent/CN117576604A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G06Q50/205—Education administration or guidance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Economics (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本申请涉及教学设备领域，公开了一种基于图像识别的课堂互动方法，该方法包括：获取教师课堂内容；其中，教师课堂内容包括教师在课堂教学中的视频信息和音频信息；根据教师课堂内容，确定教师课堂互动内容；根据教师课堂互动内容，生成视频课堂互动内容；根据视频课堂互动内容，生成视频课堂内容。根据教师课堂内容，确定教师课堂互动内容，包括：对教师课堂内容进行识别，确定教师课堂讲授内容和教师课堂互动内容；其中，教师课堂讲授内容和教师课堂互动内容均包括教师课堂讲授的知识内容。本申请通过在教师的课堂教学中对课堂互动进行学习，能够在生成式的视频课堂中实现多种形式的课堂互动，提高了课堂的互动效果。

Description

基于图像识别的课堂互动方法和装置
技术领域
本申请涉及教学设备技术领域，更具体地说，是涉及一种基于图像识别的课堂互动方法和装置。
背景技术
在信息化教育时代，视频课堂已经被越来越广泛的应用在教学中，视频课堂是利用网络进行在线视频学习的一种新的教育教学方式。目前视频课堂模式主要包括两种形式，一种形式是录制视频，即通过预先录制的教学视频进行课堂教学；另一种形式是视频直播，即通过将教师讲课的视频和音频实时传输给学生进行课堂教学。但是，录制视频和视频直播的方式均只是单方面的接收教师的授课内容，缺乏学生在课堂中和教师进行互动的环节。
专利CN112837574B(申请号：CN202110054301.2)提供了一种互动课堂系统，包括互动模块，互动模块用于接收讲师终端和学生终端发送的互动请求，并根据互动信息生成互动多媒体数据，并通过多媒体分发模块将互动多媒体数据分发输出至讲师终端和学生终端，互动多媒体数据具体包括弹幕互动数据、私信数据、在线问答数据和在线投票数据。但是，专利CN112837574B中的互动课堂系统只能实现弹幕互动数据、私信数据、在线问答数据和在线投票数据等形式的课堂互动，不能提升互动课堂的互动内容的丰富度，视频课堂的互动效果不佳。
发明内容
本申请的目的是提供一种基于图像识别的课堂互动方法，解决了现有的课堂互动方法只能实现有限形式的课堂互动，视频课堂互动效果不佳的技术问题，达到了能够在视频课堂中实现形式更丰富的课堂互动，提高了视频课堂的互动效果的技术效果。
本申请实施例提供的一种基于图像识别的课堂互动方法，该方法包括：获取教师课堂内容；其中，教师课堂内容包括教师在课堂教学中的视频信息和音频信息；根据教师课堂内容，确定教师课堂互动内容；根据教师课堂互动内容，生成视频课堂互动内容；根据视频课堂互动内容，生成视频课堂内容。
在一种可能的实现方式中，根据教师课堂内容，确定教师课堂互动内容，包括：对教师课堂内容进行识别，确定教师课堂讲授内容和教师课堂互动内容；其中，教师课堂讲授内容和教师课堂互动内容均包括教师课堂讲授的知识内容；根据教师课堂互动内容，生成视频课堂互动内容，包括：根据教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和视频课堂互动内容；根据视频课堂互动内容，生成视频课堂内容，包括：将视频课堂讲授内容和视频课堂互动内容拼接形成视频课堂内容。
在另一种可能的实现方式中，对教师课堂内容进行识别，确定教师课堂讲授内容和教师课堂互动内容，包括：确定教师课堂内容的多个教师课堂互动点和多个教师课堂互动时长；其中，教师课堂互动点对应教师课堂互动内容的开始时刻，一个教师课堂互动点对应一个教师课堂互动时长；识别多个教师课堂互动点之前第一预设时间段内的多个教师课堂互动前专注度；其中，教师课堂互动前专注度表示教师课堂中在教师课堂互动内容开始前所有学生的专注度，一个教师课堂互动点对应一个教师课堂互动前专注度；根据教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和视频课堂互动内容，包括：根据多个教师课堂互动前专注度确定目标教师课堂互动前专注度；其中，目标教师课堂互动前专注度对应多个教师课堂互动前专注度的最小值或者平均值；在视频课堂中的视频课堂专注度小于目标教师课堂互动前专注度时，将当前时刻的下一个视频课堂需要讲授的知识内容确定为视频课堂互动内容；其中，视频课堂专注度表示当前视频课堂中所有学生的专注度。
在另一种可能的实现方式中，根据教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和视频课堂互动内容，还包括：根据当前视频课堂在一天中的时间段对目标教师课堂互动前专注度进行修正；其中，当前视频课堂在一天中的时间段为8：00至11：00或15：00至18：00时，对目标教师课堂互动前专注度增大10％至20％；当前视频课堂在一天中的时间段为11：00至15：00时，对目标教师课堂互动前专注度减小10％至30％。
在另一种可能的实现方式中，根据教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和视频课堂互动内容，还包括：确定每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度；其中，教师课堂互动兴趣度表示每个教师课堂互动内容开始后第二预设时间段内的学生活跃度，教师课堂互动参与度表示每个教师课堂互动内容过程中的学生参与度，教师课堂互动后专注度表示每个教师课堂互动内容结束后第三预设时间段内的学生专注度；根据每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度，确定每个教师课堂互动内容对应的教师课堂互动内容评价值；确定每个视频课堂互动内容的视频课堂互动兴趣度、视频课堂互动参与度和视频课堂互动后专注度；其中，视频课堂互动兴趣度表示每个视频课堂互动内容开始后第二预设时间段内的学生活跃度，视频课堂互动参与度表示每个视频课堂互动内容过程中的学生参与度，视频课堂互动后专注度表示每个视频课堂互动内容结束后第三预设时间段内的学生专注度；根据每个视频课堂互动内容的视频课堂互动兴趣度、视频课堂互动参与度和视频课堂互动后专注度，确定每个视频课堂互动内容对应的视频课堂互动内容评价值；根据教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值的差值，在视频课堂剩余的需要讲授的知识内容中和视频课堂的剩余时长中确定视频课堂讲授内容和视频课堂互动内容。
在另一种可能的实现方式中，根据教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值的差值，在视频课堂需要讲授的知识内容中和视频课堂的剩余时长中确定视频课堂讲授内容和视频课堂互动内容，包括：确定教师课堂内容的所有教师课堂互动内容之间的多个间隔时长，并确定多个间隔时长中的最小间隔时长和最大间隔时长；当教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值的差值大于0时，在视频课堂的剩余时长中每隔最小间隔时长将视频课堂需要讲授的知识内容确定为视频课堂互动内容；当教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值的差值小于或等于0时，在视频课堂的剩余时长中每隔最大间隔时长将视频课堂需要讲授的知识内容确定为视频课堂互动内容。
在另一种可能的实现方式中，根据每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度，确定每个教师课堂互动内容对应的教师课堂互动内容评价值，包括：统计每个教师课堂互动内容的课后反馈值；课后反馈值来自教师和学生对教师课堂内容的评价反馈；将每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度之和乘以每个教师课堂互动内容的课后反馈值，得到每个教师课堂互动内容对应的教师课堂互动内容评价值。
本申请实施例还提供了一种基于图像识别的课堂互动装置，包括用于执行如上任一项所述的方法的单元。
本申请实施例还提供了一种基于图像识别的课堂互动装置，该基于图像识别的课堂互动装置包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，处理器执行计算机程序时实现如上任一项所述的基于图像识别的课堂互动方法。
本申请实施例还提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，该计算机程序被处理器执行时实现如上任一项方法实施例中所述的基于图像识别的课堂互动方法。
本申请实施例提供了一种计算机程序产品，当计算机程序产品在电子设备上运行时，使得电子设备执行时实现可实现上述任一项方法实施例中的步骤。
本申请实施例与现有技术相比存在的有益效果是：
本申请实施例提供了一种基于图像识别的课堂互动方法，该方法包括：获取教师课堂内容；其中，教师课堂内容包括教师在课堂教学中的视频信息和音频信息；根据教师课堂内容，确定教师课堂互动内容；根据教师课堂互动内容，生成视频课堂互动内容；根据视频课堂互动内容，生成视频课堂内容。本申请实施例能够根据教师课堂内容中的教师课堂互动内容确定在视频课堂中需要进行互动的视频课堂互动内容，提高了视频课堂的互动内容的丰富度，提升了视频课堂的互动效果。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例中的一种基于图像识别的课堂互动方法的流程示意图；
图2为本申请实施例中的基于图像识别的课堂互动方法的所应用的课堂的场景示意图；
图3为本申请实施例中的一种基于图像识别的课堂互动方法的另一个流程示意图；
图4为本申请实施例中的一种基于图像识别的课堂互动方法的另一个流程示意图；
图5为本申请实施例中的一种基于图像识别的课堂互动装置的系统结构示意图；
图6为本申请实施例中的另一种基于图像识别的课堂互动装置的系统结构示意图；
图中，200、教室；201、教师；202、学生；210、摄像头；220、拾音设备；230、服务器；300、课堂互动装置；310、处理单元；320、存储单元；330、收发单元；400、课堂互动装置；410、处理器；420、存储器；421、计算机程序。
具体实施方式
为了使本申请所要解决的技术问题、技术方案及有益效果更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
需要说明的是，当一个部件或结构被称为“固定于”或“设置于”另一个部件或结构，它可以直接在另一个部件或结构上或者间接在该另一个部件或结构上。当一个部件或结构被称为是“连接于”另一个部件或结构，它可以是直接连接到另一个部件或结构或间接连接至该另一个部件或结构上。
需要理解的是，术语“长度”、“宽度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本申请和简化描述，而不是指示或暗示所指的装置或一个部件或结构必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本申请的限制。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本申请的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
专利CN112837574B(申请号：CN202110054301.2)提供了一种互动课堂系统，包括互动模块，互动模块用于接收讲师终端和学生终端发送的互动请求，并根据互动信息生成互动多媒体数据，并通过多媒体分发模块将互动多媒体数据分发输出至讲师终端和学生终端，互动多媒体数据具体包括弹幕互动数据、私信数据、在线问答数据和在线投票数据。但是，专利CN112837574B中的互动课堂系统只能实现弹幕互动数据、私信数据、在线问答数据和在线投票数据等形式的课堂互动，不能提升互动课堂的互动内容的丰富度，视频课堂的互动效果不佳。
基于以上原因，本申请实施例提供了一种基于图像识别的课堂互动方法，该方法包括：获取教师课堂内容；其中，教师课堂内容包括教师在课堂教学中的视频信息和音频信息；根据教师课堂内容，确定教师课堂互动内容；根据教师课堂互动内容，生成视频课堂互动内容；根据视频课堂互动内容，生成视频课堂内容。本申请实施例能够根据教师课堂内容中的教师课堂互动内容确定在视频课堂中需要进行互动的视频课堂互动内容，提高了视频课堂的互动内容的丰富度，提升了视频课堂的互动效果。
在一些场景中，本申请实施例的一种基于图像识别的课堂互动方法可以应用于视频课堂中，特别是应用在以人工智能技术为基础的AI视频课堂中，在AI视频课堂中通过AI教师进行视频教学，能够通过在AI视频课堂中提升AI教师和学生的互动效果，提高IA教师的课堂教学效果。
下面结合具体的例子对本申请实施例提供的一种基于图像识别的课堂互动方法进行具体说明。
图1为本申请实施例中的一种基于图像识别的课堂互动方法的流程示意图，如图1所示的，本申请实施例提供的一种基于图像识别的课堂互动方法包括S110至S140，下面对S110至S140进行具体说明。
S110、获取教师课堂内容。其中，教师课堂内容包括教师在课堂教学中的视频信息和音频信息。
图2为本申请实施例中的基于图像识别的课堂互动方法的所应用的课堂的场景示意图，如图2所示的，在教室200中，教师201授课时多个学生202听课，多个学生202在听课时教师201为了提高课堂效果，可以进行多种形式的课堂互动。在教室200中可以安装有一个或多个摄像头210、一个或多个拾音设备220，摄像头210用于拍摄教室200内的图像，通过摄像头210能够采集教室200内的教师201和学生202的图像，拾音设备220能够采集教室200内的教师201和学生202的声音。
在结构上，摄像头210和拾音设备220可以和服务器230连接，摄像头210可以将采集的教室200内的教师201和学生202的图像传输到服务器230，拾音设备220可以将采集的教室200内的教师201和学生202的声音传输到服务器230，进而可以通过服务器230对教师201和学生202的图像和声音进行处理。
示例性地，在采集教师在课堂教学中的视频信息和音频信息时，可以通过摄像头210采集教室200内的教师201和学生202的图像，并通过拾音设备220采集教室200内的教师201和学生202的声音，进而能够对教师课堂内容进行处理，教师课堂内容包括教师201和学生202的图像信息和声音信息。
在工作时，在得到教师课堂内容之后，可以通过服务器230对教师201和学生202的图像信息和声音信息进行处理。
S120、根据教师课堂内容，确定教师课堂互动内容。
如图1所示的，在使用时，可以通过神经网络模型对教师课堂内容进行图像识别，得到教师在课堂中互动的课堂互动内容，课堂互动内容包括教师在课堂互动中的教师和学生的图像信息和视频信息。
示例性地，对课堂互动内容进行识别时，可以通过对教师课堂内容的视频信息进行抽帧识别，得到教师课堂内容的图像信息。
示例性地，对教师在课堂中互动的课堂互动内容进行识别时，可以通过神经网络模型对教师课堂内容进行处理，得到教师课堂互动内容对应的语音。
S130、根据教师课堂互动内容，生成视频课堂互动内容。
如图1所示的，在得到教师在课堂教学中的教师课堂互动内容之后，可以在AI课堂中的AI教师进行教学时，根据教师的教师课堂互动内容对AI教师的课堂互动内容进行指导，得到AI教师进行课堂互动的视频课堂互动内容。
示例性地，在教师的教师课堂互动内容为互动问答时，AI教师主导的视频课堂的视频课堂互动内容也可以为互动问答，互动问答的互动形式和内容可以向教师课堂互动内容学习，得到视频课堂互动内容，进而提高AI视频课堂的互动效果。
S140、根据视频课堂互动内容，生成视频课堂内容。
在得到视频课堂互动内容之后，在实时的视频课堂教学中，可以实时地根据视频课堂互动内容生成视频课堂内容，视频课堂内容可以包括讲授性的视频课堂内容和互动性的视频课堂内容。
上述的实现方式所带来的有益效果在于，通过对教师在课堂教学中的教师课堂互动内容进行识别，进而根据教师的教师课堂互动内容对AI教师的课堂互动内容进行指导，能够在AI课堂中对AI教师进行教学指导，提高了AI教师进行课堂互动的互动效果，提高了视频课堂的课堂效果。
在一些实现方式中，上述的S120中，根据教师课堂内容，确定教师课堂互动内容，包括：S121、对教师课堂内容进行识别，确定教师课堂讲授内容和教师课堂互动内容。其中，教师课堂讲授内容和教师课堂互动内容均包括教师课堂讲授的知识内容。
在工作时，可以通过神经网络模型直接对教师课堂内容进行识别，得到教师课堂讲授内容和教师课堂互动内容，教师课堂讲授内容对应教师课堂中教师在课堂上直接向学生讲授知识的部分，教师课堂互动内容对应教师课堂中教师在课堂上和学生互动的部分。
示例性地，教师课堂讲授内容和教师课堂互动内容均包括教师课堂讲授的知识内容，教师课堂讲授内容和教师课堂互动内容向学生教授知识的形式不同，在教师课堂互动内容中通过互动的方式向学生教授知识内容，在教师课堂讲授内容中教师直接向学生讲授知识内容。
示例性地，通过神经网络模型直接对教师课堂内容进行识别时，可以通过对图像和语音进行识别，得到教师课堂讲授内容和教师课堂互动内容。
在一些实现方式中，上述的S130中，根据教师课堂互动内容，生成视频课堂互动内容，包括：S131、根据教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和视频课堂互动内容。
示例性地，在对教师课堂互动内容进行学习时，可以在视频课堂中将需要讲授的知识内容进行罗列，并从视频课堂中将需要讲授的知识中划分视频课堂讲授内容和视频课堂互动内容，视频课堂讲授内容为视频课堂中直接讲授的知识内容，视频课堂互动内容为视频课堂中通过互动方式呈现的知识内容。
示例性地，在对教师课堂互动内容进行学习时，可以根据教师课堂互动内容的识别结果将视频课堂需要讲授的知识内容中划分为视频课堂讲授内容和视频课堂互动内容，进而可以得到视频课堂讲授内容、视频课堂互动内容。
示例性地，可以根据教师课堂讲授内容和教师课堂互动内容的划分方式，将视频课堂需要讲授的知识内容中划分为视频课堂讲授内容和视频课堂互动内容。
在一些实现方式中，上述的S140中，根据视频课堂互动内容，生成视频课堂内容，包括：S141、将视频课堂讲授内容和视频课堂互动内容拼接形成视频课堂内容。
在实时的视频课堂中，可以对视频课堂讲授内容和视频课堂互动内容进行拼接，进而可以形成视频课堂内容，在视频课堂中，可以将视频课堂内容通过视频呈现在课堂上，实现视频课堂教学。
示例性地，在对视频课堂讲授内容和视频课堂互动内容进行拼接时，可以将对视频课堂讲授内容和视频课堂互动内容按照相互间隔的方式进行拼接，得到视频课堂内容。
如图2所示的，在对视频课堂内容在课堂上进行呈现时，可以通过服务器230将视频课堂内容发送到教室内的视频播放设备上进行播放。
上述的实现方式所带来的有益效果在于，通过将教师课堂内容划分为教师课堂讲授内容和教师课堂互动内容，并在视频课堂中学习教师课堂内容的划分方式，得到和教师课堂内容类似的视频课堂讲授内容和视频课堂互动内容，进而可以通过视频课堂讲授内容和视频课堂互动内容的划分对视频课堂的知识内容进行划分，实现视频课堂和教师课堂相似的效果，提高了视频课堂中AI教师的教学效果。
在一些实现方式中，图3为本申请实施例中的一种基于图像识别的课堂互动方法的另一个流程示意图，如图3所示的，上述的S121、对教师课堂内容进行识别，确定教师课堂讲授内容和教师课堂互动内容，包括S121a至S121b，下面对S121a至S121b进行具体说明。
S121a、确定教师课堂内容的多个教师课堂互动点和多个教师课堂互动时长。其中，教师课堂互动点对应教师课堂互动内容的开始时刻，一个教师课堂互动点对应一个教师课堂互动时长。
在工作时，可以通过神经网络模型识别教师和学生的动作和声音，判断当前课堂上是否正在进行课堂互动，在对教师课堂内容进行识别时，可以得到多个教师课堂互动点和多个教师课堂互动时长，教师课堂互动点对应教师课堂互动内容的开始时刻，从教师课堂互动点开始表示当前课堂正在进行课堂互动，此时课堂进入教师课堂互动内容中。
在对教师课堂进行识别后，一个教师课堂互动点对应一个教师课堂互动时长，从教师课堂互动点开始经过教师课堂互动时长之后教师课堂结束课堂互动，此时教师课堂进入教师课堂讲授内容中。
示例性地，教师课堂互动时长可以为5min、8min或者10min。
S121b、识别多个教师课堂互动点之前第一预设时间段内的多个教师课堂互动前专注度。其中，教师课堂互动前专注度表示教师课堂中在教师课堂互动内容开始前所有学生的专注度，一个教师课堂互动点对应一个教师课堂互动前专注度。
在教师的教学过程中，课堂互动往往用来提高课堂中学生的专注度，为了对教师的教学过程中课堂互动对课堂专注度的提升进行学习，可以通过教师在课堂互动之前的课堂的所有学生的专注度进行识别，进而对视频课堂中的互动环节的设置时间点进行指导。
在工作时，为了对教师课堂中在教师课堂互动内容的设置时机进行识别，可以在教师课堂内容中识别多个教师课堂互动点之前第一预设时间段内的多个教师课堂互动前专注度，教师课堂互动前专注度表示教师课堂中在教师课堂互动内容开始前所有学生的专注度，进而能够对学生在教师课堂互动内容开始前的课堂专注度进行识别，得到教师设置教师课堂互动内容的时机。
示例性地，第一预设时间段可以为1min、3min或5min。
示例性地，对所有学生的专注度进行识别时，可以通过课堂上的图像进行识别得到，例如可以通过对每个学生在一定时间段内的头部的摆动频次进行统计，进而根据学生在一定时间段内的头部的摆动频次对学生的专注度进行度量，进而得到教师课堂上所有学生的专注度。
示例性地，可以对学生当前的姿态数据进行识别，得到学生的专注度。
示例性地，可以对学生的当前姿态数据进行识别，在学生的当前姿态数据满足特定条件时，可以判定学生的专注度较低。
示例性地，可以通过专利CN112055257B(申请号：CN201910486292.7)中的视频课堂的互动方法识别教师课堂上所有学生的专注度，例如可以根据各时刻的各学生当前姿态数据，得到课堂的各个人专注度。
示例性地，识别到所有学生的专注度之后，所有学生的专注度越大，表示所有学生的听课态度越认真，或者表示所有学生中听课效果不佳的人数越少；所有学生的专注度越小，表示所有学生的听课态度越不认真，或者表示所有学生中听课效果不佳的人数越多。
在一些实现方式中，图4为本申请实施例中的一种基于图像识别的课堂互动方法的另一个流程示意图，如图4所示的，上述的S131、根据教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和视频课堂互动内容，包括S131a至S131b，下面对S131a至S131b进行具体说明。
S131a、根据多个教师课堂互动前专注度确定目标教师课堂互动前专注度。其中，目标教师课堂互动前专注度对应多个教师课堂互动前专注度的最小值或者平均值。
在工作时，在视频课堂中设置视频课堂互动环节时，可以在视频课堂的课堂专注度满足目标教师课堂互动前专注度时启动视频课堂互动环节，为了对教师课堂中的教师课堂互动内容的设置时间点进行学习，可以根据多个教师课堂互动前专注度确定目标教师课堂互动前专注度，目标教师课堂互动前专注度表示教师课堂中的教师课堂互动内容的设置特征。
示例性地，目标教师课堂互动前专注度对应多个教师课堂互动前专注度的最小值或者平均值，进而能够在视频课堂中设置时间点和教师课堂互动内容的时间点相类似的视频课堂互动内容。
S131b、在视频课堂中的视频课堂专注度小于目标教师课堂互动前专注度时，将当前时刻的下一个视频课堂需要讲授的知识内容确定为视频课堂互动内容。其中，视频课堂专注度表示当前视频课堂中所有学生的专注度。
在工作时，在启动视频课堂互动内容时，可以根据视频课堂中的视频课堂专注度决定是否启动视频课堂互动内容，进而对视频课堂的学生专注度进行调节，提高视频课堂的学生听课效果。
示例性地，在视频课堂中的视频课堂专注度小于目标教师课堂互动前专注度时，此时可以启动视频课堂互动内容，具体可以通过将当前时刻的下一个视频课堂需要讲授的知识内容确定为视频课堂互动内容。
示例性地，在视频课堂中的视频课堂专注度为0.8、目标教师课堂互动前专注度为1时，此时说明视频课堂中的视频课堂专注度过小，此时可以启动视频课堂互动内容，提高视频课堂中的视频课堂专注度，进而提高学生的课堂参与度。
示例性地，在目标教师课堂互动前专注度为1时，可以理解为对应10名学生上课态度不认真，在视频课堂中的视频课堂专注度为0.8时，可以理解为对应12名学生上课态度不认真，此时说明视频课堂中的视频课堂专注度过小，此时可以启动视频课堂互动内容，提高视频课堂中的视频课堂专注度，进而提高学生的课堂参与度。
示例性地，在将当前时刻的下一个视频课堂需要讲授的知识内容确定为视频课堂互动内容后，可以通过神经网络模型将下一个视频课堂需要讲授的知识内容转换为视频课堂互动内容，随即可以通过视频课堂互动内容在视频课堂中互动，能够提高学生在视频课堂中的听课效果。
在工作时，视频课堂专注度表示当前视频课堂中所有学生的专注度，视频课堂中所有学生的专注度可以通过和教师课堂中所有学生的专注度相同的方法计算确定，此处不再赘述。
上述的实现方式所带来的有益效果在于，通过对教师在课堂互动之前的课堂的所有学生的专注度进行识别，进而对视频课堂中的互动环节的设置时间点进行指导，实现了对教师的教学过程中课堂互动对课堂专注度的提升时间点的学习，提高了视频课堂的专注度提升效果和互动环节设置的科学性，有助于提高课堂教学效率。
在一些实现方式中，上述的S131、根据教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和视频课堂互动内容，还包括：根据当前视频课堂在一天中的时间段对目标教师课堂互动前专注度进行修正。其中，当前视频课堂在一天中的时间段为8：00至11：00或15：00至18：00时，对目标教师课堂互动前专注度增大10％至20％。当前视频课堂在一天中的时间段为11：00至15：00时，对目标教师课堂互动前专注度减小10％至30％。
在使用时，学生在一天中的精神状态和学习状态是波动的，为了进一步地提高设置互动环节的科学性，可以根据一天中学生的精神状态和学习状态对视频课堂的视频课堂互动内容的时间点进行调整。
示例性地，可以根据当前视频课堂在一天中的时间段对目标教师课堂互动前专注度进行修正，进而实现根据学生的精神状态和学习状态对视频课堂的视频课堂互动内容设置的时间点进行调整。
示例性地，可以在当前视频课堂在一天中的时间段为8：00至11：00或15：00至18：00时，对目标教师课堂互动前专注度增大10％至20％，一天中的时间段为8：00至11：00或15：00至18：00为学生的精神状态和学习状态较佳的时间段，在学生的精神状态和学习状态较佳的时间段，所有学生的听课态度更容易回归到良好的听课状态，此时可以适当减少视频课堂的互动环节、增加视频课堂讲授知识的环节，进而提高授课效率，在增大目标教师课堂互动前专注度之后，可以在视频课堂上所有学生的听课态度相比正常状态更差时，所有学生的听课态度容易回归到良好的听课状态，也能够将视频课堂保持在讲授知识环节，此时能够提高视频课堂的讲授效率。
示例性地，在目标教师课堂互动前专注度增大为0.9后，在视频课堂中的视频课堂专注度小于目标教师课堂互动前专注度0.9时，将当前时刻的下一个视频课堂需要讲授的知识内容确定为视频课堂互动内容。
示例性地，在目标教师课堂互动前专注度增大为1.2时，可以理解为对应15名学生上课态度不认真，在视频课堂中的视频课堂专注度为0.9时，可以理解为对应10名学生上课态度不认真，此时说明视频课堂中的视频课堂专注度过小，此时可以启动视频课堂互动内容，提高视频课堂中的视频课堂专注度，进而提高学生的课堂参与度。
示例性地，可以在当前视频课堂在一天中的时间段为11：00至15：00时，对目标教师课堂互动前专注度减小10％至30％，一天中的时间段为11：00至15：00为学生的精神状态和学习状态较差的时间段，在学生的精神状态和学习状态较差的时间段，所有学生的听课态度更不容易回归到良好的听课状态，此时可以适当增多视频课堂的互动环节，进而提高授课效率，在减小目标教师课堂互动前专注度之后，可以在视频课堂上所有学生的听课态度相比正常状态更好时，所有学生的听课态度更不容易回归到良好的听课状态，也能够将视频课堂保持在互动环节传授知识的环节中，此时能够通过互动环节提高视频课堂的学生的专注度。
示例性地，在目标教师课堂互动前专注度减小为0.7后，在视频课堂中的视频课堂专注度小于目标教师课堂互动前专注度0.7时，将当前时刻的下一个视频课堂需要讲授的知识内容确定为视频课堂互动内容。
示例性地，在目标教师课堂互动前专注度减小为0.7时，可以理解为对应8名学生上课态度不认真，在视频课堂中的视频课堂专注度为0.5时，可以理解为对应5名学生上课态度不认真，此时说明视频课堂中的视频课堂专注度过小，此时可以启动视频课堂互动内容，提高视频课堂中的视频课堂专注度，进而提高学生的课堂参与度。
上述的实现方式所带来的有益效果在于，根据一天中学生的精神状态和学习状态对视频课堂的视频课堂互动内容的时间点进行调整，能够兼顾根据学生在一天中学生的精神状态和学习状态对视频课堂互动内容的时间点进行调整，提高了视频课堂的互动环节设置的科学性。
在一些实现方式中，上述的S131、根据教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和视频课堂互动内容，还包括S210至S240，下面对S210至S250进行具体说明。
S210、确定每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度。其中，教师课堂互动兴趣度表示每个教师课堂互动内容开始后第二预设时间段内的学生活跃度，教师课堂互动参与度表示每个教师课堂互动内容过程中的学生参与度，教师课堂互动后专注度表示每个教师课堂互动内容结束后第三预设时间段内的学生专注度。
为了对教师课堂的互动环节的效果进行更科学的度量，可以对每个教师课堂互动内容进行评价，进而提高视频课堂对每个教师课堂互动内容的学习效果，提高视频课堂的互动环节的效果。
示例性地，可以确定每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度，进而通过教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度对每个教师课堂互动内容进行评价。
在工作时，教师课堂互动兴趣度表示每个教师课堂互动内容开始后第二预设时间段内的学生活跃度，通过每个教师课堂互动内容开始后第二预设时间段内的学生活跃度能够表征教师课堂互动内容对学生的调动效果。
示例性地，每个教师课堂互动内容开始后第二预设时间段内的学生活跃度可以通过在第二预设时间段内对每个学生的身体姿态和表情进行检测，得到第二预设时间段内每个学生的调动情况，进而科学合理的对每个学生的在教师课堂互动内容中的调动情况进行评估。
示例性地，第二预设时间段的时长可以为2min。
在工作时，教师课堂互动参与度表示每个教师课堂互动内容过程中的学生参与度，在教师课堂互动内容过程中，学生的参与状态可能产生变化，通过对每个教师课堂互动内容过程中的学生参与度进行度量，能够对互动环节对学生状态进行调动的持续性进行评估。
示例性地，每个教师课堂互动内容的教师课堂互动参与度可以通过在每个教师课堂互动内容过程中对每个学生的身体姿态和表情进行检测，得到每个教师课堂互动内容过程中每个学生的参与情况，进而科学合理的对每个学生在每个教师课堂互动内容过程中的持续参与情况进行评估。
在工作时，教师课堂互动后专注度表示每个教师课堂互动内容结束后第三预设时间段内的学生专注度，在教师课堂互动结束后，如果学生的学习兴趣较差，此时说明教师课堂互动内容的课堂互动效果也不佳，此时通过对每个教师课堂互动内容结束后第三预设时间段内的学生专注度进行检测，能够对每个教师课堂互动内容的课堂效果提升度进行度量。
示例性地，教师课堂互动后专注度可以通过在每个教师课堂互动内容结束后对每个学生的身体姿态和表情进行检测，得到每个教师课堂互动内容结束后对每个学生的专注度进行检测，进而科学合理的对每个学生在教师课堂互动后专注听讲的情况进行评估。
示例性地，第三预设时间段的时长可以为10min。
S220、根据每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度，确定每个教师课堂互动内容对应的教师课堂互动内容评价值。
示例性地，在计算每个教师课堂互动内容对应的教师课堂互动内容评价值时，可以对每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度求平均值，得到每个教师课堂互动内容对应的教师课堂互动内容评价值，进而对每个教师课堂互动内容的互动效果进行整体性的评估。
S230、确定每个视频课堂互动内容的视频课堂互动兴趣度、视频课堂互动参与度和视频课堂互动后专注度。其中，视频课堂互动兴趣度表示每个视频课堂互动内容开始后第二预设时间段内的学生活跃度，视频课堂互动参与度表示每个视频课堂互动内容过程中的学生参与度，视频课堂互动后专注度表示每个视频课堂互动内容结束后第三预设时间段内的学生专注度。
在工作时，和对教师课堂的互动环节的效果进行度量方式类似的，可以通过确定每个视频课堂互动内容的视频课堂互动兴趣度、视频课堂互动参与度和视频课堂互动后专注度，实现对视频课堂互动内容的评估。
示例性地，和S210中类似的，视频课堂互动兴趣度表示每个视频课堂互动内容开始后第二预设时间段内的学生活跃度，视频课堂互动参与度表示每个视频课堂互动内容过程中的学生参与度，视频课堂互动后专注度表示每个视频课堂互动内容结束后第三预设时间段内的学生专注度。
S240、根据每个视频课堂互动内容的视频课堂互动兴趣度、视频课堂互动参与度和视频课堂互动后专注度，确定每个视频课堂互动内容对应的视频课堂互动内容评价值。
示例性地，和S230中类似的，可以根据每个视频课堂互动内容的视频课堂互动兴趣度、视频课堂互动参与度和视频课堂互动后专注度求平均值，确定每个视频课堂互动内容对应的视频课堂互动内容评价值。
S250、根据教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值的差值，在视频课堂剩余的需要讲授的知识内容中和视频课堂的剩余时长中确定视频课堂讲授内容和视频课堂互动内容。
在使用时，教师课堂内容的所有教师课堂互动内容评价值表示一节教师课堂的互动效果的整体评价，因此，可以在视频课堂内容中规划视频课堂互动内容时，可以对视频课堂内容的所有视频课堂互动内容评价值进行计算，使得视频课堂内容的所有视频课堂互动内容评价值趋近于教师课堂内容的所有教师课堂互动内容评价值，进而使得视频课堂的互动效果的整体评价趋近于教师课堂的互动效果的整体评价，实现视频课堂和教师课堂相近的教学效果。
示例性地，可以根据教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值的差值，在视频课堂需要讲授的知识内容中和视频课堂中确定视频课堂讲授内容和视频课堂互动内容，进而科学合理地确定视频课堂中的视频课堂互动内容，提高视频课堂的互动效果。
示例性地，可以在视频课堂需要讲授的知识内容中和视频课堂的剩余时长中确定视频课堂讲授内容和视频课堂互动内容，进而能够实现实时地规划视频课堂的互动环节。
上述的实现方式所带来的有益效果在于，通过规划视频课堂内容的所有视频课堂互动内容评价值趋近于教师课堂内容的所有教师课堂互动内容评价值，进而使得视频课堂的互动效果的整体评价趋近于教师课堂的互动效果的整体评价，实现视频课堂和教师课堂相近的教学效果，提高了视频课堂的教学效果。
上述的实现方式所带来的有益效果也在于，在实时生成的视频课堂中，可以在视频课堂需要讲授的知识内容中和视频课堂的剩余时长中确定视频课堂讲授内容和视频课堂互动内容，进而能够实现实时地动态规划视频课堂的互动环节，提高视频课堂的教学效率和教学质量。
在一些实现方式中，上述的S250、根据教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值的差值，在视频课堂需要讲授的知识内容中和视频课堂的剩余时长中确定视频课堂讲授内容和视频课堂互动内容，包括S251至S252，下面对S251至S252进行具体说明。
S251、确定教师课堂内容的所有教师课堂互动内容之间的多个间隔时长，并确定多个间隔时长中的最小间隔时长和最大间隔时长。
为了在视频课堂中规划互动环节时，达到和教师课堂中的互动环节相似的节奏和时间间隔，可以确定教师课堂内容的所有教师课堂互动内容之间的多个间隔时长，并确定多个间隔时长中的最小间隔时长和最大间隔时长，进而根据最小间隔时长和最大间隔时长对视频课堂的视频课堂互动内容进行规划。
示例性地，最小间隔时长可以为2min、3min或5min，最大间隔时长可以为8min、10min或15min。
S252、当教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值的差值大于0时，在视频课堂的剩余时长中每隔最小间隔时长将视频课堂需要讲授的知识内容确定为视频课堂互动内容。当教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值的差值小于或等于0时，在视频课堂的剩余时长中每隔最大间隔时长将视频课堂需要讲授的知识内容确定为视频课堂互动内容。
在工作时，在当教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值的差值大于0时，此时说明视频课堂的互动环节取得的效果不佳，此时还需要在后续的视频课堂中规划安排互动环节，此时可以在视频课堂的剩余时长中每隔最小间隔时长将视频课堂需要讲授的知识内容确定为视频课堂互动内容，此时能够安排最多的视频课堂的互动环节，并能够保持视频课堂的互动环节和教师授课时的互动环节的节奏相似，保证视频课堂的授课效果。
同理地，在当教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值的差值小于或等于0时，此时说明视频课堂的互动环节已经取得了较佳的互动效果，此时可以在后续的视频课堂中适当地规划安排互动环节，以保证授课效果和授课效率，在视频课堂的剩余时长中每隔最大间隔时长将视频课堂需要讲授的知识内容确定为视频课堂互动内容，此时能够在保证适当数量的互动环节的前提下，提高视频课堂的授课效率。
上述的实现方式所带来的有益效果在于，对教师课堂内容的所有教师课堂互动内容评价值和视频课堂内容的所有视频课堂互动内容评价值进行比较，通过对视频课堂的互动效果进行整体性评价，能够在后续的视频课堂时长中安排适当数量的视频课堂互动内容，能够提高视频课堂的互动效果，也能够兼顾视频课堂的授课效率。
在一些实现方式中，上述S220、根据每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度，确定每个教师课堂互动内容对应的教师课堂互动内容评价值，包括S221至S222，下面对S221至S222进行具体说明。
S221、统计每个教师课堂互动内容的课后反馈值。课后反馈值来自教师和学生对教师课堂内容的评价反馈。
在工作时，可以通过对每个教师课堂互动内容的课后反馈值进行统计，得到教师和学生主观上对教师课堂互动内容的评价，进一步考虑课堂参与方对课堂的效果的评价，提高了后续对视频课堂的视频课堂互动内容规划时的人性化程度。
示例性地，课后反馈值来自教师和学生对教师课堂内容的评价反馈，可以通过问卷调查的方式获取来自教师和学生对教师课堂内容的每个教师课堂互动内容的评价反馈。
示例性地，可以通过分值的方式对每个教师课堂互动内容的评价反馈情况进行量化。
S222、将每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度之和乘以每个教师课堂互动内容的课后反馈值，得到每个教师课堂互动内容对应的教师课堂互动内容评价值。
示例性地，在确定每个教师课堂互动内容对应的教师课堂互动内容评价值时，可以通过对每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度之和乘以每个教师课堂互动内容的课后反馈值，得到融合了每个教师课堂互动内容的课后反馈值的教师课堂互动内容评价值。
示例性地，在第一教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度之和为5、第一教师课堂互动内容的课后反馈值为2时，可以得到第一教师课堂互动内容评价值为10。
上述的实现方式所带来的有益效果在于，通过采集来自教师和学生对教师课堂内容进行评价反馈的课后反馈值，进一步考虑课堂参与方对教师课堂互动内容的效果的评价，提高了后续对视频课堂的视频课堂互动内容规划时的人性化程度。
本申请实施例还提供了一种基于图像识别的课堂互动装置，包括用于执行如上所述的方法的单元。
图5为本申请实施例中的一种基于图像识别的课堂互动装置的系统结构示意图，如图5所示的，申请实施例还中的一种基于图像识别的课堂互动装置300包括处理单元310、存储单元320和收发单元330，处理单元310用于处理数据，存储单元320用于存储数据，收发单元330用于收发和传输数据，处理单元310、存储单元320和收发单元330能够相互配合实现上述的基于图像识别的课堂互动方法。
需要说明的是，上述装置/单元之间的信息交互、执行过程等内容，由于与本申请的方法实施例基于同一构思，其具体功能及带来的技术效果，具体可参见方法实施例部分，此处不再赘述。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
本申请实施例还提供了一种基于图像识别的课堂互动装置，该基于图像识别的课堂互动装置包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，处理器执行计算机程序时实现如上所述的基于图像识别的课堂互动方法。
图6为本申请实施例中的另一种基于图像识别的课堂互动装置的系统结构示意图，如图6所示的，该基于图像识别的课堂互动装置400包括存储器420、处理器410以及存储在所述存储器420中并可在所述处理器410上运行的计算机程序421，处理器410执行计算机程序421时实现如上所述的基于图像识别的课堂互动方法。
本申请实施例还提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，该计算机程序被处理器执行时实现如上方法实施例中所述的基于图像识别的课堂互动方法。
本申请实施例提供了一种计算机程序产品，当计算机程序产品在电子设备上运行时，使得电子设备执行时实现可实现上述各个方法实施例中的步骤。
上述的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质至少可以包括：能够将计算机程序代码携带到拍照装置/终端设备的任何实体或装置、记录介质、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，RandomAccess Memory)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区，根据立法和专利实践，计算机可读介质不可以是电载波信号和电信信号。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中，应该理解到，所揭露的装置/网络设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/网络设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
以上所述仅为本申请的较佳实施例而已，并不用以限制本申请，凡在本申请的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本申请的保护范围之内。

Claims (10)

1.一种基于图像识别的课堂互动方法，其特征在于，所述方法包括：
获取教师课堂内容；其中，教师课堂内容包括教师在课堂教学中的视频信息和音频信息；
根据所述教师课堂内容，确定教师课堂互动内容；
根据所述教师课堂互动内容，生成视频课堂互动内容；
根据所述视频课堂互动内容，生成视频课堂内容。
2.如权利要求1所述的基于图像识别的课堂互动方法，其特征在于，所述根据所述教师课堂内容，确定教师课堂互动内容，包括：
对所述教师课堂内容进行识别，确定教师课堂讲授内容和教师课堂互动内容；其中，所述教师课堂讲授内容和所述教师课堂互动内容均包括教师课堂讲授的知识内容；
所述根据所述教师课堂互动内容，生成视频课堂互动内容，包括：
根据所述教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和所述视频课堂互动内容；
所述根据所述视频课堂互动内容，生成视频课堂内容，包括：
将所述视频课堂讲授内容和所述视频课堂互动内容拼接形成所述视频课堂内容。
3.如权利要求2所述的基于图像识别的课堂互动方法，其特征在于，所述对所述教师课堂内容进行识别，确定教师课堂讲授内容和教师课堂互动内容，包括：
确定所述教师课堂内容的多个教师课堂互动点和多个教师课堂互动时长；其中，所述教师课堂互动点对应教师课堂互动内容的开始时刻，一个教师课堂互动点对应一个教师课堂互动时长；
识别所述多个教师课堂互动点之前第一预设时间段内的多个教师课堂互动前专注度；其中，所述教师课堂互动前专注度表示教师课堂中在所述教师课堂互动内容开始前所有学生的专注度，一个教师课堂互动点对应一个教师课堂互动前专注度；
所述根据所述教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和所述视频课堂互动内容，包括：
根据所述多个教师课堂互动前专注度确定目标教师课堂互动前专注度；其中，所述目标教师课堂互动前专注度对应所述多个教师课堂互动前专注度的最小值或者平均值；
在所述视频课堂中的视频课堂专注度小于所述目标教师课堂互动前专注度时，将当前时刻的下一个视频课堂需要讲授的知识内容确定为所述视频课堂互动内容；其中，所述视频课堂专注度表示当前视频课堂中所有学生的专注度。
4.如权利要求3所述的基于图像识别的课堂互动方法，其特征在于，所述根据所述教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和所述视频课堂互动内容，还包括：
根据当前视频课堂在一天中的时间段对所述目标教师课堂互动前专注度进行修正；其中，当前视频课堂在一天中的时间段为8：00至11：00或15：00至18：00时，对目标教师课堂互动前专注度增大10％至20％；当前视频课堂在一天中的时间段为11：00至15：00时，对目标教师课堂互动前专注度减小10％至30％。
5.如权利要求4所述的基于图像识别的课堂互动方法，其特征在于，所述根据所述教师课堂互动内容，在视频课堂需要讲授的知识内容中确定视频课堂讲授内容和所述视频课堂互动内容，还包括：
确定每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度；其中，所述教师课堂互动兴趣度表示每个教师课堂互动内容开始后第二预设时间段内的学生活跃度，所述教师课堂互动参与度表示每个教师课堂互动内容过程中的学生参与度，所述教师课堂互动后专注度表示每个教师课堂互动内容结束后第三预设时间段内的学生专注度；
根据每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度，确定每个教师课堂互动内容对应的教师课堂互动内容评价值；
确定每个视频课堂互动内容的视频课堂互动兴趣度、视频课堂互动参与度和视频课堂互动后专注度；其中，所述视频课堂互动兴趣度表示每个视频课堂互动内容开始后第二预设时间段内的学生活跃度，所述视频课堂互动参与度表示每个视频课堂互动内容过程中的学生参与度，所述视频课堂互动后专注度表示每个视频课堂互动内容结束后第三预设时间段内的学生专注度；
根据每个视频课堂互动内容的视频课堂互动兴趣度、视频课堂互动参与度和视频课堂互动后专注度，确定每个视频课堂互动内容对应的视频课堂互动内容评价值；
根据所述教师课堂内容的所有教师课堂互动内容评价值和所述视频课堂内容的所有视频课堂互动内容评价值的差值，在所述视频课堂剩余的需要讲授的知识内容中和所述视频课堂的剩余时长中确定所述视频课堂讲授内容和所述视频课堂互动内容。
6.如权利要求5所述的基于图像识别的课堂互动方法，其特征在于，所述根据所述教师课堂内容的所有教师课堂互动内容评价值和所述视频课堂内容的所有视频课堂互动内容评价值的差值，在所述视频课堂需要讲授的知识内容中和所述视频课堂的剩余时长中确定所述视频课堂讲授内容和所述视频课堂互动内容，包括：
确定所述教师课堂内容的所有教师课堂互动内容之间的多个间隔时长，并确定所述多个间隔时长中的最小间隔时长和最大间隔时长；
当所述教师课堂内容的所有教师课堂互动内容评价值和所述视频课堂内容的所有视频课堂互动内容评价值的差值大于0时，在所述视频课堂的剩余时长中每隔所述最小间隔时长将所述视频课堂需要讲授的知识内容确定为所述视频课堂互动内容；当所述教师课堂内容的所有教师课堂互动内容评价值和所述视频课堂内容的所有视频课堂互动内容评价值的差值小于或等于0时，在所述视频课堂的剩余时长中每隔所述最大间隔时长将所述视频课堂需要讲授的知识内容确定为所述视频课堂互动内容。
7.如权利要求6所述的基于图像识别的课堂互动方法，其特征在于，所述根据每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度，确定每个教师课堂互动内容对应的教师课堂互动内容评价值，包括：
统计每个教师课堂互动内容的课后反馈值；所述课后反馈值来自教师和学生对所述教师课堂内容的评价反馈；
将每个教师课堂互动内容的教师课堂互动兴趣度、教师课堂互动参与度和教师课堂互动后专注度之和乘以每个教师课堂互动内容的课后反馈值，得到每个教师课堂互动内容对应的教师课堂互动内容评价值。
8.一种基于图像识别的课堂互动装置，其特征在于，包括用于执行权利要求1至7中任一项所述的方法的单元。
9.一种基于图像识别的课堂互动装置，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述的方法。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法。
CN202311462676.8A 2023-11-06 2023-11-06 基于图像识别的课堂互动方法和装置 Pending CN117576604A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311462676.8A CN117576604A (zh) 2023-11-06 2023-11-06 基于图像识别的课堂互动方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311462676.8A CN117576604A (zh) 2023-11-06 2023-11-06 基于图像识别的课堂互动方法和装置

Publications (1)

Publication Number Publication Date
CN117576604A true CN117576604A (zh) 2024-02-20

Family

ID=89892672

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311462676.8A Pending CN117576604A (zh) 2023-11-06 2023-11-06 基于图像识别的课堂互动方法和装置

Country Status (1)

Country Link
CN (1) CN117576604A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107895244A (zh) * 2017-12-26 2018-04-10 重庆大争科技有限公司 课堂教学质量评估方法
CN110675669A (zh) * 2019-11-01 2020-01-10 广州云蝶科技有限公司 录课方法
CN110827856A (zh) * 2019-11-01 2020-02-21 广州云蝶科技有限公司 授课的测评方法
CN112837574A (zh) * 2021-01-15 2021-05-25 中科远见(重庆)科技有限公司 一种互动课堂系统及其方法
CN114691904A (zh) * 2022-03-02 2022-07-01 成都佳发教育科技有限公司 课程资源标注方法、装置、系统、设备及存储介质
CN115879701A (zh) * 2022-11-24 2023-03-31 读书郎教育科技有限公司 一种基于智慧课堂的课堂时长自适应调整系统
CN116437139A (zh) * 2023-03-06 2023-07-14 广州开得联软件技术有限公司 课堂视频录制方法、装置、存储介质和设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107895244A (zh) * 2017-12-26 2018-04-10 重庆大争科技有限公司 课堂教学质量评估方法
CN110675669A (zh) * 2019-11-01 2020-01-10 广州云蝶科技有限公司 录课方法
CN110827856A (zh) * 2019-11-01 2020-02-21 广州云蝶科技有限公司 授课的测评方法
CN112837574A (zh) * 2021-01-15 2021-05-25 中科远见(重庆)科技有限公司 一种互动课堂系统及其方法
CN114691904A (zh) * 2022-03-02 2022-07-01 成都佳发教育科技有限公司 课程资源标注方法、装置、系统、设备及存储介质
CN115879701A (zh) * 2022-11-24 2023-03-31 读书郎教育科技有限公司 一种基于智慧课堂的课堂时长自适应调整系统
CN116437139A (zh) * 2023-03-06 2023-07-14 广州开得联软件技术有限公司 课堂视频录制方法、装置、存储介质和设备

Similar Documents

Publication Publication Date Title
CN109522815B (zh) 一种专注度评估方法、装置及电子设备
CN111079113B (zh) 一种人工智能控制的教学系统及其使用方法
CN111949822A (zh) 一种基于云计算和移动终端的智能教育视频服务系统及其运行方法
CN111402439B (zh) 一种基于人脸识别的在线培训到课率统计管理方法及系统
US11094215B2 (en) Internet-based recorded course learning following system and method
CN113781853B (zh) 基于终端的师生远程互动教育平台
CN113139885A (zh) 教学管理系统及其管理方法
CN114422820A (zh) 一种教育互动直播系统及直播方法
CN111325853A (zh) 一种基于增强现实眼镜的远程辅导系统及方法
CN112055257B (zh) 视频课堂的互动方法、装置、设备及存储介质
CN114971975B (zh) 在线教育平台用的学习异常提醒方法及系统
CN110991943A (zh) 一种基于云计算的教学质量评价系统
CN117576604A (zh) 基于图像识别的课堂互动方法和装置
WO2019000617A1 (zh) 一种互联网教学的录播系统和方法
CN110796577A (zh) 基于智慧班牌的信息显示方法
CN114512041B (zh) 一种基于全景摄像的教学行为大数据分析装置
CN115278272B (zh) 一种教育实践在线指导系统及方法
CN110675669A (zh) 录课方法
CN114999249A (zh) 一种基于云平台的远程教学系统、方法及存储介质
CN110933510B (zh) 控制系统中的信息交互方法
CN110971875B (zh) 结合录播系统和ip广播系统的控制方法及装置
CN112270264A (zh) 一种多方互动教学系统
CN110853428A (zh) 基于物联网的录播控制方法及系统
CN112528790A (zh) 基于行为识别的教学管理方法、装置及服务器
CN110968138B (zh) 基于控制系统的信息交互方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination