CN111680137A - 在线课堂互动方法、装置、存储介质及终端 - Google Patents
在线课堂互动方法、装置、存储介质及终端 Download PDFInfo
- Publication number
- CN111680137A CN111680137A CN202010431239.XA CN202010431239A CN111680137A CN 111680137 A CN111680137 A CN 111680137A CN 202010431239 A CN202010431239 A CN 202010431239A CN 111680137 A CN111680137 A CN 111680137A
- Authority
- CN
- China
- Prior art keywords
- interaction
- classroom
- control instruction
- online
- historical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 268
- 238000000034 method Methods 0.000 title claims abstract description 81
- 230000002452 interceptive effect Effects 0.000 claims abstract description 60
- 230000008569 process Effects 0.000 claims abstract description 28
- 230000004044 response Effects 0.000 claims description 8
- 238000004590 computer program Methods 0.000 claims description 7
- 238000012216 screening Methods 0.000 claims description 5
- 230000002093 peripheral effect Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 230000000694 effects Effects 0.000 description 6
- 230000006399 behavior Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 208000025174 PANDAS Diseases 0.000 description 1
- 208000021155 Paediatric autoimmune neuropsychiatric disorders associated with streptococcal infection Diseases 0.000 description 1
- 240000000220 Panda oleosa Species 0.000 description 1
- 235000016496 Panda oleosa Nutrition 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/332—Query formulation
- G06F16/3329—Natural language query formulation or dialogue systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
- G06Q10/06311—Scheduling, planning or task assignment for a person or group
- G06Q10/063116—Schedule adjustment for a person or group
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
- G06Q10/06393—Score-carding, benchmarking or key performance indicator [KPI] analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/08—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/08—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
- G09B5/14—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations with provision for individual teacher-student communication
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Human Resources & Organizations (AREA)
- Physics & Mathematics (AREA)
- Educational Administration (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- Tourism & Hospitality (AREA)
- Entrepreneurship & Innovation (AREA)
- Educational Technology (AREA)
- Development Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Game Theory and Decision Science (AREA)
- Quality & Reliability (AREA)
- Operations Research (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- Primary Health Care (AREA)
- Artificial Intelligence (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
本申请实施例公开了一种在线课堂互动方法、装置、存储介质及终端，其中，方法包括：响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成；根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。该方法是在在线课程课堂人数不足或者课堂气氛不佳的情况下加入的虚拟角色，所加入的虚拟角色可以跟真实学生一样进行课堂互动，其中，所述虚拟角色的课堂互动都是基于历史真实学生课堂上的互动数据来进行的。由此，本实施例提供的方案既能满足在线课堂的一般需求，还可以通过基于历史数据进行课堂互动的虚拟角色来刺激其他真实学生的学习兴趣，使之更加投入到课堂中，提升课堂氛围。
Description
技术领域
本申请涉及计算机技术领域，尤其涉及一种在线课堂互动方法、装置、存储介质及终端。
背景技术
依托于网络，通过视频进行教学的在线教育普惠了民众的学习生活。相比于线下教育，在线教育不受时间地点的限制，只需在有网络的情况下，就可满足用户的学习需求，学习方式更灵活自由。
当前的在线教育产品/平台在课堂人数不足时，会为课堂提供机器人等虚拟角色以满足课堂需求。所增设的机器人虽然能够作为“学生”一样进行课堂互动，但所能达到的效果非常有限，课堂互动不逼真，降低了真实学员课堂上的学习体验。
发明内容
本申请实施例提供了一种在线课堂互动方法、装置、存储介质及终端，可以解决上述机器人课堂互动不逼真，不能满足真实学员课堂学习体验的问题。
所述技术方案如下：
第一方面，本申请实施例提供了一种在线课堂互动方法，所述方法包括：
响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成；
根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。
第二方面，本申请实施例提供了一种在线课堂互动装置，所述装置包括：
控制指令确定模块，用于响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成；
互动操作执行模块，用于根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。
第三方面，本申请实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述任一项方法的步骤。
第四方面，本申请实施例提供了一种终端，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述任一项方法的步骤。
本申请一些实施例提供的技术方案带来的有益效果至少包括：
本申请实施例提供的在线课堂互动方法，响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成；根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。所述方法是在在线课程课堂人数不足或者课堂气氛不佳的情况下加入的虚拟角色，所加入的虚拟角色可以跟真实学生一样进行课堂互动，其中，所述虚拟角色的课堂互动都是基于历史真实学生课堂上的互动数据来进行的，互动更逼真。由此，本实施例提供的方案既能满足在线课堂的一般需求，还可以通过基于历史数据进行课堂互动的虚拟角色来刺激其他真实学生的学习兴趣，使之更加投入到课堂中，提升课堂氛围。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种在线课堂互动方法的流程示意图；
图2是本申请实施例提供的一种在线课堂互动方法的流程示意图；
图3是本申请实施例提供的一种在线课堂互动方法的流程示意图；
图4是本申请实施例提供的一种在线课堂互动装置的结构示意图；
图5是本申请实施例提供的一种在线课堂互动装置的结构示意图；
图6是本申请实施例提供的一种在线课堂互动装置的结构示意图；
图7是本申请实施例提供的一种终端结构框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施例方式作进一步地详细描述。
下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请的描述中，需要理解的是，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本申请中的具体含义。此外，在本申请的描述中，除非另有说明，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
下面将结合附图1-附图3，对本申请实施例提供的在线课堂互动方法进行详细介绍。
请参见图1，为本申请实施例提供的一种在线课堂互动方法的流程示意图。
如图1所示，本申请实施例的所述方法可以包括以下步骤：
S101，响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成。
本实施例提供的在线课堂互动方法，在线课堂上的学生包括虚拟角色，该课堂上的其他真实学生通过视频可观看到该虚拟角色。虚拟角色是一种虚构人物，具有个性化特征的形象综合表达。本实施例中，在线课堂增设的虚拟角色外形不受限制，可以采用机器人、功夫熊猫以及三维人物形象等。
在线教学过程中，虚拟角色对课堂互动指令进行响应，确定所述课堂互动指令对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成，包括：操作行为(操作步骤)、答题结果、时间信息等。基于真实学生的历史互动数据生成互动控制指令可以保证虚拟角色课堂互动的准确性。
特别的，虚拟角色所在终端是根据所接收到的课堂互动指令，对应性地获取由真实学生的历史互动数据生成的互动控制指令。比如，接收到的是某个答题的课堂互动指令，则获取对应的答题控制指令，该答题控制指令由历史答题时间、答题步骤、答题内容等数据生成。
例如，虚拟角色响应课堂抢答指令，终端获取该课程过去真实学生的历史抢答数据(包括抢答、抢答成功后的答题内容、答题时长等)所生成的控制指令。其中，所述控制指令包括抢答控制指令，答复内容控制指令以及答题时长控制指令等。
所述互动控制指令可以是在互动发生时实时生成，也可以是预先生成好的，即在在线课堂开课前生成一种对应关系，在课堂互动指令发出时可以快速获取到对应的互动控制指令，该方法可以提升虚拟角色的响应效率。
具体而言，所述互动控制指令可以预先生成，例如在课前临时生成好，或者在接收到所述在线课堂中的课堂互动指令之前提前准备好；所述互动控制指令也可以是在互动发生时实时生成，即响应于所述课堂互动指令，确定最合适的历史互动数据，从而实时生成对应的互动控制指令。
基于历史经验/数据生成互动控制指令，可使课堂上虚拟角色的互动更接近于真实学生，互动效果更好。
S102，根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。
如上述所举之例，参与教学课程的虚拟角色在响应课堂抢答指令时，终端将根据生成的控制指令控制虚拟角色进行抢答，并在抢答成功后依据历史答题内容及答题时长对抢答题目进行答复。当然，若抢答失败，虚拟角色则停止此次抢答互动。
其他实施例中，所述互动操作还可以是团队配合、课堂对话等。
本申请实施例提供的在线课堂互动方法，响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成；根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。所述方法是在在线课程课堂人数不足或者课堂气氛不佳的情况下加入的虚拟角色，所加入的虚拟角色可以跟真实学生一样进行课堂互动，其中，所述虚拟角色的课堂互动都是基于历史真实学生课堂上的互动数据来进行的，互动更逼真。由此，本实施例提供的方案既能满足在线课堂的一般需求，还可以通过基于历史数据进行课堂互动的虚拟角色来刺激其他真实学生的学习兴趣，使之更加投入到课堂中，提升课堂氛围。
请参见图2，为本申请实施例提供的一种在线课堂互动方法的流程示意图。
如图2所示，本申请实施例的所述方法可以包括以下步骤：
S201，基于在线课堂中的课程信息、所述课堂互动指令的类型信息，从所述历史教学过程中的课堂互动数据中筛选出目标互动数据。
基于历史经验/数据生成互动控制指令，可使课堂上虚拟角色的互动更接近于真实学生，互动效果更好。
具体的，可以通过所述在线课堂中的课程信息、所述课堂互动指令的类型信息获取相同课程的历史数据，并据此生成控制指令。其中，所述课程信息包括在线课程的名称、课程时长等，课堂互动指令的类型例如可以是小组互动、课堂抢答等。
更进一步地，为提升课堂质量，本实施例可对获取到的历史互动数据进行筛选，筛选互动效果最佳、数据最完整、互动最对应的历史数据作为数据筛选结果，并根据该筛选结果生成互动控制指令控制虚拟角色做出相应的互动动作。
例如，终端在过去多个真实学生的历史团队游戏互动数据中筛选出互动效果最好、或者最符合当前课堂氛围、或者跟当前小组或班级的真实学员水平最匹配的目标历史团队游戏互动数据(包括游戏互动规则、游戏互动内容、游戏互动结果等)，并根据该目标数据生成游戏互动控制指令。其中，所述控制指令包括互动规则控制指令，互动内容控制指令以及互动结果控制指令等。
本步骤之前，终端还可以在课程开始之前对课堂总体人数或者各小组人数进行查询，当确定存在缺席人员时，在相应位置增设虚拟角色以弥补空缺，这样可以使后续团体作战的课堂互动能够如期进行，小组内的其他成员不会因人员缺席而受到影响。
本实施例增设的虚拟角色数量不受限制。在所述教学课程包含多个虚拟角色时，所述多个虚拟角色进行互动时所获取的历史互动数据应互不相同，也就是说，同一个真实学生的历史互动数据不能被多个虚拟角色同时使用。
S202，基于所述目标互动数据，生成所述至少一个互动控制指令。
比如，虚拟角色响应课堂答题指令，终端获取该课程过去真实学生的历史答题数据(包括答题时间、答题内容、答题时长等)，并在所述数据中筛选出互动效果最佳、数据最完整目标数据，根据该目标数据生成控制指令。其中，所述控制指令包括答题时间控制指令，答题内容控制指令以及答题时长控制指令等。
这里需要说明的是，所述互动控制指令可以是在互动发生时实时生成，也可以是预先生成好的，例如在课前临时生成好，或者在接收到所述在线课堂中的课堂互动指令之前提前准备好；此外，所述互动控制指令可以是在互动发生时实时生成，即响应于所述课堂互动指令，确定最合适的历史互动数据，从而实时生成对应的互动控制指令。
S203，根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。
本步骤具体可参数S103，此处不再赘述。
S204，将所述互动操作对应的互动结果发送至参与所述在线课堂的至少一个用户终端；和/或将所述互动操作对应的目标音频数据和/或目标视频数据发送至参与所述在线课堂的至少一个所述用户终端，其中，所述目标音频数据和/或目标视频数据选自历史教学过程中的历史音频数据和/或历史视频数据。
在线课堂的课堂互动属课堂内容的一部分，要在参与该课堂的所有学生终端进行展示。具体的，虚拟角色所在终端获取执行互动操作后生成的互动结果，并将该结果发送给参与同一课程的各用户终端。以上述步骤所举之例为例，团队合作游戏中，目标团队中的各个虚拟角色在执行完相应的互动操作后，操作结果均需同步发送给参与同一课程的各用户终端。所述互动结果可以是文本等形式。
此外，当所述互动结果形式较单一(仅为文字内容)时，除发送所述虚拟角色的互动结果之外，终端还可以将从历史教学过程中的历史音频数据和/或历史视频数据中筛选出的目标音频数据和/或目标视频数据一起发送至所述在线课堂的至少一个用户终端上。
其中，目标音频和/或目标视频数据的筛选具体可以是：根据所述至少一个互动控制指令的起始时间、终止时间、持续时长等时间信息，从历史教学过程中的历史音频和/或历史视频数据中选择所述目标音频和/或目标视频数据。所述目标音视频数据是对所述互动结果形式的丰富，其内容与所述互动结果相对应。
本实施例提供的在线课堂互动方法，响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成；根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。所述方法是在在线课程课堂人数不足或者课堂气氛不佳的情况下加入的虚拟角色，所加入的虚拟角色可以跟真实学生一样进行课堂互动，其中，所述虚拟角色的课堂互动都是基于历史真实学生课堂上的互动数据来进行的，互动更逼真。由此，本实施例提供的方案既能满足在线课堂的一般需求，还可以通过基于历史数据进行课堂互动的虚拟角色来刺激其他真实学生的学习兴趣，使之更加投入到课堂中，提升课堂氛围。
请参见图3，为本申请实施例提供的一种在线课堂互动方法的流程示意图。
如图3所示，本申请实施例的所述方法可以包括以下步骤：
S301，响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成。
本实施例提供的在线课堂互动方法，教学课程课堂上的学生包括虚拟角色，该课堂上的其他真实学生通过视频可观看到该虚拟角色。虚拟角色是一种虚构人物，具有个性化特征的形象综合表达。
在线教学过程中，虚拟角色所在终端接收到的教师所发出的课堂互动指令例如可以是随堂提问、游戏互动、问题抢答等。虚拟角色对课堂互动指令进行响应，确定所述课堂互动指令对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成，包括：操作行为(操作步骤)、答题结果、时间信息等。基于真实学生的历史互动数据生成互动控制指令可以保证虚拟角色课堂互动的准确性。
本实施例的在线课程为录播课程，因此，所述课堂互动指令可以是与所述在线课堂的教学进度相对应的教学进度触发指令，或者，表示所述至少一个虚拟角色抢答成功所对应的抢答响应指令。具体来说也就是，根据课程进度响应课堂互动指令，或者，是在抢答成功之时响应课堂互动指令。
例如，课程时长总长为45分钟，在第10分钟、第22分钟以及第38分钟分别有一次互动，那么虚拟角色所在终端可以在这几个时间点到达之时作出互动响应，获取该课程对应的历史互动数据。
本步骤未作详尽说明之处可参见S101，此处不再赘述。
S302，所述至少一个互动控制指令包括至少一个第一互动控制指令和至少一个第二互动控制指令，所述至少一个虚拟角色包括至少一个第一虚拟角色和至少一个第二虚拟角色，所述第一虚拟角色与所述第二虚拟角色在不同分组，根据所述第一互动控制指令控制所述第一虚拟角色执行第一互动操作，根据所述第二互动控制指令控制所述第二虚拟角色执行第二互动操作。
多个互动操作由不同的虚拟角色执行时，需先确定出各个互动操作的执行主体(也就是虚拟角色)，再由互动控制指令控制各个虚拟角色执行相应的互动操作。
对于轮流作答这类多人课堂互动，所述第一互动控制指令控制所述第一虚拟角色执行第一互动操作，所述第二互动控制指令控制所述第二虚拟角色执行第二互动操作，各自有序进行，互不干扰。
S303，将所述第一互动操作对应的第一互动结果、第一目标音频数据和/或第一目标视频数据发送至参与所述在线课堂的至少一个第一用户终端，将所述第二互动操作对应的第二互动结果、第二目标音频数据和/或第二目标视频数据发送至参与所述在线课堂的至少一个第二用户终端。
在线课堂的课堂互动属课堂内容的一部分，要在参与该课堂的所有学生终端进行展示。为避免互动结果形式较单一(仅为文字内容)，除发送所述各虚拟角色的互动结果之外，终端还可以将从历史教学过程中的历史音频数据和/或历史视频数据中筛选出的目标音频数据和/或目标视频数据一起发送至所述在线课堂的至少一个用户终端上。
结合所筛选的目标音/视频数据，能够丰富虚拟角色互动结果的展示形式，降低了课堂枯燥感，课堂互动更真实。
对于小班课程，各组学员一般只能查看到本组内学员的互动，因此，需分别将所述第一互动操作对应的第一互动结果、第一目标音频数据和/或第一目标视频数据发送至参与所述在线课堂的至少一个第一用户终端，将所述第二互动操作对应的第二互动结果、第二目标音频数据和/或第二目标视频数据发送至参与所述在线课堂的至少一个第二用户终端。其中，所述第一用户终端与所述第一虚拟角色同组，所述第二用户终端与所述第二虚拟角色同组。
本申请实施例提供的在线课堂互动方法，响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成；根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。所述方法是在在线课程课堂人数不足或者课堂气氛不佳的情况下加入的虚拟角色，所加入的虚拟角色可以跟真实学生一样进行课堂互动，其中，所述虚拟角色的课堂互动都是基于历史真实学生课堂上的互动数据来进行的，互动更逼真。由此，本实施例提供的方案既能满足在线课堂的一般需求，还可以通过基于历史数据进行课堂互动的虚拟角色来刺激其他真实学生的学习兴趣，使之更加投入到课堂中，提升课堂氛围。
下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。
请参见图4，为本申请一个示例性实施例提供的在线课堂互动装置的结构示意图。该在线课堂互动装置可以通过软件、硬件或者两者的结合实现成为终端的全部或一部分，还可以作为独立的模块集成于服务器上。本申请实施例中的在线课堂互动装置应用于终端，所述该装置1包括控制指令确定模块11和互动操作执行模块12，其中：
控制指令确定模块11，用于响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成；
互动操作执行模块12，用于根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。
请参见图5，为本申请一个示例性实施例提供的在线课堂互动装置的结构示意图。
如图5所示，本申请实施例提供的所述在线课堂互动装置1中的控制指令确定模块11包括：
互动数据筛选单元111，用于基于所述在线课堂中的课程信息、所述课堂互动指令的类型信息，从所述历史教学过程中的课堂互动数据中筛选出目标互动数据；
控制指令生成单元112，用于基于所述目标互动数据，生成所述至少一个互动控制指令。
所述在线课堂互动装置1还包括：
互动结果发送模块13，用于将所述互动操作对应的互动结果发送至参与所述在线课堂的至少一个用户终端；和/或
将所述互动操作对应的目标音频数据和/或目标视频数据发送至参与所述在线课堂的至少一个所述用户终端，其中，所述目标音频数据和/或目标视频数据选自历史教学过程中的历史音频数据和/或历史视频数据。
请参见图6，为本申请一个示例性实施例提供的在线课堂互动装置的结构示意图。
如图6所示，本申请实施例提供的所述在线课堂互动装置1中的互动操作执行模块12具体用于：
所述至少一个虚拟角色包括至少一个第一虚拟角色和至少一个第二虚拟角色，所述至少一个互动控制指令包括至少一个第一互动控制指令和至少一个第二互动控制指令，根据所述第一互动控制指令控制所述第一虚拟角色执行第一互动操作；根据所述第二互动控制指令控制所述第二虚拟角色执行第二互动操作；所述第一虚拟角色与所述第二虚拟角色在不同分组。
所述装置1中的互动结果发送模块13包括：
第一互动结果发送单元131，用于将所述第一互动操作对应的第一互动结果、第一目标音频数据和/或第一目标视频数据发送至参与所述在线课堂的至少一个第一用户终端；
第二互动结果发送单元132，用于将所述第二互动操作对应的第二互动结果、第二目标音频数据和/或第二目标视频数据发送至参与所述在线课堂的至少一个第二用户终端。
需要说明的是，上述实施例提供的在线课堂互动装置在执行在线课堂互动方法时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的在线课堂互动装置与在线课堂互动方法实施例属于同一构思，其体现实现过程详见方法实施例，这里不再赘述。
上述本申请实施例序号仅仅为了描述，不代表实施例的优劣。
本申请实施例提供的在线课堂互动装置，响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成；根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。所述方法是在在线课程课堂人数不足或者课堂气氛不佳的情况下加入的虚拟角色，所加入的虚拟角色可以跟真实学生一样进行课堂互动，其中，所述虚拟角色的课堂互动都是基于历史真实学生课堂上的互动数据来进行的，互动更逼真。由此，本实施例提供的方案既能满足在线课堂的一般需求，还可以通过基于历史数据进行课堂互动的虚拟角色来刺激其他真实学生的学习兴趣，使之更加投入到课堂中，提升课堂氛围。
本申请实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述任一实施例方法的步骤。其中，计算机可读存储介质可以包括但不限于任何类型的盘，包括软盘、光盘、DVD、CD-ROM、微型驱动器以及磁光盘、ROM、RAM、EPROM、EEPROM、DRAM、VRAM、闪速存储器设备、磁卡或光卡、纳米系统(包括分子存储器IC)，或适合于存储指令和/或数据的任何类型的媒介或设备。
本申请实施例还提供了一种终端，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行程序时实现上述任一实施例方法的步骤。
请参见图7，为本申请实施例提供的一种终端结构框图。
如图7所示，终端100包括有：处理器701和存储器702。
本申请实施例中，处理器701为计算机系统的控制中心，可以是实体机的处理器，也可以是虚拟机的处理器。处理器701可以包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器701可以采用DSP(Digital Signal Processing，数字信号处理)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)、PLA(Programmable LogicArray，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器701也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(CentralProcessing Unit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。
存储器702可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器702还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在本申请的一些实施例中，存储器702中的非暂态的计算机可读存储介质用于存储至少一个指令，该至少一个指令用于被处理器701所执行以实现本申请实施例中的方法。
一些实施例中，终端100还包括有：外围设备接口703和至少一个外围设备。处理器701、存储器702和外围设备接口703之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口703相连。具体地，外围设备包括：显示屏704、摄像头705和音频电路706中的至少一种。
外围设备接口703可被用于将I/O(Input/Output，输入/输出)相关的至少一个外围设备连接到处理器701和存储器702。在本申请的一些实施例中，处理器701、存储器702和外围设备接口703被集成在同一芯片或电路板上；在本申请的一些其他实施例中，处理器701、存储器702和外围设备接口703中的任意一个或两个可以在单独的芯片或电路板上实现。本申请实施例对此不作具体限定。
显示屏704用于显示UI(User Interface，用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏704是触摸显示屏时，显示屏704还具有采集在显示屏704的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器701进行处理。此时，显示屏704还可以用于提供虚拟按钮和/或虚拟键盘，也称软按钮和/或软键盘。在本申请的一些实施例中，显示屏704可以为一个，设置终端700的前面板；在本申请的另一些实施例中，显示屏704可以为至少两个，分别设置在终端700的不同表面或呈折叠设计；在本申请的再一些实施例中，显示屏704可以是柔性显示屏，设置在终端100的弯曲表面上或折叠面上。甚至，显示屏704还可以设置成非矩形的不规则图形，也即异形屏。显示屏704可以采用LCD(Liquid Crystal Display，液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头705用于采集图像或视频。可选地，摄像头705包括前置摄像头和后置摄像头。通常，前置摄像头设置在终端的前面板，后置摄像头设置在终端的背面。在一些实施例中，后置摄像头为至少两个，分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种，以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality，虚拟现实)拍摄功能或者其它融合拍摄功能。在本申请的一些实施例中，摄像头705还可以包括闪光灯。闪光灯可以是单色温闪光灯，也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合，可以用于不同色温下的光线补偿。
音频电路706可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波，并将声波转换为电信号输入至处理器701进行处理。出于立体声采集或降噪的目的，麦克风可以为多个，分别设置在终端100的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。
电源707用于为终端100中的各个组件进行供电。电源707可以是交流电、直流电、一次性电池或可充电电池。当电源707包括可充电电池时，该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池，无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
本申请实施例中示出的终端结构框图并不构成对终端100的限定，终端100可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。
在本申请中，术语“第一”、“第二”等仅用于描述的目的，而不能理解为指示或暗示相对重要性或顺序；术语“多个”则指两个或两个以上，除非另有明确的限定。术语“安装”、“相连”、“连接”、“固定”等术语均应做广义理解，例如，“连接”可以是固定连接，也可以是可拆卸连接，或一体地连接；“相连”可以是直接相连，也可以通过中间媒介间接相连。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本申请中的具体含义。
本申请的描述中，需要理解的是，术语“上”、“下”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本申请和简化描述，而不是指示或暗示所指的装置或单元必须具有特定的方向、以特定的方位构造和操作，因此，不能理解为对本申请的限制。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，依本申请权利要求所作的等同变化，仍属本申请所涵盖的范围。
Claims (10)
1.一种在线课堂互动方法，其特征在于，所述方法包括：
响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成；
根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
将所述互动操作对应的互动结果发送至参与所述在线课堂的至少一个用户终端；和/或
将所述互动操作对应的目标音频数据和/或目标视频数据发送至参与所述在线课堂的至少一个所述用户终端，其中，所述目标音频数据和/或目标视频数据选自历史教学过程中的历史音频数据和/或历史视频数据。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
根据所述至少一个互动控制指令中的时间信息，从历史教学过程中的历史音频和/或历史视频数据中选择所述目标音频和/或目标视频数据，其中，所述时间信息包括所述互动操作的起始时间、终止时间、持续时长中的一种或多种。
4.根据权利要求1所述的方法，其特征在于，所述方法还包括：
基于所述在线课堂中的课程信息、所述课堂互动指令的类型信息，从所述历史教学过程中的课堂互动数据中筛选出目标互动数据；
基于所述目标互动数据，生成所述至少一个互动控制指令。
5.根据权利要求1所述的方法，其特征在于，所述课堂互动指令包括：
与所述在线课堂的教学进度相对应的教学进度触发指令，或者，表示所述至少一个虚拟角色抢答成功所对应的抢答响应指令。
6.根据权利要求1所述的方法，其特征在于，所述至少一个虚拟角色包括至少一个第一虚拟角色和至少一个第二虚拟角色，所述至少一个互动控制指令包括至少一个第一互动控制指令和至少一个第二互动控制指令，所述根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作，包括：
根据所述第一互动控制指令控制所述第一虚拟角色执行第一互动操作；
根据所述第二互动控制指令控制所述第二虚拟角色执行第二互动操作；
所述第一虚拟角色与所述第二虚拟角色在不同分组。
7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
将所述第一互动操作对应的第一互动结果、第一目标音频数据和/或第一目标视频数据发送至参与所述在线课堂的至少一个第一用户终端；
将所述第二互动操作对应的第二互动结果、第二目标音频数据和/或第二目标视频数据发送至参与所述在线课堂的至少一个第二用户终端。
8.一种在线课堂互动装置，其特征在于，所述装置包括：
控制指令确定模块，用于响应于在线课堂中的课堂互动指令，确定对应的至少一个互动控制指令，所述互动控制指令基于历史教学过程中的课堂互动数据生成；
互动操作执行模块，用于根据所述至少一个互动控制指令控制参与所述在线课堂的至少一个虚拟角色执行互动操作。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现所述权利要求1-7中任一项所述方法的步骤。
10.一种终端，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现所述权利要求1-7中任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010431239.XA CN111680137A (zh) | 2020-05-20 | 2020-05-20 | 在线课堂互动方法、装置、存储介质及终端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010431239.XA CN111680137A (zh) | 2020-05-20 | 2020-05-20 | 在线课堂互动方法、装置、存储介质及终端 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111680137A true CN111680137A (zh) | 2020-09-18 |
Family
ID=72433757
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010431239.XA Pending CN111680137A (zh) | 2020-05-20 | 2020-05-20 | 在线课堂互动方法、装置、存储介质及终端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111680137A (zh) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112634684A (zh) * | 2020-12-11 | 2021-04-09 | 深圳市木愚科技有限公司 | 智能教学方法和装置 |
| CN112672178A (zh) * | 2020-12-15 | 2021-04-16 | 创盛视联数码科技（北京）有限公司 | 用户轮播上台方法、装置、电子设备 |
| CN112702416A (zh) * | 2020-12-21 | 2021-04-23 | 泰康保险集团股份有限公司 | 一种在线教学的互动方法和装置 |
| CN112712738A (zh) * | 2020-10-08 | 2021-04-27 | 胡振刚 | 学生显示处理方法和装置、电子装置 |
| CN113034321A (zh) * | 2021-03-29 | 2021-06-25 | 北京有竹居网络技术有限公司 | 在线课堂提示方法、装置、计算机设备及存储介质 |
| CN114860373A (zh) * | 2022-06-02 | 2022-08-05 | 北京新唐思创教育科技有限公司 | 线上课堂的教学互动方法、装置、设备及介质 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070202484A1 (en) * | 2006-02-28 | 2007-08-30 | Michael Toombs | Method and System for Educating Individuals |
| CN107765859A (zh) * | 2017-11-09 | 2018-03-06 | 温州大学 | 一种基于vr虚拟课堂的训练系统及方法 |
| CN108595275A (zh) * | 2018-03-12 | 2018-09-28 | 维沃移动通信有限公司 | 一种提示信息推送的方法及终端 |
| CN109448477A (zh) * | 2018-12-28 | 2019-03-08 | 广东新源信息技术有限公司 | 一种远程互动教学系统及方法 |
| CN109816571A (zh) * | 2019-03-27 | 2019-05-28 | 西安电子科技大学 | 在线授课系统中基于教案录音库和伪学生的云-端框架 |
| CN109872588A (zh) * | 2019-02-28 | 2019-06-11 | 北京谦仁科技有限公司 | 一种网络课堂的互动方法、装置及系统 |
| CN110428680A (zh) * | 2019-08-14 | 2019-11-08 | 莆田学院 | 虚拟仿真技术的数学与应用数学师范生课堂技能训练系统 |
| CN110570698A (zh) * | 2019-08-21 | 2019-12-13 | 北京大米科技有限公司 | 一种在线教学控制方法、装置、存储介质以及终端 |
| CN110618757A (zh) * | 2019-09-23 | 2019-12-27 | 北京大米科技有限公司 | 在线教学控制方法、装置和电子设备 |
-
2020
- 2020-05-20 CN CN202010431239.XA patent/CN111680137A/zh active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070202484A1 (en) * | 2006-02-28 | 2007-08-30 | Michael Toombs | Method and System for Educating Individuals |
| CN107765859A (zh) * | 2017-11-09 | 2018-03-06 | 温州大学 | 一种基于vr虚拟课堂的训练系统及方法 |
| CN108595275A (zh) * | 2018-03-12 | 2018-09-28 | 维沃移动通信有限公司 | 一种提示信息推送的方法及终端 |
| CN109448477A (zh) * | 2018-12-28 | 2019-03-08 | 广东新源信息技术有限公司 | 一种远程互动教学系统及方法 |
| CN109872588A (zh) * | 2019-02-28 | 2019-06-11 | 北京谦仁科技有限公司 | 一种网络课堂的互动方法、装置及系统 |
| CN109816571A (zh) * | 2019-03-27 | 2019-05-28 | 西安电子科技大学 | 在线授课系统中基于教案录音库和伪学生的云-端框架 |
| CN110428680A (zh) * | 2019-08-14 | 2019-11-08 | 莆田学院 | 虚拟仿真技术的数学与应用数学师范生课堂技能训练系统 |
| CN110570698A (zh) * | 2019-08-21 | 2019-12-13 | 北京大米科技有限公司 | 一种在线教学控制方法、装置、存储介质以及终端 |
| CN110618757A (zh) * | 2019-09-23 | 2019-12-27 | 北京大米科技有限公司 | 在线教学控制方法、装置和电子设备 |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112712738A (zh) * | 2020-10-08 | 2021-04-27 | 胡振刚 | 学生显示处理方法和装置、电子装置 |
| CN112712738B (zh) * | 2020-10-08 | 2023-07-21 | 胡振刚 | 学生显示处理方法和装置、电子装置 |
| CN112634684A (zh) * | 2020-12-11 | 2021-04-09 | 深圳市木愚科技有限公司 | 智能教学方法和装置 |
| CN112672178A (zh) * | 2020-12-15 | 2021-04-16 | 创盛视联数码科技（北京）有限公司 | 用户轮播上台方法、装置、电子设备 |
| CN112672178B (zh) * | 2020-12-15 | 2022-01-21 | 创盛视联数码科技（北京）有限公司 | 用户轮播上台方法、装置、电子设备 |
| CN112702416A (zh) * | 2020-12-21 | 2021-04-23 | 泰康保险集团股份有限公司 | 一种在线教学的互动方法和装置 |
| CN113034321A (zh) * | 2021-03-29 | 2021-06-25 | 北京有竹居网络技术有限公司 | 在线课堂提示方法、装置、计算机设备及存储介质 |
| CN114860373A (zh) * | 2022-06-02 | 2022-08-05 | 北京新唐思创教育科技有限公司 | 线上课堂的教学互动方法、装置、设备及介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111680137A (zh) | 在线课堂互动方法、装置、存储介质及终端 | |
| US20180324229A1 (en) | Systems and methods for providing expert assistance from a remote expert to a user operating an augmented reality device | |
| US9381426B1 (en) | Semi-automated digital puppetry control | |
| CN110719529B (zh) | 一种多路视频同步方法、装置、存储介质及终端 | |
| CN104731441B (zh) | 信息处理的方法、以及电子设备 | |
| AU2019262848B2 (en) | Interactive application adapted for use by multiple users via a distributed computer-based system | |
| US9849378B2 (en) | Methods, apparatuses, and systems for remote play | |
| EP4092616A1 (en) | Interaction method and apparatus, and electronic device and computer-readable storage medium | |
| CN109697904B (zh) | 机器人智慧课堂辅助教学系统及方法 | |
| CN1849628A (zh) | 三维虚拟空间模拟器、三维虚拟空间模拟程序及其计算机可读取的记录媒体 | |
| CN111680138B (zh) | 在线课堂互动控制方法、装置、存储介质及终端 | |
| CN112667085A (zh) | 一种课堂互动方法、装置、计算机设备和存储介质 | |
| CN110543239A (zh) | 数字化互动展览综合应用系统 | |
| CN111031555A (zh) | 在线教学控制方法、装置、电子设备及介质 | |
| CN112905087B (zh) | 交互状态的显示方法、装置、设备及可读存储介质 | |
| CN115578494A (zh) | 中间帧的生成方法、装置、设备及存储介质 | |
| CN111369848B (zh) | 基于课件内容互动的方法、装置、存储介质和电子设备 | |
| CN111625089A (zh) | 智能眼镜控制方法、装置、存储介质及智能眼镜 | |
| CN112541843A (zh) | 一种基于人工智能的辅助教学方法及系统 | |
| CN112540668A (zh) | 一种基于AI及IoT的智能教学辅助方法及系统 | |
| CN210119873U (zh) | 一种基于vr设备的监督装置 | |
| US11979448B1 (en) | Systems and methods for creating interactive shared playgrounds | |
| JP3119566B2 (ja) | ネットワーク型マルチユーザー仮想空間による学習システム | |
| CN111211964B (zh) | 一种指令传输方法、装置、存储介质及服务器 | |
| CN104115160A (zh) | 用于创建和显示脸部略图化身的方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |