CN112667085A - 一种课堂互动方法、装置、计算机设备和存储介质 - Google Patents
一种课堂互动方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN112667085A CN112667085A CN202011632395.9A CN202011632395A CN112667085A CN 112667085 A CN112667085 A CN 112667085A CN 202011632395 A CN202011632395 A CN 202011632395A CN 112667085 A CN112667085 A CN 112667085A
- Authority
- CN
- China
- Prior art keywords
- classroom
- target user
- operation instruction
- dimensional scene
- scene image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 67
- 238000000034 method Methods 0.000 title claims abstract description 60
- 238000004088 simulation Methods 0.000 claims abstract description 47
- 230000009471 action Effects 0.000 claims description 19
- 230000008859 change Effects 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 10
- 238000011022 operating instruction Methods 0.000 claims 1
- 238000004891 communication Methods 0.000 description 17
- 230000033001 locomotion Effects 0.000 description 11
- 238000005516 engineering process Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000001413 cellular effect Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000000126 substance Substances 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009469 supplementation Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Abstract
本公开提供了一种课堂互动方法、装置、计算机设备和存储介质,其中,该方法包括:获取课堂中的三维场景图像,并将获取的三维场景图像展示给目标用户;确定目标用户基于所述三维场景图像发送的第一操作指令,并将所述第一操作指令发送给位于课堂上的用户模拟端,以使所述用户模拟端执行所述第一操作指令对应的操作。本公开实施例通过为目标用户展示三维场景图像,以及目标用户基于三维场景图像发送第一操作指令,令课堂中布置的用户模拟端对应执行目标用户所发送的第一操作指令,使目标用户可以更好的体验课堂上的学习氛围,满足目标用户与课堂中用户之间的信息交互;另外,还可以集中目标用户的注意力,提高听课效率。
Description
技术领域
本公开涉及人工智能技术领域,具体而言,涉及一种课堂互动方法、装置、计算机设备和存储介质。
背景技术
随着一些不可抗拒的因素的影响,导致学生无法到线下课堂听老师讲课,而缺席相关课程。目前,学生因缺席课程在家或其他可能的场合进行补习,可以通过传统的平面2D中老师讲课的小窗视频和白板进行线上听课。但是,传统2D模式无法满足学生与学生、学生与老师在真实课堂场景中的信息交互;另外,没有课堂教室中的学习氛围,学生很难保持注意力集中,导致听课效率低。因此,在不可抗拒因素的影响下,如何集中学生注意力,提高听课效率,满足学生在真实环境下的课堂信息交互,是目前在线教育领域亟待解决的问题。
发明内容
本公开实施例至少提供一种课堂互动方法、装置、计算机设备和存储介质。
第一方面,本公开实施例提供了一种课堂互动方法,包括:
获取课堂中的三维场景图像,并将获取的三维场景图像展示给目标用户;
确定目标用户基于所述三维场景图像发送的第一操作指令,并将所述第一操作指令发送给位于课堂上的用户模拟端,以使所述用户模拟端执行所述第一操作指令对应的操作。
一种可选的实施方式中,课堂互动方法还包括:
获取课堂中的语音信息以及所述语音信息对应的位置信息;
基于所述位置信息,将所述语音信息播放给所述目标用户。
一种可选的实施方式中,在将所述语音信息播放给所述目标用户之后,还包括:
确定目标用户基于所述语音信息发送的第二操作指令,并将所述第二操作指令发送给位于课堂上的用户模拟端,以使所述用户模拟端执行所述第二操作指令对应的操作。
一种可选的实施方式中,所述确定目标用户基于所述三维场景图像发送的第一操作指令,包括:
获取所述目标用户基于所述三维场景图像产生的位姿变化信息;
基于所述位姿变化信息,确定目标用户发送的所述第一操作指令。
一种可选的实施方式中,所述第一操作指令包括,目标用户的语音信息的指令、目标用户的肢体动作信息的指令,其中,肢体动作包括抬头、低头、转头、举手、挥手。
一种可选的实施方式中,所述三维场景图像包括全息影像。
第二方面,本公开实施例还提供一种课堂互动方法,包括:
拍摄课堂中的三维场景图像,并将所述三维场景图像发送给用户端;
接收用户端基于所述三维场景图像发送的第一操作指令;
执行所述第一操作指令对应的操作。
一种可选的实施方式中,课堂互动方法还包括:
利用语音采集部件阵列获取课堂中的语音信息;
基于所述语音采集部件阵列中各个语音采集部件的位置以及各个语音采集部件采集到的所述语音信息对应的声音强度,确定所述语音信息对应的位置信息;
将所述语音信息以及所述语音信息对应的位置信息发送给所述用户端。
第三方面,本公开实施例还提供一种课堂互动装置,包括:
第一获取模块,用于获取课堂中的三维场景图像,并将获取的三维场景图像展示给目标用户;
第一发送模块,用于确定目标用户基于所述三维场景图像发送的第一操作指令,并将所述第一操作指令发送给位于课堂上的用户模拟端,以使所述用户模拟端执行所述第一操作指令对应的操作。
一种可选的实施方式中,课堂互动装置还包括第二获取模块,用于获取课堂中的语音信息以及所述语音信息对应的位置信息;基于所述位置信息,将所述语音信息播放给所述目标用户。
一种可选的实施方式中,课堂互动装置还包括第二发送模块,用于在将所述语音信息播放给所述目标用户之后,确定目标用户基于所述语音信息发送的第二操作指令,并将所述第二操作指令发送给位于课堂上的用户模拟端,以使所述用户模拟端执行所述第二操作指令对应的操作。
一种可选的实施方式中,所述第二获取模块,用于获取所述目标用户基于所述三维场景图像产生的位姿变化信息;基于所述位姿变化信息,确定目标用户发送的所述第一操作指令。
一种可选的实施方式中,所述第一操作指令包括以下至少一种:目标用户的语音信息的指令、目标用户的肢体动作信息的指令,其中,肢体动作包括抬头、低头、转头、举手、挥手。
一种可选的实施方式中,所述三维场景图像包括全息影像。
第四方面,本公开实施例还提供一种课堂互动装置,包括:
第三发送模块,用于拍摄课堂中的三维场景图像,并将所述三维场景图像发送给用户端;
接收模块,用于接收用户端基于所述三维场景图像发送的第一操作指令;
执行模块,用于执行所述第一操作指令对应的操作。
一种可选的实施方式中,课堂互动装置还包括第三获取模块、确定模块和第四发送模块:
所述第三获取模块,用于利用语音采集部件阵列获取课堂中的语音信息;
所述确定模块,用于基于所述语音采集部件阵列中各个语音采集部件的位置以及各个语音采集部件采集到的所述语音信息对应的声音强度,确定所述语音信息对应的位置信息;
所述第四发送模块,用于将所述语音信息以及所述语音信息发送给所述用户端。
第五方面,本公开实施例还提供一种计算机设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当计算机设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行上述第一方面或第二方面中任一种可能的实施方式中的步骤。
第六方面,本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述第一方面或第二方面中任一种可能的实施方式中的步骤。
关于上述课堂互动装置、计算机设备和存储介质的效果描述参见上述课堂互动方法的说明,这里不再赘述。
本公开实施例提供的课堂互动方法、装置、计算机设备和存储介质,通过获取课堂中的三维场景图像,并将获取的三维场景图像展示给目标用户,确定目标用户基于三维场景图像发送的第一操作指令,并将第一操作指令发送给位于课堂上的用户模拟端,以使用户模拟端执行第一操作指令对应的操作,与现有技术中的通过2D视频为学生展示课程相比,其为目标用户展示三维场景图像,以及目标用户基于三维场景图像发送第一操作指令,令课堂中布置的用户模拟端对应执行目标用户所发送的第一操作指令,使目标用户可以更好的体验课堂上的学习氛围,满足目标用户与课堂中用户之间的信息交互;另外,还可以集中目标用户的注意力,提高目标用户听课的效率。
进一步,本公开实施例提供的课堂互动方法、装置、计算机设备和存储介质,还可以通过利用语音采集部件阵列获取课堂中的语音信息;基于语音采集部件阵列中各个语音采集部件的位置以及各个语音采集部件采集到的语音信息对应的声音强度,确定语音信息对应的位置信息;将语音信息以及语音信息对应的位置信息发送给用户端,语音采集部件阵列可以精准的定位到课堂中每一用户的声音来源,通过采集的空间立体声音,满足目标用户身临课堂的体验感,同时,目标用户基于语音消息还可以对应发送第二操控指令给用户模拟端,实现目标用户与课堂中用户之间的交流。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种课堂互动方法的应用场景示意图;
图2示出了本公开实施例所提供的一种课堂互动方法的流程图;
图3示出了本公开实施例所提供的另一种课堂互动方法的流程图;
图4示出了本公开实施例所提供的一种课堂互动装置的示意图;
图5示出了本公开实施例所提供的另一种课堂互动装置的示意图;
图6示出了本公开实施例所提供的一种计算机设备的结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
另外,本公开实施例中的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。
在本文中提及的“多个或者若干个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
对本发明实施例中涉及的部分用语进行说明,以便于本领域技术人员理解。
1、2D又叫二维是指平面维度(2-dimensional)。
2、3D又叫三维是指空间维度(3-dimensional),既是坐标轴的三个轴,即X轴、Y轴和Z轴,分别表示左右空间、前后空间和上下空间,一般用X轴形容左右运动,用Z轴来形容上下运动,用Y轴来形容前后运动,形成人的视觉立体感。
经研究发现,学生因一些不可抗拒因素而缺席课程,在家或其他可能的场合进行补习,可以通过传统的平面2D中老师讲课的小窗视频和白板进行线上听课。但是,传统2D模式无法满足学生与学生、学生与老师在真实课堂场景中的信息交互;另外,没有课堂教室中的学习氛围,学生很难保持注意力集中,导致听课效率低。
基于上述研究,本公开提供了一种课堂互动方法、装置、计算机设备和存储介质,使目标用户可以在非课堂场所中体验课堂上的氛围,满足了目标用户与课堂中用户之间的信息交互;另外,还可以集中目标用户的注意力,提高听课效率;另外,还可以通过用户模拟端精准的定位到课堂中每一用户的声音来源,通过空间立体声音,满足目标用户身临课堂的体验感。
针对以上方案所存在的缺陷,均是发明人在经过实践并仔细研究后得出的结果,因此,上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案,都应该是发明人在本公开过程中对本公开做出的贡献。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
为便于对本实施例进行理解,首先对本实施例提供的一种课堂互动方法的应用场景进行介绍。如图1所示,其为本公开实施例提供的一种课堂互动方法的应用场景示意图。目标用户10通过视听操作套件11控制可控机器套件12执行目标用户10发送的指令对应的操作。其中,视听操作套件11可以包括语音播放装置、体感设备、手持操控装置、全息投影装置等,可控机器套件12可以包括机器人等,其中,机器人可以包括场景摄像头121。
视听操作套件11与可控机器套件12之间通过网络进行通信连接,该网络可以为局域网、蜂窝网和广域网等,优选5G通信网络。
视听操作套件11可以为目标用户提供不同的课堂互动场景,例如,视听操作套件11可以为在家上课的学生提供在家庭中体验课堂真实场景,并与课堂中的老师和同学进行互动,这种情况下,本公开实施例中涉及的三维场景图像可以是为目标用户提供的针对课堂场景的三维图像信息。或者,视听操作套件11还可以为在课堂上课的学生提供在外地课堂授课的老师的三维场景图像,在课堂上课的学生可以体验老师所在地课堂的真实场景,并与老师进行互动,这种情况下,本公开实施例中涉及的三维场景图像也可以是为在课堂上课的学生提供的针对在外地课堂授课的老师所在地场景的全息投影。或者,视听操作套件11还可以为在在家上课的学生提供在特定机构授课的老师的三维场景图像,在家上课的学生可以体验老师所在地课堂的真实场景,并与老师进行互动,这种情况下,本公开实施例中涉及的三维场景图像也可以是为在家上课的学生提供的针对在特定机构授课的老师所在地场景的三维图像信息等。具体实施时,根据视听操作套件11提供的课堂互动场景的不同,本公开实施例中涉及的三维场景图像也不同,这里不再一一列举。
下面对本公开实施例所公开的一种课堂互动方法进行详细介绍,本公开实施例所提供的课堂互动方法的执行主体一般为具有一定计算能力的计算机设备,该计算机设备例如包括:终端设备或服务器或其它处理设备,终端设备可以为用户设备(User Equipment,UE)、移动设备、用户终端、终端、蜂窝电话、无绳电话、个人数字助理(Personal DigitalAssistant,PDA)、手持设备、计算设备、车载设备、可穿戴设备等。
在一些可能的实现方式中,该课堂互动方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
下面以执行主体为计算机设备为例对本公开实施例提供的一种课堂互动方法加以说明。
实施例一
参见图2所示,为本公开实施例提供的一种课堂互动方法的流程图,执行视听操作套件11的操作,该方法包括步骤S201~S202,其中:
S201:获取课堂中的三维场景图像,并将获取的三维场景图像展示给目标用户。
本步骤中,三维场景图像可以是利用可控机器套件12中的场景摄像头121拍摄课堂场景所获得的全息影像。
具体实施时,可以利用5G通信技术为目标用户实时传输课堂中场景摄像头121反馈的三维场景图像,并将获取的三维场景图像通过视听操作套件11中包括的全息投影装置展示给目标用户。目标用户所在地可以是除课堂场所以外的其他可能的场所,比如,目标用户在家,接收场景摄像头121拍摄的课堂中的三维场景图像,并将三维场景图像通过全景投影装置展示。其中,全息投影装置可以包括广角摄像头、投影机、控制器、弧形屏或多屏等。
在一种可能的实施方式中,通过获取课堂中的语音信息以及语音信息对应的位置信息;基于位置信息,将语音信息播放给目标用户。具体实施时,目标用户可以通过5G通信技术实时获取用户模拟端中语音采集部件阵列采集到的课堂中的语音信息,其中,语音采集部件阵列可以包括麦克风阵列。通过语音信息对应的声音强度,目标用户可以具体定位到课堂中语音信息对应的位置信息,基于位置信息,可以通过视听操作套件11中的语音播放装置播放语音信息给目标用户。例如,在家上课的学生可以通过5G通信技术实时获取教室中机器人麦克风阵列采集到的课堂中的语音信息,通过语音信息对应的声音强度,在家上课的学生可以确定出课堂中语音信息对应的位置信息,具体定位到课堂中的学生A或老师,基于位置信息,可以通过在家设置的视听操作套件11中的语音播放装置为学生播放课堂中老师或者学生A对应的语音信息。由于目标用户利用机器人中麦克风阵列可以精准的定位到课堂中每一用户的声音来源,通过立体声音,满足了目标用户身临课堂的体验感。
S202:确定目标用户基于三维场景图像发送的第一操作指令,并将第一操作指令发送给位于课堂上的用户模拟端,以使用户模拟端执行第一操作指令对应的操作。
本步骤中,第一操作指令可以包括以下至少一种:目标用户的语音信息的指令、目标用户的肢体动作信息的指令,其中,肢体动作可以包括但不仅限于抬头、低头、转头、举手、挥手等。用户模拟端可以为可控机器套件12,包括预先设置在课堂场景中的机器人,该机器人可以与目标用户所拥有的视听操作套件11进行通信,可以利用5G通信技术,实时传输目标用户和课堂用户之间信息。
在一种可能的实施方式中,第一操作指令可以是目标用户利用视听操作套件11中包括的体感设备发送的指令。其中,体感设备可以发送目标用户的肢体动作信息的指令。或者,第一操作指令可以是目标用户利用视听操作套件11中包括的手持操控设备发送的指令。其中,手持操控设备可以发送目标用户的语音信息的指令,或者,还可以发送目标用户指定的肢体动作的指令。
在一种可能的实施方式中,可以获取目标用户基于三维场景图像产生的位姿变化信息;基于位姿变化信息,确定目标用户发送的第一操作指令。比如,可以获取在家上课的学生基于三维场景图像产生的“手部”位姿变化信息和/或“头部”位姿变化信息,基于位姿变化信息,确定在家上课的学生发送的“举手”、“挥手”、“抬头”、“低头”或“转头”等指令。
具体实施时,基于步骤S101中获取的三维场景图像中反馈的信息,目标用户可以通过三维场景图像中反馈的信息得到针对目标用户本身的信息,并做出反应,目标用户可以通过体感设备或者手持操控设备向用户模拟端发送第一操作指令,利用5G通信技术快速向用户模拟设备传输第一操作指令,当用户模拟设备接收到第一操作指令时,用户模拟设备执行接收到的第一操作指令对应的操作。例如,针对在家上课的学生,可以通过全息投影装置实现在家上课却拥有在课堂上课的真实体验,当在家上课的学生通过获取三维场景图像中反馈的信息得到老师提出的问题或者课堂学生提出的问题,在家上课的学生可以向机器人发送语音信息的指令,利用机器人为课堂中的老师和学生展示在家上课的学生的语音信息;在家上课的学生还可以向机器人发送肢体动作信息的指令,为课堂中的老师和学生展示肢体动作信息。比如,在家上课的学生可以利用体感设备与机器人通信,利用5G通信技术为课堂中的老师和学生实时传输在家上课的学生的肢体动作,保证在家上课的学生与机器人实现同步肢体动作,如机器人模拟在家上课的学生的抬头、低头、转头、举手、挥手等动作。或者,在家上课的学生还可以利用手持操控设备与机器人通信,利用5G通信技术为课堂中的老师和学生传输在家上课的学生的动作指令,令机器人执行如抬头、低头、转头、举手、挥手等动作的指令;或者,在家上课的学生还可以利用手持操控设备与机器人通信,利用5G通信技术为课堂中的老师和学生实时传输在家上课的学生的语音信息。
在一种可能的实施方式中,确定目标用户基于语音信息发送的第二操作指令,并将第二操作指令发送给位于课堂上的用户模拟端,以使用户模拟端执行第二操作指令对应的操作。其中,第二操作指令可以包括目标用户的语音信息的指令、目标用户的肢体动作信息的指令,其中,肢体动作可以包括抬头、低头、转头、举手、挥手等。具体实施时,基于课堂中的语音信息所反馈的信息,目标用户可以从反馈的信息中得到针对目标用户本身的信息,并做出反应,目标用户可以通过体感设备或者手持操控设备向用户模拟端发送第二操作指令,利用5G通信技术快速向用户模拟设备传输第二操作指令,当用户模拟设备接收到第二操作指令时,用户模拟设备执行接收到的第二操作指令对应的操作。例如,针对在家上课的学生,基于课堂上老师提出的问题,在家上课的学生可以先举手,在该学生利用体感设备与机器人通信的前提下,机器人可以模拟在家上课学生举手的动作,在老师点名同意在家上课的学生回答该问题时,针对老师提出的问题,在家上课的学生可以通过语音发送装置,利用5G通信技术为课堂上的老师和通信实时传输在家上课的学生回答问题的语音信息。
通过上述步骤S101~步骤S102,可以为目标用户展示三维场景图像,以及为目标用户传输语音信息,基于三维场景图和语音信息,目标用户发送第一操作指令和第二操作指令,令课堂中布置的用户模拟端对应执行目标用户所发送的第一操作指令和第二操作指令,使目标用户可以在非课堂场所中体验课堂上的氛围,并通过为目标用户发送精准定位到的课堂中声音的来源,满足了目标用户身临课堂的体验感,进一步满足了目标用户与课堂中用户之间的信息交互;另外,还可以集中目标用户的注意力,提高听课效率。
另外,本公开实施例还可以应用于线上在本地课堂上课的学生与在外地课堂授课的老师之间进行互动的场景。示例性的,可以获取老师在外地课堂的三维场景图像,并将获取的三维场景图像展示给本地课堂上课的学生;确定在课堂上课的学生基于三维场景图像发送的第一操作指令,并将第一操作指令发送给位于在外地的用户模拟终端,以使用户模拟终端执行第一操作指令对应的操作。或者,还可以获取老师所在课堂的语音信息以及语音信息对应的位置信息,基于位置信息,将语音信息播放给在课堂上课的学生。确定在课堂上课的学生基于语音信息发送的第二操作指令,并将第二操作指令发送给位于在外地的用户模拟终端,以使用户模拟终端执行第二操作指令对应的操作。因此,学生还可以在课堂场所中体会老师所在地的三维场景图像,集中学生注意力,提高学生的听课效率。
下面以执行主体为具有计算能力的设备为例对本公开实施例提供的一种课堂互动方法加以说明。
实施例二
参见图3所示,为本公开实施例提供的另一种课堂互动方法的流程图,执行可控机器套件12的操作,该方法包括步骤S301~S303,其中:
S301:拍摄课堂中的三维场景图像,并将三维场景图像发送给用户端;
S302:接收用户端基于三维场景图像发送的第一操作指令;
S303:执行第一操作指令对应的操作。
在一种可能的实施方式中,课堂互动方法还包括:利用语音采集部件阵列获取课堂中的语音信息;基于所述语音采集部件阵列中各个语音采集部件的位置以及各个语音采集部件采集到的所述语音信息对应的声音强度,确定所述语音信息对应的位置信息;将所述语音信息以及所述语音信息对应的位置信息发送给所述用户端。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思,本公开实施例中还提供了与课堂互动方法对应的课堂互动装置,由于本公开实施例中的装置解决问题的原理与本公开实施例上述课堂互动方法相似,因此装置的实施可以参见方法的实施,重复之处不再赘述。
实施例三
参照图4所示,为本公开实施例提供的一种课堂互动装置的示意图,所述装置包括:第一获取模块401和第一发送模块402;其中,
第一获取模块401,用于获取课堂中的三维场景图像,并将获取的三维场景图像展示给目标用户;
第一发送模块402,用于确定目标用户基于所述三维场景图像发送的第一操作指令,并将所述第一操作指令发送给位于课堂上的用户模拟端,以使所述用户模拟端执行所述第一操作指令对应的操作。
一种可选的实施方式中,课堂互动装置还包括第二获取模块403,用于获取课堂中的语音信息以及所述语音信息对应的位置信息;基于所述位置信息,将所述语音信息播放给所述目标用户。
一种可选的实施方式中,课堂互动装置还包括第二发送模块404,用于在将所述语音信息播放给所述目标用户之后,确定目标用户基于所述语音信息发送的第二操作指令,并将所述第二操作指令发送给位于课堂上的用户模拟端,以使所述用户模拟端执行所述第二操作指令对应的操作。
一种可选的实施方式中,所述第二获取模块403,用于获取所述目标用户基于所述三维场景图像产生的位姿变化信息;基于所述位姿变化信息,确定目标用户发送的所述第一操作指令。
一种可选的实施方式中,所述第一操作指令包括以下至少一种:目标用户的语音信息的指令、目标用户的肢体动作信息的指令,其中,肢体动作包括抬头、低头、转头、举手、挥手。
一种可选的实施方式中,所述三维场景图像包括全息影像。
参照图5所示,为本公开实施例提供的另一种课堂互动装置的示意图,该装置包括:第三发送模块501、接收模块502和执行模块503;其中,
第三发送模块501,用于拍摄课堂中的三维场景图像,并将所述三维场景图像发送给用户端;
接收模块502,用于接收用户端基于所述三维场景图像发送的第一操作指令;
执行模块503,用于执行所述第一操作指令对应的操作。
一种可选的实施方式中,课堂互动装置还包括第三获取模块504、确定模块505和第四发送模块506:
所述第三获取模块504,用于利用语音采集部件阵列获取课堂中的语音信息;
所述确定模块505,用于基于所述语音采集部件阵列中各个语音采集部件的位置以及各个语音采集部件采集到的所述语音信息对应的声音强度,确定所述语音信息对应的位置信息;
所述第四发送模块506,用于将所述语音信息以及所述语音信息发送给所述用户端。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明,这里不再详述。
实施例四
基于同一技术构思,本申请实施例还提供了一种计算机设备。参照图6所示,为本申请实施例提供的计算机设备的结构示意图,包括:
处理器61、存储器62和总线63。其中,存储器62存储有处理器61可执行的机器可读指令,处理器61用于执行存储器62中存储的机器可读指令,所述机器可读指令被处理器61执行时,处理器61执行下述步骤:S201:获取课堂中的三维场景图像,并将获取的三维场景图像展示给目标用户;S202:确定目标用户基于三维场景图像发送的第一操作指令,并将第一操作指令发送给位于课堂上的用户模拟端,以使用户模拟端执行第一操作指令对应的操作。或者执行下述步骤:S301:拍摄课堂中的三维场景图像,并将三维场景图像发送给用户端;S302:接收用户端基于三维场景图像发送的第一操作指令;S303:执行第一操作指令对应的操作。
上述存储器62包括内存621和外部存储器622;这里的内存621也称内存储器,用于暂时存放处理器61中的运算数据,以及与硬盘等外部存储器622交换的数据,处理器61通过内存621与外部存储器622进行数据交换,当计算机设备运行时,处理器61与存储器62之间通过总线63通信,使得处理器61在执行上述方法实施例中所提及的执行指令。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的课堂互动方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例所还提供一种计算机程序产品,该计算机程序产品承载有程序代码,所述程序代码包括的指令可用于执行上述方法实施例中所述的课堂互动方法的步骤,具体可参见上述方法实施例,在此不再赘述。
其中,上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software Development Kit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个模块或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本公开的具体实施方式,用以说明本公开的技术方案,而非对其限制,本公开的保护范围并不局限于此,尽管参照前述实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应所述以权利要求的保护范围为准。
Claims (12)
1.一种课堂互动方法,其特征在于,包括:
获取课堂中的三维场景图像,并将获取的三维场景图像展示给目标用户;
确定目标用户基于所述三维场景图像发送的第一操作指令,并将所述第一操作指令发送给位于课堂上的用户模拟端,以使所述用户模拟端执行所述第一操作指令对应的操作。
2.根据权利要求1所述的课堂互动方法,其特征在于,还包括:
获取课堂中的语音信息以及所述语音信息对应的位置信息;
基于所述位置信息,将所述语音信息播放给所述目标用户。
3.根据权利要求2所述的课堂互动方法,其特征在于,在将所述语音信息播放给所述目标用户之后,还包括:
确定目标用户基于所述语音信息发送的第二操作指令,并将所述第二操作指令发送给位于课堂上的用户模拟端,以使所述用户模拟端执行所述第二操作指令对应的操作。
4.根据权利要求1所述的课堂互动方法,其特征在于,所述确定目标用户基于所述三维场景图像发送的第一操作指令,包括:
获取所述目标用户基于所述三维场景图像产生的位姿变化信息;
基于所述位姿变化信息,确定目标用户发送的所述第一操作指令。
5.根据权利要求1所述的课堂互动方法,其特征在于,所述第一操作指令包括以下至少一种:目标用户的语音信息的指令、目标用户的肢体动作信息的指令,其中,肢体动作包括抬头、低头、转头、举手、挥手。
6.根据权利要求1所述的课堂互动方法,其特征在于,所述三维场景图像包括全息影像。
7.一种课堂互动方法,其特征在于,包括:
拍摄课堂中的三维场景图像,并将所述三维场景图像发送给用户端;
接收用户端基于所述三维场景图像发送的第一操作指令;
执行所述第一操作指令对应的操作。
8.根据权利要求7所述的课堂互动方法,其特征在于,还包括:
利用语音采集部件阵列获取课堂中的语音信息;
基于所述语音采集部件阵列中各个语音采集部件的位置以及各个语音采集部件采集到的所述语音信息对应的声音强度,确定所述语音信息对应的位置信息;
将所述语音信息以及所述语音信息对应的位置信息发送给所述用户端。
9.一种课堂互动装置,其特征在于,包括:
第一获取模块,用于获取课堂中的三维场景图像,并将获取的三维场景图像展示给目标用户;
第一发送模块,用于确定目标用户基于所述三维场景图像发送的第一操作指令,并将所述第一操作指令发送给位于课堂上的用户模拟端,以使所述用户模拟端执行所述第一操作指令对应的操作。
10.一种课堂互动装置,其特征在于,包括:
第三发送模块,用于拍摄课堂中的三维场景图像,并将所述三维场景图像发送给用户端;
接收模块,用于接收用户端基于所述三维场景图像发送的第一操作指令;
执行模块,用于执行所述第一操作指令对应的操作。
11.一种计算机设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当计算机设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至8任一项所述的课堂互动方法的步骤。
12.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至8任一项所述的课堂互动方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011632395.9A CN112667085A (zh) | 2020-12-31 | 2020-12-31 | 一种课堂互动方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011632395.9A CN112667085A (zh) | 2020-12-31 | 2020-12-31 | 一种课堂互动方法、装置、计算机设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112667085A true CN112667085A (zh) | 2021-04-16 |
Family
ID=75413171
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011632395.9A Pending CN112667085A (zh) | 2020-12-31 | 2020-12-31 | 一种课堂互动方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112667085A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113744583A (zh) * | 2021-09-09 | 2021-12-03 | 南京鑫宏博教育科技有限公司 | 基于物联网进行网络教学管理的方法及装置 |
CN114281196A (zh) * | 2021-12-31 | 2022-04-05 | Oook(北京)教育科技有限责任公司 | 用于直播课堂的体感互动方法、装置、介质和电子设备 |
CN114397959A (zh) * | 2021-12-13 | 2022-04-26 | 北京大麦文化传播有限公司 | 互动提示方法、装置及设备 |
CN114860373A (zh) * | 2022-06-02 | 2022-08-05 | 北京新唐思创教育科技有限公司 | 线上课堂的教学互动方法、装置、设备及介质 |
CN115097965A (zh) * | 2022-06-23 | 2022-09-23 | 北京新唐思创教育科技有限公司 | 信息处理方法、装置、设备和存储介质 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN210402777U (zh) * | 2018-09-26 | 2020-04-24 | 宋飞 | 一种虚拟现实教学设备 |
-
2020
- 2020-12-31 CN CN202011632395.9A patent/CN112667085A/zh active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN210402777U (zh) * | 2018-09-26 | 2020-04-24 | 宋飞 | 一种虚拟现实教学设备 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113744583A (zh) * | 2021-09-09 | 2021-12-03 | 南京鑫宏博教育科技有限公司 | 基于物联网进行网络教学管理的方法及装置 |
CN114397959A (zh) * | 2021-12-13 | 2022-04-26 | 北京大麦文化传播有限公司 | 互动提示方法、装置及设备 |
CN114281196A (zh) * | 2021-12-31 | 2022-04-05 | Oook(北京)教育科技有限责任公司 | 用于直播课堂的体感互动方法、装置、介质和电子设备 |
CN114281196B (zh) * | 2021-12-31 | 2024-01-26 | Oook(北京)教育科技有限责任公司 | 用于直播课堂的体感互动方法、装置、介质和电子设备 |
CN114860373A (zh) * | 2022-06-02 | 2022-08-05 | 北京新唐思创教育科技有限公司 | 线上课堂的教学互动方法、装置、设备及介质 |
CN115097965A (zh) * | 2022-06-23 | 2022-09-23 | 北京新唐思创教育科技有限公司 | 信息处理方法、装置、设备和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112667085A (zh) | 一种课堂互动方法、装置、计算机设备和存储介质 | |
KR101918262B1 (ko) | 혼합 현실 서비스 제공 방법 및 시스템 | |
KR102382362B1 (ko) | 거울 메타포를 사용한 원격 몰입 경험 제공 | |
US9654734B1 (en) | Virtual conference room | |
US9538167B2 (en) | Methods, systems, and computer readable media for shader-lamps based physical avatars of real and virtual people | |
CN106293087B (zh) | 一种信息交互方法及电子设备 | |
JP6683864B1 (ja) | コンテンツ制御システム、コンテンツ制御方法、およびコンテンツ制御プログラム | |
CN110568923A (zh) | 基于Unity3D的虚拟现实交互方法、装置、设备及存储介质 | |
CN111680137A (zh) | 在线课堂互动方法、装置、存储介质及终端 | |
KR20120113058A (ko) | 현실-가상 융합 공간 기반의 교육 장치 및 방법 | |
Pope et al. | The latest in immersive telepresence to support shared engineering education | |
CN209928635U (zh) | 一种基于移动增强现实的模具设计教学系统 | |
Lu et al. | An immersive telepresence system using rgb-d sensors and head mounted display | |
KR100445846B1 (ko) | 대인 공포증 치료를 위한 가상 연설 시뮬레이터 | |
CN210072615U (zh) | 一种沉浸式教练系统及可穿戴设备 | |
CN109360274A (zh) | 沉浸式虚拟现实构建方法、装置、智能升降桌及存储介质 | |
Horst et al. | Avatar2Avatar: Augmenting the Mutual Visual Communication between Co-located Real and Virtual Environments. | |
Gholap et al. | Past, present, and future of the augmented reality (ar)-enhanced interactive techniques: A survey | |
JP2021009351A (ja) | コンテンツ制御システム、コンテンツ制御方法、およびコンテンツ制御プログラム | |
Flinton et al. | NETIVAR: NETwork information visualization based on augmented reality | |
Coburn | An analysis of enabling techniques for highly-accessible low-cost virtual reality hardware in the collaborative engineering design process | |
CN211264542U (zh) | 一种基于高速通讯技术的教学支持系统 | |
Gupta et al. | Training in virtual environments | |
Schäfer | Improving Essential Interactions for Immersive Virtual Environments with Novel Hand Gesture Authoring Tools | |
Scapolan | Supporting group-work in a mixed reality educational experience |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |