CN104064064A - 基于多模态人机交互技术的教学辅助系统 - Google Patents

基于多模态人机交互技术的教学辅助系统 Download PDF

Info

Publication number
CN104064064A
CN104064064A CN201410282736.2A CN201410282736A CN104064064A CN 104064064 A CN104064064 A CN 104064064A CN 201410282736 A CN201410282736 A CN 201410282736A CN 104064064 A CN104064064 A CN 104064064A
Authority
CN
China
Prior art keywords
collecting device
module
classroom
audio
sight
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410282736.2A
Other languages
English (en)
Inventor
刘国强
张长瑞
彭杰
赵珍辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Xun Great Information Technology Co Ltd
Original Assignee
Hefei Xun Great Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei Xun Great Information Technology Co Ltd filed Critical Hefei Xun Great Information Technology Co Ltd
Priority to CN201410282736.2A priority Critical patent/CN104064064A/zh
Publication of CN104064064A publication Critical patent/CN104064064A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Electrically Operated Instructional Devices (AREA)

Abstract

基于多模态人机交互技术的教学辅助系统，它包括情景教室，所述情景教室内设置有立体投影仪、音频采集装置、音频播放装置、视频采集装置及主机，所述主机分别与立体投影仪、音频采集装置、音频播放装置、视频采集装置连接。本发明通过捕捉操作者发出的语言以及肢体语言进行分析，然后再由视频集音频来反映出操作者的操作意愿，整个交互过程生动逼真，从而大大提高学生的学习兴趣，提高了教学质量。

Description

基于多模态人机交互技术的教学辅助系统
所属技术领域
本发明涉及教学辅助技术领域，尤其涉及一种基于多模态人机交互技术的教学辅助系统。
背景技术
现阶段教师们的教学课件仍然是以课本教材为主，但是随着时代的进步，教学知识量越来越大，简单的教材已经无法承载，而且仅仅以文字以及简单的二维图形已经很难诠释所学的知识点，从而造成教学质量得不到提升。
发明内容
本发明提供了一种通过音频、视频两种方式来进行人机交互的教学辅助系统。
为了解决背景技术所存在的问题，本发明是采用以下技术方案：它包括情景教室，所述情景教室内设置有立体投影仪、音频采集装置、音频播放装置、视频采集装置及主机，所述主机分别与立体投影仪、音频采集装置、音频播放装置、视频采集装置连接。
所述主机包括中央处理器、信息采集模块、信息处理集模块、数据发布模块，所述音频采集装置、视频采集装置与信息采集模块连接，信息采集模块与信息处理集模块连接，信息处理集模块与中央处理器连接，中央处理器与数据发布模块连接，数据发布模块再与立体投影仪、音频播放装置连接。
所述立体投影仪最少设置有四个，分别安装在情景教室的四角的上方。
所述音频播放装置最少设置有两个，分别安装在情景教室任一对角线的两个角上。
所述音频采集装置和视频采集装置设置在人机交互操作位置处。
本发明通过捕捉操作者发出的语言以及肢体语言进行分析，然后再由视频集音频来反映出操作者的操作意愿，整个交互过程生动逼真，从而大大提高学生的学习兴趣，提高了教学质量。
附图说明
图1为本发明的结构示意图；
图2为本发明的示意框图。
实施方式
参见图1-2，本发明它包括情景教室1，所述情景教室1内设置有立体投影仪2、音频采集装置3、音频播放装置4、视频采集装置5及主机6，所述主机6分别与立体投影仪2、音频采集装置3、音频播放装置4、视频采集装置5连接，所述立体投影仪2最少设置有四个，分别安装在情景教室1的四角的上方，音频播放装置4最少设置有两个，分别安装在情景教室1任一对角线的两个角上，所述音频采集装置3和视频采集装置5设置在人机交互操作位置处，所述主机包括中央处理器、信息采集模块、信息处理集模块、数据发布模块，所述音频采集装置、视频采集装置与信息采集模块连接，信息采集模块与信息处理模块连接，信息处理模块与中央处理器连接，中央处理器与数据发布模块连接，数据发布模块再与立体投影仪、音频播放装置连接。
当需要进行人机交互时，音频采集装置、视频采集装置将人物发出的语言以及肢体语言采集后传送给信息处理集模块，信息处理集模块将信息处理保存到中央处理器中，数据发布模块然后从中央处理器中获取出对应的数据经立体投影仪、音频播放装置在情景教室内播放，如操作者说打开某实验，则立体投影仪就会将数据库中某实验的相关设备在情景教室内投影出来，操作者可用语言或肢体语言来操作某仪器，在某一操作会有相应声音发出时，音频播放装置就会发出相应声响，使操作者如同在现实中操作一般，从而增加学生学习兴趣，提高教学质量。

Claims (5)

1.基于多模态人机交互技术的教学辅助系统，其特征在于：它包括情景教室，所述情景教室内设置有立体投影仪、音频采集装置、音频播放装置、视频采集装置及主机，所述主机分别与立体投影仪、音频采集装置、音频播放装置、视频采集装置连接。
2.根据权利要求1所述的系统，其特征在于，所述主机包括中央处理器、信息采集模块、信息处理集模块、数据发布模块，所述音频采集装置、视频采集装置与信息采集模块连接，信息采集模块与信息处理集模块连接，信息处理集模块与中央处理器连接，中央处理器与数据发布模块连接，数据发布模块再与立体投影仪、音频播放装置连接。
3.根据权利要求2所述的系统，其特征在于，所述立体投影仪最少设置有四个，分别安装在情景教室的四角的上方。
4.根据权利要求3所述的系统，其特征在于，所述音频播放装置最少设置有两个，分别安装在情景教室任一对角线的两个角上。
5.根据权利要求3或4所述的系统，其特征在于，所述音频采集装置和视频采集装置设置在人机交互操作位置处。
CN201410282736.2A 2014-06-14 2014-06-14 基于多模态人机交互技术的教学辅助系统 Pending CN104064064A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410282736.2A CN104064064A (zh) 2014-06-14 2014-06-14 基于多模态人机交互技术的教学辅助系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410282736.2A CN104064064A (zh) 2014-06-14 2014-06-14 基于多模态人机交互技术的教学辅助系统

Publications (1)

Publication Number Publication Date
CN104064064A true CN104064064A (zh) 2014-09-24

Family

ID=51551748

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410282736.2A Pending CN104064064A (zh) 2014-06-14 2014-06-14 基于多模态人机交互技术的教学辅助系统

Country Status (1)

Country Link
CN (1) CN104064064A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104933911A (zh) * 2015-07-13 2015-09-23 安庆状元郎电子科技有限公司 一种人机交互的教学辅助系统
CN104933651A (zh) * 2015-07-15 2015-09-23 滁州市状元郎电子科技有限公司 一种基于三维gis的地理教学辅助系统
CN105160949A (zh) * 2015-09-29 2015-12-16 安徽远大现代教育装备有限公司 一种沉浸式理化综合教育实验室
CN106251728A (zh) * 2016-08-19 2016-12-21 石家庄职业技术学院 一种旅游教育专用学习系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE202010010927U1 (de) * 2010-08-02 2010-11-25 Grunwald, Peter H. Interaktives Demopult
CN102169642A (zh) * 2011-04-06 2011-08-31 李一波 具有智能纠错功能的交互式虚拟教师系统
CN103164995A (zh) * 2013-04-03 2013-06-19 湖南第一师范学院 儿童体感交互式学习系统及方法
CN103531049A (zh) * 2013-11-05 2014-01-22 熊才平 一种异地同步互动网络教学平台
CN103810910A (zh) * 2012-11-06 2014-05-21 西安景行数创信息科技有限公司 人机互动式电子瑜伽教学系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE202010010927U1 (de) * 2010-08-02 2010-11-25 Grunwald, Peter H. Interaktives Demopult
CN102169642A (zh) * 2011-04-06 2011-08-31 李一波 具有智能纠错功能的交互式虚拟教师系统
CN103810910A (zh) * 2012-11-06 2014-05-21 西安景行数创信息科技有限公司 人机互动式电子瑜伽教学系统
CN103164995A (zh) * 2013-04-03 2013-06-19 湖南第一师范学院 儿童体感交互式学习系统及方法
CN103531049A (zh) * 2013-11-05 2014-01-22 熊才平 一种异地同步互动网络教学平台

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104933911A (zh) * 2015-07-13 2015-09-23 安庆状元郎电子科技有限公司 一种人机交互的教学辅助系统
CN104933651A (zh) * 2015-07-15 2015-09-23 滁州市状元郎电子科技有限公司 一种基于三维gis的地理教学辅助系统
CN105160949A (zh) * 2015-09-29 2015-12-16 安徽远大现代教育装备有限公司 一种沉浸式理化综合教育实验室
CN106251728A (zh) * 2016-08-19 2016-12-21 石家庄职业技术学院 一种旅游教育专用学习系统

Similar Documents

Publication Publication Date Title
US20190340944A1 (en) Multimedia Interactive Teaching System and Method
CN111240490A (zh) 基于vr虚拟沉浸及环幕互动的设备绝缘试验培训系统
CN111027486A (zh) 一种中小学课堂教学效果大数据辅助分析评价系统及其方法
CN104064064A (zh) 基于多模态人机交互技术的教学辅助系统
CN110471531A (zh) 虚拟现实中多模态人机对话系统和方法
CN108877361A (zh) 人机共教模式的机器人系统
CN104933919A (zh) 一种教室互动教学平台
CN102044176A (zh) 一种交互式教学装置及其教学方法
CN104933914A (zh) 一种云教学管理系统
CN104064063A (zh) 一种沉浸式校园安全培训仿真系统及其实现方法
CN201946138U (zh) 一种交互式教学装置
CN104933911A (zh) 一种人机交互的教学辅助系统
CN104916178A (zh) 一种交互式录播教室
KR20110024880A (ko) 증강현실 기술을 이용한 문장 학습 방법 및 시스템
CN104933278A (zh) 一种用于言语障碍康复训练的多通道交互方法和系统
CN110992744A (zh) 一种基于vr技术的情景教学系统
CN203085064U (zh) 一种虚拟星空教学设备
CN102663927A (zh) 基于视频与三维路径规划的中国手语标准化训练学习方法
CN103810932A (zh) 一种虚拟星空教学设备
CN107154184B (zh) 一种用于语言学习的虚拟现实设备系统及方法
CN104077931A (zh) 基于自然交互技术的中小学创新实验室
CN201540535U (zh) 一种基于蓝色点识别的非接触式人机交互系统
CN205541511U (zh) 一种教学用互动投影仪
CN103745629A (zh) 一种电子钢琴教学系统
CN204029173U (zh) 一种无线教学系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140924