CN108648525A - 一种数字音乐教室 - Google Patents

一种数字音乐教室 Download PDF

Info

Publication number
CN108648525A
CN108648525A CN201810413553.8A CN201810413553A CN108648525A CN 108648525 A CN108648525 A CN 108648525A CN 201810413553 A CN201810413553 A CN 201810413553A CN 108648525 A CN108648525 A CN 108648525A
Authority
CN
China
Prior art keywords
module
data
sent
digital music
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810413553.8A
Other languages
English (en)
Inventor
杜玉霞
王广照
王明锐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Weifang University
Original Assignee
Weifang University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Weifang University filed Critical Weifang University
Priority to CN201810413553.8A priority Critical patent/CN108648525A/zh
Publication of CN108648525A publication Critical patent/CN108648525A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/08Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
    • G09B5/14Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations with provision for individual teacher-student communication

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种数字音乐教室,包括人机操作模块、视频采集模块、音频采集模块、数据处理模块、动作命令识别模块、三维互动模块、背景生成模块和中央处理器。本发明实现了三维场景、动态三维模型、互动三维模型以及各种背景环境的模拟,使得学习者有一种身临其境的逼真感,实现了学生的互动学习,同时整个运用的过程可通过动作命令和声控命令以及文字命令输入三种方式进行协调控制,使用方便,智能化程度高。

Description

一种数字音乐教室
技术领域
本发明涉及数字系统领域,具体涉及一种数字音乐教室。
背景技术
现有的数字音乐教室普遍存在以下缺陷:
1、只能单纯的进行背景环境的模拟;
2、在整个使用的过程中需要教师人为的进行文字形式的或代号形式的控制命令的输入,使用不方便,智能化程度较低;
3、无法实现学生的互动学习;
发明内容
为解决上述问题,本发明提供了一种数字音乐教室,实现了三维场景、动态三维模型、互动三维模型以及各种背景环境的模拟,使得学习者有一种身临其境的逼真感,实现了学生的互动学习;同时整个运用的过程可通过动作命令和声控命令以及文字命令输入三种方式进行协调控制,使用方便,智能化程度高。
为实现上述目的,本发明采取的技术方案为:
一种数字音乐教室,包括
人机操作模块,用于用户登录,还用于进行各种控制命令以及其它数据的输入;
视频采集模块,用于通过摄像头进行正在进行教学的教师或交互学习的学生的动作视频的采集,并通过数据传输模块发送到数据处理模块;
音频采集模块,用于通过麦克风进行正在教学的教师或交互学习的学生的音频的采集,并通过数据采集模块发送到数据处理模块;
数据处理模块,用于通过kinect深度传感器进行所采集到的图像数据中骨骼信息的获取,还用于消除锁获得骨骼信息的抖动和噪声干扰,并计算获取所有骨骼对的角度旋转移动SO3矩阵信息,并将所获取的角度旋转移动SO3矩阵信息发送到动作识别模块;还用于识别所接收到的音频数据内的音频控制命令,并将识别结果发送到中央处理器;
动作命令识别模块,用于将所获取的的角度旋转移动SO3矩阵信息与动作控制命令数据库内的角度旋转移动SO3矩阵信息进行比较,并将相似度最高的控制命令输出至中央处理器;
三维互动模块,包括空气屏幕生成系统、若干组3D投影仪和素材数据库,用于根据中央处理器发送的控制命令从素材数据库内调用相应的数据建立各种场景、动态三维模型、互动三维模型;
背景生成模块,包括高性能图形集群服务器、六组投影仪、素材数据库以及布置在音乐教室内四壁和顶面上的立体柱状环幕,面向六通道同步并行图像运算,并予以详细刻画,用于根据中央处理器发送的控制命令从素材数据库内调用相应的数据构建各种背景;
中央处理器,用于接收人机操作模块、数据处理模块以及动作命令识别模块输入的控制命令,并按照预设的权限和算法将这些控制命令发送到指定的模块;用于根据人机操作模块输入的数据调用命令在数据库内调用相应的数据发送到显示屏或指定的移动终端进行显示;还用于用户注册、权限管理以及密码修改。
优选地,还包括音乐背景播放模块,用于根据中央处理器发送的控制命令进行相应的音乐背景的播放,包括音响和素材数据库,音响采用地埋式和墙埋设布置。
优选地,还包括LED灯模块,用于根据中央处理器发送的控制命令构建相应的灯光背景,其布置方式分为埋地式、地面分布式以及半空分布式。
优选地,还包括一人脸识别模块,用于进行所采集到视频数据中人脸数据的识别,从而实现动作控制命令权限的判定以及分类。
优选地,还包括一声纹识别模块,用于进行所采集到音频数据中声纹数据的识别,从而实现声控命令的权限的判定以及分类。
优选地,还包括一显示屏,用于进行教学视频、教学音频、教学文本以及教学图片的播放,内设转换模块,可以根据需要将教学音频转换成文字播放,也可以根据需要将教学文本转换成音频播放;还用于显示人机操作模块输入的各种数据以及整个使用过程中需要显示的数据。
优选地,所述显示屏通过无线与中央处理器相连,包括带万向轮的底座以及通过电动伸缩杆安装在其上的显示屏本体。
本发明具有以下有益效果:
实现了三维场景、动态三维模型、互动三维模型以及各种背景环境的模拟,使得学习者有一种身临其境的逼真感,实现了学生的互动学习,同时整个运用的过程可通过动作命令和声控命令以及文字命令输入三种方式进行协调控制,使用方便,智能化程度高。
附图说明
图1为本发明实施例一种数字音乐教室的系统框图。
具体实施方式
为了使本发明的目的及优点更加清楚明白,以下结合实施例对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,本发明实施例提供了
一种数字音乐教室,包括
人机操作模块,用于用户登录,还用于进行各种控制命令以及其它数据的输入;
显示屏,用于进行教学视频、教学音频、教学文本以及教学图片的播放,内设转换模块,可以根据需要将教学音频转换成文字播放,也可以根据需要将教学文本转换成音频播放;还用于显示人机操作模块输入的各种数据以及整个使用过程中需要显示的数据。
所述人机操作模块与显示屏模块集成设计,采用触控屏;优选地,所述触控屏通过无线与中央处理器相连,包括带万向轮的底座以及通过电动伸缩杆安装在其上的触控屏本体。
视频采集模块,用于通过摄像头进行正在进行教学的教师或交互学习的学生的动作视频的采集,并通过数据传输模块发送到数据处理模块;该模块包括一底座、通过电动伸缩杆安装在底座上方的摄像头以及安装在底座下方的万向轮;
音频采集模块,用于通过麦克风进行正在教学的教师或交互学习的学生的音频的采集,并通过数据采集模块发送到数据处理模块;
数据处理模块,用于通过kinect深度传感器进行所采集到的图像数据中骨骼信息的获取,还用于消除锁获得骨骼信息的抖动和噪声干扰,并计算获取所有骨骼对的角度旋转移动SO3矩阵信息,并将所获取的角度旋转移动SO3矩阵信息发送到动作识别模块;还用于识别所接收到的音频数据内的音频控制命令,并将识别结果发送到中央处理器;
动作命令识别模块,用于将所获取的的角度旋转移动SO3矩阵信息与动作控制命令数据库内的角度旋转移动SO3矩阵信息进行比较,并将相似度最高的控制命令输出至中央处理器;
三维互动模块,包括空气屏幕生成系统、若干组3D投影仪和素材数据库,用于根据中央处理器发送的控制命令从素材数据库内调用相应的数据建立各种场景、动态三维模型、互动三维模型;
背景生成模块,包括高性能图形集群服务器、六组投影仪、素材数据库以及布置在音乐教室内四壁和顶面上的立体柱状环幕,面向六通道同步并行图像运算,并予以详细刻画,用于根据中央处理器发送的控制命令从素材数据库内调用相应的数据构建各种背景;
音乐背景播放模块,用于根据中央处理器发送的控制命令进行相应的音乐背景的播放,包括音响和素材数据库,音响采用地埋式和墙埋设布置。
LED灯模块,用于根据中央处理器发送的控制命令构建相应的灯光背景,其布置方式分为埋地式、地面分布式以及半空分布式。
人脸识别模块,用于进行所采集到视频数据中人脸数据的识别,从而实现动作控制命令权限的判定以及分类。
声纹识别模块,用于进行所采集到音频数据中声纹数据的识别,从而实现声控命令的权限的判定以及分类。
中央处理器,用于接收人机操作模块、数据处理模块以及动作命令识别模块输入的控制命令,并按照预设的权限和算法将这些控制命令发送到指定的模块;用于根据人机操作模块输入的数据调用命令在数据库内调用相应的数据发送到显示屏或指定的移动终端进行显示;还用于用户注册、权限管理以及密码修改。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (7)

1.一种数字音乐教室,其特征在于,包括
人机操作模块,用于用户登录,还用于进行各种控制命令以及其它数据的输入;
视频采集模块,用于通过摄像头进行正在进行教学的教师或交互学习的学生的动作视频的采集,并通过数据传输模块发送到数据处理模块;
音频采集模块,用于通过麦克风进行正在教学的教师或交互学习的学生的音频的采集,并通过数据采集模块发送到数据处理模块;
数据处理模块,用于通过k i nect深度传感器进行所采集到的图像数据中骨骼信息的获取,还用于消除锁获得骨骼信息的抖动和噪声干扰,并计算获取所有骨骼对的角度旋转移动SO3矩阵信息,并将所获取的角度旋转移动SO3矩阵信息发送到动作识别模块;还用于识别所接收到的音频数据内的音频控制命令,并将识别结果发送到中央处理器;
动作命令识别模块,用于将所获取的的角度旋转移动SO3矩阵信息与动作控制命令数据库内的角度旋转移动SO3矩阵信息进行比较,并将相似度最高的控制命令输出至中央处理器;
三维互动模块,包括空气屏幕生成系统、若干组3D投影仪和素材数据库,用于根据中央处理器发送的控制命令从素材数据库内调用相应的数据建立各种场景、动态三维模型、互动三维模型;
背景生成模块,包括高性能图形集群服务器、六组投影仪、素材数据库以及布置在音乐教室内四壁和顶面上的立体柱状环幕,面向六通道同步并行图像运算,并予以详细刻画,用于根据中央处理器发送的控制命令从素材数据库内调用相应的数据构建各种背景;
中央处理器,用于接收人机操作模块、数据处理模块以及动作命令识别模块输入的控制命令,并按照预设的权限和算法将这些控制命令发送到指定的模块;用于根据人机操作模块输入的数据调用命令在数据库内调用相应的数据发送到显示屏或指定的移动终端进行显示;还用于用户注册、权限管理以及密码修改。
2.如权利要求1所述的一种数字音乐教室,其特征在于,还包括
音乐背景播放模块,用于根据中央处理器发送的控制命令进行相应的音乐背景的播放,包括音响和素材数据库,音响采用地埋式和墙埋设布置。
3.如权利要求1所述的一种数字音乐教室,其特征在于,还包括LED灯模块,用于根据中央处理器发送的控制命令构建相应的灯光背景,其布置方式分为埋地式、地面分布式以及半空分布式。
4.如权利要求1所述的一种数字音乐教室,其特征在于,还包括一人脸识别模块,用于进行所采集到视频数据中人脸数据的识别,从而实现动作控制命令权限的判定以及分类。
5.如权利要求1所述的一种数字音乐教室,其特征在于,还包括一声纹识别模块,用于进行所采集到音频数据中声纹数据的识别,从而实现声控命令的权限的判定以及分类。
6.如权利要求1所述的一种数字音乐教室,其特征在于,还包括一显示屏,用于进行教学视频、教学音频、教学文本以及教学图片的播放,内设转换模块,可以根据需要将教学音频转换成文字播放,也可以根据需要将教学文本转换成音频播放;还用于显示人机操作模块输入的各种数据以及整个使用过程中需要显示的数据。
7.如权利要求6所述的一种数字音乐教室,其特征在于,所述显示屏通过无线与中央处理器相连,包括带万向轮的底座以及通过电动伸缩杆安装在其上的显示屏本体。
CN201810413553.8A 2018-05-03 2018-05-03 一种数字音乐教室 Pending CN108648525A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810413553.8A CN108648525A (zh) 2018-05-03 2018-05-03 一种数字音乐教室

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810413553.8A CN108648525A (zh) 2018-05-03 2018-05-03 一种数字音乐教室

Publications (1)

Publication Number Publication Date
CN108648525A true CN108648525A (zh) 2018-10-12

Family

ID=63748648

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810413553.8A Pending CN108648525A (zh) 2018-05-03 2018-05-03 一种数字音乐教室

Country Status (1)

Country Link
CN (1) CN108648525A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109523847A (zh) * 2018-11-28 2019-03-26 宝鸡文理学院 一种数学教学模型组装处理系统
CN109615951A (zh) * 2019-01-14 2019-04-12 陕西国际商贸学院 一种基于微媒体的课堂教学系统
CN109756880A (zh) * 2019-03-01 2019-05-14 江苏中协智能科技有限公司 一种数字音乐教室多对多蓝牙传输方法
CN110043072A (zh) * 2019-03-12 2019-07-23 孙健 一种用于声乐教学的多功能模拟教室
CN110364047A (zh) * 2019-07-03 2019-10-22 死海旅游度假有限公司 基于声光电技术的虚拟教学系统
CN110648404A (zh) * 2019-09-30 2020-01-03 恒信东方文化股份有限公司 一种互动学习方法及其系统
CN113223341A (zh) * 2021-05-07 2021-08-06 广州宏途教育网络科技有限公司 一种用于互动教学平台的教师操作系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105681920A (zh) * 2015-12-30 2016-06-15 深圳市鹰硕音频科技有限公司 一种具有语音识别功能的网络教学方法及系统
CN106409030A (zh) * 2016-12-08 2017-02-15 河南牧业经济学院 一种个性化外语口语学习系统
CN106781724A (zh) * 2016-12-02 2017-05-31 河南机电高等专科学校 一种企业管理培训系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105681920A (zh) * 2015-12-30 2016-06-15 深圳市鹰硕音频科技有限公司 一种具有语音识别功能的网络教学方法及系统
CN106781724A (zh) * 2016-12-02 2017-05-31 河南机电高等专科学校 一种企业管理培训系统
CN106409030A (zh) * 2016-12-08 2017-02-15 河南牧业经济学院 一种个性化外语口语学习系统

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109523847A (zh) * 2018-11-28 2019-03-26 宝鸡文理学院 一种数学教学模型组装处理系统
CN109615951A (zh) * 2019-01-14 2019-04-12 陕西国际商贸学院 一种基于微媒体的课堂教学系统
CN109756880A (zh) * 2019-03-01 2019-05-14 江苏中协智能科技有限公司 一种数字音乐教室多对多蓝牙传输方法
CN110043072A (zh) * 2019-03-12 2019-07-23 孙健 一种用于声乐教学的多功能模拟教室
CN110364047A (zh) * 2019-07-03 2019-10-22 死海旅游度假有限公司 基于声光电技术的虚拟教学系统
CN110648404A (zh) * 2019-09-30 2020-01-03 恒信东方文化股份有限公司 一种互动学习方法及其系统
CN110648404B (zh) * 2019-09-30 2023-06-09 恒信东方文化股份有限公司 一种互动学习方法及其系统
CN113223341A (zh) * 2021-05-07 2021-08-06 广州宏途教育网络科技有限公司 一种用于互动教学平台的教师操作系统

Similar Documents

Publication Publication Date Title
CN108648525A (zh) 一种数字音乐教室
CN107103801B (zh) 远程三维场景互动教学系统及控制方法
CN106409030A (zh) 一种个性化外语口语学习系统
CN107248342A (zh) 基于虚拟现实技术的三维互动教学系统
CN102929386B (zh) 一种动感重现虚拟现实的方法及系统
CN107025816A (zh) 一种英语交互式教与学系统
CN105528923A (zh) 美术教学系统
KR960018998A (ko) 대화식 컴퓨터 게임기
CN1134210A (zh) 配有文字的视听制品;在视听制品中将语音和文字序列合理地结合的方法以及用于线性和交互式应用的装置
CN108877341A (zh) 一种教学用建筑展示沙盘
CN106251728A (zh) 一种旅游教育专用学习系统
CN106166376A (zh) 简化24式太极拳综合训练系统
CN108596784A (zh) 一种智能电网综合展示系统
CN106297441A (zh) 一种美术教学系统
CN107340869A (zh) 基于虚幻4引擎技术的虚拟现实交互系统
CN106652656A (zh) 利用虚拟乐器学习和演奏的方法、装置以及使用其的眼镜或头盔
CN109951718A (zh) 一种通过5g和vr技术可360度全景实时拍摄直播的方法
CN111477055A (zh) 基于虚拟现实技术的教师培训系统及方法
CN112331001A (zh) 一种基于虚拟现实技术的教学系统
CN208208117U (zh) 远程互动教学系统
CN109615951A (zh) 一种基于微媒体的课堂教学系统
KR100445846B1 (ko) 대인 공포증 치료를 위한 가상 연설 시뮬레이터
CN205883416U (zh) 互动课堂的视频直播录制系统
CN208220281U (zh) 儿童智能多功能互动体验室
KR20200082710A (ko) 휴대기기에서 증강현실을 이용한 퍼즐놀이

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181012

RJ01 Rejection of invention patent application after publication