CN105608934A - Ar儿童故事早教舞台剧系统 - Google Patents

Ar儿童故事早教舞台剧系统 Download PDF

Info

Publication number
CN105608934A
CN105608934A CN201510959617.0A CN201510959617A CN105608934A CN 105608934 A CN105608934 A CN 105608934A CN 201510959617 A CN201510959617 A CN 201510959617A CN 105608934 A CN105608934 A CN 105608934A
Authority
CN
China
Prior art keywords
story
children
stage
early education
model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510959617.0A
Other languages
English (en)
Other versions
CN105608934B (zh
Inventor
赵良华
单伟
康晓峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dalian lanchuang Technology Co.,Ltd.
Original Assignee
DALIAN NEW VISION MEDIA Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by DALIAN NEW VISION MEDIA Co Ltd filed Critical DALIAN NEW VISION MEDIA Co Ltd
Priority to CN201510959617.0A priority Critical patent/CN105608934B/zh
Publication of CN105608934A publication Critical patent/CN105608934A/zh
Application granted granted Critical
Publication of CN105608934B publication Critical patent/CN105608934B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems

Abstract

AR儿童早教童话故事舞台剧系统，其属于儿童早教领域。AR儿童早教童话故事舞台剧系统，由虚拟程序模块和实体舞台构成，实体舞台由舞台主体和故事插板构成，植入AR（增强现实）技术，通过智能设备安装应用程序之后，开启智能设备置摄像头扫描实体舞台，插板插接无误时，可以通过AR技术以小剧场形式把AR的数字故事内容呈现在舞台上进行演绎，孩子们可以选择喜欢的角色，把童话故事中的主人公替换成自己，在听故事的同时，参与到故事的情境中。激发儿童兴趣，便于儿童记忆，促使儿童自主的看故事听故事，本发明互动功能还增加了很多趣味性的活动游戏，让孩子们即时互动。

Description

AR儿童故事早教舞台剧系统
技术领域
本发明涉及AR儿童早教童话故事舞台剧系统，其属于儿童早教领域。
背景技术
目前儿童早教故事都是通过故事书的阅读或者动画片的播放，或者故事机的播放，达到儿童启蒙的目的，现有技术儿童早教故事都是形式单调，没有一种早教故事机或其他形式寓教于乐，现有的讲故事的方式不能培养孩子的动手能力，也不能激发孩子的参与性。
发明内容
鉴于已有技术方案存在的缺陷，本发明提供AR儿童早教童话故事舞台剧系统，由虚拟程序模块和实体舞台构成，实体舞台由舞台主体和故事插板构成，植入AR（增强现实）技术，通过智能设备安装应用程序之后，开启智能设备置摄像头扫描实体舞台，插板插接无误时，可以通过AR技术以小剧场形式把AR的数字故事内容呈现在舞台上进行演绎，孩子们可以选择喜欢的角色，把童话故事中的主人公替换成自己，在听故事的同时，参与到故事的情境中。
为实现上述目的，本发明所采用的技术方案是AR儿童早教童话故事舞台剧系统，包括舞台模型和物理设备；舞台模型由至少一个舞台主体和至少一块故事插板组成；所述物理设备包括摄像头、识别模块、合成模块、处理模块、显示器件和存储器；所述摄像头适用于捕获所述舞台模型的图像，所述识别模块适用于舞台模型图像与相应舞台模型图像的标记信息绑定；所述标记信息由舞台主体基础标记点和故事插板基础标记点组成，所述合成模块适用于集成舞台模型图像和舞台模型图像的位置信息到存储器，当位置信息正确时调用处理模块；处理模块适用于获取虚拟物理模型，模拟仿真后将真实图像与虚拟信息叠加，并在显示器件上显示叠加结果。
所述舞台模型图像的位置信息是指在虚拟空间的坐标中，舞台主体的基础标记点和故事插板的基础标记点之间的上下间距、左右间距、角度和位置。
用户通过所述摄像头收集面部头像信息，再通过裁切模版进行面部裁切，得到裁切后的面部图像信息，将面部图像信息转化为贴图，将贴图贴到对应的模型上，对应的模型是指通过识别所述故事插版的基础标记点指令显示出相对应的模型，最后完成面部贴图的替换，并在显示器件上显示结果。
所述舞台模型图像由故事插板信息和舞台外轮廓组成。
所述故事插板信息由故事插板的图像信息和故事板的外轮廓组成。
所述故事插板信息对应故事插板基础标记点。
所述合成模块为VuforiaAR识别单元；所述处理模块为VuforiaAR识别单元。
所述物理设备还包括陀螺仪，当摄像头脱离舞台模型时，陀螺仪用于记录基础标记点的变化，如果没有变化则保持AR动画互动功能；如果有变化则调用纠错模块。
所述物理设备还包括语音识别模块，用于用户发出声音指令时，程序通过麦克风收集声音信息转化指令集，程序实施指令集，并在显示器件上显示结果。
所述物理设备为手机或者PAD。
当所述故事插板更换所对应的舞台轮廓图像识别及曾强现实的数字内容也相对应的发生变化。
采用上述方法后，与现有技术方法相比具有以下有益效果：适合3—7岁的儿童，以小剧场形式把AR的数字故事内容呈现在舞台上进行演绎，孩子们可以选择喜欢的角色，把童话故事中的主人公换成自己，在听故事的同时，参与到故事的情境中，激发儿童兴趣，便于儿童记忆，促使儿童自主的看故事听故事，本发明互动功能还增加了很多趣味性的活动游戏，让孩子们即时互动，本发明还配有与故事内容相关的人物及场景道具小摆件，组装类小舞台，孩子在玩完数字内容后，还可以进行实体玩具的把玩，小舞台还可以作为相框使用，多功能的玩法激发孩子的动手能力和兴趣。
附图说明
图1、原理流程图；
图2、实体舞台模型图。
图中：1、故事插板，2、舞台主体。
具体实施方式
用户先将故事插板插入舞台主体。进入程序后，打开摄像头，将识别框对准小舞台。一定要在光线适中并稳定的环境下使用，图案与摄像头之间的最佳距离15-20cm。扫描舞台，只有当舞台与故事插板插合好时，动画效果才会出现。
出现动画效果后可以移动观察设备，脱离舞台模型的标记点欣赏动画，如想让动画回到初始位置，只要再将AR动画对准积木图案的标记点即可。
AR儿童故事早教舞台剧系统包括舞台模型和物理设备；舞台模型由至少一个舞台主体和至少一块故事插板组成；所述物理设备包括摄像头、识别模块、合成模块、处理模块、显示器件和存储器；所述摄像头适用于捕获所述舞台模型的图像，所述识别模块适用于舞台模型图像与相应舞台模型图像的标记信息绑定；所述标记信息由舞台主体基础标记点和故事插板基础标记点组成，所述合成模块适用于集成舞台模型图像和舞台模型图像的位置信息到存储器，当位置信息正确时调用处理模块；处理模块适用于获取虚拟物理模型，模拟仿真后将真实图像与虚拟信息叠加，并在显示器件上显示叠加结果。
所述舞台模型图像的位置信息是指在虚拟空间的坐标中，舞台主体的基础标记点和故事插板的基础标记点之间的上下间距、左右间距、角度和位置。
用户通过所述摄像头收集面部头像信息，再通过裁切模版进行面部裁切，得到裁切后的面部图像信息，将面部图像信息转化为贴图，将贴图贴到对应的模型上，对应的模型是指通过识别所述故事插版的基础标记点指令显示出相对应的模型，最后完成面部贴图的替换，并在显示器件上显示结果。
所述舞台模型图像由故事插板信息和舞台外轮廓组成。
所述故事插板信息由故事插板的图像信息和故事板的外轮廓组成。
所述故事插板信息对应故事插板基础标记点。
所述合成模块为VuforiaAR识别单元；所述处理模块为VuforiaAR识别单元。
所述物理设备还包括陀螺仪，当摄像头脱离舞台模型时，陀螺仪用于记录基础标记点的变化，如果没有变化则保持AR动画互动功能；如果有变化则调用纠错模块。
所述物理设备还包括语音识别模块，用于用户发出声音指令时，程序通过麦克风收集声音信息转化指令集，程序实施指令集，并在显示器件上显示结果。
所述物理设备为手机或者PAD。
当所述故事插板更换所对应的舞台轮廓图像识别及曾强现实的数字内容也相对应的发生变化。在三维坐标空间中增添定位虚拟物体模型，通过模拟仿真后再叠加，将虚拟的信息应用到真实世界，从而达到真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在在显示屏上。出现AR动画之后，通过VuforiaAR识别单元渲染获取到3D动画模型轮廓，并通过渲染结果在物理设备屏幕上观看。如果摄像头脱离一级物体（舞台），那么会调用物理设备的陀螺仪功能，并且保持AR动画不会丢失，保持AR动画的互动功能。

Claims (10)

1.AR儿童早教童话故事舞台剧系统，其特征在于：包括舞台模型和物理设备；舞台模型由至少一个舞台主体和至少一块故事插板组成；所述物理设备包括摄像头、识别模块、合成模块、处理模块、显示器件和存储器；所述摄像头适用于捕获所述舞台模型的图像，所述识别模块适用于舞台模型图像与相应舞台模型图像的标记信息绑定；所述标记信息由舞台主体基础标记点和故事插板基础标记点组成，所述合成模块适用于集成舞台模型图像和舞台模型图像的位置信息到存储器，当位置信息正确时调用处理模块；处理模块适用于获取虚拟物理模型，模拟仿真后将真实图像与虚拟信息叠加，并在显示器件上显示叠加结果。
2.根据权利要求1所述的AR儿童早教童话故事舞台剧系统，其特征在于：所述舞台模型图像的位置信息是指在虚拟空间的坐标中，舞台主体的基础标记点和故事插板的基础标记点之间的上下间距、左右间距、角度和位置。
3.根据权利要求1或2所述的AR儿童早教童话故事舞台剧系统，其特征在于：用户通过所述摄像头收集面部头像信息，再通过裁切模版进行面部裁切，得到裁切后的面部图像信息，将面部图像信息转化为贴图，将贴图贴到对应的模型上，对应的模型是指通过识别所述故事插版的基础标记点指令显示出相对应的模型，最后完成面部贴图的替换，并在显示器件上显示结果。
4.根据权利要求1或2所述的AR儿童早教童话故事舞台剧系统，其特征在于：所述舞台模型图像由故事插板信息和舞台外轮廓组成。
5.根据权利要求4所述的AR儿童早教童话故事舞台剧系统，其特征在于：所述故事插板信息由故事插板的图像信息和故事板的外轮廓组成。
6.根据权利要求4所述的AR儿童早教童话故事舞台剧系统，其特征在于：所述故事插板信息对应故事插板基础标记点。
7.根据权利要求1或2所述的AR儿童早教积木系统，其特征在于：所述合成模块为VuforiaAR识别单元；所述处理模块为VuforiaAR识别单元。
8.根据权利要求1或2所述的AR儿童早教童话故事舞台剧系统，其特征在于：所述物理设备还包括陀螺仪，当摄像头脱离舞台模型时，陀螺仪用于记录基础标记点的变化，如果没有变化则保持AR动画互动功能；如果有变化则调用纠错模块。
9.根据权利要求1或2所述的AR儿童早教童话故事舞台剧系统，其特征在于：所述物理设备还包括语音识别模块，用于用户发出声音指令时，程序通过麦克风收集声音信息转化指令集，程序实施指令集，并在显示器件上显示结果。
10.根据权利要求1或2所述的AR儿童早教积木系统，其特征在于：所述物理设备为手机或者PAD。
CN201510959617.0A 2015-12-21 2015-12-21 Ar儿童故事早教舞台剧系统 Active CN105608934B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510959617.0A CN105608934B (zh) 2015-12-21 2015-12-21 Ar儿童故事早教舞台剧系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510959617.0A CN105608934B (zh) 2015-12-21 2015-12-21 Ar儿童故事早教舞台剧系统

Publications (2)

Publication Number Publication Date
CN105608934A true CN105608934A (zh) 2016-05-25
CN105608934B CN105608934B (zh) 2018-09-04

Family

ID=55988836

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510959617.0A Active CN105608934B (zh) 2015-12-21 2015-12-21 Ar儿童故事早教舞台剧系统

Country Status (1)

Country Link
CN (1) CN105608934B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106060528A (zh) * 2016-08-05 2016-10-26 福建天泉教育科技有限公司 基于手机端和电子白板的增强现实方法及系统
CN106251389A (zh) * 2016-08-01 2016-12-21 北京小小牛创意科技有限公司 制作动画的方法和装置
CN107240041A (zh) * 2017-07-14 2017-10-10 鲁东大学 新媒体环境下传统古村落的智慧传播旅游方式
CN107274891A (zh) * 2017-05-23 2017-10-20 武汉秀宝软件有限公司 一种基于语音识别引擎的ar界面交互方法及系统
CN107729441A (zh) * 2017-09-30 2018-02-23 北京酷我科技有限公司 一种音频文件的处理方法及系统
CN107767355A (zh) * 2016-08-18 2018-03-06 深圳市劲嘉数媒科技有限公司 图像增强现实的方法和装置
CN110880254A (zh) * 2018-09-05 2020-03-13 上海博泰悦臻网络技术服务有限公司 车内远程教育方法、车内远程教育系统及车辆

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101976463A (zh) * 2010-11-03 2011-02-16 北京师范大学 一种虚实融合的交互式立体图书制作方法
CN102339579A (zh) * 2011-10-13 2012-02-01 上海旅游网旅行服务有限公司 一种导游系统
CN102688603A (zh) * 2011-03-22 2012-09-26 王鹏勃 基于增强现实与动作识别技术的实时魔幻类舞台表演的系统与方法
CN103035135A (zh) * 2012-11-27 2013-04-10 北京航空航天大学 基于增强现实技术的儿童认知系统及认知方法
US20130129230A1 (en) * 2011-11-18 2013-05-23 Microsoft Corporation Computing Pose and/or Shape of Modifiable Entities
CN103164518A (zh) * 2013-03-06 2013-06-19 杭州九树网络科技有限公司 移动终端增强现实应用系统及方法
CN103366610A (zh) * 2013-07-03 2013-10-23 熊剑明 基于增强现实的三维互动学习系统及方法
CN203561948U (zh) * 2013-07-16 2014-04-23 南京融图创斯信息科技有限公司 一种玻璃舞台地面交互系统
CN103970409A (zh) * 2013-01-28 2014-08-06 三星电子株式会社 产生增强现实内容的方法和使用所述增强现实内容的终端
CN104102412A (zh) * 2014-07-24 2014-10-15 央数文化(上海)股份有限公司 一种基于增强现实技术的手持式阅览设备及其方法
CN104575130A (zh) * 2014-11-07 2015-04-29 马振轩 增强现实技术的多图组合识别动画教育应用系统
CN104732822A (zh) * 2015-04-09 2015-06-24 石家庄多动态文化传媒有限公司 基于移动终端应用的儿童参与系统及儿童参与方法
CN204695223U (zh) * 2015-04-16 2015-10-07 湖北视纪印象科技股份有限公司 一种基于增强现实的模型展示系统
CN105022487A (zh) * 2015-07-20 2015-11-04 北京易讯理想科技有限公司 基于增强现实的阅读方法及装置

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101976463A (zh) * 2010-11-03 2011-02-16 北京师范大学 一种虚实融合的交互式立体图书制作方法
CN102688603A (zh) * 2011-03-22 2012-09-26 王鹏勃 基于增强现实与动作识别技术的实时魔幻类舞台表演的系统与方法
CN102339579A (zh) * 2011-10-13 2012-02-01 上海旅游网旅行服务有限公司 一种导游系统
US20130129230A1 (en) * 2011-11-18 2013-05-23 Microsoft Corporation Computing Pose and/or Shape of Modifiable Entities
CN103035135A (zh) * 2012-11-27 2013-04-10 北京航空航天大学 基于增强现实技术的儿童认知系统及认知方法
CN103970409A (zh) * 2013-01-28 2014-08-06 三星电子株式会社 产生增强现实内容的方法和使用所述增强现实内容的终端
CN103164518A (zh) * 2013-03-06 2013-06-19 杭州九树网络科技有限公司 移动终端增强现实应用系统及方法
CN103366610A (zh) * 2013-07-03 2013-10-23 熊剑明 基于增强现实的三维互动学习系统及方法
CN203561948U (zh) * 2013-07-16 2014-04-23 南京融图创斯信息科技有限公司 一种玻璃舞台地面交互系统
CN104102412A (zh) * 2014-07-24 2014-10-15 央数文化(上海)股份有限公司 一种基于增强现实技术的手持式阅览设备及其方法
CN104575130A (zh) * 2014-11-07 2015-04-29 马振轩 增强现实技术的多图组合识别动画教育应用系统
CN104732822A (zh) * 2015-04-09 2015-06-24 石家庄多动态文化传媒有限公司 基于移动终端应用的儿童参与系统及儿童参与方法
CN204695223U (zh) * 2015-04-16 2015-10-07 湖北视纪印象科技股份有限公司 一种基于增强现实的模型展示系统
CN105022487A (zh) * 2015-07-20 2015-11-04 北京易讯理想科技有限公司 基于增强现实的阅读方法及装置

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106251389A (zh) * 2016-08-01 2016-12-21 北京小小牛创意科技有限公司 制作动画的方法和装置
WO2018024089A1 (zh) * 2016-08-01 2018-02-08 北京小小牛创意科技有限公司 制作动画的方法和装置
CN106060528A (zh) * 2016-08-05 2016-10-26 福建天泉教育科技有限公司 基于手机端和电子白板的增强现实方法及系统
CN106060528B (zh) * 2016-08-05 2018-08-10 福建天泉教育科技有限公司 基于手机端和电子白板的增强现实方法及系统
CN107767355A (zh) * 2016-08-18 2018-03-06 深圳市劲嘉数媒科技有限公司 图像增强现实的方法和装置
CN107274891A (zh) * 2017-05-23 2017-10-20 武汉秀宝软件有限公司 一种基于语音识别引擎的ar界面交互方法及系统
CN107240041A (zh) * 2017-07-14 2017-10-10 鲁东大学 新媒体环境下传统古村落的智慧传播旅游方式
CN107729441A (zh) * 2017-09-30 2018-02-23 北京酷我科技有限公司 一种音频文件的处理方法及系统
CN110880254A (zh) * 2018-09-05 2020-03-13 上海博泰悦臻网络技术服务有限公司 车内远程教育方法、车内远程教育系统及车辆
CN110880254B (zh) * 2018-09-05 2022-11-25 上海博泰悦臻网络技术服务有限公司 车内远程教育方法、车内远程教育系统及车辆

Also Published As

Publication number Publication date
CN105608934B (zh) 2018-09-04

Similar Documents

Publication Publication Date Title
CN105608934A (zh) Ar儿童故事早教舞台剧系统
CN105413198B (zh) Ar儿童早教积木系统
JP5738569B2 (ja) 画像処理プログラム、装置、システムおよび方法
JP3904562B2 (ja) 画像表示システム、記録媒体及びプログラム
CN109564351A (zh) 混合现实系统
CN102129343A (zh) 运动捕捉系统中的受指导的表演
CN106648071A (zh) 虚拟现实社交实现系统
JP2016045815A (ja) 仮想現実提示システム、仮想現実提示装置、仮想現実提示方法
CN106582005A (zh) 一种虚拟游戏中数据同步交互方法及装置
CN108245891A (zh) 一种头戴式设备、游戏交互平台、桌游实现系统及方法
CN110211222B (zh) 一种ar沉浸式旅游导览方法、装置、存储介质及终端设备
CN110045817A (zh) 采用虚拟实境技术的交互式摄影系统
CN108416832A (zh) 媒体信息的显示方法、装置和存储介质
Nguyen et al. Real-time 3D human capture system for mixed-reality art and entertainment
JP2014071838A (ja) 画像処理装置およびカードゲーム具
KR20110110379A (ko) 카메라를 이용한 카드 게임 시스템
CN108325208A (zh) 应用于游戏领域的增强现实实现方法
CN108961368A (zh) 三维动画环境中实时直播综艺节目的方法和系统
CN106780761A (zh) 基于增强现实技术的自闭症儿童兴趣点信息采集系统
CN106552421A (zh) Ar儿童拼图系统
Portaz et al. Figurines, a multimodal framework for tangible storytelling
JP4962219B2 (ja) 合成画像出力装置および合成画像出力処理プログラム
WO2021032289A1 (en) Interactive music play system
CN206002838U (zh) 基于体感交互的360度幻影成像系统
US20220107681A1 (en) User interactions in virtual reality

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20181018

Address after: 116000 No. 14, No. 14, pin Tao Street, Dalian high tech Industrial Park, Liaoning, China.

Patentee after: Dalian New World Culture Technology Co., Ltd.

Address before: 116000 18, 7 Torch Road, hi tech park, Dalian, Liaoning

Patentee before: DALIAN NEW VISION MEDIA CO., LTD.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20200813

Address after: 116000 West 702, floor 7, No.1, Gaoxin street, high tech Industrial Park, Dalian City, Liaoning Province

Patentee after: Dalian lanchuang Technology Co.,Ltd.

Address before: 116000 No. 14, No. 14, pin Tao Street, Dalian high tech Industrial Park, Liaoning, China.

Patentee before: Dalian New World Culture Technology Co.,Ltd.

TR01 Transfer of patent right