CN110443873A - 一种儿童图书的ar场景展现方法、装置、存储介质 - Google Patents

一种儿童图书的ar场景展现方法、装置、存储介质 Download PDF

Info

Publication number
CN110443873A
CN110443873A CN201910738704.1A CN201910738704A CN110443873A CN 110443873 A CN110443873 A CN 110443873A CN 201910738704 A CN201910738704 A CN 201910738704A CN 110443873 A CN110443873 A CN 110443873A
Authority
CN
China
Prior art keywords
scene
animation
children
book equipped
shows method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910738704.1A
Other languages
English (en)
Inventor
叶苗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Youyou Mutual Entertainment Culture Media Co Ltd
Original Assignee
Suzhou Youyou Mutual Entertainment Culture Media Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Youyou Mutual Entertainment Culture Media Co Ltd filed Critical Suzhou Youyou Mutual Entertainment Culture Media Co Ltd
Priority to CN201910738704.1A priority Critical patent/CN110443873A/zh
Publication of CN110443873A publication Critical patent/CN110443873A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/403D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供了一种儿童图书的AR场景展现方法、装置、存储介质,其可以使图书中的虚拟角色和物品结合现实场景,AR动画显示效果更加精美、流畅,表现力更好,同时占用更少资源,方法包括以下步骤:采集真实世界图像信息,渲染显示真实世界的场景;基于unity3d生成AR动画,以实现场景中的角色的动画;对于场景中的部分角色和物品,使用预制对象实现场景中角色和物体的生成与销毁;对场景中的图像进行压缩;将AR动画渲染至真实世界的场景中。

Description

一种儿童图书的AR场景展现方法、装置、存储介质
技术领域
本发明涉及增强现实技术领域,具体为一种儿童图书的AR场景展现方法、装置、存储介质。
背景技术
AR是增强现实(Augmented Reality)的简称,是通过电脑技术,将虚拟的信息应用到真实世界,真实的环境和虚拟的物体实时地叠加到了同一个画面或空间。
由于AR技术可以创造栩栩如生的3D立体形象,给予读者视觉、听觉、触觉等多感官的刺激。这一特性一方面适合展示医学、科技等科普、教学场景,另一方面也非常适合童书出版,为抽象思维缺乏的儿童提供各种直观具体的3D内容。
近年来,AR技术的规模应用主要是在儿童图书领域。儿童天生对色彩鲜艳、能说会动的东西感兴趣,静不下心来阅读平面图书。而AR技术集合文字、图片、三维动画、声音、视频、互动游戏等多种信息传达,为儿童教育提供了更丰富的载体,增强了书本的可参与性,使知识与信息能够更有效地被孩子接受和吸收。
当前的儿童图书的AR动画的展现效果比较稚嫩,少有流畅和精致的AR动画效果。
发明内容
针对上述问题,本发明提供了一种儿童图书的AR场景展现方法、装置、存储介质,其可以使图书中的虚拟角色和物品结合现实场景,AR动画显示效果更加精美、流畅,表现力更好,同时占用更少资源。
其技术方案是这样的:一种儿童图书的AR场景展现方法,其特征在于,包括以下步骤:
步骤A:采集真实世界图像信息,渲染显示真实世界的场景;
步骤B:基于unity3d生成AR动画,以实现场景中的角色的动画;
步骤C:对于场景中的部分角色和物品,使用预制对象实现场景中角色和物体的生成与销毁;
步骤D:对场景中的图像进行压缩;
步骤E:将AR动画渲染至真实世界的场景中。
进一步的,步骤B包括以下步骤:
步骤1:选中场景中需要实现动画的对象;
步骤2:将需要实现动画的对象导入unity3d中;
步骤3:添加需要实现动画的对象的动作部件的动画变化属性;
步骤4:为需要实现动画的对象绑定骨骼,修改关键帧的属性值来实现对象的动作。
进一步的,步骤4具体包括以下步骤:
步骤4-1:给需要实现动画的对象生成对应的mesh网格;
步骤4-2:给所述对象添加骨骼节点;
步骤4-3:修改骨骼节点的属性以实现mesh网格的形变,用于实现动画效果。
进一步的,在步骤4中,使用网格过滤器存放对象的mesh网格信息,把mesh网格信息传递到网格渲染器,由网格渲染器将网格渲染到屏幕画面;通过unity3d的SkeletalEditor组件添加骨骼节点;通过对对象添加动画控制器,引用unity3d的Animation Clip组件,修改骨骼节点的属性以实现mesh网格的形变,生成动画效果。
进一步的,骨骼节点的属性包括位移属性、旋转属性。
进一步的,步骤C包括以下步骤:
将制作完成的游戏组件制作成组件模板;
将组件模版保存为预制对象Prefab;
需要时通过预制对象Prefab生成游戏组件,使用完后进行销毁。
进一步的,步骤D包括以下步骤:将图片转化为TGA格式,保存并导出:删除得到的图片的Alpha通道,保存为bmp格式的图片;将图片导入unity3d中,获取图片的贴图数据进行shader合并。
进一步的,对应AR动画资源采用热更新进行更新,包括以下步骤:整理并提取更新资源;将更新资源上传到服务器,用户端获取更新资源地址,下载更新资源。
一种儿童图书的AR场景展现装置,其特征在于,其包括:包括处理器、存储器以及程序;
所述程序存储在所述存储器中,所述处理器调用存储器存储的程序,以执行上述的儿童图书的AR场景展现方法。
一种计算机可读存储介质,其特征在于,所述计算机可读存储介质被配置成存储程序,所述程序被配置成执行上述的儿童图书的AR场景展现方法。
本发明的儿童图书的AR场景展现方法、装置、存储介质,其可以使图书中的虚拟角色和物品结合现实场景,其使用了unity3d来实现角色的AR动画,通过prefab预制对象实现场景中角色物体的生成与销毁减少应用的重复生成导致额外的功耗,减少了重复工作,极大提升了AR动画开发的效率,对场景中的图像进行压缩来减小程序运行所占内存,AR动画显示效果更加精美、流畅,表现力更好,同时占用更少资源,此外,还使用热更新技术实现从服务器上下载资源包以便实时更新资源。
附图说明
图1为本发明的儿童图书的AR场景展现方法的流程图;
图2为本发明中步骤B的具体的流程图;
图3为本发明中步骤4的具体的流程图;
图4为本发明中步骤C的具体的流程图;
图5为本发明中步骤D的具体的流程图。
具体实施方式
见图1,一种儿童图书的AR场景展现方法,包括以下步骤:
步骤A:采集真实世界图像信息,渲染显示真实世界的场景;
步骤B:基于unity3d生成AR动画,以实现场景中的角色的动画;
步骤C:对于场景中的部分角色和物品,使用预制对象实现场景中角色和物体的生成与销毁;
步骤D:对场景中的图像进行压缩;
步骤E:将AR动画渲染至真实世界的场景中。
见图2,在本实施例中,步骤B的基于unity3d生成AR动画步包括以下步骤:
步骤1:选中场景中需要实现动画的对象;
步骤2:将需要实现动画的对象导入unity3d中;
步骤3:添加需要实现动画的对象的动作部件的动画变化属性,动画变化属性包括position、scale、rotation;
步骤4:为需要实现动画的对象绑定骨骼,修改关键帧的属性值来实现对象的动作。
见图3,在本实施例中,步骤4具体包括以下步骤:
步骤4-1:将需要实现动画的对象放入场景中,给对象生成对应的mesh网格;
步骤4-2:给对象添加骨骼节点;
步骤4-3:修改骨骼节点的属性以实现mesh网格的形变,用于实现动画效果。
具体的,在步骤4中,使用网格过滤器存放对象的mesh网格信息,把mesh网格信息传递到网格渲染器,由网格渲染器将网格渲染到屏幕画面;通过unity3d的SkeletalEditor组件添加骨骼节点;通过对对象添加动画控制器,引用unity3d的Animation Clip组件,修改骨骼节点的属性以实现mesh网格的形变,生成动画效果,骨骼节点的属性包括位移属性、旋转属性。
见图4,在本实施例中,步骤C的对于场景中的部分角色和物品,使用预制对象实现场景中角色和物体的生成与销毁包括以下步骤:
将制作完成的游戏组件制作成组件模板;
将组件模版保存为预制对象Prefab;
需要时通过预制对象Prefab生成游戏组件;
使用完后进行销毁。
具体的,预制对象Prefab通过instantiate函数生成游戏组件,生成的游戏组件通过destroy函数销毁。
场景中的部分角色和物品制作成一个组件模板,用于批量的套用工作,例如场景中本质上重复的东西,“敌人”,“子弹”,“粒子特效”等,只需在生成prefab时控制其位置角度大小等属性。
见图5,在本实施例中,步骤D的对场景中的图像进行压缩包括以下步骤:将图片转化为TGA格式,保存并导出:删除得到的图片的Alpha通道,保存为bmp格式的图片;将图片导入unity3d中,通过texture2d.getrawtexturedata()函数获取图片的贴图数据,获取图片的贴图数据进行shader合并,在unity3d中,带有透明通道的图片占用内存较大,图片压缩后,均会出现一定的质量的下降,采用步骤D的方式进行压缩后,压缩后的图片显示效果基本不变,图片大小却得到压缩,占用内存较小
本发明的儿童图书的AR场景展现方法,其可以使图书中的虚拟角色和物品结合现实场景,其使用了unity3d来实现角色的AR动画,通过prefab预制对象实现场景中角色物体的生成与销毁减少应用的重复生成导致额外的功耗,对场景中的图像进行压缩来减小程序运行所占内存,AR动画显示效果更加精美、流畅,表现力更好,同时占用更少资源。
当前阅读儿童图书时,小读者看到的大多为插图画面,除此以外也只有文字信息。由于纸质图书外不具备同步展示与阅读内容相匹配的图像、声音等多媒体信息的功能,因此无法为用户动态的营造一种阅读环境,给用户以身临其境的感觉,从而降低了用户的阅读体验。
AR让孩子看到的静态的图画活了起来,改变了他们对图画书的认识,书里人和动物不再是一页纸,而是能说、能动、能画、能陪伴他们的小伙伴,在帮助他们体验读书乐趣的同时,更加强了他们对知识的吸收。
此外,在本发明的一个实施例中,将AR动画更新到本地时,对应AR动画资源采用热更新进行更新,包括以下步骤:整理并提取更新资源;将更新资源上传到服务器,用户端获取更新资源地址,下载更新资源。
在本发明的实施例中,还提供了一种儿童图书的AR场景展现装置,其包括:包括处理器、存储器以及程序;
程序存储在存储器中,处理器调用存储器存储的程序,以执行上述的儿童图书的AR场景展现方法。
在上述儿童图书的AR场景展现装置的实现中,存储器和处理器之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可以通过一条或者多条通信总线或信号线实现电性连接,如可以通过总线连接。存储器中存储有实现数据访问控制方法的计算机执行指令,包括至少一个可以软件或固件的形式存储于存储器中的软件功能模块,处理器通过运行存储在存储器内的软件程序以及模块,从而执行各种功能应用以及数据处理。
存储器可以是,但不限于,随机存取存储器(Random Access Memory,简称:RAM),只读存储器(Read Only Memory,简称:ROM),可编程只读存储器(Programmable Read-OnlyMemory,简称:PROM),可擦除只读存储器(Erasable Programmable Read-Only Memory,简称:EPROM),电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory,简称:EEPROM)等。其中,存储器用于存储程序,处理器在接收到执行指令后,执行程序。
处理器可以是一种集成电路芯片,具有信号的处理能力。上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称:CPU)、网络处理器(NetworkProcessor,简称:NP)等。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
在本发明的实施例中,还提供了一种计算机可读存储介质,计算机可读存储介质被配置成存储程序,程序被配置成执行上述的儿童图书的AR场景展现方法。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于计算机可读存储介质中。该程序在被处理器执行时,实现包括上述各方法实施例的步骤;而前述的计算机可读存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质,包括若干指令用以使得一台大数据传输设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

Claims (10)

1.一种儿童图书的AR场景展现方法,其特征在于,包括以下步骤:
步骤A:采集真实世界图像信息,渲染显示真实世界的场景;
步骤B:基于unity3d生成AR动画,以实现场景中的角色的动画;
步骤C:对于场景中的部分角色和物品,使用预制对象实现场景中角色和物体的生成与销毁;
步骤D:对场景中的图像进行压缩;
步骤E:将AR动画渲染至真实世界的场景中。
2.根据权利要求1所述的一种儿童图书的AR场景展现方法,其特征在于:步骤B包括以下步骤:
步骤1:选中场景中需要实现动画的对象;
步骤2:将需要实现动画的对象导入unity3d中;
步骤3:添加需要实现动画的对象的动作部件的动画变化属性;
步骤4:为需要实现动画的对象绑定骨骼;修改关键帧的属性值来实现对象的动作。
3.根据权利要求2所述的一种儿童图书的AR场景展现方法,其特征在于:步骤4具体包括以下步骤:
步骤4-1:给需要实现动画的对象生成对应的mesh网格;
步骤4-2:给所述对象添加骨骼节点;
步骤4-3:修改骨骼节点的属性以实现mesh网格的形变,用于实现动画效果。
4.根据权利要求3所述的一种儿童图书的AR场景展现方法,其特征在于:在步骤4中,使用网格过滤器存放对象的mesh网格信息,把mesh网格信息传递到网格渲染器,由网格渲染器将网格渲染到屏幕画面;通过unity3d的Skeletal Editor组件添加骨骼节点;通过对对象添加动画控制器,引用unity3d的Animation Clip组件,修改骨骼节点的属性以实现mesh网格的形变,生成动画效果。
5.根据权利要求1所述的一种儿童图书的AR场景展现方法,其特征在于:步骤C包括以下步骤:
将制作完成的游戏组件制作成组件模板;
将组件模版保存为预制对象Prefab;
需要时通过预制对象Prefab生成游戏组件,使用完后进行销毁。
6.根据权利要求5所述的一种儿童图书的AR场景展现方法,其特征在于:预制对象Prefab通过instantiate函数生成游戏组件,生成的游戏组件通过destroy函数销毁。
7.根据权利要求1所述的一种儿童图书的AR场景展现方法,其特征在于:步骤D包括以下步骤:将图片转化为TGA格式,保存并导出:删除得到的图片的Alpha通道,保存为bmp格式的图片;将图片导入unity3d中,获取图片的贴图数据进行shader合并。
8.根据权利要求1所述的一种儿童图书的AR场景展现方法,其特征在于:对应AR动画资源采用热更新进行更新,包括以下步骤:整理并提取更新资源;将更新资源上传到服务器,用户端获取更新资源地址,下载更新资源。
9.一种儿童图书的AR场景展现装置,其特征在于,其包括:包括处理器、存储器以及程序;
所述程序存储在所述存储器中,所述处理器调用存储器存储的程序,以执行权利要求1所述的儿童图书的AR场景展现方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质被配置成存储程序,所述程序被配置成执行权利要求1所述的儿童图书的AR场景展现方法。
CN201910738704.1A 2019-08-12 2019-08-12 一种儿童图书的ar场景展现方法、装置、存储介质 Pending CN110443873A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910738704.1A CN110443873A (zh) 2019-08-12 2019-08-12 一种儿童图书的ar场景展现方法、装置、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910738704.1A CN110443873A (zh) 2019-08-12 2019-08-12 一种儿童图书的ar场景展现方法、装置、存储介质

Publications (1)

Publication Number Publication Date
CN110443873A true CN110443873A (zh) 2019-11-12

Family

ID=68434626

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910738704.1A Pending CN110443873A (zh) 2019-08-12 2019-08-12 一种儿童图书的ar场景展现方法、装置、存储介质

Country Status (1)

Country Link
CN (1) CN110443873A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111127669A (zh) * 2019-12-30 2020-05-08 北京恒华伟业科技股份有限公司 一种信息处理方法及装置
CN111147861A (zh) * 2020-01-02 2020-05-12 广州虎牙科技有限公司 图像压缩方法、装置、用户设备和计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140164921A1 (en) * 2012-12-07 2014-06-12 Robert Salinas Methods and Systems of Augmented Reality on Mobile Devices
CN106896923A (zh) * 2017-03-30 2017-06-27 苏州悠优互娱网络科技有限公司 虚拟交互方法和装置
WO2018122167A1 (en) * 2016-12-30 2018-07-05 Thomson Licensing Device and method for generating flexible dynamic virtual contents in mixed reality
CN108460822A (zh) * 2017-02-15 2018-08-28 上海银河数娱网络科技有限公司 纹理处理方法和装置
CN110113615A (zh) * 2018-02-01 2019-08-09 腾讯科技(深圳)有限公司 图像编码方法、解码方法、装置、计算设备及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140164921A1 (en) * 2012-12-07 2014-06-12 Robert Salinas Methods and Systems of Augmented Reality on Mobile Devices
WO2018122167A1 (en) * 2016-12-30 2018-07-05 Thomson Licensing Device and method for generating flexible dynamic virtual contents in mixed reality
CN108460822A (zh) * 2017-02-15 2018-08-28 上海银河数娱网络科技有限公司 纹理处理方法和装置
CN106896923A (zh) * 2017-03-30 2017-06-27 苏州悠优互娱网络科技有限公司 虚拟交互方法和装置
CN110113615A (zh) * 2018-02-01 2019-08-09 腾讯科技(深圳)有限公司 图像编码方法、解码方法、装置、计算设备及存储介质

Non-Patent Citations (7)

* Cited by examiner, † Cited by third party
Title
HAWKJONY: "unity游戏优化之ETC压缩和Alpha通道处理", 《CSDN》 *
HAWKJONY: "unity游戏优化之ETC压缩和Alpha通道处理", 《CSDN》, 23 November 2016 (2016-11-23), pages 1 - 4 *
Q568360447: "Unity2D 官方骨骼动画Anima2D使用方法", 《CSDN》 *
Q568360447: "Unity2D 官方骨骼动画Anima2D使用方法", 《CSDN》, 20 May 2017 (2017-05-20), pages 1 - 10 *
UNITY TECHNOLOGIES: "《虚拟仿真与游戏开发实用教程》", 30 April 2015, 上海:上海交通大学出版社, pages: 5 - 3 *
张潞: "基于增强现实的多媒体互动图书的研究与实现", 《中国优秀硕士学位论文全文数据库 工程科技Ⅰ辑》, no. 03, 15 March 2018 (2018-03-15) *
盛斌等: "《虚拟现实理论基础与应用开发实践》", 上海:上海交通大学出版社, pages: 7 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111127669A (zh) * 2019-12-30 2020-05-08 北京恒华伟业科技股份有限公司 一种信息处理方法及装置
CN111147861A (zh) * 2020-01-02 2020-05-12 广州虎牙科技有限公司 图像压缩方法、装置、用户设备和计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN105354872B (zh) 一种基于3d网页游戏的渲染引擎、实现方法及制作工具
CN106611435A (zh) 动画处理方法和装置
TWI668577B (zh) 渲染設備、其之渲染方法、程式和記錄媒體
CN108959392B (zh) 在3d模型上展示富文本的方法、装置及设备
CN113689537A (zh) 用于基于体素的三维建模的系统、方法和设备
CN108549850A (zh) 一种图像识别方法及电子设备
CN108846886B (zh) 一种ar表情的生成方法、客户端、终端和存储介质
CN101013507A (zh) 三维处理装置、信息终端、计算机程序和三维处理方法
CN109389661A (zh) 一种动画文件转化方法及装置
CN110488973B (zh) 一种虚拟互动留言系统及方法
CN107767437B (zh) 一种多层混合异步渲染方法
CN110443873A (zh) 一种儿童图书的ar场景展现方法、装置、存储介质
JP4686602B2 (ja) 3d画面に動映像を挿入する方法及びその記録媒体
CN114095744A (zh) 视频直播方法、装置、电子设备及可读存储介质
CN117390322A (zh) 虚拟空间构建方法、装置、电子设备及非易失性存储介质
CN105617655A (zh) 物理效果展示方法、装置及游戏系统
CN112150592A (zh) 动画文件的生成方法和装置、存储介质及电子设备
CN111064986B (zh) 带透明度的动画数据发送方法、播放方法和计算机设备
Rogers “You Don't So Much Watch It As Download It”: Conceptualizations of Digital Spectatorship
CN111402369A (zh) 互动广告的处理方法、装置、终端设备及存储介质
CN116233532A (zh) 视频播放方法、装置、计算机设备及计算机可读存储介质
Zara Virtual Reality course—A natural enrichment of Computer Graphics classes
CN113034651A (zh) 互动动画的播放方法、装置、设备及存储介质
CN113487710A (zh) 虚拟形象生成方法、装置、电子设备和计算机可读存储介质
Beacco et al. A flexible approach for output‐sensitive rendering of animated characters

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191112