CN108509473A - 以扩增实境技术结合自创元素的影音作品系统及记录媒体 - Google Patents

以扩增实境技术结合自创元素的影音作品系统及记录媒体 Download PDF

Info

Publication number
CN108509473A
CN108509473A CN201710752943.3A CN201710752943A CN108509473A CN 108509473 A CN108509473 A CN 108509473A CN 201710752943 A CN201710752943 A CN 201710752943A CN 108509473 A CN108509473 A CN 108509473A
Authority
CN
China
Prior art keywords
audio
augmented reality
content
visual works
page
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710752943.3A
Other languages
English (en)
Other versions
CN108509473B (zh
Inventor
邱士芸
林纯伃
黄雅芬
王淑美
林育骏
余淑萍
余秀琪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sheng Dian Polytron Technologies Inc
Original Assignee
Sheng Dian Polytron Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sheng Dian Polytron Technologies Inc filed Critical Sheng Dian Polytron Technologies Inc
Priority to CN201710752943.3A priority Critical patent/CN108509473B/zh
Publication of CN108509473A publication Critical patent/CN108509473A/zh
Application granted granted Critical
Publication of CN108509473B publication Critical patent/CN108509473B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/802D [Two Dimensional] animation, e.g. using sprites

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供一种以扩增实境技术结合自创元素的产制影音作品系统及记录媒体,其中系统包括:资料模块,储存空白线稿及场景;影像输入模块,读取绘本的手绘影像,并定义出手绘边框;辨识与分析模块,由空白线稿与手绘边框比对,产生绘制内容;语音输入模块,读取语音,以产生语音内容;以及整合模块,将绘制内容及语音内容与场景结合,以产生自创扩增实境作品。借由本发明的实施,可以让使用者即时产生具有自创元素的影音扩增实境的作品。

Description

以扩增实境技术结合自创元素的影音作品系统及记录媒体
技术领域
本发明为一种以扩增实境技术结合自创元素的产制影音作品系统及记录媒体,特别是用于儿童游戏或教材的以扩增实境技术结合自创元素的产制影音作品系统及记录媒体。
背景技术
由于家长对小孩教育的重视,儿童教育软件(CAI)市场需求每年持续以倍数的成长。根据调查,「电脑」已名列家长心中儿童学习项目的前三位,仅次于语言和音乐。有关儿童教育软件制作与发行,不论从需求面或供给面来看,儿童教育软件将扮演教育重要的角色。
近几年,扩增实境(Augmented Rea l ity,AR)被列为即将崭露头角的教育科技。即将成为一个改变市场游戏规则者,扩增实境(AR)经常相当具有噱头,它的应用也需要想象力。它可以将现实世界直接或间接的结合于视觉影像上面。连接网路的智慧型手机、附有相机的行动装置大大的刺激了扩增实境(AR)的成长。
目前已经有以扩增实境制作出具有体感互动学习与游戏的教材,通过教材卡在课程中产生AR影像,利用有趣的玩法让小朋友能持续专注在互动学习上,寓教于乐,但目前的AR教材,多半是单一型态纯绘图或纯语音的辨识与扫描,无法让小朋友完成多元整合,例如将自创的绘图或是自创的语音整合成扩增实境的动画,因此对小朋友创作的启发上,AR教材仍然有很大的发展空间。
发明内容
本发明为一种以扩增实境技术结合自创元素的产制影音作品系统及记录媒体,其主要是要解决如何将使用者自创元素以即时的方式,形成扩增实境的影音作品。
借由本发明的实施,至少可以达成下列的进步功效:本发明提供一种以扩增实境技术结合自创元素的产制影音作品系统,其是执行在电子计算机系统中,该产制影音作品系统包括:资料模块,其储存有至少一个空白线稿及至少一个场景;影像输入模块,其读取位于绘本的至少一个2D角色对应的手绘影像,又将手绘影像定义出手绘边框;辨识与分析模块,借由空白线稿与手绘边框的比对,以产生绘制内容;以及整合模块,将绘制内容填入对应的空白线稿以产生AR物件并与场景结合,以产生自创扩增实境作品。
上述的产制影音作品系统,其特征在于,其中该场景以教学辅具作为脚本。
上述的产制影音作品系统,其特征在于,其中该影像输入模块读取该手绘影像是借由摄影机进行读取即时影像或读取手绘影像档。
上述的产制影音作品系统,其特征在于,其中该绘制内容是帐号、页码、序号、版次、或上述至少两者的组合,进行档名定义。
上述的产制影音作品系统,其特征在于,其中该空白线稿及该2D角色分别设有可互相对应的多个辨识点。
上述的产制影音作品系统,其特征在于,其进一步包括语音输入模块,其读取即时语音或语音档,以产生语音内容;又该整合模块也进一步将该语音内容与该绘制内容及该场景结合,以产生该自创扩增实境作品。
上述的产制影音作品系统,其特征在于,其中该语音内容以帐号、页码、序号、版次、或上述至少两者的组合,进行档名定义。
上述的产制影音作品系统,其特征在于,其中该整合模块是绘本各页面作为定义,将各该页面对应的该绘制内容化并套用至该场景内且予以动态效果,又将各该页面对应的该语音内容整合,以产生该自创扩增实境作品。
上述的产制影音作品系统,其特征在于,其进一步包括电子书产生模块,其是依照书籍脚本,将各页对应的该绘制内容、该语音内容及多个预定义的场景元件,以扩增实境的技术组合成各该页的扩增实境页面,又将该些扩增实境页面组合成一本完整的扩增实境有声翻页式电子书。
本发明又提供一种非暂态电脑可读取的记录媒体,用于储存上述的以扩增实境技术结合自创元素的产制影音作品系统。
借由本发明的实施,至少可以达成下列的进步功效:
一、可以由使用者自行完成,具有自创元素的自创扩增实境作品。以及
二、可以即时的产生自创扩增实境作品。
附图说明
图1:为本发明的一种使用情境实施例图;
图2:为本发明的一种以扩增实境技术结合自创元素的产制影音作品系统架构实施例图;
图3:为一种应用于本发明实施例的绘本实施例图;
图4:为本发明的一种空白线稿于电子计算机荧幕上显示的实施例图;
图5A:为一种绘本上的角色完成绘制影像的实施例图;
图5B:本发明的一种辨识与分析模块比对出绘制内容后的实施例图;
图6A:为一种绘本上具有辨识点的2D角色实施例图;
图6B:为第6A图完成绘制影像的实施例图;
图6C:本发明的一种借由辨识点完成绘制内容的实施例图;
图7:为本发明的一种将绘制内容与空白线稿结合后的实施例图;
图8:为本发明的一种使用HTML技术整合的实施例图;以及
图9:为本发明进一步包括电子书产生模块的实施例图。
【主要组件符号说明】
100:产制影音作品系统 10:资料模块
110:空白线稿 120:场景
20:影像输入模块 30:辨识与分析模块
311:第1创作颜色 312:第2创作颜色
313:第3创作颜色 31C:绘制内容
320:辨识点 33:AR物件
40:语音输入模块 50:整合模块
60:绘本 61:2D角色
611:边框 612:空白创作区
613:2D场景 614:手绘影像
70:电子计算机系统 80:语音内容
90:电子书产生模块
具体实施方式
如图1及图2所示,本实施例为一种以扩增实境技术结合自创元素的产制影音作品系统100,其可以为软件系统并可执行于例如手机、PDA、或电脑的电子计算机系统70中,该产制影音作品系统100包括:资料模块10;影像输入模块20;辨识与分析模块30;语音输入模块40;以及整合模块50。又所产制的影音作品可以是2D或3D的影音作品。
本实施例在应用时,除了执行本实施例产制影音作品系统100的软件外,还使用了教学辅具,例如绘本60或图卡或拼图…等,又绘本60可以例如是一本AR书册,AR书册由多个连续页面所组成。
如图1及图3所示,绘本60的每一页面内已经设计有至少一个平面的2D角色61,例如动物、人、鸟…等,而这些2D角色61有一部分或者全部是只有边框611且边框611内为空白创作区612,借此以方便小朋友在空白创作区612处以蜡笔进行创作。
此外绘本60的每个页面也构成了一个2D场景613,另外每一页面或整本绘本60,借由上述的2D角色61及2D场景613的安排,也构成了一个故事单元脚本或故事的脚本。
如图2及图4所示,资料模块10,其储存有至少一个空白线稿110及至少一个2D/3D场景120。空白线稿110就是将绘本60内只有边框611的2D角色61,以扩增实境技术制作成只有线框的2D/3D角色物件;为了使故事具有连贯性,2D/3D场景120可以由绘本60作为脚本,也就是说2D/3D场景120,可以是将原本在绘本60上属于2D平面的2D场景613,以扩增实境的技术,制作成2D/3D场景120。
如图2、及图5A所示,影像输入模块20,其用以读取位于绘本60的至少一个2D角色61对应的手绘影像614,手绘影像614是小朋友在绘本60上2D角色61上的自创绘制处,以蜡笔创作完成后的图案,然后以摄影机取像后所形成的影像即为手绘影像614。
影像输入模块20读取手绘影像614的方式,可以借由摄影机读取即时影像,也可以读取影像档案的方式达成。当手绘影像614被读取后,接着可以软件的技术定义出手绘影像614的边框611,该边框611就是手绘边框611。
如图2、及图5B所示,辨识与分析模块30,当手绘边框611被定义出来了,接着就可以辨识与分析模块30借由边框611,找到边框611内的绘制内容,例如具有第1创作颜色311、第2创作颜色312、第3创作颜色313…n创作颜色31n等的绘制内容31C;另外,图5B中的其他虚框部分,也可以用上述方式找到绘制内容31C。
如图6A及图6B所示,辨识与分析模块30,又可以借由空白线稿110与手绘边框611的比对,让每一个从2D角色61所撷取出的绘制内容31C对应到该对应的储存在资料模块10内的空白线稿110。
为了方便辨识与分析模块30的比对,可以预先在空白线稿110及2D角色61上,分别设置有可互相对应的多个辨识点320,请参考图式中在边框611或空白线稿110上标示为『X』的部分,借由辨识点320,可以更精准的辨识出每一角色中更细部的许多特征,例如:头部、眼睛、尾巴、甚至位于皮肤上不同的斑纹…等。
如图6C所示,当绘制内容31C对应到该对应的空白线稿110位置后,接着就可以将绘制内容31C填入空白线稿110内,最后再以扩增实境的技术,产生2D/3D的角色的AR物件33。
又为了方便系统的运作,绘制内容31C在存档时,可以使用使用者帐号、绘本60页码、绘本60内角色序号、绘制的版次、或上述至少两者的组合,进行档名定义。
语音输入模块40,其可以借由位于PDA上的麦克风读取小朋友创作的即时语音,以产生语音内容80。此外,语音输入模块40也可以读取一个预先录制好的语音档。为了方便系统的运作,语音内容80在存档时,可以使用使用者帐号、绘本60页码、绘本60内角色序号、绘制的版次、或上述至少两者的组合,进行档名定义。
如图7所示,整合模块50,是使用AR技术将上述辨识后的自创绘制内容31C及自创语音内容80与内建于电子计算机内的2D/3D场景120结合;整合模块50运作时可以使用绘本60各页面作为定义,将各页面对应的绘制内容31C以扩增实境技术予以2D/3D化,并套用至该2D/3D场景120内且予以动态效果,又将各页面对应的语音内容80整合,如此就可以产生自创扩增实境2D/3D作品。
如图8所示,借由以上的实施,可以将一本书中其中一个页面内的场景、角色及语音…等,整合成一个自创扩增实境2D/3D作品,又在整合过程中,可以使用HTML(HypertextMarkup Language)的程序语言技术,将场景、角色及语音…等进行整合。
如图9所示,上述的产制影音作品系统100,其可进步包括电子书产生模块90,其是将原本已经产生的绘制内容31C及语音内容80,依照具有多个页面故事的绘本60形成书籍脚本,然后将书籍脚本各页对应的绘制内容31C、语音内容80及多个预定义做为场景的元件,以扩增实境的技术组合成各页的扩增实境2D/3D页面,又将该些扩增实境2D/3D页面组合成一本完整的扩增实境2D/3D有声翻页式电子书。
换句话说,电子书产生模块90可以将绘本60每一页所产生的HTML档,例如第1页为HTMLP1、第2页为HTMLP2、第3页为HTMLP3…、第n页为HTMLPn,最后再此整合成为电子书HTMLbk。
上述产制影音作品系统100的各种实施例,可以是软件程序,并储存在一种非暂态电脑可读取的记录媒体中,当电脑读取产制影音作品系统100的程序时,可以执行上述的产制影音作品系统100。
以上所述,仅是本发明的较佳实施例而已,并非对本发明作任何形式上的限制,虽然本发明已以较佳实施例揭露如上,然而并非用以限定本发明,任何熟悉本专业的技术人员,在不脱离本发明技术方案范围内,当可利用上述揭示的技术内容作出些许更动或修饰为等同变化的等效实施例,但凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本发明技术方案的范围内。

Claims (10)

1.一种以扩增实境技术结合自创元素的产制影音作品系统,其特征在于,其是执行在电子计算机系统中,该产制影音作品系统包括:
资料模块,其储存有至少一个空白线稿及至少一个场景;
影像输入模块,其读取位于绘本的至少一个2D角色对应的手绘影像,又将该手绘影像定义出手绘边框;
辨识与分析模块,借由该空白线稿与该手绘边框的比对,以产生绘制内容;
以及
整合模块,将该绘制内容填入对应的该空白线稿以产生AR物件并与该场景结合,以产生自创扩增实境作品。
2.根据权利要求1所述的产制影音作品系统,其特征在于,其中该场景以教学辅具作为脚本。
3.根据权利要求1所述的产制影音作品系统,其特征在于,其中该影像输入模块读取该手绘影像是借由摄影机进行读取即时影像或读取手绘影像档。
4.根据权利要求1所述的产制影音作品系统,其特征在于,其中该绘制内容是帐号、页码、序号、版次、或上述至少两者的组合,进行档名定义。
5.根据权利要求1所述的产制影音作品系统,其特征在于,其中该空白线稿及该2D角色分别设有可互相对应的多个辨识点。
6.根据权利要求1所述的产制影音作品系统,其特征在于,其进一步包括语音输入模块,其读取即时语音或语音档,以产生语音内容;又该整合模块也进一步将该语音内容与该绘制内容及该场景结合,以产生该自创扩增实境作品。
7.根据权利要求6所述的产制影音作品系统,其特征在于,其中该语音内容以帐号、页码、序号、版次、或上述至少两者的组合,进行档名定义。
8.根据权利要求1所述的产制影音作品系统,其特征在于,其中该整合模块是绘本各页面作为定义,将各该页面对应的该绘制内容套用至该场景内且予以动态效果,又将各该页面对应的该语音内容整合,以产生该自创扩增实境作品。
9.根据权利要求1所述的产制影音作品系统,其特征在于,其进一步包括电子书产生模块,其是依照书籍脚本,将各页对应的该绘制内容、该语音内容及多个预定义的场景元件,以扩增实境的技术组合成各该页的扩增实境页面,又将该些扩增实境页面组合成一本完整的扩增实境有声翻页式电子书。
10.一种非暂态电脑可读取的记录媒体,其特征在于,储存根据权利要求1至9其中任一项所述的以扩增实境技术结合自创元素的产制影音作品系统。
CN201710752943.3A 2017-08-28 2017-08-28 以扩增实境技术结合自创元素的影音作品系统及记录媒体 Active CN108509473B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710752943.3A CN108509473B (zh) 2017-08-28 2017-08-28 以扩增实境技术结合自创元素的影音作品系统及记录媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710752943.3A CN108509473B (zh) 2017-08-28 2017-08-28 以扩增实境技术结合自创元素的影音作品系统及记录媒体

Publications (2)

Publication Number Publication Date
CN108509473A true CN108509473A (zh) 2018-09-07
CN108509473B CN108509473B (zh) 2022-07-12

Family

ID=63374439

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710752943.3A Active CN108509473B (zh) 2017-08-28 2017-08-28 以扩增实境技术结合自创元素的影音作品系统及记录媒体

Country Status (1)

Country Link
CN (1) CN108509473B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130307855A1 (en) * 2012-05-16 2013-11-21 Mathew J. Lamb Holographic story telling
CN105931506A (zh) * 2016-07-12 2016-09-07 大连新锐天地传媒有限公司 一种基于增强现实的儿童涂色系统及其显示方法
CN105955449A (zh) * 2016-04-18 2016-09-21 展视网(北京)科技有限公司 增强现实制品及其识别方法、装置和增强现实设备
CN106127859A (zh) * 2016-06-28 2016-11-16 华中师范大学 一种移动增强现实型涂鸦绘本的真实感生成方法
CN106683501A (zh) * 2016-12-23 2017-05-17 武汉市马里欧网络有限公司 一种ar儿童情景扮演投影教学方法及系统
CN106843473A (zh) * 2016-12-30 2017-06-13 武汉市马里欧网络有限公司 基于ar的儿童涂色系统及方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130307855A1 (en) * 2012-05-16 2013-11-21 Mathew J. Lamb Holographic story telling
CN105955449A (zh) * 2016-04-18 2016-09-21 展视网(北京)科技有限公司 增强现实制品及其识别方法、装置和增强现实设备
CN106127859A (zh) * 2016-06-28 2016-11-16 华中师范大学 一种移动增强现实型涂鸦绘本的真实感生成方法
CN105931506A (zh) * 2016-07-12 2016-09-07 大连新锐天地传媒有限公司 一种基于增强现实的儿童涂色系统及其显示方法
CN106683501A (zh) * 2016-12-23 2017-05-17 武汉市马里欧网络有限公司 一种ar儿童情景扮演投影教学方法及系统
CN106843473A (zh) * 2016-12-30 2017-06-13 武汉市马里欧网络有限公司 基于ar的儿童涂色系统及方法

Also Published As

Publication number Publication date
CN108509473B (zh) 2022-07-12

Similar Documents

Publication Publication Date Title
Candy The creative reflective practitioner: Research through making and practice
Potolsky Mimesis
O'Gorman E-crit: Digital media, critical theory and the humanities
Hoffmann Sketching as design thinking
Gilmour Picturing the world
Soundy et al. Picture partners: A co-creative journey into visual literacy
Lindhé " A visual sense is born in the fingertips": towards a digital ekphrasis
Stetler Stop Reading! Look!: Modern Vision and the Weimar Photographic Book
Johnston Seeing High and Low: Representing Social Conflict in American Visual Culture
Ho Drawing from life: Sketching and socialist realism in the People’s Republic of China
McArdle et al. Young children, pedagogy and the arts: Ways of seeing
Luna et al. Words worth learning-augmented literacy content for ADHD students
CN104361776A (zh) 汉字字形历史演变的可视化展示方法
Jarenski Immersive Words: Mass Media, Visuality, and American Literature, 1839–1893
Woodfield Ernst Gombrich: Iconology and the ‘linguistics of the image’
US20210097771A1 (en) System and recording media thereof for using ar technology combines hand-creating elements to producing video works
Golomb Art and the young: The many faces of representation
TWI638318B (zh) 以擴增實境技術結合自創元素之產製影音作品系統及記錄媒體
CN108509473A (zh) 以扩增实境技术结合自创元素的影音作品系统及记录媒体
Laurent Victorian Designs of Industrial Desire
Bartel Merging literacies: A case study
KR101885746B1 (ko) 스마트 단말을 이용하여 동작 컨텐트를 자동으로 생성하는 장치 및 방법
Massey Framing and mirroring the world
Carter The Polymath Principle in the Twenty‐First Century
Hanita et al. The Analysis of Using Picture Sketch to Improve Drawing Ability of Preschooler Students

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant