CN111665944A - 一种太空舱特效的装饰方法、装置、电子设备及存储介质 - Google Patents

一种太空舱特效的装饰方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN111665944A
CN111665944A CN202010519823.0A CN202010519823A CN111665944A CN 111665944 A CN111665944 A CN 111665944A CN 202010519823 A CN202010519823 A CN 202010519823A CN 111665944 A CN111665944 A CN 111665944A
Authority
CN
China
Prior art keywords
special effect
effect data
weightlessness
real
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010519823.0A
Other languages
English (en)
Other versions
CN111665944B (zh
Inventor
孙红亮
揭志伟
王子彬
潘思霁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Shangtang Technology Development Co Ltd
Original Assignee
Zhejiang Shangtang Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Shangtang Technology Development Co Ltd filed Critical Zhejiang Shangtang Technology Development Co Ltd
Priority to CN202010519823.0A priority Critical patent/CN111665944B/zh
Publication of CN111665944A publication Critical patent/CN111665944A/zh
Application granted granted Critical
Publication of CN111665944B publication Critical patent/CN111665944B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Abstract

本公开提供了一种太空舱特效的装饰方法、装置、电子设备及存储介质,其中,该方法包括:获取包括室内环境的场景图像;基于获取的场景图像,识别室内环境中的各个现实元素;基于识别出的各个现实元素,为每个现实元素生成失重展示特效数据;基于生成的每个现实元素的失重展示特效数据,生成AR特效数据,其中,AR特效数据中采用失重展示特效数据替换现实元素的展示数据。本公开使得最终展示的AR特效数据对现实元素附带有失重装饰效果,从而使得装饰后的AR展示更贴合真实的太空环境,且是自动为现实人物添加失重展示特效,无需人工编辑,效率较高。

Description

一种太空舱特效的装饰方法、装置、电子设备及存储介质
技术领域
本公开涉及AR设备技术领域,具体而言,涉及一种太空舱特效的装饰方法、装置、电子设备及存储介质。
背景技术
增强现实(Augmented Reality,AR)作为一种将计算机生成的虚拟世界叠加到现实世界中的数字处理技术,广泛应用于工程机械、医疗应用、旅游、展览、娱乐项目等各种领域。
为了确保用户的AR体验,相关技术中提供了针对特定场景的虚拟装饰技术。以太空舱这一应用场景为例,在添加太空舱特效时,需要人工在特有工具下进行编辑,效率较低,且由于是脱离真实场景的编辑,导致装饰效果较差。
发明内容
本公开实施例至少提供一种太空舱特效的装饰方案,自动为现实人物添加失重展示特效并进行AR展示,装饰效率较高,且具有较佳的装饰效果。
主要包括以下几个方面:
第一方面,本本公开实施例提供了一种太空舱特效的装饰方法,所述方法包括:
获取包括室内环境的场景图像;
基于获取的所述场景图像,识别所述室内环境中的各个现实元素;
基于识别出的各个现实元素,为每个所述现实元素生成失重展示特效数据;
基于生成的每个现实元素的失重展示特效数据,生成AR特效数据,其中,所述AR特效数据中采用所述失重展示特效数据替换所述现实元素的展示数据。
在一种实施方式中,所述基于生成的每个现实元素的失重展示特效数据,生成AR特效数据,包括:
基于与所述室内环境匹配的太空舱三维模型,以及生成的每个现实元素的失重展示特效数据,生成AR特效数据。
在一种实施方式中,所述基于识别出的各个现实元素,为每个所述现实元素生成失重展示特效数据,包括:
针对识别出的各个现实元素中的每个现实元素,确定与该现实元素对应的AR失重展示位置信息;
将确定的所述AR失重展示位置,作为对应该所述现实元素生成的失重展示特效数据。
在一种实施方式中,所述针对识别出的各个现实元素中的每个现实元素,确定与该现实元素对应的AR失重展示位置信息,包括:
针对识别出的各个现实元素中的每个现实元素,基于该现实元素在所述场景图像中的显示位置信息,确定与所述现实元素对应的初始AR展示位置信息;
根据获取的预设失重路径轨迹信息以及确定的所述初始AR展示位置信息,确定与该现实元素对应的AR失重展示位置信息。
在一种实施方式中,所述基于获取的所述场景图像,识别所述室内环境中的各个现实元素,包括:
利用训练好的现实元素识别网络对获取的所述场景图像进行识别,得到所述室内环境中的各个现实元素。
在一种实施方式中,所述基于识别出的各个现实元素,为每个所述现实元素生成失重展示特效数据,包括:
针对识别出的各个现实元素中的每个现实元素,确定与该现实元素匹配的虚拟太空舱元素;
获取与确定的所述虚拟太空舱元素对应的三维模型;
从各三维模型与各失重展示特效数据之间的对应关系中,查找与获取的所述三维模型对应的失重展示特效数据。
在一种实施方式中,所述针对识别出的各个现实元素中的每个现实元素,确定与该现实元素匹配的虚拟太空舱元素,包括:
针对识别出的各个现实元素中的每个现实元素,基于获取的所述场景图像,识别与该现实元素对应的类型信息;
基于识别出的类型信息,确定与该类型信息匹配的虚拟太空舱元素。
第二方面,本公开实施例还提供了一种太空舱特效的装饰装置,所述装置包括:
获取模块,用于获取包括室内环境的场景图像;
识别模块,用于基于获取的所述场景图像,识别所述室内环境中的各个现实元素;
生成模块,用于基于识别出的各个现实元素,为每个所述现实元素生成失重展示特效数据;
装饰模块,用于基于生成的每个现实元素的失重展示特效数据,生成AR特效数据,其中,所述AR特效数据中采用所述失重展示特效数据替换所述现实元素的展示数据。
第三方面,本公开实施例还提供了一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如第一方面及其各种实施方式任一所述的太空舱特效的装饰方法的步骤。
第四方面,本公开实施例还提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如第一方面及其各种实施方式任一所述的太空舱特效的装饰方法的步骤。
采用上述太空舱特效的装饰方案,其首先可以根据获取的包括室内环境的场景图像,从中识别出室内环境中的现实元素,这样,即可以为各个现实元素生成失重展示特效数据,并基于生成的失重展示特效数据生成AR特效数据,其中可以采用该失重展示特效数据替换所述现实元素的展示数据。可见,上述装饰方案利用图像处理方法从场景图像中提取出现实元素(如人物、书桌等),即可以生成失重展示特效数据,以使得最终展示的AR特效数据对现实元素附带有失重装饰效果,从而使得装饰后的AR展示更贴合真实的太空环境,且是自动为现实人物添加失重展示特效,无需人工编辑,效率较高。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例一所提供的一种太空舱特效的装饰方法的流程图;
图2(a)示出了本公开实施例一所提供的一种太空舱特效的装饰方法的应用示意图;
图2(b)示出了本公开实施例一所提供的一种太空舱特效的装饰方法的应用示意图
图3示出了本公开实施例二所提供的一种太空舱特效的装饰装置的示意图;
图4示出了本公开实施例三所提供的一种电子设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
经研究发现,相关技术中提供的针对特定场景的虚拟装饰技术在添加太空舱特效时,需要人工在特有工具下进行编辑,效率较低,且由于是脱离真实场景的编辑,导致装饰效果较差。
基于上述研究,本公开提供了至少一种太空舱特效的装饰方案,自动为现实人物添加失重展示特效并进行AR展示,装饰效率较高,且具有较佳的装饰效果。
针对以上方案所存在的缺陷,均是发明人在经过实践并仔细研究后得出的结果,因此,上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案,都应该是发明人在本公开过程中对本公开做出的贡献。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
为便于对本实施例进行理解,首先对本公开实施例所公开的一种太空舱特效的装饰方法进行详细介绍,本公开实施例所提供的太空舱特效的装饰方法的执行主体一般为具有一定计算能力的电子设备,具体可以为终端设备或服务器或其它处理设备,比如可以是与(Augmented Reality,AR)设备连接的服务器,AR设备比如可以包括AR眼镜、平板电脑、智能手机、智能穿戴式设备等具有显示功能和数据处理能力的设备,AR设备可以通过应用程序连接服务器。在一些可能的实现方式中,该太空舱特效的装饰方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
下面以执行主体为服务器为例对本公开实施例提供的太空舱特效的装饰方法加以说明。
实施例一
参见图1所示,为本公开实施例提供的太空舱特效的装饰方法的流程图,方法包括步骤S101~S104,其中:
S101、获取包括室内环境的场景图像;
S102、基于获取的场景图像,识别室内环境中的各个现实元素;
S103、基于识别出的各个现实元素,为每个现实元素生成失重展示特效数据;
S104、基于生成的每个现实元素的失重展示特效数据,生成AR特效数据,其中,AR特效数据中采用失重展示特效数据替换现实元素的展示数据。
这里,为了便于理解本公开实施例所提供的太空舱特效的装饰方法,接下来首先对该装饰方法的应用场景进行具体描述。本公开实施例中的装饰方法可以应用于任何室内环境,例如,家居环境、工作办公环境等,这样,在用户穿戴AR设备进入部署上述太空舱特效的装饰方法的室内场景的情况下,可以为用户提供有关现实人物穿戴上太空舱装饰的AR特效数据,也即,用户利用AR设备可以观看到附带有失重装饰效果的现实人物的AR场景图像,从而使得装饰后的AR展示更贴合真实的太空环境,装饰效果较佳,且是自动为现实人物添加失重展示特效,无需人工编辑,效率较高。
其中,上述AR特效数据可以是基于现实元素的失重展示特效数据所生成的,该失重展示特效数据可以包括现实元素在处于失重状态下所处的位置、姿态等数据。
本公开实施例中室内环境中的现实元素可以是人物,也可以是动物,还可以是办公桌、灯具等物品。在具体应用中,从场景图像中识别出的现实元素可以为一个,也可以为多个。其中,在室内环境中存在多个现实元素的情况下,针对不同的现实元素所确定的失重展示特效数据也可以不同。例如,针对一个室内办公环境而言,在所获取的场景图像包括一个人和一个办公桌的情况下,人和办公桌在失重状态下距离地面的高度可以是不同的。
其中,在为现实人物生成失重展示特效数据之前,本公开实施例提供的太空舱特效的装饰方法需要先进行现实元素的识别,这里,一方面可以采用图像处理方法来实现,另一方面可以采用深度学习方法来具体实现。例如,可以利用多个图像样本预先训练一个能够进行现实元素识别的现实元素识别网络,而后,将获取的场景图像输入到这一训练好的现实元素识别网络中,即可以从该场景图像中识别出现实元素。
需要说明的是,本公开实施例中在识别不同类型的现实人物时,可以采用同一现实元素识别网络,也即,在进行现实元素识别网络的训练过程中,可以将标记有各个元素的图像样本作为训练数据进行训练,得到一个通用的识别网络,除此之外,本公开实施例还可以针对不同的元素类型分别训练对应的识别网络,如,识别人物的现实人物识别网络和识别物品的现实物品识别网络,具体训练过程在此不再赘述。
在为各个现实元素生成对应的失重展示特效数据之后,即可以利用这一失重展示特效数据替换现实元素的展示数据,这样,所展示的AR即可以是附带有失重展示特效的现实元素的AR场景图像。
为了便于理解上述太空舱特效的装饰方法实现过程,如图2(a)~2(b)所示,接下来可以结合AR设备的展示效果图进行说明。
如图2(a)所示,为获取到的AR设备采集的包括室内环境的场景图像,这样,在基于该场景图像确定AR设备进入室内环境之后,可以生成附带有失重展示特效的现实人物的AR特效数据,这里以失重悬浮作为失重展示特效为例,这样,AR设备根据该AR特效数据可以展示对应的AR场景图像,如图2(b)所示。
本公开实施例中,在生成AR特效数据的过程中,除了可以依赖于生成的失重展示特效数据,还可以结合与室内环境匹配的太空舱三维模型来确定。
为了提升太空舱展示的丰富性,针对不同的室内环境,本公开实施例提供的装饰方法所对应匹配的太空舱三维模型可以不同。这里,首先可以通过对场景图像的分析,从各种预设的场景类型中选取出与室内环境匹配的场景类型,例如,预设有3种类型,分别是办公场景类型、家居场景类型、生产线场景类型,这时,通过对场景图像的分析,确定室内环境中包括沙发、电视等家居产品,或者室内环境中的空间结构符合家居环境时,即可以确定与室内环境匹配的场景类型是家居场景类型。这时,可以查找与该家居场景类型对应的太空舱三维模型,通过该太空舱三维模型以及上述现实元素的失重展示特效数据即可以展示在太空舱三维模型下展示附带有失重展示特效的现实元素。
本公开实施例中,可以确定与各个现实元素中的每个现实元素对应的AR失重展示位置信息,将该AR失重展示位置信息作为对应该现实元素生成的失重展示特效数据。其中,上述AR失重展示位置信息的确定方法可以按照如下步骤来实现:
步骤一、针对识别出的各个现实元素中的每个现实元素,基于该现实元素在场景图像中的显示位置信息,确定与现实元素对应的初始AR展示位置信息;
步骤二、根据获取的预设失重路径轨迹信息以及确定的初始AR展示位置信息,确定与该现实元素对应的AR失重展示位置信息。
这里,本公开实施例提供的太空舱特效的装饰方法首先可以基于现实元素在场景图像中的显示位置信息,确定与现实元素对应的初始AR展示位置信息,而后可以根据获取的预设失重路径轨迹信息以及确定的初始AR展示位置信息,确定与该现实元素对应的AR失重展示位置信息。
其中,上述初始AR展示位置信息可以是基于场景图像所在图像坐标系以及最终展示的AR场景图像所在图像坐标系之间的转换关系,将现实人物在场景图像中的显示位置信息转换得到的。
本公开实施例中的AR失重展示位置信息则可以是基于上述初始AR展示位置信息以及预设失重路径轨迹信息确定的,这里的预设失重路径轨迹信息可以是沿着直线、曲线等各种路径轨迹所确定的相关信息。
在具体应用中,还可以按照上述预设失重路径轨迹信息将现实人物由初始AR展示位置信息所指示的初始AR展示位置移动至AR失重展示位置信息所指示的AR失重展示位置,更具趣味性。
本公开实施例所呈现的AR效果除了可以是基于附带有失重展示特效的现实元素的呈现效果,还可以是将现实元素映射至AR场景图像中的虚拟太空舱元素的呈现效果。这里,可以首先确定现实元素所映射的虚拟太空舱元素,而后可以基于映射的虚拟太空舱元素,确定其对应的失重展示特效数据,再结合AR叠加技术将附带有失重展示特效的虚拟太空舱元素进行展示,在具体展示的过程中,可以利用虚拟太空舱元素替换对应的现实元素。
其中,为了确定与虚拟太空舱人物对应的失重展示特效数据,可以按照如下步骤来实现:
步骤一、针对识别出的各个现实元素中的每个现实元素,确定与该现实元素匹配的虚拟太空舱元素;
步骤二、获取与确定的虚拟太空舱元素对应的三维模型;
步骤三、从各三维模型与各失重展示特效数据之间的对应关系中,查找与获取的三维模型对应的失重展示特效数据。
这里,本公开实施例中,首先可以确定与现实元素匹配的虚拟太空舱元素,而后可以获取与该虚拟太空舱人物对应的三维模型,这样,即可以基于各三维模型与各失重展示特效数据之间的对应关系,查找与获取的三维模型对应的失重展示特效数据。
在具体应用中,不同三维模型所对应的失重展示特效数据也不同,例如,可以将人物模型所对应的失重展示特效数据中的展示位置高于物品模型所对应的展示位置高度,可以结合不同的应用需求来设置,这里不做具体的限制。
其中,为了确定与现实元素对应的虚拟太空舱元素,首先可以基于获取的场景图像识别现实元素对应的类型信息,以根据该类型信息确定匹配的虚拟太空舱元素。上述类型可以指的包括物品类、人物类等。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思,本公开实施例中还提供了与太空舱特效的装饰方法对应的太空舱特效的装饰装置,由于本公开实施例中的装置解决问题的原理与本公开实施例上述太空舱特效的装饰方法相似,因此装置的实施可以参见方法的实施,重复之处不再赘述。
实施例二
参照图3所示,为本公开实施例提供的一种太空舱特效的装饰装置的架构示意图,装置包括:获取模块301、识别模块302、生成模块303和装饰模块304;其中,
获取模块301,用于获取包括室内环境的场景图像;
识别模块302,用于基于获取的场景图像,识别室内环境中的各个现实元素;
生成模块303,用于基于识别出的各个现实元素,为每个现实元素生成失重展示特效数据;
装饰模块304,用于基于生成的每个现实元素的失重展示特效数据,生成AR特效数据,其中,AR特效数据中采用失重展示特效数据替换现实元素的展示数据。
采用上述太空舱特效的装饰装置,其利用图像处理方法从场景图像中提取出现实元素(如人物、书桌等),即可以生成失重展示特效数据,以使得最终展示的AR特效数据对现实元素附带有失重装饰效果,从而使得装饰后的AR展示更贴合真实的太空环境,且是自动为现实人物添加失重展示特效,无需人工编辑,效率较高。
在一种实施方式中,装饰模块304,用于按照以下步骤基于生成的每个现实元素的失重展示特效数据,生成AR特效数据:
基于与室内环境匹配的太空舱三维模型,以及生成的每个现实元素的失重展示特效数据,生成AR特效数据。
在一种实施方式中,生成模块303,用于按照以下步骤基于识别出的各个现实元素,为每个现实元素生成失重展示特效数据:
针对识别出的各个现实元素中的每个现实元素,确定与该现实元素对应的AR失重展示位置信息;
将确定的AR失重展示位置,作为对应该现实元素生成的失重展示特效数据。
在一种实施方式中,生成模块303,用于按照以下步骤针对识别出的各个现实元素中的每个现实元素,确定与该现实元素对应的AR失重展示位置信息:
针对识别出的各个现实元素中的每个现实元素,基于该现实元素在场景图像中的显示位置信息,确定与现实元素对应的初始AR展示位置信息;
根据获取的预设失重路径轨迹信息以及确定的初始AR展示位置信息,确定与该现实元素对应的AR失重展示位置信息。
在一种实施方式中,识别模块302,用于按照以下步骤基于获取的场景图像,识别室内环境中的各个现实元素:
利用训练好的现实元素识别网络对获取的场景图像进行识别,得到室内环境中的各个现实元素。
在一种实施方式中,生成模块303,用于按照以下步骤基于识别出的各个现实元素,为每个现实元素生成失重展示特效数据:
针对识别出的各个现实元素中的每个现实元素,确定与该现实元素匹配的虚拟太空舱元素;
获取与确定的虚拟太空舱元素对应的三维模型;
从各三维模型与各失重展示特效数据之间的对应关系中,查找与获取的三维模型对应的失重展示特效数据。
在一种实施方式中,生成模块303,用于按照以下步骤针对识别出的各个现实元素中的每个现实元素,确定与该现实元素匹配的虚拟太空舱元素:
针对识别出的各个现实元素中的每个现实元素,基于获取的场景图像,识别与该现实元素对应的类型信息;
基于识别出的类型信息,确定与该类型信息匹配的虚拟太空舱元素。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明,这里不再详述。
实施例三
本公开实施例还提供了一种电子设备,如图4所示,为本公开实施例提供的电子设备的结构示意图,包括:处理器401、存储器402、和总线403。存储器402存储有处理器401可执行的机器可读指令,当电子设备运行时,处理器401与存储器402之间通过总线403通信,机器可读指令被处理器401执行时执行如下处理:
获取包括室内环境的场景图像;
基于获取的场景图像,识别室内环境中的各个现实元素;
基于识别出的各个现实元素,为每个现实元素生成失重展示特效数据;
基于生成的每个现实元素的失重展示特效数据,生成AR特效数据,其中,AR特效数据中采用失重展示特效数据替换现实元素的展示数据。
在一种实施方式中,上述处理器401执行的指令中,基于生成的每个现实元素的失重展示特效数据,生成AR特效数据,包括:
基于与室内环境匹配的太空舱三维模型,以及生成的每个现实元素的失重展示特效数据,生成AR特效数据。
在一种实施方式中,上述处理器401执行的指令中,基于识别出的各个现实元素,为每个现实元素生成失重展示特效数据,包括:
针对识别出的各个现实元素中的每个现实元素,确定与该现实元素对应的AR失重展示位置信息;
将确定的AR失重展示位置,作为对应该现实元素生成的失重展示特效数据。
在一种实施方式中,上述处理器401执行的指令中,针对识别出的各个现实元素中的每个现实元素,确定与该现实元素对应的AR失重展示位置信息,包括:
针对识别出的各个现实元素中的每个现实元素,基于该现实元素在场景图像中的显示位置信息,确定与现实元素对应的初始AR展示位置信息;
根据获取的预设失重路径轨迹信息以及确定的初始AR展示位置信息,确定与该现实元素对应的AR失重展示位置信息。
在一种实施方式中,上述处理器401执行的指令中,基于获取的场景图像,识别室内环境中的各个现实元素,包括:
利用训练好的现实元素识别网络对获取的场景图像进行识别,得到室内环境中的各个现实元素。
在一种实施方式中,上述处理器401执行的指令中,基于识别出的各个现实元素,为每个现实元素生成失重展示特效数据,包括:
针对识别出的各个现实元素中的每个现实元素,确定与该现实元素匹配的虚拟太空舱元素;
获取与确定的虚拟太空舱元素对应的三维模型;
从各三维模型与各失重展示特效数据之间的对应关系中,查找与获取的三维模型对应的失重展示特效数据。
在一种实施方式中,上述处理器401执行的指令中,针对识别出的各个现实元素中的每个现实元素,确定与该现实元素匹配的虚拟太空舱元素,包括:
针对识别出的各个现实元素中的每个现实元素,基于获取的场景图像,识别与该现实元素对应的类型信息;
基于识别出的类型信息,确定与该类型信息匹配的虚拟太空舱元素。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器401运行时执行上述方法实施例中的太空舱特效的装饰方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例所提供的太空舱特效的装饰方法的计算机程序产品,包括存储了程序代码的计算机可读存储介质,所述程序代码包括的指令可用于执行上述方法实施例中所述的太空舱特效的装饰方法的步骤,具体可参见上述方法实施例,在此不再赘述。
本公开实施例还提供一种计算机程序,该计算机程序被处理器执行时实现前述实施例的任意一种方法。该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software DevelopmentKit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台电子设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本公开的具体实施方式,用以说明本公开的技术方案,而非对其限制,本公开的保护范围并不局限于此,尽管参照前述实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种太空舱特效的装饰方法,其特征在于,所述方法包括:
获取包括室内环境的场景图像;
基于获取的所述场景图像,识别所述室内环境中的各个现实元素;
基于识别出的各个现实元素,为每个所述现实元素生成失重展示特效数据;
基于生成的每个现实元素的失重展示特效数据,生成AR特效数据,其中,所述AR特效数据中采用所述失重展示特效数据替换所述现实元素的展示数据。
2.根据权利要求1所述的装饰方法,其特征在于,所述基于生成的每个现实元素的失重展示特效数据,生成AR特效数据,包括:
基于与所述室内环境匹配的太空舱三维模型,以及生成的每个现实元素的失重展示特效数据,生成AR特效数据。
3.根据权利要求1或2所述的装饰方法,其特征在于,所述基于识别出的各个现实元素,为每个所述现实元素生成失重展示特效数据,包括:
针对识别出的各个现实元素中的每个现实元素,确定与该现实元素对应的AR失重展示位置信息;
将确定的所述AR失重展示位置,作为对应该所述现实元素生成的失重展示特效数据。
4.根据权利要求3所述的装饰方法,其特征在于,所述针对识别出的各个现实元素中的每个现实元素,确定与该现实元素对应的AR失重展示位置信息,包括:
针对识别出的各个现实元素中的每个现实元素,基于该现实元素在所述场景图像中的显示位置信息,确定与所述现实元素对应的初始AR展示位置信息;
根据获取的预设失重路径轨迹信息以及确定的所述初始AR展示位置信息,确定与该现实元素对应的AR失重展示位置信息。
5.根据权利要求1~4任一所述的装饰方法,其特征在于,所述基于获取的所述场景图像,识别所述室内环境中的各个现实元素,包括:
利用训练好的现实元素识别网络对获取的所述场景图像进行识别,得到所述室内环境中的各个现实元素。
6.根据权利要求1~5任一所述的装饰方法,其特征在于,所述基于识别出的各个现实元素,为每个所述现实元素生成失重展示特效数据,包括:
针对识别出的各个现实元素中的每个现实元素,确定与该现实元素匹配的虚拟太空舱元素;
获取与确定的所述虚拟太空舱元素对应的三维模型;
从各三维模型与各失重展示特效数据之间的对应关系中,查找与获取的所述三维模型对应的失重展示特效数据。
7.根据权利要求6所述的装饰方法,其特征在于,所述针对识别出的各个现实元素中的每个现实元素,确定与该现实元素匹配的虚拟太空舱元素,包括:
针对识别出的各个现实元素中的每个现实元素,基于获取的所述场景图像,识别与该现实元素对应的类型信息;
基于识别出的类型信息,确定与该类型信息匹配的虚拟太空舱元素。
8.一种太空舱特效的装饰装置,其特征在于,所述装置包括:
获取模块,用于获取包括室内环境的场景图像;
识别模块,用于基于获取的所述场景图像,识别所述室内环境中的各个现实元素;
生成模块,用于基于识别出的各个现实元素,为每个所述现实元素生成失重展示特效数据;
装饰模块,用于基于生成的每个现实元素的失重展示特效数据,生成AR特效数据,其中,所述AR特效数据中采用所述失重展示特效数据替换所述现实元素的展示数据。
9.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至7任一所述的太空舱特效的装饰方法的步骤。
10.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至7任一所述的太空舱特效的装饰方法的步骤。
CN202010519823.0A 2020-06-09 2020-06-09 一种太空舱特效的装饰方法、装置、电子设备及存储介质 Active CN111665944B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010519823.0A CN111665944B (zh) 2020-06-09 2020-06-09 一种太空舱特效的装饰方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010519823.0A CN111665944B (zh) 2020-06-09 2020-06-09 一种太空舱特效的装饰方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN111665944A true CN111665944A (zh) 2020-09-15
CN111665944B CN111665944B (zh) 2023-08-08

Family

ID=72386410

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010519823.0A Active CN111665944B (zh) 2020-06-09 2020-06-09 一种太空舱特效的装饰方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN111665944B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114463505A (zh) * 2022-02-15 2022-05-10 中国人民解放军战略支援部队航天工程大学士官学校 一种外层空间环境要素模型构建方法及系统

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110055919A1 (en) * 2009-09-03 2011-03-03 International Business Machines Corporation System and Method for the Designation of Items in a Virtual Universe
US20170169617A1 (en) * 2015-12-14 2017-06-15 II Jonathan M. Rodriguez Systems and Methods for Creating and Sharing a 3-Dimensional Augmented Reality Space
WO2018058601A1 (zh) * 2016-09-30 2018-04-05 深圳达闼科技控股有限公司 虚拟与现实融合方法、系统和虚拟现实设备
US20180197345A1 (en) * 2016-09-13 2018-07-12 Youngzone Culture (Shanghai) Co., Ltd. Augmented reality technology-based handheld viewing device and method thereof
EP3435284A1 (en) * 2017-07-27 2019-01-30 Rockwell Collins, Inc. Neural network foreground separation for mixed reality
US20190192965A1 (en) * 2017-12-26 2019-06-27 Disney Enterprises, Inc. Directed wind effect for ar/vr experience
CN110286773A (zh) * 2019-07-01 2019-09-27 腾讯科技(深圳)有限公司 基于增强现实的信息提供方法、装置、设备及存储介质
CN110399667A (zh) * 2019-07-16 2019-11-01 西安工程大学 一种基于ar虚拟现实技术的室内装修设计系统
CN110908508A (zh) * 2019-11-04 2020-03-24 广东虚拟现实科技有限公司 虚拟画面的控制方法、终端设备及存储介质
CN110933515A (zh) * 2018-12-13 2020-03-27 湖南汉坤建筑安保器材有限公司 一种基于vr技术的全景视频播放控制方法

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110055919A1 (en) * 2009-09-03 2011-03-03 International Business Machines Corporation System and Method for the Designation of Items in a Virtual Universe
US20170169617A1 (en) * 2015-12-14 2017-06-15 II Jonathan M. Rodriguez Systems and Methods for Creating and Sharing a 3-Dimensional Augmented Reality Space
US20180197345A1 (en) * 2016-09-13 2018-07-12 Youngzone Culture (Shanghai) Co., Ltd. Augmented reality technology-based handheld viewing device and method thereof
WO2018058601A1 (zh) * 2016-09-30 2018-04-05 深圳达闼科技控股有限公司 虚拟与现实融合方法、系统和虚拟现实设备
EP3435284A1 (en) * 2017-07-27 2019-01-30 Rockwell Collins, Inc. Neural network foreground separation for mixed reality
US20190192965A1 (en) * 2017-12-26 2019-06-27 Disney Enterprises, Inc. Directed wind effect for ar/vr experience
CN110933515A (zh) * 2018-12-13 2020-03-27 湖南汉坤建筑安保器材有限公司 一种基于vr技术的全景视频播放控制方法
CN110286773A (zh) * 2019-07-01 2019-09-27 腾讯科技(深圳)有限公司 基于增强现实的信息提供方法、装置、设备及存储介质
CN110399667A (zh) * 2019-07-16 2019-11-01 西安工程大学 一种基于ar虚拟现实技术的室内装修设计系统
CN110908508A (zh) * 2019-11-04 2020-03-24 广东虚拟现实科技有限公司 虚拟画面的控制方法、终端设备及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李畅;晁建刚;何宁;陈炜;许振瑛;: "面向航天员训练的混合现实场景理解方法研究", 载人航天, no. 01 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114463505A (zh) * 2022-02-15 2022-05-10 中国人民解放军战略支援部队航天工程大学士官学校 一种外层空间环境要素模型构建方法及系统
CN114463505B (zh) * 2022-02-15 2023-01-31 中国人民解放军战略支援部队航天工程大学士官学校 一种外层空间环境要素模型构建方法及系统

Also Published As

Publication number Publication date
CN111665944B (zh) 2023-08-08

Similar Documents

Publication Publication Date Title
CN103218844A (zh) 虚拟形象的配置方法、实现方法、客户端、服务器及系统
CN109420336A (zh) 基于增强现实的游戏实现方法和装置
CN104572125B (zh) 实体关系图的绘制方法、存储方法、绘制装置及存储装置
CN111950521A (zh) 一种增强现实交互的方法、装置、电子设备及存储介质
CN108109209A (zh) 一种基于增强现实的视频处理方法及其装置
CN112861806A (zh) 基于生成对抗网络的字体数据处理方法及装置
CN111651047A (zh) 一种虚拟物体展示方法、装置、电子设备及存储介质
CN105184858A (zh) 一种增强现实移动终端的方法
CN111638797A (zh) 一种展示控制方法及装置
CN111652987A (zh) 一种ar合影图像生成的方法及装置
CN111651057A (zh) 一种数据展示方法、装置、电子设备及存储介质
CN111652983A (zh) 一种增强现实ar特效生成方法、装置及设备
CN112905014A (zh) Ar场景下的交互方法、装置、电子设备及存储介质
CN112288860A (zh) 三维组态图设计系统及方法
CN111640167A (zh) 一种ar合影方法、装置、计算机设备及存储介质
CN111665944A (zh) 一种太空舱特效的装饰方法、装置、电子设备及存储介质
CN111639613A (zh) 一种增强现实ar特效生成方法、装置及电子设备
CN111580679A (zh) 一种太空舱展示方法、装置、电子设备及存储介质
CN204406423U (zh) 一种图像和二维码结合的扩增实境识别装置
CN111651049B (zh) 交互方法、装置、计算机设备及存储介质
Cho et al. Augmented reality coloring book with transitional user interface
CN110019662A (zh) 一种标签重建方法及装置
CN111639615A (zh) 一种虚拟建筑物的触发控制方法及装置
CN112365607A (zh) 一种增强现实ar交互的方法、装置、设备及存储介质
CN113239527B (zh) 一种服装造型仿真系统及工作方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant