CN116091738B - 一种虚拟ar生成方法、系统、电子设备及存储介质 - Google Patents

一种虚拟ar生成方法、系统、电子设备及存储介质 Download PDF

Info

Publication number
CN116091738B
CN116091738B CN202310367234.9A CN202310367234A CN116091738B CN 116091738 B CN116091738 B CN 116091738B CN 202310367234 A CN202310367234 A CN 202310367234A CN 116091738 B CN116091738 B CN 116091738B
Authority
CN
China
Prior art keywords
picture
target
virtual
model
picture material
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202310367234.9A
Other languages
English (en)
Other versions
CN116091738A (zh
Inventor
周俊熙
冯诚
田魁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan Happly Sunshine Interactive Entertainment Media Co Ltd
Original Assignee
Hunan Happly Sunshine Interactive Entertainment Media Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan Happly Sunshine Interactive Entertainment Media Co Ltd filed Critical Hunan Happly Sunshine Interactive Entertainment Media Co Ltd
Priority to CN202310367234.9A priority Critical patent/CN116091738B/zh
Publication of CN116091738A publication Critical patent/CN116091738A/zh
Application granted granted Critical
Publication of CN116091738B publication Critical patent/CN116091738B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/51Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/955Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请提供一种虚拟AR生成方法、系统、电子设备及存储介质,将客户端上传的目标图片素材存储至数据库,确定目标图片素材的存储路径和URL地址;利用根据服务器的当前系统时间和当前时间戳生成的目标字符串对目标图片素材进行命名,得到图片素材名称;根据图片素材名称和存储路径生成图片训练脚本;利用图片训练脚本对目标图片素材中的每个图片进行训练得到每个图片的多个fest格式文件;响应目标用户的模型选择操作,从预先设置的各个模型中确定模型选择操作匹配的目标模型,将获取的目标模型的模型样式、模型URL地址、目标图片素材的URL地址和每个图片的多个fest格式文件映射至预设模板,得到虚拟AR项目的虚拟AR。

Description

一种虚拟AR生成方法、系统、电子设备及存储介质
技术领域
本发明涉及元宇宙技术领域,更具体地说,涉及一种虚拟AR生成方法、系统、电子设备及存储介质。
背景技术
随着科技的快速发展,元宇宙的发展和应用也随之在快速的发展,相应的不久的将来,元宇宙将会被广泛的应用于各个领域中,因此,元宇宙的虚拟AR的构建也变得更加的趋于可行。其中,AR,是指透过摄影机影像的位置及角度精算并加上图像分析技术,让萤幕上的虚拟世界能够与现实世界场景进行结合与互动的技术。
在现有技术中,通过相关的开发人员在现有的增强的技术框架上进行扩展研发相应的元宇宙的虚拟AR项目,以实现元宇宙的虚拟AR的构建。但是,这种方法需要每个研发人员进行技术/兼容性,并研究实现的可行性,对开发人员的要求高,并且这种研发方式不仅开发人力成本高,并且研发时间长。
发明内容
有鉴于此,本发明提供一种虚拟AR生成方法、系统、电子设备及存储介质,以实现降低开发人力的成本、缩短虚拟AR的研发时间,以及降低虚拟AR的开发门槛为目的。
本发明第一方面提供一种虚拟AR生成方法,应用于服务器,所述方法包括:
将客户端上传的目标图片素材存储至数据库,并确定所述目标图片素材的存储路径和URL地址;其中,所述目标图片素材为与虚拟AR项目相关的图片素材;
根据所述服务器的当前系统时间和当前时间戳生成目标字符串,并利用所述目标字符串对所述目标图片素材进行命名,得到所述目标图片素材的图片素材名称;
根据所述图片素材名称和所述存储路径,生成图片训练脚本;
利用所述图片训练脚本对所述目标图片素材中的每个图片进行训练,得到每个所述图片的多个fest格式文件;
响应目标用户的模型选择操作,从预先设置的各个模型中确定与所述模型选择操作匹配的目标模型,并获取所述目标模型的模型样式和模型URL地址;
将所述模型URL地址、所述模型样式、所述目标图片素材的URL地址和每个所述图片的多个fest格式文件映射至预设模板中,得到所述虚拟AR项目的虚拟AR。
可选的,所述方法还包括:
根据所述虚拟AR在所述服务器中的存储路径,生成所述虚拟AR项目的URL地址;
将所述虚拟AR项目的URL地址反馈给所述客户端,以便所述客户端根据所述虚拟AR项目的URL地址访问相应的虚拟AR。
可选的,所述方法还包括:
通过Https协议将所述目标图片素材的URL地址传输至所述客户端。
可选的,确定与所述模型选择操作匹配的目标模型之后,所述方法还包括:
在网页端渲染所述目标模型;
在所述目标模型渲染成功的情况下,输出所述目标模型的绝对地址,以便浏览器根据所述绝对地址加载所述目标模型。
可选的,根据所述图片素材名称和所述存储路径,生成图片训练脚本,包括:
利用node语言基于目标API、所述图片素材名称和所述存储路径,生成图片训练脚本。
可选的,利用所述图片训练脚本对所述目标图片素材中的每个图片进行训练,得到每个所述图片的多个fest格式文件,包括:
调用shell脚本触发所述图片训练脚本,以使所述图片训练脚本基于FREAK算法对所述目标图片素材中的每个图片进行特征提取,得到每个所述图片的多个fest格式文件;
其中,所述图片的每个fest格式文件包括所述图片的关键素材特征,所述图片的每个fest格式文件包括的关键素材特征不同。
可选的,将所述模型URL地址、所述模型样式、所述目标图片素材的URL地址和每个所述图片的多个fest格式文件映射至预设模板中,得到所述虚拟AR项目的虚拟AR,包括:
获取预设模板;其中,预设模板包括多个映射位置;
将所述模型URL地址、所述模型样式、所述目标图片素材的URL地址和每个所述图片的多个fest格式文件分别映射至所述预设模板对应的映射位置上,得到所述虚拟AR项目的虚拟AR。
本发明第二方面提供一种虚拟AR生成系统,应用于服务器,所述系统包括:
上传单元,用于将客户端上传的目标图片素材存储至数据库,并确定所述目标图片素材的存储路径和URL地址;其中,所述目标图片素材为与虚拟AR项目相关的图片素材;
命名单元,用于根据所述服务器的当前系统时间和当前时间戳生成目标字符串,并利用所述目标字符串对所述目标图片素材进行命名,得到所述目标图片素材的图片素材名称;
图片训练脚本生成单元,用于根据所述图片素材名称和所述存储路径,生成图片训练脚本;
训练单元,用于利用所述图片训练脚本对所述目标图片素材中的每个图片进行训练,得到每个所述图片的多个fest格式文件;
确定单元,用于响应目标用户的模型选择操作,从预先设置的各个模型中确定与所述模型选择操作匹配的目标模型,并获取所述目标模型的模型样式和模型URL地址;
虚拟AR生成单元,用于将所述模型URL地址、所述模型样式、所述目标图片素材的URL地址和每个所述图片的多个fest格式文件映射至预设模板中,得到所述虚拟AR项目的虚拟AR。
本发明第三方面提供一种电子设备,包括:处理器以及存储器,所述处理器以及存储器通过通信总线相连;其中,所述处理器,用于调用并执行所述存储器中存储的程序;所述存储器,用于存储程序,所述程序用于实现如上述本发明第一方面提供的虚拟AR生成方法。
本发明第四方面提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机可执行指令,所述计算机可执行指令用于执行如上述本发明第一方面提供的虚拟AR生成方法。
本发明提供一种虚拟AR生成方法、系统、电子设备及存储介质,应用于服务器,将客户端上传的目标图片素材存储至数据库,并确定目标图片素材的存储路径和URL地址;其中,目标图片素材为与虚拟AR项目相关的图片素材;根据服务器的当前系统时间和当前时间戳生成目标字符串,并利用目标字符串对目标图片素材进行命名,得到目标图片素材的图片素材名称;根据图片素材名称和存储路径,生成图片训练脚本;利用图片训练脚本对目标图片素材中的每个图片进行训练,得到每个图片的多个fest格式文件;响应目标用户的模型选择操作,从预先设置的各个模型中确定与模型选择操作匹配的目标模型,并获取目标模型的模型样式和模型URL地址;将模型URL地址、模型样式、目标图片素材的URL地址和每个图片的多个fest格式文件映射至预设模板中,得到虚拟AR项目的虚拟AR;根据虚拟AR在服务器中的存储路径,生成虚拟AR项目的URL地址,并将虚拟AR项目的URL地址反馈给客户端,以便客户端根据虚拟AR项目的URL地址访问相应地虚拟AR。本发明提供的技术方案,客户端仅需将与虚拟AR项目相关的目标图片素材上传至服务器,服务器便可根据客户端上传的目标图片素材生成相应的虚拟AR,整个虚拟AR的生成过程无需研发人员进行技术/兼容性,并研究实现的可行性,从而降低虚拟AR的研发时间和研发成本,并且通过客户端上传图片素材的用户可以为非技术人员,从而降低了虚拟AR的开发门槛。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种虚拟AR生成方法的流程示意图;
图2为本发明实施例提供的一种虚拟AR生成系统的结构示意图;
图3为本发明实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意,本发明公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本发明公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
AR:对应VR虚拟实境一词的翻译称为实拟虚境或扩张现实,是指透过摄影机影像的位置及角度精算并加上图像分析技术,让萤幕上的虚拟世界能够与现实世界场景进行结合与互动的技术。
图像追踪:(Natural Feature Tracking,NFT)是一种能够使用图像而非二维码或Hiro标识卡的技术。该关键追踪图像中有趣的点并使用它们,它会估算相机的位置;这些有趣的点(也叫“图像描述符”)是使用NFT Marker Creator 创建的,这是一种创建NFT标志的工具。
虚拟实境:(virtual reality,VR),简称虚拟环境,是利用电脑模拟产生一个三维空间的虚拟世界,提供使用者关于视觉等感官的模拟,让使用者感觉仿佛身历其境,可以即时、没有限制地观察三维空间内的事物;使用者进行位置移动时,电脑可以立即进行复杂的运算,将精确的三维世界影像传回产生临场感。
WebRTC:名称源自网页即时通信(Web Real-Time Communication)的缩写,是一个支持网页浏览器进行实时语音对话或视频对话的API。
3D:日常生活中可指由长、宽、高三个维度所构成的空间,而且常常是指三维的欧几里得空间。
参见图1,示出了本发明实施例提供的一种虚拟AR生成方法的流程示意图,该虚拟AR生成方法应用于服务器上的虚拟AR生成平台,该虚拟AR生成方法具体包括以下步骤:
S101:将客户端上传的目标图片素材存储至数据库,并确定目标图片素材的存储路径和URL地址;其中,目标图片素材为与虚拟AR项目相关的图片素材。
在本申请实施例中,可以预先设置基于AR.js开源框架在服务器上研发虚拟AR生成平台,同时,还可以预先设置一个上传服务;其中,预先设置的上传服务可以为uploadapi。
在具体执行步骤S101的过程中,客户端可以通过WebRTC方式,将与待开发的虚拟AR项目相关的图片素材(为了便于区分,将虚拟AR项目相关的图片素材称为目标图片素材)上传至服务器,服务器在接收到客户端上传的目标图片素材后,调用上传服务将接收到的目标图片素材存储至数据库中,并确定目标图片素材在数据库中的存储路径,以及根据目标图片素材的存储路径生成目标图片素材的URL地址。
进一步的,在本申请实施例中,在生成目标图片素材的URL地址之后,可以通过Https协议将目标图片素材的URL地址传输至客户端。
需要说明的是,由于VR在客户端上面需要调用设备的webrtc权限,因此在向客户端反馈目标图片素材的URL地址时,需要利用Https协议进行传输。
S102:根据服务器的当前系统时间和当前时间戳生成目标字符串,并利用目标字符串对目标图片素材进行命名,得到目标图片素材的图片素材名称。
在具体执行步骤S102的过程中,在将目标图片素材存储至数据库,或者确定目标图片素材的URL地址之后,可以获取服务器的当前系统时间和当前时间戳,以便根据获取的当前系统时间和当前时间戳生成一个唯一性的目标字符串,并利用得到的目标字符串为目标图片素材进行命名,得到目标图片素材的图片素材名称。
S103:根据图片素材名称和存储路径,生成图片训练脚本。
在本实施例中,在得到目标图片素材的图片素材名称后,可以利用图片素材名称和目标图片素材的存储路径开发一个图片训练脚本,以便利用图片训练脚本对目标图片素材中的每个图片进行训练。
可选的,利用node语言基于目标API、图片素材名称和目标图片素材的存储路径,生成图片训练脚本。
作为本申请实施例的一种优选方式,目标API可以为AR.js提供的NFT-Marker-Creator API,具体的,利用node语言基于AR.js提供的NFT-Marker-Creator API、图片素材名称和目标图片素材的存储路径,生成图片训练脚本。
例如,利用node语言基于AR.js提供的NFT-Marker-Creator API、图片素材名称和目标图片素材的存储路径,生成图片训练脚本可以为:node creator -i<图片素材名称+目标图片素材的存储路径>。
S104:利用图片训练脚本对目标图片素材中的每个图片进行训练,得到每个图片的多个fest格式文件。
在具体执行步骤S104的过程中,在生成图片训练脚本后,调用shell脚本触发图片训练脚本,以使图片训练脚本根据目标图片素材的存储路径和图片素材名称确定目标图片素材,并对目标图片素材中的每个图片进行训练,得到每个图片的多个fest格式文件。
需要说明的是,图片的每个fest格式文件包括图片的关键素材特征,图片的每个fest格式文件包括的关键素材特征不同。
还需要说明的是,每个图片的多个fest格式文件可以为3个类fest格式的文件。
可选的,调用shell脚本触发图片训练脚本,以使图片训练脚本基于FREAK算法对目标图片素材中的每个图片进行特征提取,得到每个图片的多个fest格式文件。
在本申请实施例中,针对目标图片素材中的每个图片而言,图片训练脚本基于FREAK算法进行关键特征点提取,并根据提取的各个关键特征点生成3个类fest格式的文件。其中,关键特征点即为该图片的关键素材特征。
S105:响应目标用户的模型选择操作,从预先设置的各个模型中确定与模型选择操作匹配的目标模型,并获取目标模型的模型样式和模型URL地址。
在本申请实施例中,可以预先利用3dmax、photoshop、Maya、Rhino等算法生成多个模型,并通过上传服务将生成的各个模型存储至数据库中。其中,生成的各个模型可以为2D模型,或者可以为3D模型,可以根据实际应用进行设置,本申请实施例不加以限定。
在本申请实施例中,目标用户可以在虚拟AR生成平台上进行相应的模型选择操作,虚拟AR生成平台在检测到目标用户的模型选择操作后,可以响应目标用户的模型选择操作,从预先设置的各个模型中确定与模型选择操作匹配的目标模型,并获取与目标模型匹配的模型样式,以及目标模型在服务器中的存储路径,最后根据目标模型在服务器中的存储路径生成目标模型的模型URL地址。
需要说明的是,模型样式可以为默认模型样式,也可以为自定义事件跟样式。其中,自定义事件跟样式为用户根据需求设置的模型样式。
在本实施例中,虚拟AR生成平台提供了模型配置界面,用户可以通过模型配置界面配置目标模型对应的自定义事件跟样式。其中,自定义事件跟样式包括多个模型属性。
需要说明的是,各个模型属性可以包括用户与模型的交互方式、模型的大小、位置调整,以及脚本注入供能等等。
其中,用户与模型的交互方式可以为模型在客户端展示的动画方式(提供动画方式选择下拉框),以及延迟自动网页跳转事件(提供网页url输入框以及延迟时间);提供模型的大小和位置调整可以为让模型在客户端展示的大小(width,height,提供调整输入框)和展示的位置(x,y是2d模型提供两个轴线调整,z轴是3d模型才会出现的输入框);脚本注入的功能,是当以上的功能在某些情况都不能满足用户的需求时,用户可以使用脚本注入供能注入自己的编写的与待开发的虚拟AR项目相关的脚本代码段。
还需要说明的是,默认模型样式可以为默认模型在客户端上展示居中,并且自适应客户端的设备的宽度。默认模型样式也可以根据实际应用进行预先配置,本申请实施例不加以限定。
进一步的,在本申请实施例中,获取与模型选择操作匹配的目标模型之后,还可以进一步在服务器的网页端渲染该目标模型,并在目标模型渲染成功的情况下,输出目标模型的绝对地址,以便浏览器根据绝对地址加载目标模型。
S106:将模型URL地址、模型样式、目标图片素材的URL地址和每个图片的多个fest格式文件映射至预设模板中,得到虚拟AR项目的虚拟AR。
在本申请实施例中,可以预先设置与各个虚拟AR项目相关的预设模板,并将预设模型存储至数据库中,其中,预设模板可以为HTML模板,可以根据实际应用进行设置,本申请实施例不加以限定。
可选的,在得到目标模型的目标模板和相应的模板样式后,获取预设模板,将模型URL地址、模型样式、目标图片素材的URL地址和每个图片的多个fest格式文件分别映射至预设模板对应的映射位置上,得到虚拟AR项目的虚拟AR。
需要说明的是,预设模板包括多个映射位置,其中,多个映射位置包括模型URL地址的映射位置、模型样式的映射位置、目标图片素材的URL地址和各个图片的多个fest格式文件的映射位置。
作为本申请实施例的一种优选方式,将模型URL地址映射至预设模板的模型URL地址的映射位置上,将模型样式映射至预设模板的模型样式的映射位置上,以及将目标图片素材的URL地址和各个图片的多个fest格式文件映射至目标图片素材的URL地址和各个图片的多个fest格式文件的映射位置上,得到相应的目标模板。
需要说明的是,目标模板即为虚拟AR项目的虚拟AR。
例如,将各个图片的多个fest格式文件映射至HTML模板的<a-nft markerhandlertype="nft" url={训练好的fest格式文件地址}smooth="true" smoothCount="10"smoothTolerance=".01"smoothThreshold="5">中的{训练好的fest格式文件地址}上;其中,{训练好的fest格式文件地址}即为各个图片的多个fest格式文件的映射位置;
将模型URL地址映射至HTML模板的<a-entity gltf-model={模型的地址}scale="50 50 50"gesture-handler="minScale:0.25;maxScale:10"position="1000 - 200"rotation="-9000"></a-entity>中的{模型的地址}上;其中,{模型的地址}即为模型URL地址的映射位置;
将模型样式映射至HTML模板的:AFRAME.registerComponent('markerhandler',{
init: function ( ) {
//模型样式的映射位置(这里会把事件跟项目人员编写的脚本注入填充进来并执行)
}})中的模型样式的映射位置上。
需要说明的是,将各个图片的多个fest格式文件映射至HTML模板中的{训练好的fest格式文件地址}位置、将模型样式映射至HTML模板的模型样式的映射位置,以及将目标图片素材的URL地址和各个图片的多个fest格式文件映射至HTML模板的目标图片素材的URL地址和各个图片的多个fest格式文件的映射位置后,便可生成满足HTML模板的HTML结构。
还需要说明的是,模型URL地址、模型样式、目标图片素材的URL地址、各个图片的多个fest格式文件和预设模板结合在一起后,便可生成虚拟AR项目的虚拟AR,此时,只需要根据虚拟AR在服务器中的存储路径便可确定虚拟AR项目的URL地址,也就是虚拟AR对外的访问地址。
S107:根据虚拟AR在服务器中的存储路径,生成虚拟AR项目的URL地址,并将虚拟AR项目的URL地址反馈给客户端,以便客户端根据虚拟AR项目的URL地址访问相应地虚拟AR。
在具体执行步骤S107的过程中,在生成虚拟AR项目对应的虚拟AR后,可以进一步获取虚拟AR在服务器中的存储路径,以便根据虚拟AR的存储路径生成虚拟AR对外访问的URL地址,最后将生成的虚拟AR的URL地址反馈给客户端,以便客户端根据虚拟AR项目的URL地址访问相应地虚拟AR。
本发明提供一种虚拟AR生成方法,应用于服务器上的虚拟AR生成平台,将客户端上传的目标图片素材存储至数据库,并确定目标图片素材的存储路径和URL地址;其中,目标图片素材为与虚拟AR项目相关的图片素材;根据服务器的当前系统时间和当前时间戳生成目标字符串,并利用目标字符串对目标图片素材进行命名,得到目标图片素材的图片素材名称;根据图片素材名称和存储路径,生成图片训练脚本;利用图片训练脚本对目标图片素材中的每个图片进行训练,得到每个图片的多个fest格式文件;响应目标用户的模型选择操作,从预先设置的各个模型中确定与模型选择操作匹配的目标模型,并获取目标模型的模型样式和模型URL地址;将模型URL地址、模型样式、目标图片素材的URL地址和每个图片的多个fest格式文件映射至预设模板中,得到虚拟AR项目的虚拟AR;根据虚拟AR在服务器中的存储路径,生成虚拟AR项目的URL地址,并将虚拟AR项目的URL地址反馈给客户端,以便客户端根据虚拟AR项目的URL地址访问相应地虚拟AR。本发明提供的技术方案,客户端仅需将与虚拟AR项目相关的目标图片素材上传至服务器,服务器便可根据客户端上传的目标图片素材生成相应的虚拟AR,整个虚拟AR的生成过程无需研发人员进行技术/兼容性,并研究实现的可行性,从而降低虚拟AR的研发时间,和研发成本,并且通过客户端上传图片素材的用户可以为非技术人员,从而降低了虚拟AR的开发门槛。
基于本发明实施例公开的虚拟AR生成方法,本发明实施例还对应公开一种虚拟AR生成系统,应用于服务器,如图2所示,该虚拟AR生成系统包括:
上传单元21,用于将客户端上传的目标图片素材存储至数据库,并确定目标图片素材的存储路径和URL地址;其中,目标图片素材为与虚拟AR项目相关的图片素材;
命名单元22,用于根据服务器的当前系统时间和当前时间戳生成目标字符串,并利用目标字符串对目标图片素材进行命名,得到目标图片素材的图片素材名称;
图片训练脚本生成单元23,用于根据图片素材名称和存储路径,生成图片训练脚本;
训练单元24,用于利用图片训练脚本对目标图片素材中的每个图片进行训练,得到每个图片的多个fest格式文件;
确定单元25,用于响应目标用户的模型选择操作,从预先设置的各个模型中确定与模型选择操作匹配的目标模型,并获取目标模型的模型样式和模型URL地址;
虚拟AR生成单元26,用于将模型URL地址、模型样式、目标图片素材的URL地址和每个图片的多个fest格式文件映射至预设模板中,得到虚拟AR项目的虚拟AR。
上述本发明实施例公开的虚拟AR生成系统中各个单元具体的原理和执行过程,与上述本发明实施例公开的虚拟AR生成方法相同,可参见上述本发明实施例公开的虚拟AR生成方法中相应的部分,这里不再进行赘述。
本发明提供一种虚拟AR生成系统,应用于服务器,将客户端上传的目标图片素材存储至数据库,并确定目标图片素材的存储路径和URL地址;其中,目标图片素材为与虚拟AR项目相关的图片素材;根据服务器的当前系统时间和当前时间戳生成目标字符串,并利用目标字符串对目标图片素材进行命名,得到目标图片素材的图片素材名称;根据图片素材名称和存储路径,生成图片训练脚本;利用图片训练脚本对目标图片素材中的每个图片进行训练,得到每个图片的多个fest格式文件;响应目标用户的模型选择操作,从预先设置的各个模型中确定与模型选择操作匹配的目标模型,并获取目标模型的模型样式和模型URL地址;将模型URL地址、模型样式、目标图片素材的URL地址和每个图片的多个fest格式文件映射至预设模板中,得到虚拟AR项目的虚拟AR;根据虚拟AR在服务器中的存储路径,生成虚拟AR项目的URL地址,并将虚拟AR项目的URL地址反馈给客户端,以便客户端根据虚拟AR项目的URL地址访问相应地虚拟AR。本发明提供的技术方案,客户端仅需将与虚拟AR项目相关的目标图片素材上传至服务器,服务器便可根据客户端上传的目标图片素材生成相应的虚拟AR,整个虚拟AR的生成过程无需研发人员进行技术/兼容性,并研究实现的可行性,从而降低虚拟AR的研发时间,和研发成本,并且通过客户端上传图片素材的用户可以为非技术人员,从而降低了虚拟AR的开发门槛。
可选的,本发明实施例提供的一种虚拟AR生成系统,还包括:
虚拟AR项目的URL地址生成单元,用于根据虚拟AR在服务器中的存储路径,生成虚拟AR项目的URL地址;
返回单元,用于将虚拟AR项目的URL地址反馈给客户端,以便客户端根据虚拟AR项目的URL地址访问相应的虚拟AR。
可选的,本发明实施例提供的一种虚拟AR生成系统,还包括:
传输单元,用于通过Https协议将目标图片素材的URL地址传输至客户端。
可选的,本发明实施例提供的一种虚拟AR生成系统,还包括:
渲染单元,用于在网页端渲染目标模型;
输出单元,用于在目标模型渲染成功的情况下,输出目标模型的绝对地址,以便浏览器根据绝对地址加载目标模型。
可选的,图片训练脚本生成单元,包括:
图片训练脚本生成子单元,用于利用node语言基于目标API、图片素材名称和存储路径,生成图片训练脚本。
可选的,训练单元,包括:
训练子单元,用于调用shell脚本触发图片训练脚本,以使图片训练脚本基于FREAK算法对目标图片素材中的每个图片进行特征提取,得到每个图片的多个fest格式文件;
其中,图片的每个fest格式文件包括图片的关键素材特征,图片的每个fest格式文件包括的关键素材特征不同。
可选的,虚拟AR生成单元,包括:
预设模板获取单元,用于获取预设模板;其中,预设模板包括多个映射位置;
虚拟AR生成子单元,用于将模型URL地址、模型样式、目标图片素材的URL地址和每个图片的多个fest格式文件分别映射至预设模板对应的映射位置上,得到虚拟AR项目的虚拟AR。
本申请实施例还提供一种电子设备,该电子设备包括:处理器以及存储器,所述处理器以及存储器通过通信总线相连;其中,所述处理器,用于调用并执行所述存储器中存储的程序;所述存储器,用于存储程序,该程序用于实现虚拟AR生成方法。
下面参考图3,其示出了适于用来实现本发明公开实施例的电子设备的结构示意图。本发明公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图3示出的电子设备仅仅是一个示例,不应对本发明公开实施例的功能和使用范围带来任何限制。
如图3所示,电子设备可以包括处理装置(例如中央处理器、图形处理器等)301,其可以根据存储在只读存储器(ROM)302中的程序或者从存储装置308加载到随机访问存储器(RAM)303中的程序而执行各种适当的动作和处理。在RAM303中,还存储有电子设备操作所需的各种程序和数据。处理装置301、ROM302以及RAM303通过总线304彼此相连。输入/输出(I/O)接口305也连接至总线304。
通常,以下装置可以连接至I/O接口305:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置306;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置307;包括例如磁带、硬盘等的存储装置308;以及通信装置309。通信装置309可以允许电子设备与其他设备进行无线或有线通信以交换数据。虽然图3示出了具有各种装置的电子设备,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在非暂态计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的虚拟AR生成方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置309从网络上被下载和安装,或者从存储装置308被安装,或者从ROM302被安装。在该计算机程序被处理装置301执行时,执行本发明公开实施例的虚拟AR生成方法中限定的上述功能。
更进一步的,本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机可执行指令,所述计算机可执行指令用于执行虚拟AR生成方法。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:将客户端上传的目标图片素材存储至数据库,并确定所述目标图片素材的存储路径和URL地址;其中,所述目标图片素材为与虚拟AR项目相关的图片素材;根据所述服务器的当前系统时间和当前时间戳生成目标字符串,并利用所述目标字符串对所述目标图片素材进行命名,得到所述目标图片素材的图片素材名称;根据所述图片素材名称和所述存储路径,生成图片训练脚本;利用所述图片训练脚本对所述目标图片素材中的每个图片进行训练,得到每个所述图片的多个fest格式文件;响应目标用户的模型选择操作,从预先设置的各个模型中确定与所述模型选择操作匹配的目标模型,并获取所述目标模型的模型样式和模型URL地址;将所述模型URL地址、所述模型样式、所述目标图片素材的URL地址和每个所述图片的多个fest格式文件映射至预设模板中,得到所述虚拟AR项目的虚拟AR。
在本发明公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
需要说明的是,本发明公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统或系统实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的,其中作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
以上仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种虚拟AR生成方法,其特征在于,应用于服务器,所述方法包括:
将客户端上传的目标图片素材存储至数据库,并确定所述目标图片素材的存储路径和URL地址;其中,所述目标图片素材为与虚拟AR项目相关的图片素材;
根据所述服务器的当前系统时间和当前时间戳生成目标字符串,并利用所述目标字符串对所述目标图片素材进行命名,得到所述目标图片素材的图片素材名称;
根据所述图片素材名称和所述存储路径,生成图片训练脚本;
利用所述图片训练脚本对所述目标图片素材中的每个图片进行训练,得到每个所述图片的多个fest格式文件,所述图片的每个fest格式文件包括所述图片的关键素材特征;
响应目标用户的模型选择操作,从预先设置的各个模型中确定与所述模型选择操作匹配的目标模型,并获取所述目标模型的模型样式和模型URL地址;
将所述模型URL地址、所述模型样式、所述目标图片素材的URL地址和每个所述图片的多个fest格式文件映射至预设模板中,得到所述虚拟AR项目的虚拟AR。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述虚拟AR在所述服务器中的存储路径,生成所述虚拟AR项目的URL地址;
将所述虚拟AR项目的URL地址反馈给所述客户端,以便所述客户端根据所述虚拟AR项目的URL地址访问相应的虚拟AR。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
通过Https协议将所述目标图片素材的URL地址传输至所述客户端。
4.根据权利要求1所述的方法,其特征在于,确定与所述模型选择操作匹配的目标模型之后,所述方法还包括:
在网页端渲染所述目标模型;
在所述目标模型渲染成功的情况下,输出所述目标模型的绝对地址,以便浏览器根据所述绝对地址加载所述目标模型。
5.根据权利要求1所述的方法,其特征在于,根据所述图片素材名称和所述存储路径,生成图片训练脚本,包括:
利用node语言基于目标API、所述图片素材名称和所述存储路径,生成图片训练脚本。
6.根据权利要求1所述的方法,其特征在于,利用所述图片训练脚本对所述目标图片素材中的每个图片进行训练,得到每个所述图片的多个fest格式文件,包括:
调用shell脚本触发所述图片训练脚本,以使所述图片训练脚本基于FREAK算法对所述目标图片素材中的每个图片进行特征提取,得到每个所述图片的多个fest格式文件;
其中,所述图片的每个fest格式文件包括的关键素材特征不同。
7.根据权利要求1所述的方法,其特征在于,将所述模型URL地址、所述模型样式、所述目标图片素材的URL地址和每个所述图片的多个fest格式文件映射至预设模板中,得到所述虚拟AR项目的虚拟AR,包括:
获取预设模板;其中,预设模板包括多个映射位置;
将所述模型URL地址、所述模型样式、所述目标图片素材的URL地址和每个所述图片的多个fest格式文件分别映射至所述预设模板对应的映射位置上,得到所述虚拟AR项目的虚拟AR。
8.一种虚拟AR生成系统,其特征在于,应用于服务器,所述系统包括:
上传单元,用于将客户端上传的目标图片素材存储至数据库,并确定所述目标图片素材的存储路径和URL地址;其中,所述目标图片素材为与虚拟AR项目相关的图片素材;
命名单元,用于根据所述服务器的当前系统时间和当前时间戳生成目标字符串,并利用所述目标字符串对所述目标图片素材进行命名,得到所述目标图片素材的图片素材名称;
图片训练脚本生成单元,用于根据所述图片素材名称和所述存储路径,生成图片训练脚本;
训练单元,用于利用所述图片训练脚本对所述目标图片素材中的每个图片进行训练,得到每个所述图片的多个fest格式文件,所述图片的每个fest格式文件包括所述图片的关键素材特征;
确定单元,用于响应目标用户的模型选择操作,从预先设置的各个模型中确定与所述模型选择操作匹配的目标模型,并获取所述目标模型的模型样式和模型URL地址;
虚拟AR生成单元,用于将所述模型URL地址、所述模型样式、所述目标图片素材的URL地址和每个所述图片的多个fest格式文件映射至预设模板中,得到所述虚拟AR项目的虚拟AR。
9.一种电子设备,其特征在于,包括:处理器以及存储器,所述处理器以及存储器通过通信总线相连;其中,所述处理器,用于调用并执行所述存储器中存储的程序;所述存储器,用于存储程序,所述程序用于实现如权利要求1-7任一项所述的虚拟AR生成方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机可执行指令,所述计算机可执行指令用于执行如权利要求1-7任一项所述的虚拟AR生成方法。
CN202310367234.9A 2023-04-07 2023-04-07 一种虚拟ar生成方法、系统、电子设备及存储介质 Active CN116091738B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310367234.9A CN116091738B (zh) 2023-04-07 2023-04-07 一种虚拟ar生成方法、系统、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310367234.9A CN116091738B (zh) 2023-04-07 2023-04-07 一种虚拟ar生成方法、系统、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN116091738A CN116091738A (zh) 2023-05-09
CN116091738B true CN116091738B (zh) 2023-06-16

Family

ID=86210487

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310367234.9A Active CN116091738B (zh) 2023-04-07 2023-04-07 一种虚拟ar生成方法、系统、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN116091738B (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022213801A1 (zh) * 2021-04-09 2022-10-13 北京字跳网络技术有限公司 视频处理方法、装置及设备

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102110304B (zh) * 2011-03-29 2012-08-22 华南理工大学 一种基于素材引擎的漫画自动生成方法
CN108536734B (zh) * 2018-03-02 2020-07-24 北京邮电大学 一种webar活动的发布方法
CN109191545A (zh) * 2018-08-27 2019-01-11 北京奇虎科技有限公司 一种制作漫画的方法及装置
US20220292543A1 (en) * 2021-03-09 2022-09-15 Alexandra Valentina Henderson Pop-up retial franchising and complex econmic system
CN113359994B (zh) * 2021-06-24 2022-09-13 福州大学 适用于ar教育应用的教学内容配置与交互方案实施的方法
CN113643412B (zh) * 2021-07-14 2022-07-22 北京百度网讯科技有限公司 虚拟形象的生成方法、装置、电子设备及存储介质
CN114501076A (zh) * 2022-02-07 2022-05-13 浙江核新同花顺网络信息股份有限公司 视频生成方法、设备以及介质

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022213801A1 (zh) * 2021-04-09 2022-10-13 北京字跳网络技术有限公司 视频处理方法、装置及设备

Also Published As

Publication number Publication date
CN116091738A (zh) 2023-05-09

Similar Documents

Publication Publication Date Title
CN106846497B (zh) 应用于终端的呈现三维地图的方法和装置
CN112070906A (zh) 一种增强现实系统及增强现实数据的生成方法、装置
US20240153216A1 (en) Shoe try-on method and apparatus based on augmented reality, and electronic device
CN112181576A (zh) 表单处理方法、装置、终端及存储介质
CN113806306B (zh) 媒体文件处理方法、装置、设备、可读存储介质及产品
CN110930220A (zh) 一种显示方法、装置、终端设备及介质
CN111783508A (zh) 用于处理图像的方法和装置
EP4343706A1 (en) Data processing method and apparatus, and electronic device and storage medium
JP2023522266A (ja) マルチメディアデータ配信の方法、装置、デバイス及び媒体
CN111597466A (zh) 展示方法、装置和电子设备
CN111652675A (zh) 展示方法、装置和电子设备
KR101887081B1 (ko) 증강 현실 콘텐츠 서비스를 제공하는 방법
CN112492399B (zh) 信息显示方法、装置及电子设备
CN116091738B (zh) 一种虚拟ar生成方法、系统、电子设备及存储介质
CN110618811B (zh) 信息呈现方法和装置
CN109816791B (zh) 用于生成信息的方法和装置
CN115878115A (zh) 页面渲染方法、装置、介质和电子设备
Khan The rise of augmented reality browsers: Trends, challenges and opportunities
CN113467663B (zh) 界面配置方法、装置、计算机设备及介质
Nordan An investigation of potential methods for topology preservation in interactive vector tile map applications
CN115209215A (zh) 视频处理方法、装置及设备
CN102867323B (zh) 一种3d纹理的处理方法、装置及系统
CN111294657A (zh) 信息处理方法和装置
CN114357348B (zh) 显示方法、装置和电子设备
CN117649506A (zh) 一种在虚拟(3d)空间中隔离运行可交互虚拟物体的方法、设备、计算机程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant