CN106648098B - 一种自定义场景的ar投影方法及系统 - Google Patents

一种自定义场景的ar投影方法及系统 Download PDF

Info

Publication number
CN106648098B
CN106648098B CN201611203233.7A CN201611203233A CN106648098B CN 106648098 B CN106648098 B CN 106648098B CN 201611203233 A CN201611203233 A CN 201611203233A CN 106648098 B CN106648098 B CN 106648098B
Authority
CN
China
Prior art keywords
model
space
module
template
space template
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611203233.7A
Other languages
English (en)
Other versions
CN106648098A (zh
Inventor
伍永豪
赵亚丁
彭泉
曾贵平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Molio Network Co ltd
Original Assignee
Wuhan Molio Network Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Molio Network Co ltd filed Critical Wuhan Molio Network Co ltd
Priority to CN201611203233.7A priority Critical patent/CN106648098B/zh
Publication of CN106648098A publication Critical patent/CN106648098A/zh
Application granted granted Critical
Publication of CN106648098B publication Critical patent/CN106648098B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Abstract

本发明公开了一种自定义场景的AR投影方法及系统，其中，方法包括:利用爬虫技术采集网络上的3D模型，形成候选模型库；生成空白的3D空间模板；利用Kinect模块识别到预设的手势，控制从候选模型库中选择3D模型导入3D空间模板，控制3D模型在3D空间模板中的缩放和位置；摄像头采集真实场景信息，当识别到AR卡片以其为中心，叠加真实场景信息和3D空间模板数据，形成AR空间模型；将AR空间模型全息投影在投影屏幕上。有益效果：自定义选择3D模型导入3D空间模板，调整3D模型在3D空间模板中大小、位置，自定义组合成用户期待的3D模型的组合，将虚拟的3D空间模板叠加到真实场景形成AR空间模型再全息投影，实现了用户自定义虚拟场景，虚拟场景个性化。

Description

一种自定义场景的AR投影方法及系统
技术领域
本发明涉及AR投影技术领域，尤其是涉及一种自定义场景的AR投影方法及系统。
背景技术
增强现实(Augmented Reality，简称AR)，是一种将真实世界信息和虚拟世界信息“无缝”集成的技术，是把原本在现实世界的一定时间空间范围内很难体验到的实体信息,通过电脑等科学技术，模拟仿真后再叠加，将虚拟的信息应用到真实世界，被人类感官所感知，从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。AR受到的关注日益广泛，并且已经发挥了重要作用，显示出了巨大的潜力。
目前已有的AR技术往往是通过识别图像信息出现预设的视频或出现预设的虚拟3D模型，其虚拟的场景都是预存好的，比较单一，无法由用户自定义虚拟场景，不够个性化。
发明内容
本发明的目的在于克服上述技术不足，提出一种自定义场景的AR投影方法及系统，解决现有技术中AR应用的虚拟场景内容单一、固定，无法由用户自定义的技术问题。
为达到上述技术目的，本发明的技术方案提供一种自定义场景的AR投影方法，其中，包括：
S1、输入关键词，在网络的3D模型库中进行关键词查找；
S2、利用爬虫技术采集查找到的所述3D模型，形成候选模型库；
S3、生成3D空间模板，所述3D空间模板初始设置为带有坐标轴的空白3D空间；
S4、Kinect模块识别到预设的手势，控制从所述候选模型库中选择所述3D模型导入所述3D空间模板，控制所述3D模型在所述3D空间模板中的缩放和位置；
S5、摄像头采集真实场景信息，当识别到AR卡片，以所述AR卡片为中心，叠加真实场景信息和所述3D空间模板数据，形成AR空间模型；
S6、将所述AR空间模型的数字信号转为光信号，全息投影在投影屏幕上。
本发明还提供一种自定义场景的AR投影系统，其中，包括：
查找模块：输入关键词，在网络的3D模型库中进行关键词查找；
采集模块：利用爬虫技术采集查找到的所述3D模型，形成候选模型库；
生成模块：生成3D空间模板，所述3D空间模板初始设置为带有坐标轴的空白3D空间；
构建虚拟空间模块：Kinect模块识别到预设的手势，控制从所述候选模型库中选择所述3D模型导入所述3D空间模板，控制所述3D模型在所述3D空间模板中的缩放和位置；
合成AR空间模块：摄像头采集真实场景信息，当识别到AR卡片，以所述AR卡片为中心，叠加真实场景信息和所述3D空间模板数据，形成AR空间模型；
全息投影模块：将所述AR空间模型的数字信号转为光信号，全息投影在投影屏幕上。
与现有技术相比，本发明的有益效果包括：通过爬虫采集网络上符合条件的3D模型，自定义选择部分3D模型导入3D空间模板，调整3D模型在3D空间模板中大小、位置，自定义组合成用户期待的3D模型的组合，将虚拟的3D空间模板叠加到真实场景形成AR空间模型再全息投影，实现了用户自定义虚拟场景，虚拟场景丰富多样、个性化。
附图说明
图1是本发明提供的一种自定义场景的AR投影方法流程图；
图2是本发明提供的一种自定义场景的AR投影系统结构框图。
附图中：1、自定义场景的AR投影系统，11、查找模块，12、采集模块，13、生成模块，14、构建虚拟空间模块，15、合成AR空间模块，16、全息投影模块。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
本发明提供了一种自定义场景的AR投影方法，其中，包括：
S1、输入关键词，在网络的3D模型库中进行关键词查找；
S2、利用爬虫技术采集查找到的3D模型，形成候选模型库；
S3、生成3D空间模板，3D空间模板初始设置为带有坐标轴的空白3D空间；
S4、Kinect模块识别到预设的手势，控制从候选模型库中选择3D模型导入3D空间模板，控制3D模型在3D空间模板中的缩放和位置；
S5、摄像头采集真实场景信息，当识别到AR卡片，以AR卡片为中心，叠加真实场景信息和3D空间模板数据，形成AR空间模型；
S6、将AR空间模型的数字信号转为光信号，全息投影在投影屏幕上。
本发明所述的自定义场景的AR投影方法，步骤S2包括：
候选模型库包括静态3D模型和动态3D模型。
本发明所述的自定义场景的AR投影方法，步骤S4包括：
Kinect模块识别到第一预设手势，控制从候选模型库中选择3D模型并导入3D空间模板；
Kinect模块识别到第二预设手势，控制3D模型在3D空间模板中的缩放；
Kinect模块识别到第三预设手势，操作3D模型在3D空间模板中的位置。
本发明所述的自定义场景的AR投影方法，步骤S5包括：
使用Vuforia模块叠加真实场景信息和3D空间模板数据。
本发明所述的自定义场景的AR投影方法，步骤S6包括：
Kinect模块识别到预设的观看手势，控制全息投影的旋转和缩放，供用户观看。
本发明还提供一种自定义场景的AR投影系统1，其中，包括：
查找模块11：输入关键词，在网络的3D模型库中进行关键词查找；
采集模块12：利用爬虫技术采集查找到的3D模型，形成候选模型库；
生成模块13：生成3D空间模板，3D空间模板初始设置为带有坐标轴的空白3D空间；
构建虚拟空间模块14：Kinect模块识别到预设的手势，控制从候选模型库中选择3D模型导入3D空间模板，控制3D模型在3D空间模板中的缩放和位置；
合成AR空间模块15：摄像头采集真实场景信息，当识别到AR卡片，以AR卡片为中心，叠加真实场景信息和3D空间模板数据，形成AR空间模型；
全息投影模块16：将AR空间模型的数字信号转为光信号，全息投影在投影屏幕上。
本发明所述的自定义场景的AR投影系统1，采集模块12包括：
候选模型库包括静态3D模型和动态3D模型。
本发明所述的自定义场景的AR投影系统1，构建虚拟空间模块14包括：
Kinect模块识别到第一预设手势，控制从候选模型库中选择3D模型并导入3D空间模板；
Kinect模块识别到第二预设手势，控制3D模型在3D空间模板中的缩放；
Kinect模块识别到第三预设手势，操作3D模型在3D空间模板中的位置。
本发明所述的自定义场景的AR投影系统1，合成AR空间模块15包括：
使用Vuforia模块叠加真实场景信息和3D空间模板数据。
本发明所述的自定义场景的AR投影系统1，全息投影模块16包括：
Kinect模块识别到预设的观看手势，控制全息投影的旋转和缩放，供用户观看。
本发明提供的一种自定义场景的AR投影方法及系统在使用过程中，首先输入关键词，在网络的3D模型库中进行关键词查找；利用爬虫技术采集查找到的3D模型，形成候选模型库；生成3D空间模板，3D空间模板初始设置为带有坐标轴的空白3D空间；Kinect模块识别到预设的手势，控制从候选模型库中选择3D模型导入3D空间模板，控制3D模型在3D空间模板中的缩放和位置；摄像头采集真实场景信息，当识别到AR卡片，以AR卡片为中心，叠加真实场景信息和3D空间模板数据，形成AR空间模型；将AR空间模型的数字信号转为光信号，全息投影在投影屏幕上。
与现有技术相比，本发明的有益效果包括：通过爬虫采集网络上符合条件的3D模型，自定义选择部分3D模型导入3D空间模板，调整3D模型在3D空间模板中大小、位置，自定义组合成用户期待的3D模型的组合，将虚拟的3D空间模板叠加到真实场景形成AR空间模型再全息投影，实现了用户自定义虚拟场景，虚拟场景丰富多样、个性化。
以上所述本发明的具体实施方式，并不构成对本发明保护范围的限定。任何根据本发明的技术构思所做出的各种其他相应的改变与变形，均应包含在本发明权利要求的保护范围内。

Claims (4)

1.一种自定义场景的AR投影方法，其特征在于，包括：
S1、输入关键词，在网络的3D模型库中进行关键词查找；
S2、利用爬虫技术采集查找到的所述3D模型，形成候选模型库；
S3、生成3D空间模板，所述3D空间模板初始设置为带有坐标轴的空白3D空间；
S4、Kinect模块识别到预设的手势，控制从所述候选模型库中选择所述3D模型导入所述3D空间模板，控制所述3D模型在所述3D空间模板中的缩放和位置；
S5、摄像头采集真实场景信息，当识别到AR卡片，以所述AR卡片为中心，叠加真实场景信息和所述3D空间模板数据，形成AR空间模型,使用Vuforia模块叠加所述真实场景信息和所述3D空间模板数据；其中,步骤S4包括：
所述Kinect模块识别到第一预设手势，控制从所述候选模型库中选择所述3D模型并导入所述3D空间模板；
所述Kinect模块识别到第二预设手势，控制所述3D模型在所述3D空间模板中的缩放；
所述Kinect模块识别到第三预设手势，操作所述3D模型在所述3D空间模板中的位置；
S6、将所述AR空间模型的数字信号转为光信号，全息投影在投影屏幕上,所述Kinect模块识别到预设的观看手势，控制全息投影的旋转和缩放，供用户观看。
2.如权利要求1所述的自定义场景的AR投影方法，其特征在于，步骤S2包括：
所述候选模型库包括静态3D模型和动态3D模型。
3.一种自定义场景的AR投影系统，其特征在于，包括：
查找模块：输入关键词，在网络的3D模型库中进行关键词查找；
采集模块：利用爬虫技术采集查找到的所述3D模型，形成候选模型库；
生成模块：生成3D空间模板，所述3D空间模板初始设置为带有坐标轴的空白3D空间；
构建虚拟空间模块：Kinect模块识别到预设的手势，控制从所述候选模型库中选择所述3D模型导入所述3D空间模板，控制所述3D模型在所述3D空间模板中的缩放和位置；
合成AR空间模块：摄像头采集真实场景信息，当识别到AR卡片，以所述AR卡片为中心，叠加真实场景信息和所述3D空间模板数据，形成AR空间模型,使用Vuforia模块叠加所述真实场景信息和所述3D空间模板数据；
全息投影模块：将所述AR空间模型的数字信号转为光信号，全息投影在投影屏幕上,所述Kinect模块识别到预设的观看手势，控制全息投影的旋转和缩放，供用户观看；其中,构建虚拟空间模块包括：
所述Kinect模块识别到第一预设手势，控制从所述候选模型库中选择所述3D模型并导入所述3D空间模板；
所述Kinect模块识别到第二预设手势，控制所述3D模型在所述3D空间模板中的缩放；
所述Kinect模块识别到第三预设手势，操作所述3D模型在所述3D空间模板中的位置。
4.如权利要求3所述的自定义场景的AR投影系统，其特征在于，采集模块包括：
所述候选模型库包括静态3D模型和动态3D模型。
CN201611203233.7A 2016-12-23 2016-12-23 一种自定义场景的ar投影方法及系统 Active CN106648098B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611203233.7A CN106648098B (zh) 2016-12-23 2016-12-23 一种自定义场景的ar投影方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611203233.7A CN106648098B (zh) 2016-12-23 2016-12-23 一种自定义场景的ar投影方法及系统

Publications (2)

Publication Number Publication Date
CN106648098A CN106648098A (zh) 2017-05-10
CN106648098B true CN106648098B (zh) 2021-01-08

Family

ID=58826603

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611203233.7A Active CN106648098B (zh) 2016-12-23 2016-12-23 一种自定义场景的ar投影方法及系统

Country Status (1)

Country Link
CN (1) CN106648098B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107463248A (zh) * 2017-06-20 2017-12-12 昆明理工大学 一种基于动态捕捉与全息投影的远程交互方法
CN107229342A (zh) * 2017-06-30 2017-10-03 宇龙计算机通信科技(深圳)有限公司 文件处理方法及用户设备
CN110162258A (zh) 2018-07-03 2019-08-23 腾讯数码（天津）有限公司 个性化场景图像的处理方法及装置
CN109300191A (zh) * 2018-08-28 2019-02-01 百度在线网络技术（北京）有限公司 Ar模型处理方法、装置、电子设备及可读存储介质
CN111598996B (zh) * 2020-05-08 2024-02-09 上海实迅网络科技有限公司 一种基于ar技术的物品3d模型展示方法和系统
CN114419704B (zh) * 2021-12-31 2022-08-02 北京瑞莱智慧科技有限公司 对抗样本动态生成方法、装置、电子设备及存储介质
CN114885140B (zh) * 2022-05-25 2023-05-26 华中科技大学 一种多屏拼接沉浸式投影画面处理方法及系统
CN116109806B (zh) * 2023-04-10 2023-06-13 南京维赛客网络科技有限公司 一种虚拟会场的空间动态调整方法、系统及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103760976B (zh) * 2014-01-09 2016-10-05 华南理工大学 基于Kinect的手势识别智能家居控制方法及系统
CN103871099B (zh) * 2014-03-24 2017-12-19 惠州Tcl移动通信有限公司 一种基于移动终端进行3d模拟搭配处理方法及系统
CN104881114B (zh) * 2015-05-13 2019-09-03 深圳彼爱其视觉科技有限公司 一种基于3d眼镜试戴的角度转动实时匹配方法
CN105163191A (zh) * 2015-10-13 2015-12-16 腾叙然 一种将虚拟现实设备运用在ktv卡拉ok的系统和方法
CN105404392B (zh) * 2015-11-03 2018-04-20 北京英梅吉科技有限公司 基于单目摄像头的虚拟穿戴方法及系统
CN106162203B (zh) * 2016-07-05 2019-10-25 实野信息科技（上海）有限公司 全景视频播放方法、播放器与头戴式虚拟现实设备
CN105976432A (zh) * 2016-07-13 2016-09-28 顽石运动智能科技（北京）有限公司 一种足球虚拟系统

Also Published As

Publication number Publication date
CN106648098A (zh) 2017-05-10

Similar Documents

Publication Publication Date Title
CN106648098B (zh) 一种自定义场景的ar投影方法及系统
WO2022001593A1 (zh) 视频生成方法、装置、存储介质及计算机设备
CN106157359B (zh) 一种虚拟场景体验系统的设计方法
JP5898378B2 (ja) 情報処理装置およびアプリケーション実行方法
US20130215229A1 (en) Real-time compositing of live recording-based and computer graphics-based media streams
US20180160194A1 (en) Methods, systems, and media for enhancing two-dimensional video content items with spherical video content
CN106203286B (zh) 一种增强现实的内容获取方法、装置及移动终端
US20170195664A1 (en) Three-dimensional viewing angle selecting method and apparatus
KR20140082610A (ko) 휴대용 단말을 이용한 증강현실 전시 콘텐츠 재생 방법 및 장치
CN112684894A (zh) 增强现实场景的交互方法、装置、电子设备及存储介质
CN101539804A (zh) 基于增强虚拟现实与异型屏的实时人机互动方法及系统
CN108668050B (zh) 基于虚拟现实的视频拍摄方法和装置
CN103472985A (zh) 一种三维购物平台显示界面的用户编辑方法
CN102945563A (zh) 一种全景视频的展示与交互系统及方法
WO2020007182A1 (zh) 个性化场景图像的处理方法、装置及存储介质
Saeghe et al. Augmented reality and television: Dimensions and themes
CN113542624A (zh) 生成商品对象讲解视频的方法及装置
Zoellner et al. Cultural heritage layers: Integrating historic media in augmented reality
JP2019512177A (ja) 装置および関連する方法
KR101177058B1 (ko) 마커 기반 3차원 입체 시스템
CN113066189B (zh) 一种增强现实设备及虚实物体遮挡显示方法
Cao Development and design case function comparison of panoramic roaming system of virtual museum based on Pano2VR
CN104935866A (zh) 实现视频会议的方法、合成设备和系统
CN108320331B (zh) 一种生成用户场景的增强现实视频信息的方法与设备
CN114302221A (zh) 一种虚拟现实设备及投屏媒资播放方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant