CN114793276A - 一种拟真现实元宇宙平台3d全景拍摄方法 - Google Patents

一种拟真现实元宇宙平台3d全景拍摄方法 Download PDF

Info

Publication number
CN114793276A
CN114793276A CN202210431154.0A CN202210431154A CN114793276A CN 114793276 A CN114793276 A CN 114793276A CN 202210431154 A CN202210431154 A CN 202210431154A CN 114793276 A CN114793276 A CN 114793276A
Authority
CN
China
Prior art keywords
information
shooting
steps
dimensional scene
meta
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210431154.0A
Other languages
English (en)
Inventor
杨楠
余大学
潘攀
马兵强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Aikebo Information Technology Co ltd
Original Assignee
Shanghai Aikebo Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Aikebo Information Technology Co ltd filed Critical Shanghai Aikebo Information Technology Co ltd
Priority to CN202210431154.0A priority Critical patent/CN114793276A/zh
Publication of CN114793276A publication Critical patent/CN114793276A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/261Image signal generators with monoscopic-to-stereoscopic image conversion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/122Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/275Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals

Abstract

本发明公开了一种拟真现实元宇宙平台3D全景拍摄方法,包括使用手机对现实环境进行环拍获取视频信息,发送至后端服务器,所述后端服务器获取所述视频信息,对所述视频信息的获取二维场景信息并量化处理,得到数字矩阵,对数字矩阵进行处理得到三维场景信息,将所述三维场景信息通过所述手机显示成3D全景场景。本发明用户使用手机即可拍摄3D全景成像并分享给朋友,即可还原所拍摄空间的真实感和立体感,并将真实空间生成虚拟3D影像上传到元宇宙平台,操作方便,受环境的制约少,便于普遍推广。

Description

一种拟真现实元宇宙平台3D全景拍摄方法
技术领域
本发明涉及虚拟成像技术领域,具体为一种拟真现实元宇宙平台3D全景拍摄方法。
背景技术
ER(Emulated Reality),中文名称为拟真现实、仿真现实或近真现实,一种技术集合,主要包含了虚拟现实VR、增强现实AR、混合现实MR、3D显示技术与人工智能AI等的综合性交互运用,在网络空间内建造与真实世界1:1对应的数字镜像空间,人们能在ER数字化空间内自由行动、观看场景与购买其中的物品,在参与交互方式上也最大程度上接近现实世界。
基于ER技术构建的场景可以理解为现实世界在互联网上的数字化镜像,ER数字世界将无限接近真实的现实世界,并且每一处ER场景都有与之对应的真实世界里的场景。ER拟真现实有两层含义,一是视觉拟真,即人们在网上看到的ER场景主要是现实世界采集的景象而非数字建模模型;二是人们在ER数字世界里的交互方式最大程度上贴近人们在显示世界里的行为方式。
目前国内市面上没有或极少类似产品出现。主要原因在于市场需求及技术储备还不够完善,比如拍摄设备的要求较高,使得拍摄设备比较复杂,对拍摄环节要求较高,不能百分百的还原真实场景,因此应用难度比较大。
发明内容
本发明的目的在于提供一种拟真现实元宇宙平台3D全景拍摄方法,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:1.一种拟真现实元宇宙平台3D全景拍摄方法,包括:
使用前端对现实环境进行环拍获取视频信息,发送至后端服务器;
所述后端服务器获取所述视频信息,对所述视频信息进行碎片化处理,读取二维场景信息,得到数字矩阵,对数字矩阵进行转换处理得到三维场景信息;
所述后端服务器调用所述三维场景信息进行渲染后生成用户视图。
可选的,所述碎片化处理,读取二维场景信息,得到数字矩阵,对数字矩阵进行转换处理得到三维场景信息,包括:
获取所述视频信息的每一帧图片信息,对所述图片信息进行AR智能识别获取物体信息和位置信息;
将所述物体信息转换为数字形式的数组。
可选的,所述数字矩阵,包括:
将所述每一帧的图片信息缩小至49*49像素,并将所述像素的彩色信息灰度化。
可选的,所述数字矩阵进行转换处理得到三维场景信息,包括:
将所述图片信息进行抽帧处理,得到待组合图片集;
将所述待组合图片集按照所述位置信息进行组合得到待展示图像。
可选的,所述渲染后生成用户视图,包括:
所述后端服务器通过Viewer模组调用所述待展示图像并获取所述前端拍摄设备的角度实时数据,读取所述待展示图像的首祯;
将所述首祯通过前端进行展示。
可选的,所述所述位置信息包括经度、纬度、高度和坡度。
可选的,所述角度实时数据包括通过所述前端拍摄设备内置的陀螺仪的方位移动数据触发所述前端拍实时捕获当前方位移动数据。
可选的,所述渲染后生成用户视图还包括用户分享连接。
与现有技术相比,本发明的有益效果是:本发明用户使用手机即可拍摄3D全景成像并分享给朋友,即可还原所拍摄空间的真实感和立体感,并将真实空间生成虚拟3D影像上传到元宇宙平台,操作方便,受环境的制约少,便于普遍推广。
附图说明
图1为本发明的一种整体流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,本发明提供一种技术方案:一种拟真现实元宇宙平台3D全景拍摄方法,包括以下几个步骤:
S1,使用前端对现实环境进行环拍获取视频信息,发送至后端服务器。
本步骤中的前端为预先设置在手持设备等终端内的应用程序,该终端具有摄像功能和网络通信功能,使用该终端设备对现实环境进行环拍,选取一定的角度,摄取现实环境的视频信息,并将该视频信息发送给后端服务器。
S2,对视频信息进行碎片化处理,读取二维场景信息,得到数字矩阵,对数字矩阵进行转换处理得到三维场景信息。
具体的,包括后端服务器获取视频信息的每一帧图片信息,对图片信息进行AR智能识别获取物体信息和位置信息,位置信息包括经度、纬度、高度和坡度,以标注视频里各物体的方位,后续生成3D虚拟场景,各个物体在3D虚拟场景的位置和现实环境一致,保证虚拟后的场景和真实环境相一致。
具体的,将物体信息转换为数字形式的数组,将每一帧的图片信息缩小至49*49像素,获得数字矩阵,并将像素的彩色信息灰度化,将图片信息进行抽帧处理,得到待组合图片集,将待组合图片集按照位置信息进行组合得到待展示图像。
S3,后端服务器调用三维场景信息进行渲染后生成用户视图。后端服务器通过Viewer模组调用待展示图像并获取前端拍摄设备的角度实时数据,读取待展示图像的首祯,将首祯通过前端拍摄设备进行展示,使得用户可以直观的观看到生成后的3D全景场景。
具体的,角度实时数据包括通过前端拍摄设备内置的陀螺仪的方位移动数据触发前端拍摄设备实时捕获当前方位移动数据,这样用户通过陀螺仪即可查看3D全景场景的各个角度,渲染后生成用户视图还包括用户分享连接,用户可以将自己拍摄的3D全景场景分享。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。

Claims (8)

1.一种拟真现实元宇宙平台3D全景拍摄方法,其特征在于,包括:
使用前端对现实环境进行环拍获取视频信息,发送至后端服务器;
所述后端服务器获取所述视频信息,对所述视频信息进行碎片化处理,读取二维场景信息,得到数字矩阵,对数字矩阵进行转换处理得到三维场景信息;
所述后端服务器调用所述三维场景信息进行渲染后生成用户视图。
2.根据权利要求1所述的一种拟真现实元宇宙平台3D全景拍摄方法,其特征在于:所述碎片化处理,读取二维场景信息,得到数字矩阵,对数字矩阵进行转换处理得到三维场景信息,包括:
获取所述视频信息的每一帧图片信息,对所述图片信息进行AR智能识别获取物体信息和位置信息;
将所述物体信息转换为数字形式的数组。
3.根据权利要求2所述的一种拟真现实元宇宙平台3D全景拍摄方法,其特征在于:所述数字矩阵,包括:
将所述每一帧的图片信息缩小至49*49像素,并将所述像素的彩色信息灰度化。
4.根据权利要求3所述的一种拟真现实元宇宙平台3D全景拍摄方法,其特征在于:所述数字矩阵进行转换处理得到三维场景信息,包括:
将所述图片信息进行抽帧处理,得到待组合图片集;
将所述待组合图片集按照所述位置信息进行组合得到待展示图像。
5.根据权利要求4所述的一种拟真现实元宇宙平台3D全景拍摄方法,其特征在于:所述渲染后生成用户视图,包括:
所述后端服务器通过Viewer模组调用所述待展示图像并获取所述前端拍摄设备的角度实时数据,读取所述待展示图像的首祯;
将所述首祯通过前端进行展示。
6.根据权利要求5所述的一种拟真现实元宇宙平台3D全景拍摄方法,其特征在于:所述所述位置信息包括经度、纬度、高度和坡度。
7.根据权利要求6所述的一种拟真现实元宇宙平台3D全景拍摄方法,其特征在于:所述角度实时数据包括通过所述前端拍摄设备内置的陀螺仪的方位移动数据触发所述前端拍实时捕获当前方位移动数据。
8.根据权利要求7所述的一种拟真现实元宇宙平台3D全景拍摄方法,其特征在于:所述渲染后生成用户视图还包括用户分享连接。
CN202210431154.0A 2022-04-22 2022-04-22 一种拟真现实元宇宙平台3d全景拍摄方法 Pending CN114793276A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210431154.0A CN114793276A (zh) 2022-04-22 2022-04-22 一种拟真现实元宇宙平台3d全景拍摄方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210431154.0A CN114793276A (zh) 2022-04-22 2022-04-22 一种拟真现实元宇宙平台3d全景拍摄方法

Publications (1)

Publication Number Publication Date
CN114793276A true CN114793276A (zh) 2022-07-26

Family

ID=82461360

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210431154.0A Pending CN114793276A (zh) 2022-04-22 2022-04-22 一种拟真现实元宇宙平台3d全景拍摄方法

Country Status (1)

Country Link
CN (1) CN114793276A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115599559A (zh) * 2022-12-14 2023-01-13 环球数科集团有限公司(Cn) 一种基于元宇宙的多目标三维快速建模及重构系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107318008A (zh) * 2016-04-27 2017-11-03 深圳看到科技有限公司 全景视频播放方法及播放装置
CN108833892A (zh) * 2018-05-28 2018-11-16 徐州昇科源信息技术有限公司 一种vr直播系统
US20200358996A1 (en) * 2017-09-04 2020-11-12 Ideapool Culture & Technology Co., Ltd. Real-time aliasing rendering method for 3d vr video and virtual three-dimensional scene
CN113112612A (zh) * 2021-04-16 2021-07-13 中德(珠海)人工智能研究院有限公司 一种真实人物与混合现实动态叠加的定位方法及系统
CN113518215A (zh) * 2021-05-19 2021-10-19 上海爱客博信息技术有限公司 3d动态效果生成方法、装置、计算机设备和存储介质
CN114125310A (zh) * 2022-01-26 2022-03-01 荣耀终端有限公司 拍照方法、终端设备及云端服务器

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107318008A (zh) * 2016-04-27 2017-11-03 深圳看到科技有限公司 全景视频播放方法及播放装置
US20200358996A1 (en) * 2017-09-04 2020-11-12 Ideapool Culture & Technology Co., Ltd. Real-time aliasing rendering method for 3d vr video and virtual three-dimensional scene
CN108833892A (zh) * 2018-05-28 2018-11-16 徐州昇科源信息技术有限公司 一种vr直播系统
CN113112612A (zh) * 2021-04-16 2021-07-13 中德(珠海)人工智能研究院有限公司 一种真实人物与混合现实动态叠加的定位方法及系统
CN113518215A (zh) * 2021-05-19 2021-10-19 上海爱客博信息技术有限公司 3d动态效果生成方法、装置、计算机设备和存储介质
CN114125310A (zh) * 2022-01-26 2022-03-01 荣耀终端有限公司 拍照方法、终端设备及云端服务器

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115599559A (zh) * 2022-12-14 2023-01-13 环球数科集团有限公司(Cn) 一种基于元宇宙的多目标三维快速建模及重构系统
CN115599559B (zh) * 2022-12-14 2023-03-03 环球数科集团有限公司 一种基于元宇宙的多目标三维快速建模及重构系统

Similar Documents

Publication Publication Date Title
CN108648257B (zh) 全景画面的获取方法、装置、存储介质及电子装置
CN108446310B (zh) 虚拟街景地图生成方法、装置和客户端设备
CN101689292B (zh) Banana多媒体数字信号编解码器
CN111402399B (zh) 人脸驱动和直播方法、装置、电子设备及存储介质
US20050085296A1 (en) Method and system for real-time rendering within a gaming environment
You et al. Internet of Things (IoT) for seamless virtual reality space: Challenges and perspectives
CN113382275B (zh) 直播数据的生成方法、装置、存储介质及电子设备
CN112492231B (zh) 远程交互方法、装置、电子设备和计算机可读存储介质
TW201828258A (zh) 場景的渲染方法和裝置
CN113012299A (zh) 显示方法及装置、设备、存储介质
CN113781660A (zh) 一种用于直播间在线渲染加工虚拟场景的方法及装置
KR20150105069A (ko) 혼합현실형 가상 공연 시스템을 위한 평면 영상 입체화 합성기법
CN111405270A (zh) 基于3d实景克隆技术的vr沉浸式应用系统
CN114793276A (zh) 一种拟真现实元宇宙平台3d全景拍摄方法
CN108769755A (zh) 高分辨率全景视频直播拍照系统与方法
CN106875478A (zh) 体验手机3d效果的ar装置
CN212519183U (zh) 一种用于摄像机器人的虚拟拍摄系统
CN213126145U (zh) 一种ar-虚拟互动系统
CN115761190A (zh) 基于场景映射的多用户增强现实相片浏览方法及系统
CN110288680A (zh) 影像生成方法及移动终端
CN113515193B (zh) 一种模型数据传输方法及装置
CN113382227A (zh) 一种基于智能手机的裸眼3d全景视频渲染装置及方法
CN116074485A (zh) 一种基于增强现实的通话方法及终端
CN114615487B (zh) 一种三维模型的显示方法及设备
CN115442580B (zh) 一种便携式智能设备裸眼3d图片效果处理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination