CN110634190A - 一种远程摄像vr体验系统 - Google Patents

一种远程摄像vr体验系统 Download PDF

Info

Publication number
CN110634190A
CN110634190A CN201910904432.8A CN201910904432A CN110634190A CN 110634190 A CN110634190 A CN 110634190A CN 201910904432 A CN201910904432 A CN 201910904432A CN 110634190 A CN110634190 A CN 110634190A
Authority
CN
China
Prior art keywords
image
scene
scenes
subunit
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910904432.8A
Other languages
English (en)
Inventor
赵岩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201910904432.8A priority Critical patent/CN110634190A/zh
Publication of CN110634190A publication Critical patent/CN110634190A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0281Customer communication at a business location, e.g. providing product or service information, consulting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Marketing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Economics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供了一种远程摄像VR体验系统。其中,所述系统包括:图像采集模块,用于实时采集目标场景下的场景图像,并将所述场景图像发送至服务器;与所述图像采集模块相连的服务器,用于接收所述场景图像,并根据所述场景图像生成VR全景图像,并将所述VR全景图像发送至VR演示模块;与所述服务器相连的VR演示模块,用于接收所述VR全景图像,并通过所述VR演示模块展示所述VR全景图像。根据本发明实施例的远程摄像VR体验系统,利用远程摄像生成的数据,在用户身边通过VR技术生成一种模拟自然风景的环境,使用户沉浸到该环境中,形成身临其境的感觉,达到生理上放松、心理上满足的状态。

Description

一种远程摄像VR体验系统
技术领域
本发明涉及虚拟现实技术领域,特别涉及一种远程摄像VR体验系统。
背景技术
随着现代计算机技术、计算机摄像技术和互联网技术的不断发展,在计算机和计算机摄像学领域出现了一种虚拟现实技术,也就是Virtual Reality(缩写为VR),VR技术是利用现实生活中的数据,通过计算机技术产生的电子信号,将其与各种输出设备结合使其转化为能够让人们感受到的现象,这些现象可以是现实中真真切切的物体,也可以是我们肉眼所看不到的物质,通过三维模型表现出来。因为这些现象不是我们直接所能看到的,而是通过计算机技术模拟出来的现实中的世界,故称为虚拟现实。
虚拟现实技术受到了越来越多人的认可,用户可以在虚拟现实世界体验到最真实的感受,其模拟环境的真实性与现实世界难辨真假,让人有种身临其境的感觉;同时,虚拟现实具有一切人类所拥有的感知功能,比如听觉、视觉、触觉、味觉、嗅觉等感知系统;最后,它具有超强的仿真系统,真正实现了人机交互,使人在操作过程中,可以随意操作并且得到环境最真实的反馈。正是虚拟现实技术的存在性、多感知性、交互性等特征使它受到了许多人的喜爱。
对于现代都市人群,整日远离自然风景,如果能够将当地美好的自然风景通过远程摄像将其数据输入计算机系统,再在远程通过VR技术还原到用户的家里、或办公场所,对于都市人群的生理和心理都是极大的满足。
发明内容
本发明提供一种远程摄像VR体验系统,以提供一种通过远程摄像记录自然风景,然后通过远程VR创建和体验虚拟世界的计算机仿真系统,利用远程摄像生成的数据,在用户身边通过VR技术生成一种模拟自然风景的环境,使用户沉浸到该环境中,形成身临其境的感觉,达到生理上放松、心理上满足的状态。
在一种可能的实现方式中,远程摄像VR体验系统包括,图像采集模块,用于实时采集目标场景下的场景图像,并将所述场景图像发送至服务器;与所述图像采集模块相连的服务器,用于接收所述场景图像,并根据所述场景图像生成VR全景图像,并将所述VR全景图像发送至VR演示模块;与所述服务器相连的VR演示模块,用于接收所述VR全景图像,并通过所述VR演示模块展示所述VR全景图像。
在一种可能的实现方式中,所述VR演示模块包括:场景变换选择单元,用于根据用户发出的场景变换指令将VR演示模块中展示的第一场景图像变换为第二场景图像;或所述场景变换选择单元,还可用于自适应的将VR演示模块中展示的第三场景图像变换为第四场景图像。
在一种可能的实现方式中,所述图像采集模块包括相机阵列,其中,所述相机阵列包括:宽视场环形相机阵列和窄视场环形相机阵列,所述服务器包括图像处理单元和多相机图像拼接单元,所述宽视场环形相机阵列的输出端与所述窄视场环形相机阵列的输出端均与所述服务器的输入端相连,所述图像处理单元的输出端与所述多相机图像拼接单元的输入端相连,所述多相机图像拼接单元的输出端与所述VR演示模块的输入端相连;所述VR演示模块的反馈端与所述图像处理设备的输入端相连;所述宽视场环形相机阵列采集多个宽视场图像,所述窄视场环形相机阵列采集多个窄视场图像;所述图像处理单元基于所述VR演示设备反馈的预览视角反馈信息对所述多个宽视场图像和所述多个窄视场图像进行压缩预处理,对压缩预处理后的图像并行采集后进行解码解压处理;所述多相机图像拼接单元采按照标定参数矩阵将解码减压后的多个宽视场图像和多个窄视场图像进行多尺度融合,生成VR环形图像;所述VR演示设备采用置换贴图的方式对所述VR环形图像渲染并演示,并根据用户当前的预览视角生成预览视角反馈信息。
在一种可能的实现方式中,宽视场相机和窄视场相机分别设置于环形阵列盘上形成宽视场环形相机阵列、窄视场环形相机阵列;多个所述宽视场相机以均匀排布的方式设置于多层环形阵列盘上;多个所述窄视场相机以均匀排布或者不均匀排布的方式设置于多层环形阵列盘上。
在一种可能的实现方式中,所述图像采集模块还包括:无人机影像数据采集单元,包括无人机主体,设置在无人机主体上的图像采集传感器子单元、地形探测子单元、姿态路径规划子单元和无人机自主飞行子单元,所述地形探测子单元、姿态路径规划子单元和无人机自主飞行子单元依次连接;所述无人机自主飞行子单元包括无人机飞行控制子单元、动力子单元和导航子单元,用于根据姿态路径规划模块的实时数据,控制无人机飞行航向,实时调整飞行速度;所述地形探测子单元用于实时探测地形信息和航高信息;所述姿态路径规划子单元,用于根据地形探测模块探测的地形信息和航高信息,结合无人机当前的航向重叠率、镜头焦距和拍照间隔信息,动态计算当前最优的飞行速度,并将当前最优的飞行速度传输至无人机自主飞行模块,控制无人机按照此最优飞行速度进行航飞拍照。
在一种可能的实现方式中,所述系统还包括:地形车;配置于地形车的图像采集传感器单元和激光测距传感器单元,用于采集探测用于表示地形起伏的三维图像数据。
在一种可能的实现方式中,所述图像采集模块,包括:供运作应用程序的智能型单元,其具备影音撷取子单元供取得至少人物图像及声音录制、存储所述人物图像及所述声音录制的存储子单元;扩增实境,用于产生虚拟情境,供用户利用立体物件结合所述人物图像以产生一轮廓立体物件供导入所述虚拟情境;配件数据库,存放多个可供选择对应不同类型的所述立体物件并套入的配件图案;声音数据库,存放多个可针对所述声音录制写入并改变声音效果的声音模块;合并单元,在所述虚拟情境之中,根据用户对所述轮廓立体物件所选定的所述配件图案或所述多个声音模块予以整合而产生一立体图像档以及与所述立体图像档有关的配料讯息。
在一种可能的实现方式中,所述图像采集模块还包括:滤镜模块,其连结所述扩增实境模块并在所述智能型装置对所述虚拟情境呈现滤镜效果。
在一种可能的实现方式中,所述图像采集模块还包括:与所述扩增实境连接的购物模块,用于对外部标签单元取得商品讯息且导入所述虚拟情境而产生产品实境图像。
在一种可能的实现方式中,所述目标场景包括不同地形的场景、不同天气模式的场景和个性化定制场景;所述不同地形的场景包括:海边场景、草原场景、山丘场景和平原场景;不同天气模式的场景包括:阴天模式场景、晴天模式场景、雨天模式场景和雪天模式场景;个性化定制场景包括:节假日场景、比赛场景、娱乐场景和游戏场景。
根据本发明实施例的远程摄像VR体验系统,利用远程摄像生成的数据,在用户身边通过VR技术生成一种模拟自然风景的环境,使用户沉浸到该环境中,形成身临其境的感觉,达到生理上放松、心理上满足的状态。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1示出根据本发明实施例的远程摄像VR体验系统的框图;
图2示出根据本发明实施例的远程摄像VR体验系统的山丘实景拍摄示意图。
具体实施方式
以下将参考附图详细说明本发明的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面,但是除非特别指出,不必按比例绘制附图。
在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
另外,为了更好地说明本发明,在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解,没有某些具体细节,本发明同样可以实施。在一些实例中,对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述,以便于凸显本发明的主旨。
图1示出根据本发明实施例的远程摄像VR体验系统的框图。如图1所示,所述远程摄像VR体验系统包括:
图像采集模块110,用于实时采集目标场景下的场景图像,并将所述场景图像发送至服务器;与所述图像采集模块相连的服务器120,用于接收所述场景图像,并根据所述场景图像生成VR全景图像,并将所述VR全景图像发送至VR演示模块;与所述服务器相连的VR演示模块130,用于接收所述VR全景图像,并通过所述VR演示模块展示所述VR全景图像。
其中,所述远程摄像VR体验系统用于将实时获取的场景图像转化为可以用于VR演示模块的VR全景图像,以便于用户可以远程感受到目标场景。本实现方式中,所述场景图像还可以是场景视频,以提供更完整顺畅的VR全景图像(或VR全景视频)。其中,所述目标场景包括不同地形的场景、不同天气模式的场景和个性化定制场景;所述不同地形的场景包括:海边场景、草原场景、山丘场景和平原场景等;不同天气模式的场景包括:阴天模式场景、晴天模式场景、雨天模式场景和雪天模式场景等;个性化定制场景包括:节假日场景、比赛场景、娱乐场景和游戏场景等。
具体的,所述服务器包括数据建模单元,对应的,图像采集模块可以用于采集目标场景的三维数据,数据建模单元可以利用获取的三维数据建立相应的虚拟环境模型,作为示例,三维数据的获取可以采用CAD技术(有规则的环境)、非接触式的视觉建模技术或两者的有机结合可以有效地提高数据获取的效率。
所述VR演示模块可以包括可穿戴设备,所述可穿戴设备的类型和具体结构样式可以根据具体的场景来设置。作为示例,所述可穿戴设备包括头盔、皮肤衣、智能地毯等,例如模拟雪天模式下,在各种不同的地形场景下,智能地毯可以改变为雪白色,并表现出类似雪地的柔软质感,使得用户踩上去可以感受到雪地的触感和颜色。
在一种实施例中,所述VR全景图像还可以通过用户的个性化定制生成,例如根据春节、中秋节等节日或活动为主题的定制。
在一种可能的实现方式中,所述VR演示模块包括:场景变换选择单元,用于根据用户发出的场景变换指令将VR演示模块中展示的第一场景图像变换为第二场景图像;或所述场景变换选择单元,还可用于自适应的将VR演示模块中展示的第三场景图像变换为第四场景图像。
其中,所述场景变换选择单元用于切换VR演示模块中展示的场景图像。本实现方式中,可以通过用户自主场景变换和系统自适应场景变换至少两种场景变换方式来变换场景图像;用户自主场景变换即可对不同地形的场景、不同天气模式的场景和个性化定制场景进行随意选择,系统自适应场景变换即通常用于不同天气模式的场景选择。
作为示例,VR演示模块可以包括体感操控单元,当该系统检测到用户做出预设动作的情况下,则会接收到场景变换指令,此时可以根据预设的场景图像展示列表来变换场景图像。另外的示例中,当该系统检测到体感操控单元的晃动幅度和频率变小的情况下,变换场景图像。
对应的,所述图像采集模块可以对多个目标场景中同时进行场景图像的采集,以得到多种类型的场景图像。
图2示出根据本发明实施例的远程摄像VR体验系统的山丘实景拍摄示意图,如图2所示,所述图像采集模块包括相机阵列20,其中,所述相机阵列20包括宽视场环形相机阵列和窄视场环形相机阵列,所述服务器120包括图像处理单元和多相机图像拼接单元,所述宽视场环形相机阵列的输出端与所述窄视场环形相机阵列的输出端均与所述服务器的输入端相连,所述图像处理单元的输出端与所述多相机图像拼接单元的输入端相连,所述多相机图像拼接单元的输出端与所述VR演示模块的输入端相连;所述VR演示模块的反馈端与所述图像处理设备的输入端相连;所述宽视场环形相机阵列采集多个宽视场图像,所述窄视场环形相机阵列采集多个窄视场图像;所述图像处理单元基于所述VR演示设备反馈的预览视角反馈信息对所述多个宽视场图像和所述多个窄视场图像进行压缩预处理,对压缩预处理后的图像并行采集后进行解码解压处理;所述多相机图像拼接单元按照标定参数矩阵将解码减压后的多个宽视场图像和多个窄视场图像进行多尺度融合,生成VR环形图像;所述VR演示设备采用置换贴图的方式对所述VR环形图像渲染并演示,并根据用户当前的预览视角生成预览视角反馈信息。
在一种可能的实现方式中,宽视场相机和窄视场相机分别设置于环形阵列盘上形成宽视场环形相机阵列、窄视场环形相机阵列;多个所述宽视场相机以均匀排布的方式设置于多层环形阵列盘上;多个所述窄视场相机以均匀排布或者不均匀排布的方式设置于多层环形阵列盘上。
其中,宽视场环形相机阵列可以是由多个宽视场相机组成的环形相机阵列,宽视场相机可以是宽视场低分辨短焦相机。窄视场环形相机阵列可以是由多个窄视场相机组成的环形相机阵列,窄视场相机可以是窄视场高分辨长焦。本实施例中,多个宽视场相机和多个窄视场相机分别设置于多层环形阵列盘上形成宽视场环形相机阵列、窄视场环形相机阵列,多个宽视场相机以均匀排布的方式设置于多层环形阵列盘上,多个窄视场相机以均匀排布或者不均匀排布的方式设置于多层环形阵列盘上。
示例性的,环形阵列相机可以有3层环形阵列盘,3层环形阵列盘安装于中心支撑圆柱上,在最下一层环形阵列盘上安装多个宽视场相机,最上一层和中间一层环形阵列盘上分别安装多个窄视场相机。本应用场景下,环形阵列盘应该尽可能的小,以减少相机之间的视角差异。
在一种可能的实现方式中,所述图像采集模块还包括:无人机影像数据采集单元,包括无人机10,设置在无人机10上的图像采集传感器子单元、地形探测子单元、姿态路径规划子单元和无人机自主飞行子单元,所述地形探测子单元、姿态路径规划子单元和无人机自主飞行子单元依次连接;所述无人机自主飞行子单元包括无人机飞行控制子单元、动力子单元和导航子单元,用于根据姿态路径规划模块的实时数据,控制无人机飞行航向,实时调整飞行速度;所述地形探测子单元用于实时探测地形信息和航高信息;所述姿态路径规划子单元,用于根据地形探测模块探测的地形信息和航高信息,结合无人机当前的航向重叠率、镜头焦距和拍照间隔信息,动态计算当前最优的飞行速度,并将当前最优的飞行速度传输至无人机自主飞行模块,控制无人机按照此最优飞行速度进行航飞拍照。本实现方式中的图像采集传感器子单元为相机阵列,用于获取高分辨率的影像数据。
其中,所述地形探测模块为激光传感器,所述激光传感器用于高速扫描得到点云数据,再由该点云数据快速拟合成一个地形平面,从而获取航高信息。进一步地,所述地形探测模块包括光流传感器和超声传感器,所述光流传感器、超声传感器用于探测图像采集传感器模块距离障碍物的高度;动力单元包括括电机和旋翼,所述电机带动所述旋翼旋转。所述导航单元与GIS地图结合,并且通过GPS连接定位。
本实现方式中的有益效果在于:在无人机航飞拍摄过程中,人机影像数据采集单元可以获取地形的实时距离信息,从而根据地形的起伏来动态计算无人机飞行的最佳速度,实现自适应地形复杂度,减少冗余照片的数量。
在一种可能的实现方式中,所述系统还包括:地形车30;配置于地形车30的图像采集传感器单元和激光测距传感器单元,用于采集探测表示地形起伏的三维图像数据。
在另外的实施例中,为了得到更加立体完善的影像数据,本实施例中可以将无人机10采集到的图像数据和地形车30的采集到的图像数据进行合并拟合处理,达到更为贴近实景的场景效果。
在另外的实施例中,人机影像数据采集单元采用激光传感器用于高速扫描得到点云数据,再由该点云数据快速拟合成一个地形平面,从而获取航高信息,该方法拟合得到的高程整体性好、精度高,也保证了后续计算实时最佳飞行速度的准确度;同时该无人机倾斜摄影系统结构简单,实现了利用简单的数学模型和解算原理,准确计算出实时航飞速度和曝光间距。
在一种可能的实现方式中,所述图像采集模块,包括:供运作应用程序的智能型单元,其具备影音撷取子单元供取得至少人物图像及声音录制、存储所述人物图像及所述声音录制的存储子单元;扩增实境,用于产生虚拟情境,供用户利用立体物件结合所述人物图像以产生一轮廓立体物件供导入所述虚拟情境;配件数据库,存放多个可供选择对应不同类型的所述立体物件并套入的配件图案;声音数据库,存放多个可针对所述声音录制写入并改变声音效果的声音模块;合并单元,在所述虚拟情境之中,根据用户对所述轮廓立体物件所选定的所述配件图案或所述多个声音模块予以整合而产生一立体图像档以及与所述立体图像档有关的配料讯息。
其中,扩增实境(Augmented Reality;AR)或(virtual reality,VR)为一种结合实体与虚拟技术来观察现实环境的方式,且扩增实境技术广泛应用于电玩游戏、环境导览及商业应用等。同时,扩增实境可以利用图像辨识技术来侦测与追踪图像中的现实物件,并利用三维(3D)技术将预设的立体物件结合人物图像以产生一轮廓立体物件显示于屏幕中,且扩增实境模块可应用于AR眼镜、AR头盔、具AR功能的智能型手机、具AR功能的计算器或具AR功能的机器人。再者,扩增实境产生的虚拟情境(例如,草原、海边等)可供用户利用一立体物件(例如人物公仔或玩偶)结合人物图像以产生一轮廓立体物件供导入虚拟情境,前述的立体物件为人物公仔时,则配件图案为选自眼、眉、鼻、口、身、脸、发、耳、颈、手及脚等身体特征所构成的群组。
在一种可能的实现方式中,所述图像采集模块还包括:滤镜模块,其连结所述扩增实境模块并在所述智能型装置对所述虚拟情境呈现滤镜效果。
本实现方式中,配件数据库可以用于存放各种不同的配件图案,同时结合滤镜模块,藉此让各配件图案可供选择并对应到不同类型的立体物件并套入,滤镜模块另连结扩增实境让套入配件图案的滤镜效果藉由虚拟情境呈现。
在一种可能的实现方式中,所述图像采集模块还包括:与所述扩增实境连接的购物模块,用于对外部标签单元取得商品讯息且导入所述虚拟情境而产生产品实境图像。
作为示例,购物模块主要与扩增实境连结并对一外部标签单元取得商品讯息且导入该虚拟情境而产生产品实境图像。使用过程中,可以将不同的目标场景下商品的商品讯息写入外部标签单元(例如二维码),并对外部标签单元扫描并透过智能型装置直接看到商品讯息并了解完整的讯息(例如规格、售价、产地、相关网站等),在确认商品后则可进行商品交易已完成购买,这样可在相应的目标场景下体验到与之相关商品的购买,譬如在草原的目标场景下可体验到购买奶酪制品等商品,在海边的目标场景下可体验到购买海鲜产品等商品,可进一步使得用户沉浸到该环境中,形成身临其境的感觉,达到生理上放松、心理上满足的状态。
本发明的系统可以根据目标场景所在位置的环境、所处的天气模式或内容场景模式而进行切换,也可以根据用户的需求进行选择,甚至自行进行定义。所述目标场景包括海边场景、草原场景、山丘场景、平原场景等不同地形的场景,以及晴天模式、阴天模式、雨天模式和雪天模式等不同天气模式的场景,以及各种节日、假日、比赛日、竞赛项目或娱乐、游戏项目等不同项目模式的场景。对于用户来说,其可以模拟在海边的晴天,趴在沙滩晒日光浴的活动,这时系统即调出例如三亚海边,晴空万里的环境数据进行环境模拟,同时依据用户所穿戴的设备,例如特制的皮肤衣来模拟日光在皮肤上暴晒的感觉,使用户体验到身临其境的感觉。
本发明也可以配合大型旅游景点进行综合设计,例如新疆自治区特克斯八卦城景点,特克斯八卦城是目前世界上唯一保存完整的八卦城,城市以中主八卦文化广场为太极“阴阳”两仪,按八卦方位以相等距离、相同角度如射线般向外伸出八条主街,每条主街长1200米,每隔360米左右设一条连接八条主待的环路,由中心向外依次共设四条环路。一环路环绕中心八卦文化广场。整个景点包括有草原、塞外、岩洞,峡谷等独特的垂直气候带和垂直景观。依托本发明的系统,可以在八卦城市内和市外景点分别进行图像采集。当用户选择在八卦城市内时,其彷佛置身于真实的八卦城内,可以体验八卦形的城市布局,同时可以选择进行观光塔、博物馆等进入场所体验。如果在市外,则可以根据用户的喜好或心情,选择草原、塞外等不同的气候带进行体验,同时选择雨雪天,进行风光VR体验,等到用户想切换场景时,只需要在场景变换选择单元选择例如夜空,则VR体验模块即可以模拟出新疆高原的夜空场景,同时还可以通过本发明的系统调出其他用户或摄影师拍摄的照片进行欣赏,甚至可以在线进行点赞、打赏或者与作者进行互动等各种交流活动。此外,根据场景变换选择单元,如果在特克斯赛马节期间,还可以进行在线观赏,对自己喜好的赛马或者赛马手进行点赞、打赏或者与赛马手进行互动等各种交流活动,甚至用户可以在线进行旅游定制服务,例如预定下一个赛马节的酒店客房、赛马场门票或者选择并支持特定的赛马出赛等活动,通过本发明的系统,可以实现用户足不出户即可体验异地特色风光,欣赏摄影照片并与共同旅游爱好者进行集聚和交流,以及在线预订旅游服务等多种功能。
附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本发明的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (10)

1.一种远程摄像VR体验系统,其特征在于,包括:
图像采集模块,用于实时采集目标场景下的场景图像,并将所述场景图像发送至服务器;
与所述图像采集模块相连的服务器,用于接收所述场景图像,并根据所述场景图像生成VR全景图像,并将所述VR全景图像发送至VR演示模块;
与所述服务器相连的VR演示模块,用于接收所述VR全景图像,并通过所述VR演示模块展示所述VR全景图像。
2.根据权利要求1所述的系统,其特征在于,所述VR演示模块包括:场景变换选择单元,用于根据用户发出的场景变换指令将VR演示模块中展示的第一场景图像变换为第二场景图像;或
所述场景变换选择单元,还可用于自适应的将VR演示模块中展示的第三场景图像变换为第四场景图像。
3.根据权利要求1所述的系统,其特征在于,所述图像采集模块包括相机阵列,其中,所述相机阵列包括:宽视场环形相机阵列和窄视场环形相机阵列,所述服务器包括图像处理单元和多相机图像拼接单元,所述宽视场环形相机阵列的输出端与所述窄视场环形相机阵列的输出端均与所述服务器的输入端相连,所述图像处理单元的输出端与所述多相机图像拼接单元的输入端相连,所述多相机图像拼接单元的输出端与所述VR演示模块的输入端相连;
所述VR演示模块的反馈端与所述图像处理设备的输入端相连;
所述宽视场环形相机阵列采集多个宽视场图像,所述窄视场环形相机阵列采集多个窄视场图像;
所述图像处理单元基于所述VR演示设备反馈的预览视角反馈信息对所述多个宽视场图像和所述多个窄视场图像进行压缩预处理,对压缩预处理后的图像并行采集后进行解码解压处理;
所述多相机图像拼接单元采按照标定参数矩阵将解码减压后的多个宽视场图像和多个窄视场图像进行多尺度融合,生成VR环形图像;
所述VR演示设备采用置换贴图的方式对所述VR环形图像渲染并演示,并根据用户当前的预览视角生成预览视角反馈信息。
4.根据权利要求3所述的系统,其特征在于,宽视场相机和窄视场相机分别设置于环形阵列盘上形成宽视场环形相机阵列、窄视场环形相机阵列;
多个所述宽视场相机以均匀排布的方式设置于多层环形阵列盘上;
多个所述窄视场相机以均匀排布或者不均匀排布的方式设置于多层环形阵列盘上。
5.根据权利要求1所述的系统,其特征在于,所述图像采集模块还包括:无人机影像数据采集单元,包括无人机,设置在无人机上的图像采集传感器子单元、地形探测子单元、姿态路径规划子单元和无人机自主飞行子单元,所述地形探测子单元、姿态路径规划子单元和无人机自主飞行子单元依次连接;
所述无人机自主飞行子单元包括无人机飞行控制子单元、动力子单元和导航子单元,用于根据姿态路径规划模块的实时数据,控制无人机飞行航向,实时调整飞行速度;
所述地形探测子单元用于实时探测地形信息和航高信息;
所述姿态路径规划子单元,用于根据地形探测模块探测的地形信息和航高信息,结合无人机当前的航向重叠率、镜头焦距和拍照间隔信息,动态计算当前最优的飞行速度,并将当前最优的飞行速度传输至无人机自主飞行模块,控制无人机按照此最优飞行速度进行航飞拍照。
6.根据权利要求1所述的系统,其特征在于,还包括:
地形车;
配置于地形车的图像采集传感器单元和激光测距传感器单元,用于采集探测表示地形起伏的三维图像数据。
7.根据权利要求1所述的系统,其特征在于,所述图像采集模块,包括:供运作应用程序的智能型单元,其具备影音撷取子单元供取得至少人物图像及声音录制、存储所述人物图像及所述声音录制的存储子单元;
扩增实境,用于产生虚拟情境,供用户利用立体物件结合所述人物图像以产生一轮廓立体物件供导入所述虚拟情境;
配件数据库,存放多个可供选择对应不同类型的所述立体物件并套入的配件图案;
声音数据库,存放多个可针对所述声音录制写入并改变声音效果的声音模块;
合并单元,在所述虚拟情境之中,根据用户对所述轮廓立体物件所选定的所述配件图案或所述多个声音模块予以整合而产生一立体图像档以及与所述立体图像档有关的配料讯息。
8.根据权利要求7所述的系统,其特征在于,所述图像采集模块还包括:
滤镜模块,其连结所述扩增实境模块并在所述智能型装置对所述虚拟情境呈现滤镜效果。
9.根据权利要求7所述的系统,其特征在于,所述图像采集模块还包括:
与所述扩增实境连接的购物模块,用于对外部标签单元取得商品讯息且导入所述虚拟情境而产生产品实境图像。
10.根据权利要求1所述的系统,其特征在于,所述目标场景包括不同地形的场景、不同天气模式的场景和个性化定制场景;
所述不同地形的场景包括:海边场景、草原场景、山丘场景和平原场景;
不同天气模式的场景包括:阴天模式场景、晴天模式场景、雨天模式场景和雪天模式场景;
个性化定制场景包括:节假日场景、比赛场景、娱乐场景和游戏场景。
CN201910904432.8A 2019-09-24 2019-09-24 一种远程摄像vr体验系统 Pending CN110634190A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910904432.8A CN110634190A (zh) 2019-09-24 2019-09-24 一种远程摄像vr体验系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910904432.8A CN110634190A (zh) 2019-09-24 2019-09-24 一种远程摄像vr体验系统

Publications (1)

Publication Number Publication Date
CN110634190A true CN110634190A (zh) 2019-12-31

Family

ID=68972831

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910904432.8A Pending CN110634190A (zh) 2019-09-24 2019-09-24 一种远程摄像vr体验系统

Country Status (1)

Country Link
CN (1) CN110634190A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111951379A (zh) * 2020-08-04 2020-11-17 山东金东数字创意股份有限公司 一种全景主动式立体图像生成系统及其方法
CN115426488A (zh) * 2022-11-04 2022-12-02 中诚华隆计算机技术有限公司 一种虚拟现实图像数据传输方法、系统及芯片

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109040601A (zh) * 2018-09-05 2018-12-18 清华-伯克利深圳学院筹备办公室 一种多尺度非结构化的十亿像素vr全景摄影系统
CN109238240A (zh) * 2018-10-22 2019-01-18 武汉大势智慧科技有限公司 一种顾及地形的无人机倾斜摄影方法及其摄影系统
CN110045817A (zh) * 2019-01-14 2019-07-23 启云科技股份有限公司 采用虚拟实境技术的交互式摄影系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109040601A (zh) * 2018-09-05 2018-12-18 清华-伯克利深圳学院筹备办公室 一种多尺度非结构化的十亿像素vr全景摄影系统
CN109238240A (zh) * 2018-10-22 2019-01-18 武汉大势智慧科技有限公司 一种顾及地形的无人机倾斜摄影方法及其摄影系统
CN110045817A (zh) * 2019-01-14 2019-07-23 启云科技股份有限公司 采用虚拟实境技术的交互式摄影系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111951379A (zh) * 2020-08-04 2020-11-17 山东金东数字创意股份有限公司 一种全景主动式立体图像生成系统及其方法
CN115426488A (zh) * 2022-11-04 2022-12-02 中诚华隆计算机技术有限公司 一种虚拟现实图像数据传输方法、系统及芯片
CN115426488B (zh) * 2022-11-04 2023-01-10 中诚华隆计算机技术有限公司 一种虚拟现实图像数据传输方法、系统及芯片

Similar Documents

Publication Publication Date Title
AU2023200357B2 (en) System and method for augmented and virtual reality
RU2754991C2 (ru) Система устройства просмотра смешанной реальности и способ для него
CN108510592B (zh) 真实物理模型的增强现实展示方法
US9268406B2 (en) Virtual spectator experience with a personal audio/visual apparatus
CN106951561B (zh) 基于虚拟现实技术与gis数据的电子地图系统
CN106683197A (zh) 一种融合vr和ar技术的楼盘展示系统及其方法
US11151791B2 (en) R-snap for production of augmented realities
KR20150126938A (ko) 증강 및 가상 현실을 위한 시스템 및 방법
CN101115168A (zh) 产生虚拟图像和真实图像的合成图像
CN114359520A (zh) 元宇宙系统及其交互方法
CN110634190A (zh) 一种远程摄像vr体验系统
CN114359519A (zh) 一种元宇宙系统
WO2024022070A1 (zh) 画面显示方法、装置、设备及介质
CN112684893A (zh) 信息展示方法、装置、电子设备及存储介质
Wolfenstetter Applications of augmented reality technology for archaeological purposes
Uskenbayeva CHINIBAYEV YERSAIN GULISLAMOVICH
EP3974041B1 (en) System and method for augmented and virtual reality
Volina Libraries in the digital age

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination