CN113313840A - 实时虚拟系统及实时虚拟交互方法 - Google Patents

实时虚拟系统及实时虚拟交互方法 Download PDF

Info

Publication number
CN113313840A
CN113313840A CN202110663521.5A CN202110663521A CN113313840A CN 113313840 A CN113313840 A CN 113313840A CN 202110663521 A CN202110663521 A CN 202110663521A CN 113313840 A CN113313840 A CN 113313840A
Authority
CN
China
Prior art keywords
information
user
virtual
endpoint
real
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110663521.5A
Other languages
English (en)
Inventor
周永奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN202110663521.5A priority Critical patent/CN113313840A/zh
Publication of CN113313840A publication Critical patent/CN113313840A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Abstract

本公开提供了一种实时虚拟系统,包括系统构建模块、物件信息模块、用户服务模块中的至少一个;所述系统构建模块用于采集端点信息以及根据所述端点信息实时构建虚拟系统;所述端点信息包括端点的经度信息、纬度信息、高度信息以及角度信息;所述物件信息模块用于管理所述虚拟系统中物件信息的存储和交互,所述物件信息包括物件的可穿透性;所述用户服务模块用于管理用户个人信息以及用户交互功能;所述用户交互功能包括视角借入功能以及虚拟摄影功能。

Description

实时虚拟系统及实时虚拟交互方法
技术领域
本公开涉及虚拟现实技术领域,更具体地,涉及一种实时虚拟系统以及实时虚拟交互方法。
背景技术
随着互联网技术、AR技术的飞速发展,虚拟现实的功能日益复杂,同时针对虚拟现实的要求也日益严格。现有虚拟化技术更新周期长、成本高,过度依赖人工建模介入,导致现实空间的实时虚拟化,迟迟无法有效突破,更别说建立虚拟用户之间的立体实时交互。且现有技术中AR虚拟游戏缺乏现实空间对应,更别说满足实时性要求。增强现实能够满足实时性,但受空间活动范围的限制,视野有限。静态3D街景成像,更新周期长,成本高,无法满足实时性。3D人工建模,完成度有限,也无法达到实时性的要求。
因此,如何实时的提供现实空间的虚拟化、数字化,成了一项迫切需要解决的技术难点。
发明内容
为了解决现实空间实时虚拟化的技术难题,本发明提供了一种实时虚拟系统及实时虚拟交互方法。
在本发明的第一方面,本发明提供了一种实时虚拟系统,包括系统构建模块、物件信息模块、用户服务模块中的至少一个;所述系统构建模块用于采集端点信息以及根据所述端点信息实时构建虚拟系统;所述端点信息包括端点的经度信息、纬度信息、高度信息以及角度信息;所述物件信息模块用于管理所述虚拟系统中物件信息的存储和交互,所述物件信息包括物件的可穿透性;所述用户服务模块用于管理用户个人信息以及用户交互功能;所述用户交互功能包括视角借入功能以及虚拟摄影功能。
优选的,所述根据所述端点信息实时构建虚拟系统包括:根据客户端的位置以及用户的视角信息确定所述客户端是否包含所述用户相关端点的端点信息;如果所述客户端包含所述客户端所在端点的端点信息,则所述客户端根据所述客户端所在端点的端点信息实时生成相应的虚拟系统;如果所述客户端未包含所述客户端所在端点的端点信息,则在服务器端包含所述客户端所在端点的端点信息的情况下,由服务器端根据所述客户端所在端点的端点信息实时生成相应的虚拟系统。
优选的,所述物件信息模块还用于:对用户当前视觉范围内的视觉对象进行识别,确定物件信息模块中是否包含该视觉对象对应的物件信息;如果包含则将该视觉对象对应的物件信息发送给客户端,否则根据所述虚拟系统构建的该视觉对象的3D模型,在所述物件信息模块中添加其相应的物件信息。
优选的,所述视角借入功能用于第二用户以第一用户的视角对虚拟系统进行浏览。
进一步优选的,所述视角借入功能还用于所述第二用户对所述第一用户视角范围内的物件实施交互操作。
优选的,所述虚拟摄影功能用于通过多个虚拟摄像头对同一个场景同时进行多个角度的摄影。
进一步优选的,所述多个虚拟摄像头跟随场景的移动而移动。
优选的,所述用户个人信息的管理为层级管理,用于查询和管理相应层级的相关用户信息。
优选的,所述系统还包括商务交易模块,用于管理所述虚拟系统中的商务交易行为。
优选的,所述系统还包括扩展模块,用于提供功能的扩展,所述功能包括打印服务、机器人服务、API服务以及警务服务。
在本发明的第二方面,本发明提供了一种实时虚拟交互方法,包括:
根据客户端的位置以及第一用户的视角信息确定是否获得所述第一用户相关端点的端点信息,根据所述端点信息构建实时虚拟系统,所述端点信息包括端点的经度信息、纬度信息、高度信息以及角度信息;
根据所述第一用户的视角信息识别视角范围内的视觉对象,确定是否获取到所述视觉对象对应的物件信息,是则显示所述视觉对象对应的物件信息,否则根据所述视觉对象的3D虚拟模型添加所述视觉对象对应的物件信息;所述物件信息包括物件的可穿透性;
第二用户获取所述第一用户的视角信息并使用所述第一用户的视角信息对所述实时虚拟系统进行浏览以及对所述第一用户视角范围内的物件实施交互操作;
所述第一用户同时开设多个虚拟摄像头,对同一个场景同时进行多个角度的摄影,且所述多个虚拟摄像头跟随场景的移动而移动。
本发明提供的一种虚拟系统及实时虚拟交互方法,不仅可以多点采集,且提供了采集点详细的经度、纬度、高度和角度信息,可以准确生成实时3D空间模型,这样的空间模型,不仅形状与现实空间接近,且由于采集点的详细数据,可以计算出虚拟系统中各个物体的实际大小数据,实现与现实空间1:1的对应。而物件信息模块的实现可以全面提升增强现实效果。视角借入以及虚拟摄影功能的实现,可以拓展用户的视野,既可以实时查看别人眼中的虚拟世界,也可以对虚拟世界同时实现实时摄影。
附图说明
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本公开的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本公开具体实施方式中提供的一种实时虚拟系统结构图;
图2为本公开具体实施方式中提供的一种系统构建模块流程图;
图3为本公开具体实施方式中提供的一种物件信息模块流程图;
图4为本公开具体实施方式中提供的一种用户服务模块流程图;
图5为本公开具体实施方式中提供的一种商务交易模块结构图。
具体实施方式
下面将结合本公开实施例中的附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
随着互联网技术、AR技术的飞速发展,虚拟现实的功能日益复杂,同时针对虚拟现实的要求也日益严格,如何实时地提供现实空间的虚拟化、数字化,成了一项迫切需要解决的技术难点。
如图1-图5所示,本公开实施例提供了一种实时虚拟系统,系统中包含一个或多个客户端、一个或多个服务器,其中,客户端可以是手机终端、PC端、平板电脑、VR一体机或其他智能穿戴设备,服务器内可以设置一个或多个模块,如系统构建模块、物件信息模块、用户服务模块、商务交易模块、扩展模块等。在另一个实施例中,这一个或多个模块也可以直接设置于客户端,也可以部分模块设置于服务器,部分模块设置于客户端。
系统构建模块主要用于端点信息的采集以及虚拟系统的实时构建。端点可以是现实世界中布置的图像采集装置,如街道上的监控摄像头、商店自己布设的监控摄像头、用户布设的家用摄像头等,也可以是手机终端的摄像头、智能穿戴设备上的摄像头等,还可以是为了本系统需要而专门在现实空间内布设的专用摄像头,还可以是卫星等。图像采集装置可以是多目相机、RGBD相机等。通过权限设置,本系统可以获得现实世界中多个区域的端点信息。端点信息除了包括图像采集装置所采集的图像或视频信息,还可以包括图像采集装置所在的经度、纬度、高度以及角度等基本信息。通过图像采集装置的经度、纬度、高度、角度等信息,可以使得构建得到的虚拟世界与现实世界一一对应,使得用户可以在虚拟世界中体验到犹如在现实世界的感觉。
系统构建模块对于端点信息的采集可以是主动式的也可以是被动式的。但不论是主动式的还是被动式的,端点信息在传输过程中都是经过加密处理的。且系统构建模块对于端点信息的采集还可以是周期性的或实时的。
虚拟系统的实时构建可以在客户端完成,也可以在服务器端完成。一个实施例中,虚拟系统的实时构建可以在客户端完成,具体的,可以采用如下方式:
定位到当前现实空间中视觉的目标位置。根据客户端的定位功能,确定出用户的经纬度信息、方向信息、角度信息等,从而可以获取到用户当前在现实空间的地理位置信息以及视角信息,根据用户当前在现实空间的地理位置信息以及视角信息可以定位出用户当前在虚拟空间中所处的地理位置以及观察视角;
根据确定出的用户的地理位置信息,查看客户端本地是否存储有相关采集端点信息,如果客户端本地没有存储相关端点信息,则可以从服务器端获取该地理位置空间附近的采集端点信息;
在客户端本身包含该地理位置完整端点信息或从服务器端获取到该地理位置空间附近的采集端点信息的情况下,可以确定客户端本地是否端点信息获取成功,如果没有获取成功,则可以再次从服务器端获取空间附近的采集端点信息。如果端点信息获取成功,则可以在客户端构建实时虚拟空间。客户端可以接受端点传来的加密图像流信息,以在客户端生成图像流对应的3D空间图,之后对多采集端点的3D空间图进行拼接,从而生成现实空间对应的虚拟系统,用户则可以进入生成的实时虚拟系统。客户端也可以在和服务器端保持连接的情况下,实时从服务器端获得该地理位置的实时端点信息,以便在客户端实时构建虚拟空间。
在另一个实施例中,虚拟系统的实时构建也可以在服务器端完成,如果是在服务器端生成实时虚拟空间,则服务器端需要将加密的虚拟空的数据流实时传送给客户端,或者是在虚拟空间发生变化的情况下,再将新生成的虚拟空间传送给客户端,客户端只需做数据解析和最终效果展示即可。
本公开实施例中实时虚拟系统的构建,可以有效保证现实空间虚拟化过程中的真实性以及数据稳定性,在网络良好的情况下,可以在数据较小的失真中,满足用户的体验使用。且只要在有虚拟系统相关的端点数据采集的地方,就可以构建相对应的虚拟空间,用户在获得这些虚拟空间的相关权限后,可以随意进出浏览和游玩。如,用户坐在A房间,在获得B房间的相关权限后,可以随时虚拟进入B房间,查看B房间中相应的实时状态;又如,用户坐在A城市,可以实时去逛B城市的步行街、风景区等。在此基础上,还可以模拟城市上方虚空飞行的游玩模式。
且在系统构建中,可以先进行图片空间拼接,再进行3D建模,也可以先进行3D建模,再进行3D空间拼接。在具体实施例中,空间拼接和3D建模可以均在客户端或服务器端或端点进行,也可以分别在客户端、服务器端、端点进行。
根据端点信息,可以准确生成实时3D空间模型。此空间模型,不仅仅形状类似现实空间,而且由于采集点的详细数据,可以计算出虚拟系统中各种物件空间的实际大小数据;此数据基本与现实空间1:1一一对应。
本公开实施例提供的系统构建模块,在摄像头或卫星覆盖全面的情况下,可以获得多个采集点的端点信息,且每个采集点可以具备多个不同角度不同位置的端点信息,这样对于每个采集点,可以通过其对应的多个端点信息进行3D虚拟系统的精准构建,同时还可以实现每个采集点虚拟系统的实时构建,这样用户可以在本身位置不变的情况下,实现其他地区的游玩和浏览。
物件信息模块主要负责虚拟系统中物件信息的存储和交互,以增强虚拟系统的真实性、趣味性和交互性。在一个具体实施例中,物件信息模块用于实现如下内容:
根据用户当前的视觉信息,定位出用户当前的视觉可视范围,并识别视觉范围内的视觉对象,即视觉范围内所有的物件,其中,用户当前的视觉信息可以通过眼动追踪方式获得;
如果服务器数据库中包含该视觉对象的物件信息,则直接将该视觉对象的物件信息发送至客户端,即客户端加载服务器物件信息;如果服务器数据库中不包含该视觉对象的物件信息,则可以先确定用户是否有编辑权限,在用户具备编辑权限的情况下,用户可以根据虚拟系统构建的3D物件模型,在自己的权限范围内,进行编辑、提交、保存该视觉对象对应的物件信息,以方便下次读取使用。如果用户不具备编辑权限,则仅在客户端显示原始物件虚拟图,不做任何附加展示。此外,在用户权限范围内,用户还可以更新服务器数据库中保存的物件信息。
物件信息可以包括物件ID、物件名称、物件类别、所有人权限、空间范围、可穿透性、可移动性、特效、可见性等其中的至少一个。
其中,所有人权限是指该物件的归属性,即该物件是属于公共所有还是私人所有,公共所有的物件挂靠系统公共管理人员账户,私人所有的物件挂靠对应用户自己的账户。
空间范围是指物件3D模型的位置以及占用的空间大小等信息,可以用于配合所有人权限使用,例如,公共空间可以随意进出,私人空间在未取得相应许可之前,禁止进入。
可穿透性是指在虚拟系统中,该物件是否可以虚拟穿透过去,还是必须绕行过去,例如对于一块石头,允许穿透时,可以直接虚拟走过,没有阻碍,如果不允许穿透,则遇到时必须绕行。
可移动性是指物件是否可以移动,允许移动的物件,在虚拟系统中,可以被用户任意移动到可以达到的空间范围,此属性既适用于现实空间中对应的物件,也适用于虚拟系统中创建出来的虚拟物件。如在现实空间的石头,当被标定为可移动属性时,则在虚拟系统中,可以将该石头从A点移动到B点,则该用户再次从A点走过时,不会被阻挡和提示绕行,而当用户走到B点时,则会提示“无法通过,请绕行”。现实空间中的石头,被虚拟移动后,只对用户本人或者用户信息共享的特定团体有效,其他人看到的位置,仍然是现实空间对应的实际位置。虚拟空间中创建出来的虚拟物件,由创建者决定是否可以移动,例如虚拟篮球,当可以移动时,用户可以在系统中,拍打虚拟篮球,模拟投篮等操作。
特效属性是指虚拟系统附加给物件的一些特别属性,主要配合其他属性做出的系列可视化效果。例如私人物件和公共物件、可移动物件与不可移动物件等,在颜色、闪烁频率、虚化程度、音效等上的区别。特效也包括虚拟系统创建的一些附加视听效果,例如给绿树挂上虚拟灯笼、墙壁提示虚拟动画、用户佩戴虚拟头饰等等,也包括在一些特定物件上的广告效果展示。
可见性是指物件是否可以被别人或者自己看见,主要针对虚拟物件以及部分特定属性下的现实物件,例如用户头戴虚拟头饰,用户可以让别人看到头饰,也可以让别人看不到此头饰。现实物件的可见性,一般用于私人权限范围,只针对用户本人有效。例如用户在自己房间行走时,可以选择让自己房间消失,直接看到外面环境,也可以在虚拟系统中,让周边所有环境消失,变成在一片虚白背景中行走,此效果一般配合AR眼镜可以提供更多的沉浸式体验,例如,用户专心在虚拟系统中进行学习、听音乐、看电影等活动时,必要时可以将周边环境全部隐藏消失,仅保留背景色调和光泽,当然背景色调、光泽等都是可以根据用户设定,任意修改。
物件信息属性包括但不限于以上提到的属性,其他属性例如可销售性、售价、详细地址等也可以包含在内。
物件信息模块中虚拟物件的识别、编辑、修改,可以全面提升增强现实效果。
用户服务模块主要用于处理用户管理、用户个人信息以及用户间的具体交互等操作。
具体的,用户服务模块还可以在接收到用户登录请求后,确定用户是否登录成功,如果用户登录成功,则可以由用户选择是否进入上次或者更多历史中退出时的虚拟视觉位置,是则直接进入历史虚拟视觉位置,如果用户选择不进入历史虚拟视觉位置,则直接进入当前现实空间的真实视觉位置。
用户在进入虚拟系统之后,由用户服务模块加载用户个人信息,用户个人信息包括用户基本信息、权责信息、账户信息、好友信息等,用户基本信息可以包括用户ID、用户名称、用户头像等信息。
用户服务模块还可以包括功能管理模块、个人交互模块以及多人交互模块等。
其中,功能管理模块中可以点击相关功能按钮,加载对应的信息。其中,相关功能按钮可以为查看账单、交易历史、登录历史、历史轨迹、私人虚拟物件、私人特效、个人仓库等。
且功能管理模块还可以分为普通用户模块和系统管理模块。普通用户模块是针对普通用户开放的,是用于用户自我物件和自我数据管理的一个模块,用户可以看到关于自己在使用虚拟系统中产生的方方面面数据,这些数据仅包括被系统记录下来的信息,没有被记录的数据信息或者没有相关权限的数据信息,用户无法查询。例如,可以将用户昨日的视觉数据进行存储,以便用户可以对历史视觉数据进行回放。
系统管理模块针对管理员进行开放,包含分层管理、查询、汇总、统计、客户管理、审核、纠纷处理、投诉等,由于实时虚拟系统与现实空间的高度同步对应的特性,因此,系统管理员可以分为片区管理和层级管理,根据权责范围划定,不同的片区管理,可以查询、管理片区内的相关用户信息和数据,例如,处理辖区内用户的活跃数据、流进流出数据、辖区内热点物件数据、热点话题数据等。层级管理是对片区管理的二层次和多层次管理,高层级管理对下层级管理负责,下层级对自身的子层级负责,依次逐步嵌套管理。
片区管理按照职能不同,又可以分为审核管理、投诉管理、用户编辑管理、商务管理、交易管理等,不同的职能只能看到职能范围的数据,比如审核管理员只能看到辖区内相关的投诉数据等,职能管理员根据相关数据,综合判断,做出职能范围内合理的操作。
个人交互模块主要是用于用户个人交互,完成用户自己同虚拟系统之间的交互,例如查阅虚拟系统书籍、音乐、影视资料等,编辑、更新、存储虚拟日志,虚拟系统中的日志包含文字、音频、视频等形式,编辑、更新、交易或操作个人虚拟物件,装饰个人虚拟空间、虚拟形象、个人信息板等。个人信息板主要用来展示个人的概况、动态等信息,方便别人查看、订阅、交友、交易等。
为避免产生巨额的实时信息存储成本,实时虚拟系统一般默认是不存储视野历史信息的。因为不同的用户,观看的角度不同,会产生大量的冗余数据,所以本系统默认不存储任何视野历史信息,用户只能实时观看当前的视角范围景象,正常情况下不可倒退回放。
针对有特殊回放需求的用户,系统开发了录像功能。录像视频既可以选择本地存储,也可以选择远程服务器存储,存放在服务器上的录像视频,占用的空间超过一定的限度,可以进行扩容。对于存储服务器,平台既可以自己架构,也可以使用第三方云服务器,比如腾讯云、阿里云等等,系统可以向用户开放第三方存储接口权限,有第三方存储权限的用户,可以直接将视频、文档等文件,存放到第三方云盘上。
当有交互功能产生时,用户同服务器之间实时传输用户的视角信息,主要包括位置、高度、角度、视野范围等信息,以备做进一步高级功能交互。
多人交互模块主要用于完成用户同用户之间的交互操作,多人交互模块可以包括普通交互功能和高级交互功能。
普通交互功能用于提供用户之间常规的交流、交互操作,例如多用户之间在虚拟系统中可以进行文字、语音、视频等形式的交流沟通,如果对方没有特别设置,默认状态下,不在对方黑名单中的用户都可以随意查看对方的个人信息板,以决定是否做进一步的深入交流。用户可以自行设置开放权限,可以只对特定的对象用户开放查看个人信息板等权限;只有权限范围允许时,其他用户才可以观看、浏览、进入自己的私人空间。用户也可以邀请好友进入私人虚拟空间,比如邀请好友一起线上观看家庭影院,邀请同事进入虚拟办公室办公开会,多人一起线上K歌等聚会活动。
虚拟系统人物对话时,将实时虚拟系统的背景声音虚化、弱化,甚至直接屏蔽,以不影响正常的用户通话为标准。
高级交互功能包括视角借入、虚拟摄影等功能。
其中,视角借入功能是指用户A在得到用户B的允许条件下,可以暂时进入用户B的视野旷区,用户B的视角效果,实时地展现在用户A的面前。更进一步地,在得到用户B操作许可后,用户A可以对用户B视角范围内的物件进行相应操作。
在某些视觉位置和角度对观察效果有较大影响的场景中,例如虚拟系统多人交互场景中的教室、影院等类型的现场中,观察者的视觉效果,随着不同的视角、位置,差异很大。通过视角借入功能,且在得到对方允许或者虚拟空间管理员允许的情形下,用户可以进入别人的视野旷区,感受最佳的视听效果。例如侧边的座位可以体验居中位置的视听效果;后排的座位,也可以体验前排位置的视听效果。
这种功能消除了有限场所内座位的差距和空间位置的差异,可以满足每位使用者都能体验最佳位置和最佳视角。此功能不仅仅可以用在教室、电影院等系列场所;实际上只要是现实中对位置有限制的活动场所,都可以应用此视角借入功能。
视角借入功能的具体实现可以为:用户A位于a地理位置,当前视角为a地理位置的视角,用户B位于b地理位置,当前视角为b地理位置的视角,用户A如果想知道用户B当前的视觉场景,可以向用户B请求视角借入,在用户B同意后,用户B当前看到的场景也同时是用户A看到的场景,如果用户B处于移动状态,则用户A看到的场景也会随着用户B的移动而改变。此外,用户A在视角借入的情况下,还可以对用户B视觉范围内的物件进行交互操作,如,用户A可以对用户B视觉范围内的椅子、石头等物件进行位置移动等。
虚拟摄影功能,是指在虚拟系统中,利用3D空间的特殊空间特性,用户可以增加多个辅助视角位置。在辅助视角位置,用户可以设置多个虚拟摄像头,利用用户视野录像功能,可以同时针对多个视角位置,对目标场景,从多个角度同时开始录音摄像。主视觉位置是用户当前的实际观察位置,可以通过小窗口功能监控各个辅助视角位置的实际成像效果;用户也可以自由切换到其他辅助视角位置进行实时观察。此功能典型应用于虚拟系统多人交互场景中的影视拍摄现场,对剧组摄影有很大的辅助作用;多角度的视频拍摄存储后,方便剧组后期剪辑、出品。
虚拟摄影功能中的多个虚拟摄像头,可以随着场景的移动而移动,例如,如果要拍摄一只老虎在草原上的奔跑视频,则多个虚拟摄像头可以随着老虎的移动而移动,以实现不丢失目标的摄影。在拍摄影视剧等具备固定剧本的场景中,多个虚拟摄像头的移动轨迹和速度可以提前根据剧本设定进行预设,这样不仅可以减少人力成本的消耗,且还可以提高拍摄的精度,同时还可以实现高难度的拍摄场景。
在虚拟摄影功能中,由于可以实现多个角度的同时拍摄,因此,对于每一个角度,都会存储有完整的录像,对于剧组拍摄来说,不需要演员去关注摄影机位置进行走位,也不需要摄影师进行高难度拍摄或寻找完美拍摄角度,可以为剧组节省大量时间与资金。
视角借入功能与虚拟摄影功能,某些方面有些重叠,都是为了拓宽用户的视野;但操作上又有本质上的区别。视角借入是实时获取对方的视觉位置、高度、角度、视野范围等信息,以实现一种视野分享的功能;用户A可以实时的查看用户B眼中的虚拟世界。虚拟摄影中的辅助视角位置一般是固定的,特殊操作下,才会根据用户要求,做相应的位置变动,以实现一些更为复杂的摄影效果。
商务交易模块主要用于处理系统中所有的商业交易行为,主要涉及商品上传、下架、编辑、更新、保存、删除以及买卖交易等。
商务交易模块可以包括商品管理模块、商品交易模块、服务模块等。
其中,商品管理模块用于管理商品,既包括现实空间对应的商品,也包括虚拟系统中创建出来的虚拟物件,比如虚拟首饰、虚拟特效、虚拟房屋等。由于虚拟系统同现实空间实时同步对应,因此,商品管理模块中,可以按照商品特性分为三大类。第一类为纯粹虚拟商品,没有现实的对应,完全由商家在虚拟系统中创作完成,比如虚拟装饰,虚拟房屋、虚拟花园、虚拟设计等。第二类为纯粹现实商品,商家没有做任何线上的商品编辑发布,买家根据虚拟系统中实时的现实商品展示,决定是否进行交易行为,此类交易行为一般需要平台介入辅助完成。第三类为半虚拟半现实商品,商家售卖的物品有现实的仓储,商家现实店铺或者虚拟空间店铺中,仅作展示交流使用;买家看到满意的商品时,同商家商定后,可以直接完成交易。
商品交易模块可以由虚拟系统平台提供担保交易和线下交易等两种交易方式,贯穿整个交易环节。为尽量避免出现商务交易纠纷,对于买卖行为,系统尽量要求走平台担保交易。但是针对三大类商品特性的不同,对于第二类和第三类中有现实商铺的商品,用户能直接找到商家现实空间位置的商业行为,平台允许用户之间进行线下交易。对于没有现实对应的商品,即第一类和第三类虚拟商铺中的商品,因为用户不能直接找到商家的现实空间位置,平台则强制要求必须走平台担保交易,以避免产生更多的商业纠纷。
线下交易行为产生的交易纠纷平台辅助解决能力有限,一般要求线下交易的纠纷,买卖双方之间线下自行解决,或者通过法律等其他途径解决。担保交易行为产生的纠纷由平台介入辅助解决。
服务模块是虚拟系统为促成买卖双方达成交易,设立的系列服务;包括支付服务、客服服务,以及其他辅助服务等。支付服务为买卖双方提供流畅的、低门槛的交易过程,目前主要是通过接入第三方支付服务,完成此类服务,比如支付宝支付、微信支付、环迅支付等。客服服务,是为解答买卖双方针对交易过程中的疑问,以及售后的纠纷处理等做出及时准确的回复。其他辅助服务包括商家广告展示、买卖双方信用等级展示,以及其他的系列促成交易的系统行为;比如用户在体验虚拟系统时,看到商场在做活动,如果商家也在线,则可以同商家直接进行交互咨询和下单交易,用户下单后,由商家自行打包、发货,投递到用户手中。如果商家并没有在虚拟系统中开户,用户则可以直接在线下单,由系统负责采购询价,并邮寄到用户手中,直至完成系列交易操作。
整个虚拟系统中的所有商务行为,都是尽量模仿现实空间中的动作。让用户在体验实时/低延迟虚拟商品交易同时,提供更多的增强现实的效果,增加整个流程的真实感、流畅感。
虚拟系统中商品种类更多,展示更立体。商家不仅可以展示现实空间已有的商品,也可以创建虚拟空间中的商品进行售卖。虚拟商品比现实商品具备更好的拓展性和延展性,比如虚拟头饰,商家构建好虚拟商品,当买家佩戴后,可以根据买家的虚拟头型,自动伸展,以适应出最佳展示效果。
扩展模块主要是针对虚拟交互系统提供的一种功能扩展,以增强同现实空间的动作交互。
扩展模块可以提供包括如打印服务、机器人服务、API接口服务、警务服务等功能。
其中,打印服务为打印机热点或无线接入虚拟系统后,当用户在虚拟系统中发起文档打印请求时,虚拟系统会将文档直接发送给打印机完成打印操作。机器人服务则是在机器人接入虚拟系统后,当用户在虚拟系统中对某个现实空间中的物件例如椅子或者石头等,发送搬迁指令时,机器人会根据指令要求,将物件搬移到指定位置,此功能随着机器人技术的进一步提升,可以有极大的拓展空间。API接口服务是由于虚拟平台系统的局限性,不可能将方方面面都做好,系统针对此类情形,开放了API接口服务,提供给第三方开发者,进行进一步开发更多的特色功能。第三方开发者在经过平台资格审核成功后,根据API接口,可以自由发挥,尽可能的使用规则内的所有资源,开发更多的增强现实功能。警务服务是为了更进一步增强现实空间同虚拟系统之间的联系。由于虚拟系统的真实性和实时性,警务人员在平台中,可以更加方便的完成系列警务操作,比如实时定位、跨区监督等等。
扩展服务种类繁多,只要是借助虚拟交互系统实现的其他服务,都属于扩展服务。例如,扩展服务还可以包括虚拟考古、虚拟洞穴探险、虚拟AR单人游戏、虚拟AR多人互动游戏等等,只要数据充足,线路流畅,这些通过扩展服务都可以完成。
虚拟系统扩展打印、机器人等功能。增强了虚拟同现实的连接。特别是机器人,在虚拟系统中,发送开灯、关灯、搬移物体等指令,现实机器人就会根据指令完成相应操作。随着机器人进一步完善,在虚拟系统中完成家务打扫清洁卫生,机器人即可根据虚拟系统生成的系列指令,完成现实空间的系列家务清理活动。
本发明通过实时3D空间虚拟化和多点3D空间数据拼接耦合,提供了一套实时虚拟交互系统。数据网络传输条件良好的情况下,用户使用虚拟交互系统,可以获得类似在现实中行走、聚会、办公等系列逼真效果。同时由于虚拟系统的虚拟性和数据性,虚拟交互系统可以通过数据编辑提供更好的现实展现功能,补充增强现实,可以增强用户对现实的感官认识,不会产生因沉浸现有AR游戏而导致出现虚拟同现实之间的割裂感。而且由于虚拟空间只受数据影响,不会受到空间的限制,只要有空间数据传输的地方,都可以进入到虚拟系统中;因此虚拟系统中的增强现实功能,不会受增强现实设备的限制,用户无需佩戴额外的增强设备,也无需在现实空间中到处行走,即可获得更多的增强现实体验。因为本虚拟交互系统,具有实时的3D虚拟特性,可以对目标物件进行360°无死角的实时观察,所以用户可以通过虚拟交互系统,拓宽自身视野;当用户正在观察目标物件的正面时,也可以同时观察目标物件的背面。实时虚拟交互系统为用户能够同时实时地观察更多视角、更大视野,提供了完整解决方案;可以满足特定用户更多视角观察的需求。
按照本公开内容的另一实施例,本公开还提供了一种实时虚拟交互方法,该方法与上述实时虚拟系统相互对应,包括:
根据客户端的位置以及第一用户的视角信息确定是否获得第一用户相关端点的端点信息,根据端点信息构建实时虚拟系统,端点信息包括端点的经度信息、纬度信息、高度信息以及角度信息;
根据第一用户的视角信息识别视角范围内的视觉对象,确定是否获取到视觉对象对应的物件信息,是则显示视觉对象对应的物件信息,否则根据视觉对象的3D虚拟模型添加视觉对象对应的物件信息;物件信息包括物件的可穿透性;
第二用户获取第一用户的视角信息并使用第一用户的视角信息对实时虚拟系统进行浏览以及对第一用户视角范围内的物件实施交互操作;
第一用户同时开设多个虚拟摄像头,对同一个场景同时进行多个角度的摄影,且多个虚拟摄像头跟随场景的移动而移动。
可以理解的,实时虚拟系统中对各个特征的解释说明均适用于本方法。
按照本公开内容的又一实施例,本公开内容还提供了一种计算机可读介质,其上存储有可执行指令,该可执行指令被处理器执行时使处理器实现上述虚拟系统的构建与交互。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本公开所述的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk)等。
需要说明的是,本公开内容中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于方法类实施例而言,由于其与产品类实施例相似,所以描述的比较简单,相关之处参见产品实施例的部分说明即可。
还需要说明的是,在本公开内容中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本公开内容。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本公开内容中所定义的一般原理可以在不脱离本公开内容的精神或范围的情况下,在其它实施例中实现。因此,本公开内容将不会被限制于本公开内容所示的这些实施例,而是要符合与本公开内容所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种实时虚拟系统,包括系统构建模块、物件信息模块、用户服务模块中的至少一个;
所述系统构建模块用于采集端点信息以及根据所述端点信息实时构建虚拟系统;所述端点信息包括端点的经度信息、纬度信息、高度信息以及角度信息;
所述物件信息模块用于管理所述虚拟系统中物件信息的存储和交互,所述物件信息包括物件的可穿透性;
所述用户服务模块用于管理用户个人信息以及用户交互功能;所述用户交互功能包括视角借入功能以及虚拟摄影功能。
2.如权利要求1所述的系统,其中,所述根据所述端点信息实时构建虚拟系统包括:
根据客户端的位置以及用户的视角信息确定所述客户端是否包含所述用户相关端点的端点信息;
如果所述客户端包含所述客户端所在端点的端点信息,则所述客户端根据所述客户端所在端点的端点信息实时生成相应的虚拟系统;
如果所述客户端未包含所述客户端所在端点的端点信息,则在服务器端包含所述客户端所在端点的端点信息的情况下,由服务器端根据所述客户端所在端点的端点信息实时生成相应的虚拟系统。
3.如权利要求1所述的系统,其中,所述物件信息模块还用于:
对用户当前视觉范围内的视觉对象进行识别,确定所述物件信息模块中是否包含该视觉对象对应的物件信息;
如果包含则将该视觉对象对应的物件信息发送给客户端,否则根据所述虚拟系统构建的该视觉对象的3D模型,在所述物件信息模块中添加其相应的物件信息。
4.如权利要求1所述的系统,其中,所述视角借入功能用于第二用户以第一用户的视角对虚拟系统进行浏览。
5.如权利要求4所述的系统,其中,所述视角借入功能还用于所述第二用户对所述第一用户视角范围内的物件实施交互操作。
6.如权利要求1所述的系统,其中,所述虚拟摄影功能用于通过多个虚拟摄像头对同一个场景同时进行多个角度的摄影。
7.如权利要求6所述的系统,其中,所述多个虚拟摄像头跟随场景的移动而移动。
8.如权利要求1所述的系统,其中,所述用户个人信息的管理为层级管理,用于查询和管理相应层级的相关用户信息。
9.如权利要求1所述的系统,所述系统还包括商务交易模块,用于管理所述虚拟系统中的商务交易行为。
10.一种实时虚拟交互方法,包括:
根据客户端的位置以及第一用户的视角信息确定是否获得所述第一用户相关端点的端点信息,根据所述端点信息构建实时虚拟系统,所述端点信息包括端点的经度信息、纬度信息、高度信息以及角度信息;
根据所述第一用户的视角信息识别视角范围内的视觉对象,确定是否获取到所述视觉对象对应的物件信息,是则显示所述视觉对象对应的物件信息,否则根据所述视觉对象的3D虚拟模型添加所述视觉对象对应的物件信息;所述物件信息包括物件的可穿透性;
第二用户获取所述第一用户的视角信息并使用所述第一用户的视角信息对所述实时虚拟系统进行浏览以及对所述第一用户视角范围内的物件实施交互操作;
所述第一用户同时开设多个虚拟摄像头,对同一个场景同时进行多个角度的摄影,且所述多个虚拟摄像头跟随场景的移动而移动。
CN202110663521.5A 2021-06-15 2021-06-15 实时虚拟系统及实时虚拟交互方法 Pending CN113313840A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110663521.5A CN113313840A (zh) 2021-06-15 2021-06-15 实时虚拟系统及实时虚拟交互方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110663521.5A CN113313840A (zh) 2021-06-15 2021-06-15 实时虚拟系统及实时虚拟交互方法

Publications (1)

Publication Number Publication Date
CN113313840A true CN113313840A (zh) 2021-08-27

Family

ID=77379079

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110663521.5A Pending CN113313840A (zh) 2021-06-15 2021-06-15 实时虚拟系统及实时虚拟交互方法

Country Status (1)

Country Link
CN (1) CN113313840A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114047824A (zh) * 2022-01-13 2022-02-15 北京悉见科技有限公司 多终端用户在虚拟空间交互的方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114047824A (zh) * 2022-01-13 2022-02-15 北京悉见科技有限公司 多终端用户在虚拟空间交互的方法

Similar Documents

Publication Publication Date Title
US10846937B2 (en) Three-dimensional virtual environment
US10970934B2 (en) Integrated operating environment
US20210279695A1 (en) Systems and methods for item acquisition by selection of a virtual object placed in a digital environment
US10719192B1 (en) Client-generated content within a media universe
US10970843B1 (en) Generating interactive content using a media universe database
US20230001304A1 (en) System and method for providing a computer-generated environment
WO2019099912A1 (en) Integrated operating environment
WO2021131622A1 (ja) 情報提供装置、情報提供システム、情報提供方法及び情報提供プログラム
US11513658B1 (en) Custom query of a media universe database
US11659236B2 (en) Method and apparatus for synthesized video stream
Bobier et al. The Corporate Hitchhiker’s guide to the metaverse
WO2022259253A1 (en) System and method for providing interactive multi-user parallel real and virtual 3d environments
CN113313840A (zh) 实时虚拟系统及实时虚拟交互方法
CN112381564A (zh) 汽车销售数字电商
US20160055531A1 (en) Marketing of authenticated articles thru social networking
Bug et al. The future of fashion films in augmented reality and virtual reality
JP7210340B2 (ja) 注目度利活用装置、注目度利活用方法、および注目度利活用プログラム
JP2001306945A (ja) 3次元モデル電子カタログ提供システムおよび3次元モデル電子カタログ提供方法
Lang et al. IN: SHOP-Using Telepresence and Immersive VR for a New Shopping Experience.
Chung Emerging Metaverse XR and Video Multimedia Technologies
JP2024011250A (ja) サーバ、プログラム、情報処理方法およびサーバシステム
Tingare et al. Implementation of Virtual Dresing Room using Kinect along with OpenCV
WO2015030851A2 (en) Marketing of authenticated articles thru social networking

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination