CN108983974B - Ar场景处理方法、装置、设备和计算机可读存储介质 - Google Patents

Ar场景处理方法、装置、设备和计算机可读存储介质 Download PDF

Info

Publication number
CN108983974B
CN108983974B CN201810717976.9A CN201810717976A CN108983974B CN 108983974 B CN108983974 B CN 108983974B CN 201810717976 A CN201810717976 A CN 201810717976A CN 108983974 B CN108983974 B CN 108983974B
Authority
CN
China
Prior art keywords
virtual
virtual scene
scene information
information
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810717976.9A
Other languages
English (en)
Other versions
CN108983974A (zh
Inventor
常元章
乔慧
李颖超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201810717976.9A priority Critical patent/CN108983974B/zh
Publication of CN108983974A publication Critical patent/CN108983974A/zh
Application granted granted Critical
Publication of CN108983974B publication Critical patent/CN108983974B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Abstract

本发明提供一种AR场景处理方法、装置、设备和计算机可读存储介质,该方法包括:接收第一AR设备发送的场景融合请求,所述场景融合请求包括:所述第一AR设备的第一标识、待融合的第二AR设备的第二标识和所述第一AR设备对应的当前第一虚拟场景信息;根据所述第二标识获取所述第二AR设备对应的当前第二虚拟场景信息;对所述第一虚拟场景信息和所述第二虚拟场景信息进行融合处理,获取融合后的第三虚拟场景信息,并将所述第三虚拟场景信息发送给所述第一标识对应的所述第一AR设备。该方案实现了AR场景下,多用户进行虚拟交互。打破了现有的AR场景中只能由单一用户进行操作的限制,丰富了AR场景的内容和交互形式,提高了用户体验。

Description

AR场景处理方法、装置、设备和计算机可读存储介质
技术领域
本发明涉及增强现实技术领域,尤其涉及一种AR场景处理方法、装置、设备和计算机可读存储介质。
背景技术
增强现实技术(Augmented Reality,简称AR),是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。随着随身电子产品CPU运算能力的提升,以及人们生活水平的提高,AR技术具有非常广阔的发展前景。
AR是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术,是把原本在现实世界的一定时间空间范围内很难体验到的实体信息,比如视觉信息、声音、味道、触觉等,通过电脑等科学技术,模拟仿真后再叠加,将虚拟的信息应用到真实世界,被人类感官所感知,从而达到超越现实的感官体验。在AR场景下,真实环境和虚拟模型实时地叠加到了同一个画面或空间同时存在。现有的AR场景下,用户通过戴上AR终端设备,即可实现与AR场景进行交互。比如通过AR眼镜、AR头盔等设备。
但是现有的方案中,AR场景中,同一时间只能单一用户与AR场景进行交互。即用户A戴上AR设备后,只能看到自己对应的AR场景,并与之交互。同样的,用户B戴上AR设备后,也只能与自己对应的AR场景进行交互。在此过程中,无法实现用户A与用户B在同一个AR场景中进行交互。比如,用户B无法实时看到用户A在AR场景中添加的模型等信息。这样就限制了AR技术的适用范围。
发明内容
本发明提供一种AR场景处理方法、装置、设备和计算机可读存储介质,实现了将多个用户在AR场景下建立的虚拟场景信息进行融合,并将融合后的虚拟场景信息映射到发出融合请求的第一AR设备对应的场景中,使得在该第一AR设备对应的用户可以实时看到其他用户的虚拟场景信息,进而可以实现AR场景下,多用户进行虚拟交互。打破了现有的AR场景中只能由单一用户进行操作的限制,丰富了AR场景的内容和交互形式,提高了用户体验。
本发明的第一方面提供一种基于多用户的AR场景处理方法,包括:接收第一AR设备发送的场景融合请求,所述场景融合请求包括:所述第一AR设备的第一标识、待融合的第二AR设备的第二标识和所述第一AR设备对应的当前第一虚拟场景信息;根据所述第二标识获取所述第二AR设备对应的当前第二虚拟场景信息;对所述第一虚拟场景信息和所述第二虚拟场景信息进行融合处理,获取融合后的第三虚拟场景信息,并将所述第三虚拟场景信息发送给所述第一标识对应的所述第一AR设备。
可选地,所述对所述第一虚拟场景信息和所述第二虚拟场景信息进行融合处理,获取融合后的第三虚拟场景信息,包括:提取所述第二虚拟场景信息中的第二虚拟用户,以及所述第二虚拟用户在所述第二虚拟场景信息中的位置信息和动态信息;根据所述第二虚拟用户在所述第二虚拟场景信息中的位置信息,将所述第二虚拟用户和所述动态信息融合到所述第一虚拟场景信息中,以获取所述第三虚拟场景信息。
本发明的第二方面提供一种基于多用户的AR场景处理方法,包括:获取当前第一虚拟场景信息,并根据所述第一虚拟场景信息,生成场景融合请求;其中,所述场景融合请求包括:第一AR设备的第一标识、待融合的第二AR设备的第二标识和所述第一AR设备对应的所述第一虚拟场景信息;将所述场景融合请求发送给服务器;接收所述服务器返回的第三虚拟场景信息,并将所述第一虚拟场景信息更新至所述第三虚拟场景信息。
可选地,所述获取当前第一虚拟场景信息,包括;获取用户的处理请求,所述处理请求包括:待处理的虚拟用户信息;根据所述处理请求,将所述待处理的虚拟用户信息,映射在所述第一AR设备当前所展示的基本虚拟场景信息上,以获取所述第一虚拟场景信息。
可选地,所述待处理的虚拟用户信息包括:包括如下的一种或几种的组合:所述虚拟用户的面部表情、肢体动作、运动轨迹、体表特征、空间位置。
本发明的第三方面提供一种基于多用户的AR场景处理装置,包括:第一接收模块,用于接收第一AR设备发送的场景融合请求,所述场景融合请求包括:所述第一AR设备的第一标识、待融合的第二AR设备的第二标识和所述第一AR设备对应的当前第一虚拟场景信息;第一获取模块,用于根据所述第二标识获取所述第二AR设备对应的当前第二虚拟场景信息;融合模块,用于对所述第一虚拟场景信息和所述第二虚拟场景信息进行融合处理,获取融合后的第三虚拟场景信息,并将所述第三虚拟场景信息发送给所述第一标识对应的所述第一AR设备。
可选地,所述融合模块具体用于:提取所述第二虚拟场景信息中的第二虚拟用户,以及所述第二虚拟用户在所述第二虚拟场景信息中的位置信息和动态信息;根据所述第二虚拟用户在所述第二虚拟场景信息中的位置信息,将所述第二虚拟用户和所述动态信息融合到所述第一虚拟场景信息中,以获取所述第三虚拟场景信息。
本发明的第四方面提供一种基于多用户的AR场景处理装置,包括:第二获取模块,用于获取当前第一虚拟场景信息,并根据所述第一虚拟场景信息,生成场景融合请求;其中,所述场景融合请求包括:第一AR设备的第一标识、待融合的第二AR设备的第二标识和所述第一AR设备对应的所述第一虚拟场景信息;发送模块,用于将所述场景融合请求发送给服务器;第二接收模块,用于接收所述服务器返回的第三虚拟场景信息,并将所述第一虚拟场景信息更新至所述第三虚拟场景信息。
可选地,所述第二获取模块,具体用于:获取用户的处理请求,所述处理请求包括:待处理的虚拟用户信息;根据所述处理请求,将所述待处理的虚拟用户信息,映射在所述第一AR设备当前所展示的基本虚拟场景信息上,以获取所述第一虚拟场景信息。
可选地,所述待处理的虚拟用户信息包括:包括如下的一种或几种的组合:所述虚拟用户的面部表情、肢体动作、运动轨迹、体表特征、空间位置。
本发明的第五方面提供一种服务器,包括:存储器;处理器;以及计算机程序;其中,所述计算机程序存储在所述存储器中,并被配置为由所述处理器执行本发明第一方面及其任一可选地方案所述的方法。
本发明的第六方面提供一种AR设备,包括:存储器;处理器;以及计算机程序;其中,所述计算机程序存储在所述存储器中,并被配置为由所述处理器执行本发明第二方面及其任一可选地方案所述的方法。
本发明的第七方面提供一种计算机可读存储介质,包括:程序,当其在计算机上运行时,使得计算机执行本发明第一方面及其任一可选地方案所述的方法。
本发明的第八方面提供一种计算机可读存储介质,包括:程序,当其在计算机上运行时,使得计算机执行本发明第二方面及其任一可选地方案所述的方法。
本发明提供一种AR场景处理方法、装置、设备和计算机可读存储介质,通过接收第一AR设备发送的场景融合请求,根据融合请求中的第二标识获取待融合的第二AR设备对应的当前第二虚拟场景信息;然后将第一AR设备对应的第一虚拟场景信息和第二虚拟场景信息进行融合处理,获取融合后的第三虚拟场景信息,并将所述第三虚拟场景信息发送给所述第一标识对应的所述第一AR设备。不同的AR设备对应不同的用户,如此,实现了将多个用户在AR场景下建立的虚拟场景信息进行融合,并将融合后的虚拟场景信息映射到发出融合请求的第一AR设备对应的场景中,使得在该第一AR设备对应的用户可以实时看到其他用户的虚拟场景信息,进而可以实现AR场景下,多用户进行虚拟交互。丰富了AR场景的内容和交互形式,提高了用户体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一示例性实施例示出的基于多用户的AR场景处理方法的流程图;
图2为本发明另一示例性实施例示出的基于多用户的AR场景处理方法的流程图;
图3为本发明又一示例性实施例示出的基于多用户的AR场景处理方法的流程图;
图4为本发明再一示例性实施例示出的基于多用户的AR场景处理方法的流程图;
图5为本发明一示例性实施例示出的基于多用户的AR场景处理装置的结构图;
图6为本发明另一示例性实施例示出的基于多用户的AR场景处理装置的结构图;
图7为本发明一示例性实施例示出的服务器的结构图;
图8为本发明一示例性实施例示出的AR设备的结构图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为本发明一示例性实施例示出的基于多用户的AR场景处理方法的流程图。
如图1所示,本实施例的执行主体为基于多用户的AR场景处理装置,该基于多用户的AR场景处理装置可以集成在服务器中。则本实施例提供一种基于多用户的AR场景处理方法,该方法包括如下步骤:
步骤101:接收第一AR设备发送的场景融合请求,场景融合请求包括:第一AR设备的第一标识、待融合的第二AR设备的第二标识和第一AR设备对应的当前第一虚拟场景信息。
其中,第一AR设备与第二AR设备所处的现实场景可以具有交叉,比如,佩戴AR设备的用户A和用户B在同样一个房间。虚拟场景信息可以定义为用户在AR场景下自定义的虚拟模型和虚拟模型的动作等信息,比如用户A在AR场景下按照自身的外貌特征建立了一个人体模型,并为该人体模型配置肢体动作、面部表情等,则该人体模型及其肢体动作和面部表情都属于用户A在AR场景下建立的虚拟场景信息。虚拟场景信息也可以是AR系统本身制作好的一些基本虚拟模型。本实施例对虚拟场景信息的内容不做限定。第一标识用来标记第一AR设备的身份,比如可以是其ID信息和佩戴第一AR设备的用户的身份信息。同理第二标识用来标记第二设备的身份信息。AR设备的标识可以采用不同方式,本实施例对此不做限定。
在本步骤中,当佩戴第一AR设备的第一用户,想要与佩戴第二AR设备的第二用户在AR场景下进行交互时,首先实时向服务器发送场景融合请求。服务器接收第一AR设备发送的场景融合请求,场景融合请求包含但不限于:第一AR设备的第一标识、待融合的第二AR设备的第二标识和第一AR设备对应的当前第一虚拟场景信息;第二AR设备的数量可以是多个或者一个,第二虚拟场景信息是佩戴第二AR设备的第二用户在AR场景下建立的。
步骤102:根据第二标识获取第二AR设备对应的当前第二虚拟场景信息。
在本步骤中,服务器在接收到第一AR设备发送的融合请求后,会分析出其中的待融合的第二AR设备的第二标识,并根据第二标识获取第二AR设备对应的当前第二虚拟场景信息。
步骤103:对第一虚拟场景信息和第二虚拟场景信息进行融合处理,获取融合后的第三虚拟场景信息,并将第三虚拟场景信息发送给第一标识对应的第一AR设备。
在本步骤中,第一用户佩戴第一AR设备,第二用户佩戴第二AR设备。通过将第一虚拟场景信息和第二虚拟场景信息进行融合,可以使得第一用户和第二用户建立的虚拟场景信息综合成为一个第三虚拟场景信息,在第三虚拟场景信息中,同时包含了第一用户在AR场景下建立的虚拟场景信息和第二用户在AR场景下建立的虚拟场景信息。并将第三虚拟场景信息发送给第一标识对应的第一AR设备,佩戴第一AR设备的第一用户即可看到第二用户建立的第二虚拟场景信息。举例来说,用户A和用户B在同一个房间内,用户A在AR场景下建立了自身的虚拟模型A,用户B在AR场景下建立自身的虚拟模型B。现有技术中双方是无法看到对方建立的虚拟模型的。本实施例中,如果用户A想要看到用户B的虚拟模型B,则向服务器发送场景融合请求,服务器在得到用户B的同意后,根据第二标识获取用户B建立的虚拟模型B,然后将虚拟模型B放到用户A的虚拟场景信息中进行融合。并将融合后的第三虚拟场景信息发送给所用户A佩戴的第一AR设备,用户A即可看到虚拟模型B。
本实施例提供的基于多用户的AR场景处理方法,通过接收第一AR设备发送的场景融合请求,根据融合请求中的第二标识获取待融合的第二AR设备对应的当前第二虚拟场景信息;然后将第一AR设备对应的第一虚拟场景信息和第二虚拟场景信息进行融合处理,获取融合后的第三虚拟场景信息,并将第三虚拟场景信息发送给第一标识对应的第一AR设备。不同的AR设备对应不同的用户,如此,实现了将多个用户在AR场景下建立的虚拟场景信息进行融合,并将融合后的虚拟场景信息映射到发出融合请求的第一AR设备对应的场景中,使得在该第一AR设备对应的用户可以实时看到其他用户的虚拟场景信息,进而可以实现AR场景下,多用户进行虚拟交互。打破了现有的AR场景中只能由单一用户进行操作的限制,可以应用到游戏,社交,漫游,运动,等基于AR场景的集体活动中,扩大了AR技术的适用范围。丰富AR场景的交互形式和内容,提高了用户体验。
图2为本发明另一示例性实施例示出的基于多用户的AR场景处理方法的流程图。
如图2所示,本实施例提供一种基于多用户的AR场景处理方法,是在本发明图1对应的实施例示出的基于多用户的AR场景处理方法的基础上,还包括了对第一虚拟场景信息和第二虚拟场景信息进行融合处理的具体的步骤等。该方法包括如下步骤:
步骤201:接收第一AR设备发送的场景融合请求,场景融合请求包括:第一AR设备的第一标识、待融合的第二AR设备的第二标识和第一AR设备对应的当前第一虚拟场景信息。详细参见上述实施例中步骤101的描述。
步骤202:根据第二标识获取第二AR设备对应的当前第二虚拟场景信息。详细参见上述实施例中步骤102的描述。
步骤203:提取第二虚拟场景信息中的第二虚拟用户,以及第二虚拟用户在第二虚拟场景信息中的位置信息和动态信息。
在本步骤中,第一用户佩戴第一AR设备,第二用户佩戴第二AR设备。第二虚拟场景信息包含了很多虚拟模型,可以根据第一用户的需要进行筛选提取。通过对第二虚拟场景信息进行筛选提取,可以获取其中的第二虚拟用户,第二虚拟用户是指第二用户建立的虚拟用户,可以是人体模型、场景模型等信息。并且提取第二虚拟用户在第二虚拟场景信息中的位置信息和动态信息。
步骤204:根据第二虚拟用户在第二虚拟场景信息中的位置信息,将第二虚拟用户和动态信息融合到第一虚拟场景信息中,以获取第三虚拟场景信息。
在本步骤中,位置信息可以确定第二虚拟用户在AR场景中的具体位置,进而可以准确地将第二虚拟用户和动态信息融合到第一虚拟场景信息中的对应位置,如此便可以获取比较准确地第三虚拟场景信息。
本实施例提供的基于多用户的AR场景处理方法,通过根据第一用户的需要对第二虚拟场景信息进行筛选提取,并提取第二虚拟用户在第二虚拟场景信息中的位置信息和动态信息,然后根据位置信息确定第二虚拟用户在AR场景中的具体位置,进而可以准确地将第二虚拟用户和动态信息融合到第一虚拟场景信息中的对应位置,提高了场景融合的准确定性。
图3为本发明又一示例性实施例示出的基于多用户的AR场景处理方法的流程图。
如图3所示,本实施例的执行主体为基于多用户的AR场景处理装置,该基于多用户的AR场景处理装置可以集成在AR设备中。则本实施例提供一种基于多用户的AR场景处理方法,该方法包括如下步骤:
步骤301:获取当前第一虚拟场景信息,并根据第一虚拟场景信息,生成场景融合请求;其中,场景融合请求包括:第一AR设备的第一标识、待融合的第二AR设备的第二标识和第一AR设备对应的第一虚拟场景信息。
在本步骤中,第一AR设备与第二AR设备所处的现实场景可以具有交叉,比如,佩戴AR设备的用户A和用户B在同样一个房间。当佩戴第一AR设备的第一用户,想要与佩戴第二AR设备的第二用户在AR场景下进行交互时,首先实时获取自身当前的第一虚拟场景信息,并根据第一虚拟场景信息,生成场景融合请求。该场景融合请求中包含但不限于:第一AR设备的第一标识、待融合的第二AR设备的第二标识和第一AR设备对应的第一虚拟场景信息。
步骤302:将场景融合请求发送给服务器。
在本步骤中,向服务器发送场景融合请求的方式可以是无线传输方式,也可以是有线传输方式,对此本实施例不做限定。通过将场景融合请求发送给服务器,以供服务器根据场景融合请求生成融合后的第三虚拟场景信息,场景融合的详细描述参见图1和图2对应的实施例的内容,在此不再赘述。
步骤303:接收服务器返回的第三虚拟场景信息,并将第一虚拟场景信息更新至第三虚拟场景信息。
在本步骤中,第一AR设备在接收到服务器返回的第三虚拟场景信息时,将自己当前的第一虚拟场景信息更新至第三虚拟场景信息。在第三虚拟场景信息中,同时包含了第一用户在AR场景下建立的虚拟场景信息和第二用户在AR场景下建立的虚拟场景信息。佩戴第一AR设备的第一用户即可看到第二用户建立的第二虚拟场景信息。
本实施例提供的基于多用户的AR场景处理方法,通过获取当前第一虚拟场景信息,并根据第一虚拟场景信息,生成场景融合请求,并将场景融合请求发送给服务器。在接收服务器返回的第三虚拟场景信息后,将第一虚拟场景信息更新至第三虚拟场景信息。如此,实现了该第一AR设备对应的第一用户可以实时看到其他用户的虚拟场景信息,进而可以实现AR场景下,多用户进行虚拟交互。打破了现有的AR场景中只能由单一用户进行操作的限制,可以应用到游戏,社交,漫游,运动,等基于AR场景的集体活动中,扩大了AR技术的适用范围。丰富AR场景的交互形式和内容,提高了用户体验。
图4为本发明再一示例性实施例示出的基于多用户的AR场景处理方法的流程图。
如图4所示,本实施例提供一种基于多用户的AR场景处理方法,是在本发明图3对应的实施例示出的基于多用户的AR场景处理方法的基础上,还包括了获取当前第一虚拟场景信息地具体步骤等。该方法包括如下步骤:
步骤401:获取用户的处理请求,处理请求包括:待处理的虚拟用户信息。
在本步骤中,可以实时获取用户的处理请求。具体地,在AR场景下,如果用户想要对某个虚拟模型进行处理(处理包含但不限于新建或修改),则可以实时将自己的处理请求输入至AR设备。其中处理请求包含但须限于:待处理的虚拟用户信息。这里的虚拟用户信息是用户自定义虚拟模型的相关信息。比如用户想要照着自己的样子新建一个虚拟模型,则此时的虚拟用户信息包含但不限于待处理的虚拟用户信息包括:虚拟用户的面部表情、肢体动作、运动轨迹、体表特征、空间位置。
步骤402:根据处理请求,将待处理的虚拟用户信息,映射在第一AR设备当前所展示的基本虚拟场景信息上,以获取第一虚拟场景信息。
在本步骤中,第一虚拟场景信息可以定义为佩戴第一AR设备的第一用户在AR场景下自定义的虚拟模型和虚拟模型的动作以及虚拟场景等信息,虚拟场景信息也可以包含AR系统本身制作好的一些基本虚拟模型,比如用户A在AR场景下按照自身的外貌特征建立了一个人体模型(即虚拟用户信息),并根据空间位置,将虚拟用户信息,映射在第一AR设备当前所展示的基本虚拟场景信息上,以为该人体模型配置面部表情、肢体动作、运动轨迹、体表特征等。则该人体模型上述配置信息都属于用户A在AR场景下建立的第一虚拟场景信息。
步骤403:将场景融合请求发送给服务器。详细参见上述实施例中步骤302的描述。
步骤404:接收服务器返回的第三虚拟场景信息,并将第一虚拟场景信息更新至第三虚拟场景信息。详细参见上述实施例中步骤303的描述。
可选地,待处理的虚拟用户信息包括:包括如下的一种或几种的组合:虚拟用户的面部表情、肢体动作、运动轨迹、体表特征、空间位置。
本实施例中,虚拟用户信息包含但不限于待处理的虚拟用户信息包括:虚拟用户的面部表情、肢体动作、运动轨迹、体表特征、空间位置。进一步举例说明,比如在同一个房间,用户A和用户B均可以通过服务器来看到对方的虚拟场景,设佩戴第二AR设备的第二用户在AR场景下自定义了一个三维虚拟场景,佩戴第一AR设备的第一用户想要看到该虚拟模型的话,首先向服务器发送场景融合请求。在服务器通过第二用户的允许后,第二AR设备将该虚拟场景实时同步到服务器;服务器将融合后的第三虚拟场景信息发送给第一AR设备,第一AR设备将该第三虚拟场景叠加致该房间的现实场景中;第一用户即可通过第一AR设备看到第二用户构建的该虚拟场景。同理,如果第一用户对虚拟场景中做了一些操作,比如肢体动作是在房间里添加了一把椅子,根据椅子的运动轨迹、体表特征、空间位置,来确定第一虚拟场景信息。这些操作也可以实时同步到服务器,那么第二用户即可通过度服务器实时看到第一的操作,即第二用户可以看到第一用户添加了一把椅子;即双方对虚拟场景物体的任何修改都可以被对方看到。如此,实现了多用户可以在同一AR场景上进行交互,作为举例而非限定,每个用户可以通过定义自己的虚拟角色,互相之间可以加入更多的互动活动。
进一步地,在具体地使用场景中,第一用户可以通过服务器与第二用户在同一个AR场景中进行交互活动。比如,第一用户和第二用户同时处在同一个AR场景中,第一用户在AR场景中,驱动第一用户对应的虚拟模型拿起一个杯子递给AR场景中的第二用户,该动作同步到服务器,第二用户即可在AR场景中看到第一用户递过来的杯子,进而第二用户可以驱动其对应的虚拟模型接过杯子。同样的交互行为,也可以应用到运动游戏等场景,比如第一用户传球给第二用户等。
本实施例提供的基于多用户的AR场景处理方法,通过获取获取用户的处理请求,根据处理请求,将待处理的虚拟用户信息,映射在第一AR设备当前所展示的基本虚拟场景信息上,以获取第一虚拟场景信息。其中虚拟用户信息可以由用户自定义,多种多样的虚拟用户信息丰富了第一虚拟场景信息,进而丰富了AR场景的交互形式和内容,可以实现AR场景下,多用户进行虚拟交互。打破了现有的AR场景中只能由单一用户进行操作的限制,扩大了AR技术的适用范围,提高了用户体验。
图5为本发明一示例性实施例示出的基于多用户的AR场景处理装置的结构图。
如图5所示,本实施例提供一种基于多用户的AR场景处理装置,该基于多用户的AR场景处理装置可以集成在服务器中,该装置包括:第一接收模块501、第一获取模块502和融合模块503。
其中,第一接收模块501,用于接收第一AR设备发送的场景融合请求,场景融合请求包括:第一AR设备的第一标识、待融合的第二AR设备的第二标识和第一AR设备对应的当前第一虚拟场景信息;
第一获取模块502,用于根据第二标识获取第二AR设备对应的当前第二虚拟场景信息;
融合模块503,用于对第一虚拟场景信息和第二虚拟场景信息进行融合处理,获取融合后的第三虚拟场景信息,并将第三虚拟场景信息发送给第一标识对应的第一AR设备。
上述各个模块的详细内容参见上述图1对应的实施例中的描述。
本实施例提供的基于多用户的AR场景处理装置是在本发明如图5所示的一示例性实施例示出的基于多用户的AR场景处理装置的基础上,进一步地,还包括了:
可选地,融合模块503具体用于:提取第二虚拟场景信息中的第二虚拟用户,以及第二虚拟用户在第二虚拟场景信息中的位置信息和动态信息;根据第二虚拟用户在第二虚拟场景信息中的位置信息,将第二虚拟用户和动态信息融合到第一虚拟场景信息中,以获取第三虚拟场景信息。
上述各个模块的详细内容参见上述图2对应的实施例中的描述。
图6为本发明一示例性实施例示出的基于多用户的AR场景处理装置的结构图。
如图6所示,本实施例提供一种基于多用户的AR场景处理装置,该基于多用户的AR场景处理装置可以集成在AR设备中,该装置包括:第二获取模块601、发送模块602和第二接收模块603。
其中,第二获取模块601,用于获取当前第一虚拟场景信息,并根据第一虚拟场景信息,生成场景融合请求;其中,场景融合请求包括:第一AR设备的第一标识、待融合的第二AR设备的第二标识和第一AR设备对应的第一虚拟场景信息;
发送模块602,用于将场景融合请求发送给服务器;
第二接收模块603,用于接收服务器返回的第三虚拟场景信息,并将第一虚拟场景信息更新至第三虚拟场景信息。
上述各个模块的详细内容参见上述图3对应的实施例中的描述。
本实施例提供的基于多用户的AR场景处理装置是在本发明如图6所示的一示例性实施例示出的基于多用户的AR场景处理装置的基础上,进一步地,还包括了:
可选地,第二获取模块601,具体用于:获取用户的处理请求,处理请求包括:待处理的虚拟用户信息;根据处理请求,将待处理的虚拟用户信息,映射在第一AR设备当前所展示的基本虚拟场景信息上,以获取第一虚拟场景信息。
可选地,待处理的虚拟用户信息包括:包括如下的一种或几种的组合:虚拟用户的面部表情、肢体动作、运动轨迹、体表特征、空间位置。
上述各个模块的详细内容参见上述图4对应的实施例中的描述。
本发明实施例还提供一种服务器,包括:存储器;处理器;以及计算机程序;其中,计算机程序存储在存储器中,并被配置为由处理器执行本发明如图1对应一示例性实施例示出的基于多用户的AR场景处理方法或本发明如图2对应的另一示例性实施例示出的基于多用户的AR场景处理方法。
图7为本发明一示例性实施例示出的服务器的结构图。
如图7所示,本实施例提供一种服务器,包括:至少一个处理器71和存储器72,图7中以一个处理器71为例,处理器71和存储器72通过总线70连接,存储器72存储有可被至少一个处理器71执行的指令,指令被至少一个处理器71执行,以使至少一个处理器71执行如上述实施例中图1或图2的基于多用户的AR场景处理方法。
相关说明可以对应参见图1至图2的步骤所对应的相关描述和效果进行理解,此处不做过多赘述。
本发明实施例还提供一种AR设备,包括:存储器;处理器;以及计算机程序;其中,计算机程序存储在存储器中,并被配置为由处理器执行本发明如图3对应一示例性实施例示出的基于多用户的AR场景处理方法或本发明如图4对应的另一示例性实施例示出的基于多用户的AR场景处理方法。
图8为本发明一示例性实施例示出的服务器的结构图。
如图8所示,本实施例提供一种服务器,包括:至少一个处理器81和存储器82,图8中以一个处理器81为例,处理器81和存储器82通过总线80连接,存储器82存储有可被至少一个处理器81执行的指令,指令被至少一个处理器81执行,以使至少一个处理器81执行如上述实施例中图3或图4的基于多用户的AR场景处理方法。
相关说明可以对应参见图3至图4的步骤所对应的相关描述和效果进行理解,此处不做过多赘述。
本发明实施例还提供了一种计算机可读存储介质,包括:程序,当其在计算机上运行时,使得计算机可执行上述图1或图2对应的实施例中方法的全部或部分流程。其中,存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)、随机存储记忆体(RandomAccess Memory,RAM)、快闪存储器(Flash Memory)、硬盘(Hard Disk Drive,缩写:HDD)或固态硬盘(Solid-State Drive,SSD)等;存储介质还可以包括上述种类的存储器的组合。
本发明实施例还提供了一种计算机可读存储介质,包括:程序,当其在计算机上运行时,使得计算机可执行上述图3或图4对应的实施例中方法的全部或部分流程。其中,存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)、随机存储记忆体(RandomAccess Memory,RAM)、快闪存储器(Flash Memory)、硬盘(Hard Disk Drive,缩写:HDD)或固态硬盘(Solid-State Drive,SSD)等;存储介质还可以包括上述种类的存储器的组合。
虽然结合附图描述了本发明的实施例,但是本领域技术人员可以在不脱离本发明的精神和范围的情况下作出各种修改和变型,这样的修改和变型均落入由所附权利要求所限定的范围之内。

Claims (14)

1.一种基于多用户的AR场景处理方法,其特征在于,包括:
接收第一AR设备发送的场景融合请求,所述场景融合请求包括:所述第一AR设备的第一标识、待融合的第二AR设备的第二标识和所述第一AR设备对应的当前第一虚拟场景信息;
根据所述第二标识获取所述第二AR设备对应的当前第二虚拟场景信息;
对所述第一虚拟场景信息和所述第二虚拟场景信息进行融合处理,获取融合后的第三虚拟场景信息,并将所述第三虚拟场景信息发送给所述第一标识对应的所述第一AR设备;
其中,所述第三虚拟场景信息包括所述第一虚拟场景信息和所述第二虚拟场景信息。
2.根据权利要求1所述的方法,其特征在于,所述对所述第一虚拟场景信息和所述第二虚拟场景信息进行融合处理,获取融合后的第三虚拟场景信息,包括:
提取所述第二虚拟场景信息中的第二虚拟用户,以及所述第二虚拟用户在所述第二虚拟场景信息中的位置信息和动态信息;
根据所述第二虚拟用户在所述第二虚拟场景信息中的位置信息,将所述第二虚拟用户和所述动态信息融合到所述第一虚拟场景信息中,以获取所述第三虚拟场景信息。
3.一种基于多用户的AR场景处理方法,其特征在于,包括:
获取当前第一虚拟场景信息,并根据所述第一虚拟场景信息,生成场景融合请求;其中,所述场景融合请求包括:第一AR设备的第一标识、待融合的第二AR设备的第二标识和所述第一AR设备对应的所述第一虚拟场景信息;
将所述场景融合请求发送给服务器;
接收所述服务器返回的第三虚拟场景信息,并将所述第一虚拟场景信息更新至所述第三虚拟场景信息;
其中,所述第三虚拟场景信息包括所述第一虚拟场景信息和第二虚拟场景信息,其中,所述第二虚拟场景为与第二AR设备对应的虚拟场景信息。
4.根据权利要求3所述的方法,其特征在于,所述获取当前第一虚拟场景信息,包括;
获取用户的处理请求,所述处理请求包括:待处理的虚拟用户信息;
根据所述处理请求,将所述待处理的虚拟用户信息,映射在所述第一AR设备当前所展示的基本虚拟场景信息上,以获取所述第一虚拟场景信息。
5.根据权利要求4所述的方法,其特征在于,所述待处理的虚拟用户信息包括:包括如下的一种或几种的组合:所述虚拟用户的面部表情、肢体动作、运动轨迹、体表特征、空间位置。
6.一种基于多用户的AR场景处理装置,其特征在于,包括:
第一接收模块,用于接收第一AR设备发送的场景融合请求,所述场景融合请求包括:所述第一AR设备的第一标识、待融合的第二AR设备的第二标识和所述第一AR设备对应的当前第一虚拟场景信息;
第一获取模块,用于根据所述第二标识获取所述第二AR设备对应的当前第二虚拟场景信息;
融合模块,用于对所述第一虚拟场景信息和所述第二虚拟场景信息进行融合处理,获取融合后的第三虚拟场景信息,并将所述第三虚拟场景信息发送给所述第一标识对应的所述第一AR设备;
其中,所述第三虚拟场景信息包括所述第一虚拟场景信息和所述第二虚拟场景信息。
7.根据权利要求6所述的装置,其特征在于,所述融合模块具体用于:
提取所述第二虚拟场景信息中的第二虚拟用户,以及所述第二虚拟用户在所述第二虚拟场景信息中的位置信息和动态信息;
根据所述第二虚拟用户在所述第二虚拟场景信息中的位置信息,将所述第二虚拟用户和所述动态信息融合到所述第一虚拟场景信息中,以获取所述第三虚拟场景信息。
8.一种基于多用户的AR场景处理装置,其特征在于,包括:
第二获取模块,用于获取当前第一虚拟场景信息,并根据所述第一虚拟场景信息,生成场景融合请求;其中,所述场景融合请求包括:第一AR设备的第一标识、待融合的第二AR设备的第二标识和所述第一AR设备对应的所述第一虚拟场景信息;
发送模块,用于将所述场景融合请求发送给服务器;
第二接收模块,用于接收所述服务器返回的第三虚拟场景信息,并将所述第一虚拟场景信息更新至所述第三虚拟场景信息;
其中,所述第三虚拟场景信息包括所述第一虚拟场景信息和第二虚拟场景信息,其中,所述第二虚拟场景为与第二AR设备对应的虚拟场景信息。
9.根据权利要求8所述的装置,其特征在于,所述第二获取模块,具体用于:
获取用户的处理请求,所述处理请求包括:待处理的虚拟用户信息;
根据所述处理请求,将所述待处理的虚拟用户信息,映射在所述第一AR设备当前所展示的基本虚拟场景信息上,以获取所述第一虚拟场景信息。
10.根据权利要求9所述的装置,其特征在于,所述待处理的虚拟用户信息包括:包括如下的一种或几种的组合:所述虚拟用户的面部表情、肢体动作、运动轨迹、体表特征、空间位置。
11.一种服务器,其特征在于,包括:
存储器;处理器;以及计算机程序;
其中,所述计算机程序存储在所述存储器中,并被配置为由所述处理器执行如权利要求1或2中所述的方法。
12.一种AR设备,其特征在于,包括:
存储器;处理器;以及计算机程序;
其中,所述计算机程序存储在所述存储器中,并被配置为由所述处理器执行如权利要求3至5中任一项所述的方法。
13.一种计算机可读存储介质,其特征在于,包括:程序,当其在计算机上运行时,使得计算机执行权利要求1或2中所述的方法。
14.一种计算机可读存储介质,其特征在于,包括:程序,当其在计算机上运行时,使得计算机执行权利要求3至5中任一项所述的方法。
CN201810717976.9A 2018-07-03 2018-07-03 Ar场景处理方法、装置、设备和计算机可读存储介质 Active CN108983974B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810717976.9A CN108983974B (zh) 2018-07-03 2018-07-03 Ar场景处理方法、装置、设备和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810717976.9A CN108983974B (zh) 2018-07-03 2018-07-03 Ar场景处理方法、装置、设备和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN108983974A CN108983974A (zh) 2018-12-11
CN108983974B true CN108983974B (zh) 2020-06-30

Family

ID=64536586

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810717976.9A Active CN108983974B (zh) 2018-07-03 2018-07-03 Ar场景处理方法、装置、设备和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN108983974B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111752511A (zh) * 2019-03-27 2020-10-09 优奈柯恩(北京)科技有限公司 Ar眼镜远程交互方法、装置和计算机可读介质
CN110413109A (zh) * 2019-06-28 2019-11-05 广东虚拟现实科技有限公司 虚拟内容的生成方法、装置、系统、电子设备及存储介质
CN111665945B (zh) * 2020-06-10 2023-11-24 浙江商汤科技开发有限公司 一种游览信息展示方法及装置
CN111744202A (zh) * 2020-06-29 2020-10-09 完美世界(重庆)互动科技有限公司 加载虚拟游戏的方法及装置、存储介质、电子装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101893935A (zh) * 2010-07-14 2010-11-24 北京航空航天大学 基于真实球拍的协同式增强现实乒乓球系统构建方法
CN104011788A (zh) * 2011-10-28 2014-08-27 奇跃公司 用于增强和虚拟现实的系统和方法
CN105827610A (zh) * 2016-03-31 2016-08-03 联想(北京)有限公司 一种信息处理方法和电子设备
CN106774870A (zh) * 2016-12-09 2017-05-31 武汉秀宝软件有限公司 一种增强现实交互方法及系统
CN107667331A (zh) * 2015-05-28 2018-02-06 微软技术许可有限责任公司 共享空间多人沉浸式虚拟现实中的共享触觉交互和用户安全
CN107678715A (zh) * 2016-08-02 2018-02-09 北京康得新创科技股份有限公司 虚拟信息的共享方法,装置和系统
CN107741886A (zh) * 2017-10-11 2018-02-27 江苏电力信息技术有限公司 一种基于增强现实技术多人互动的方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625129A (zh) * 2012-03-31 2012-08-01 福州一点通广告装饰有限公司 远程真人三维虚拟仿场景互动的实现方法
US9588730B2 (en) * 2013-01-11 2017-03-07 Disney Enterprises, Inc. Mobile tele-immersive gameplay
US9424239B2 (en) * 2013-09-06 2016-08-23 Microsoft Technology Licensing, Llc Managing shared state information produced by applications
US10360729B2 (en) * 2015-04-06 2019-07-23 Scope Technologies Us Inc. Methods and apparatus for augmented reality applications
CN106803966B (zh) * 2016-12-31 2020-06-23 北京星辰美豆文化传播有限公司 一种多人网络直播方法、装置及其电子设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101893935A (zh) * 2010-07-14 2010-11-24 北京航空航天大学 基于真实球拍的协同式增强现实乒乓球系统构建方法
CN104011788A (zh) * 2011-10-28 2014-08-27 奇跃公司 用于增强和虚拟现实的系统和方法
CN107667331A (zh) * 2015-05-28 2018-02-06 微软技术许可有限责任公司 共享空间多人沉浸式虚拟现实中的共享触觉交互和用户安全
CN105827610A (zh) * 2016-03-31 2016-08-03 联想(北京)有限公司 一种信息处理方法和电子设备
CN107678715A (zh) * 2016-08-02 2018-02-09 北京康得新创科技股份有限公司 虚拟信息的共享方法,装置和系统
CN106774870A (zh) * 2016-12-09 2017-05-31 武汉秀宝软件有限公司 一种增强现实交互方法及系统
CN107741886A (zh) * 2017-10-11 2018-02-27 江苏电力信息技术有限公司 一种基于增强现实技术多人互动的方法

Also Published As

Publication number Publication date
CN108983974A (zh) 2018-12-11

Similar Documents

Publication Publication Date Title
US10593025B2 (en) Method and system for reconstructing obstructed face portions for virtual reality environment
CN108983974B (zh) Ar场景处理方法、装置、设备和计算机可读存储介质
US10699482B2 (en) Real-time immersive mediated reality experiences
CN109976690B (zh) Ar眼镜远程交互方法、装置和计算机可读介质
US20170084084A1 (en) Mapping of user interaction within a virtual reality environment
US11782272B2 (en) Virtual reality interaction method, device and system
CN111787242B (zh) 用于虚拟试衣的方法和装置
CN109671141B (zh) 图像的渲染方法和装置、存储介质、电子装置
US20200120380A1 (en) Video transmission method, server and vr playback terminal
WO2019114328A1 (zh) 一种基于增强现实的视频处理方法及其装置
CN109035415B (zh) 虚拟模型的处理方法、装置、设备和计算机可读存储介质
KR102012405B1 (ko) 애니메이션 생성 방법 및 애니메이션 생성 장치
WO2018000608A1 (zh) 一种虚拟现实系统中分享全景影像的方法和电子设备
US11302049B2 (en) Preventing transition shocks during transitions between realities
CN110941332A (zh) 表情驱动方法、装置、电子设备及存储介质
CN109426343B (zh) 基于虚拟现实的协作训练方法及系统
CN108876878B (zh) 头像生成方法及装置
CN105184622A (zh) 利用虚拟技术帮助消费者网络购物
CN114187392B (zh) 虚拟偶像的生成方法、装置和电子设备
JP2022507502A (ja) 拡張現実(ar)のインプリント方法とシステム
CN113965773A (zh) 直播展示方法和装置、存储介质及电子设备
CN106470337A (zh) 用于个性化全方向视频景深的方法、装置和计算机程序产品
CN105893452B (zh) 一种呈现多媒体信息的方法及装置
CN109685911B (zh) 一种可实现虚拟试衣的ar眼镜及其实现方法
CN115937371B (zh) 人物模型的生成方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant