CN111966216B - 空间位置的同步方法、装置、系统、电子装置和存储介质 - Google Patents

空间位置的同步方法、装置、系统、电子装置和存储介质 Download PDF

Info

Publication number
CN111966216B
CN111966216B CN202010689743.XA CN202010689743A CN111966216B CN 111966216 B CN111966216 B CN 111966216B CN 202010689743 A CN202010689743 A CN 202010689743A CN 111966216 B CN111966216 B CN 111966216B
Authority
CN
China
Prior art keywords
terminal
synchronization
scene
synchronous
point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010689743.XA
Other languages
English (en)
Other versions
CN111966216A (zh
Inventor
田树东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Yixian Advanced Technology Co ltd
Original Assignee
Hangzhou Yixian Advanced Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Yixian Advanced Technology Co ltd filed Critical Hangzhou Yixian Advanced Technology Co ltd
Priority to CN202010689743.XA priority Critical patent/CN111966216B/zh
Publication of CN111966216A publication Critical patent/CN111966216A/zh
Application granted granted Critical
Publication of CN111966216B publication Critical patent/CN111966216B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Abstract

本申请涉及一种空间位置的同步方法、装置、系统、电子装置和存储介质,其中,该空间位置的同步方法包括:在第一AR终端设置为服务器模式,且第二AR终端设置为客户端模式的情况下,将该第一AR终端检测的第一场景信息发送至该第二AR终端;将该第二AR终端接收到的该第一场景信息,和该第二AR终端检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果;通过本申请,解决了多AR终端之间无法准确同步空间位置的问题,实现了多AR终端的精确匹配和同步。

Description

空间位置的同步方法、装置、系统、电子装置和存储介质
技术领域
本申请涉及增强现实技术领域,特别是涉及空间位置的同步方法、装置、系统、电子装置和存储介质。
背景技术
增强现实(Augmented Reality,简称为AR)是一种实时地计算摄影机影像的位置及角度并加上相应图像的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动的过程;
目前主流的AR终端包括手持AR终端和头戴AR终端;其中,以苹果的ARKit开发平台和安卓的ARCode为代表的手持AR终端,其原理是通过摄像头录制真实世界,再通过算法混入虚拟物品,最后通过屏幕呈现出混合之后的结果;然而在相关技术中,对于手持AR终端的应用仍旧以单机的形式为主要形态,在多AR终端之间还无法切实地实现同步。
针对相关技术中,多AR终端之间无法准确同步空间位置的问题,目前尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种空间位置的同步方法、装置、系统、电子装置和存储介质,以至少解决相关技术中多AR终端之间无法准确同步空间位置的问题。
第一方面,本申请实施例提供了一种空间位置的同步方法,所述方法包括:
在第一AR终端设置为服务器模式,且第二AR终端设置为客户端模式的情况下,将所述第一AR终端检测的第一场景信息发送至所述第二AR终端;
将所述第二AR终端接收到的所述第一场景信息,和所述第二AR终端检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果。
在一个可行的实施例中,所述根据对比的结果获取同步世界坐标,进而获取同步结果包括:
基于Socket网络的帧同步,根据每帧用户操作同步,获取同步的终端位置信息和操作信息;
根据所述位置终端信息和所述操作信息获取所述同步结果。
在一个可行的实施例中,所述根据对比的结果获取同步世界坐标,进而获取同步结果包括:
基于所述Socket网络的消息同步,根据所述对比的结果获取同步场景和同步信息;其中,所述同步信息包括构建的关键点几何体和中心坐标;
根据所述同步场景和所述同步信息,获取所述同步世界坐标,进而获取所述同步结果。
在一个可行的实施例中,所述获取同步结果之后,所述方法还包括:
接收重新创建的用户的动作信息,并获取所述第一AR终端和所述第二AR终端之间的所述动作信息的共享结果;其中,基于每帧同步机制,控制所述第一场景信息与所述第二场景信息一致。
在一个可行的实施例中,所述在第一AR终端设置为服务器模式,且第二AR终端设置为客户端模式的情况下,将所述第一AR终端检测的第一场景信息发送至所述第二AR终端之前,所述方法还包括:
在所述第一AR终端场景校验通过的情况下,通过屏幕映射获取第一位置点,进而获取第一位置点和第一物体点相绑定的第一特征点,根据所述第一特征点获取第一AR原点坐标;
在所述第二AR终端场景校验通过的情况下,通过屏幕映射获取第二位置点,进而获取第二位置点和第二物体点相绑定的第二特征点,根据所述第二特征点获取第二AR原点坐标;
其中,所述第一场景信息包括所述第一AR原点坐标,且所述第二场景信息包括所述二AR原点坐标。
在一个可行的实施例中,所述将所述第一AR终端检测的第一场景信息发送至所述第二AR终端包括:
将所述第二AR终端与所述第一AR终端进行网络链接,在网络链接成功的情况下,将所述第一场景信息发送至所述第二AR终端。
第二方面,本申请实施例提供了一种空间位置的同步装置,所述装置包括:发送模块和同步模块;
所述发送模块,用于在第一AR终端设置为服务器模式,且第二AR终端设置为客户端模式的情况下,将所述第一AR终端检测的第一场景信息发送至所述第二AR终端;
所述同步模块,用于将所述第二AR终端接收到的所述第一场景信息,和所述第二AR终端检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果。
第三方面,本申请实施例提供了一种空间位置的同步系统,所述系统包括:第一AR终端、第二AR终端和处理设备;
所述处理设备在第一AR终端设置为服务器模式,且第二AR终端设置为客户端模式的情况下,将所述第一AR终端检测的第一场景信息发送至所述第二AR终端;
所述处理设备将所述第二AR终端接收到的所述第一场景信息,和所述第二AR终端检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果。
第四方面,本申请实施例提供了一种电子装置,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述第一方面所述的空间位置的同步方法。
第五方面,本申请实施例提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上述第一方面所述的空间位置的同步方法。
相比于相关技术,本申请实施例提供的一种空间位置的同步方法、装置、系统、电子装置和存储介质,通过在第一AR终端设置为服务器模式,且第二AR终端设置为客户端模式的情况下,将该第一AR终端检测的第一场景信息发送至该第二AR终端;将该第二AR终端接收到的该第一场景信息,和该第二AR终端检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果,解决了多AR终端之间无法准确同步空间位置的问题,实现了多AR终端的精确匹配和同步。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1为根据本发明实施例中一种空间位置同步方法的应用场景的示意图;
图2为根据本申请实施例的一种空间位置同步方法的流程图;
图3为根据本申请实施例的另一种空间位置同步方法的流程图;
图4为根据本申请实施例的又一种空间位置同步方法的流程图;
图5为根据本申请实施例的再一种空间位置同步方法的流程图;
图6为根据本申请实施例的一种空间位置同步装置的结构框图;
图7为根据本申请实施例的另一种空间位置同步装置的结构框图;
图8为根据本申请实施例的一种空间位置同步系统的结构框图;
图9为根据本发明实施例的一种计算机设备内部的结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行描述和说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。基于本申请提供的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。此外,还可以理解的是,虽然这种开发过程中所作出的努力可能是复杂并且冗长的,然而对于与本申请公开的内容相关的本领域的普通技术人员而言,在本申请揭露的技术内容的基础上进行的一些设计,制造或者生产等变更只是常规的技术手段,不应当理解为本申请公开的内容不充分。
在本申请中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域普通技术人员显式地和隐式地理解的是,本申请所描述的实施例在不冲突的情况下,可以与其它实施例相结合。
除非另作定义,本申请所涉及的技术术语或者科学术语应当为本申请所属技术领域内具有一般技能的人士所理解的通常意义。本申请所涉及的“一”、“一个”、“一种”、“该”等类似词语并不表示数量限制,可表示单数或复数。本申请所涉及的术语“包括”、“包含”、“具有”以及它们任何变形,意图在于覆盖不排他的包含;例如包含了一系列步骤或模块(单元)的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可以还包括没有列出的步骤或单元,或可以还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。本申请所涉及的“连接”、“相连”、“耦接”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电气的连接,不管是直接的还是间接的。本申请所涉及的“多个”是指大于或者等于两个。“和/或”描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。本申请所涉及的术语“第一”、“第二”、“第三”等仅仅是区别类似的对象,不代表针对对象的特定排序。
在一个可行的实施例中,提供了一种空间位置的同步方法的应用场景,图1为根据本发明实施例中一种空间位置同步方法的应用场景的示意图,如图1所示,在该应用环境中,第一AR终端12、第二AR终端14可以分别通过网络与服务器16进行通信;在该第一AR终端12为服务器模式,且该第二AR终端14为客户端模式的情况下,该第二AR终端14接收该第一AR终端12的服务器16发送的第一场景信息,并将该第一场景信息和自身检测到的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而实现多AR终端之间的同步;其中,该第一AR终端12和该第二AR终端14,可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和其他手持AR设备;服务器16可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个可行的实施例中,提供了一种空间位置的同步方法,图2为根据本申请实施例的一种空间位置同步方法的流程图,如图2所示,该流程包括如下步骤:
步骤S202,在第一AR终端12设置为服务器模式,且第二AR终端14设置为客户端模式的情况下,将该第一AR终端12检测的第一场景信息发送至该第二AR终端14;
其中,在该第一AR终端12或该第二AR终端14开始运行后,该第一AR终端12或该第二AR终端14可以通过程序选择该服务器模块;或者,该第一AR终端12获该第二AR终端14通过程序选择客户端模式;例如,该第一AR终端12程序选择了服务器模式,则该第二AR终端14在程序开启后选择为客户端模式,并且该第二AR终端14将自动去链接该第一AR终端12;在该第一AR终端12和该第二AR终端网络链接成功的情况下,服务器将该第一AR终端12的第一场景信息,包括:扫描到的场景信息、构建的关键几何体以及中心坐标一并发送至该第二AR终端14;
步骤S204,将该第二AR终端14接收到的该第一场景信息,和该第二AR终端14检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果;
其中,该第二AR终端14也在该第一AR终端12相邻位置同时扫描相同场景物体并检测得到该第二场景信息,在该第二AR终端14接收该第一场景信息后,将该第一场景信息的场景关键点、几何体以及中心坐标,与自身识别的该第二场景信息的做出对比,根据对比的结果修正自身摄像头和中心位置角度偏移,最终达到上述两终端皆以该第一AR终端12中心为Unity3D内容中的世界原点坐标,即同步世界坐标,从而统一该第一AR终端12和该第二AR终端14的世界坐标。
在相关技术中,在多设备同步的领域各家设备厂商也有自己不同的解决方案,实现原理各异,并且互不共通,效果也参差不齐,例如苹果ARkit和ARCode设备无法进行匹配和同步;而本申请实施例通过上述步骤S202至步骤S204,通过对多个AR终端的场景信息对比,获取同步世界坐标,从而提供了一种切实可行的应用于不同平台AR终端的同步方案,解决了多AR终端之间无法准确同步空间位置的问题,实现了多AR终端的精确匹配和同步。
在一个可行的实施例中,提供了一种空间位置的同步方法,图3为根据本申请实施例的另一种空间位置同步方法的流程图,如图3所示,该流程包括如下步骤:
步骤S302,基于Socket网络的帧同步,根据每帧用户操作同步,获取同步的终端位置信息和操作信息;根据该位置终端信息和该操作信息获取该同步结果;
在一个可行的实施例中,还包括如下步骤:基于该Socket网络的消息同步,根据该对比的结果获取同步场景和同步信息;其中,该同步信息包括构建的关键点几何体和中心坐标;根据该同步场景和该同步信息,获取该同步世界坐标,进而获取该同步结果;
需要说明的是,多AR终端之间空间位置的同步可以基于网络同步顺利进行,此网络框架可以基于Socket网络编程和Unity3D,并结合AR功能特性开发;实现的同步分为两块,一块是基于委托的消息同步,主要同步的是该第一AR终端12和该第二AR终端14之间的扫描的场景信息、构建的关键点几何体以及中心坐标等数据,此部分可以基于异步委托消息机制,避免阻塞主线程;第二块就是基于帧同步的每帧用户操作同步,此部分同步的是该第一AR终端12和该第二AR终端14之间的位置以及内容操作,例如,点击或滑动屏幕、按下按钮等操作,以此来达到该第一AR终端12和该第二AR终端14之间显示内容的一致性;
通过上述步骤S302,基于Socket网络编程实现AR同步机制框架,并利用网络同步机制实现多个AR终端之间的同步,从而提高了多AR终端之间同步空间位置的准确性。
在一个可行的实施例中,提供了一种空间位置的同步方法,图4为根据本申请实施例的又一种空间位置同步方法的流程图,如图4所示,该流程包括如下步骤:
步骤S402,接收重新创建的用户的动作信息,并获取该第一AR终端12和该第二AR终端14之间的该动作信息的共享结果;要维持持续的共享AR体验,每个AR终端用户的动作都会影响其他用户可见的AR场景,则在同步完场景地图后,仅共享重新创建每个用户动作所需的信息;例如,该用户可以点击该第二AR终端14以在场景中绘制3D线条,该线条是静态的,因此所需要同步的就是线条在世界空间中的位置和方向,从而达到该第一AR终端12和该第二AR终端14之间内容的一致;
其中,基于每帧同步机制,控制该第一场景信息与该第二场景信息一致;需要说明的是,实现各AR终端之间的同步AR操作和内容,分为上层应用接口,主要为Unity3D开发提供契合的消息机制,满足Unity3D开发内容的丰富性;包括上层的UI消息注册机制和场景层;该UI消息注册机制封装了Unity3D本身的事件系统,内容开发只需要根据Unity3D原来的注册机制注册UI事件就行;该场景层的GameObject交互的每帧同步机制,确保各AR终端里场景的一致。
通过上述步骤S402,在同步世界坐标后,基于Unity3D游戏开发中每帧同步机制,实现第一AR终端12和第二AR终端14之间的AR操作和内容的动态一致,从而提高了多AR终端同步的准确性和实时性。
在一个可行的实施例中,提供了一种空间位置的同步方法,图5为根据本申请实施例的再一种空间位置同步方法的流程图,如图5所示,该流程包括如下步骤:
步骤S502,在该第一AR终端12场景校验通过的情况下,通过屏幕映射获取第一位置点,进而获取第一位置点和第一物体点相绑定的第一特征点,根据该第一特征点获取第一AR原点坐标;
步骤S504,在该第二AR终端14场景校验通过的情况下,通过屏幕映射获取第二位置点,进而获取第二位置点和第二物体点相绑定的第二特征点,根据该第二特征点获取第二AR原点坐标;其中,该第一场景信息包括该第一AR原点坐标,且该第二场景信息包括该二AR原点坐标;
其中,AR终端应用程序集成了自研算法的平面检测和场景物体识别;首先各AR终端开启场景校验,在该场景校验为对扫描场景的几何特征进行校验的情况下,该扫描场景需要有足够多的几何特征,或该扫描场景的空间特征足够鲜明,才能通过该场景校验,例如,在该扫描场景中的桌子被扫视的情况下,AR终端可以对包括该桌子扫视平面的该扫描场景进行分割和二值化处理,进而获取该桌子的几何特征,由于该桌子的该几何特征足够多,因此该扫描场景可以通过该场景校验;或者,在该场景校验可以为通过设置于该扫描场景的特征码进行校验,例如,在该扫描场景所在区域内设置该特征码,在该终端12确认该扫描场景中包括该特征码的情况下,该扫描场景通过该场景校验;
在AR终端通过该场景校验的情况下,通过屏幕映射找到真实表面上的3D点,并标记这些位置点;通过3D位置点和图像识别物体对应的位置绑定成特征点,以识别物体特征点构建的几何体的中心为中心坐标,并以此坐标为AR世界原点坐标,此坐标也将映射到Unity3D中得到原点坐标。
通过上述步骤S502至步骤S504,通过自研算法进行各AR终端的场景识别校验,能够同时支持同时支持Android系统和IOS系统,并通过3D位置点和和图像识别物体对应位置所绑定的特征点,获取AR世原点坐标,将该AR世原点坐标映射到Unity3D中得的原点坐标,从而实现了基于Unity3D构建AR世界坐标系。
在一个可行的实施例中,将该第一AR终端12检测的第一场景信息发送至该第二AR终端14包括如下步骤:将该第二AR终端14与该第一AR终端12进行网络链接,在网络链接成功的情况下,将该第一场景信息发送至该第二AR终端14;其中,该第一AR终端12通过广播加入多方会话和查找其他设备,当找到该第二AR终端14时,该第一AR终端12将调用委托方法,邀请该第二AR终端14设备加入共享会话;当该第二AR终端14收到该邀请时,调用委托方法,接受邀请开始进入会话,从而实现了多AR终端之间的网络链接。
下面通过优选实施例对本申请实施例进行描述和说明;其中,本申请实施例中空间位置的同步方法可以应用于一个AR世界3D作画程序,该方法包括如下步骤:
步骤S602,在两台AR终端设备上运行该AD作画程序,其中,第一AR终端12设置为两台AR终端设备中的设备A,该设备A选择服务器16;第二AR终端14设置为两台AR终端设备中的设备B,该设备B选择客户端;上述两台AR终端设备同时扫描同一个识别图片或者物体;
步骤S604,该设备B链接该设备A,接收AR场景和构建的几何体并重新定位世界坐标系;其中,该设备B客户端接收该设备A的场景关键点、几何体和中心坐标,并将接收到的和自身识别到的做出对比,以此修正自身Unity3D中摄像头和中心位置角度偏移,达到二者皆以设备A服务器16中心点为Unity3D内容中的世界原点坐标;
步骤S606,该设备B可选择画笔粗细、颜色等参数,并同步到该设备A;
步骤S608,用户移动该设备B,进而在场景中画出3D轨迹或写字;该设备A每帧接收该设备B的3D位置点,并用Unity3D构建出彩色模型线条,从而在真实三维世界中呈现该彩色模型。
在本实施例中,提供了一种空间位置的同步装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”、“单元”、“子单元”等可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图6为根据本申请实施例的一种空间位置同步装置的结构框图,如图6所示,该装置包括:发送模块62和同步模块64;该发送模块62,用于在第一AR终端12设置为服务器模式,且第二AR终端14设置为客户端模式的情况下,将该第一AR终端12检测的第一场景信息发送至该第二AR终端14;该同步模块64,用于将该第二AR终端14的该第一场景信息,和该第二AR终端14检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果。
通过上述实施例,通过同步模块64对多个AR终端的场景信息对比,获取同步世界坐标,从而提供了一种切实可行的应用于不同平台AR终端的同步方案,解决了多AR终端之间无法准确同步空间位置的问题,实现了多AR终端的精确匹配和同步。
在一个可行的实施例中,该同步模块64还用于基于Socket网络的帧同步,根据每帧用户操作同步,获取同步的终端位置信息和操作信息;该同步模块64根据该位置终端信息和该操作信息获取该同步结果。
在一个可行的实施例中,该同步模块64还用于基于该Socket网络的消息同步,根据该对比的结果获取同步场景和同步信息;其中,该同步信息包括构建的关键点几何体和中心坐标;该同步模块64根据该同步场景和该同步信息,获取该同步世界坐标,进而获取该同步结果。
在一个可行的实施例中,提供了一种空间位置的同步装置,图7为根据本申请实施例的另一种空间位置同步装置的结构框图,如图7所示,该装置包括图6所示的所有模块,此外还包括:坐标模块72;该坐标模块72用于在该第一AR终端12场景校验通过的情况下,通过屏幕映射获取第一位置点,进而获取第一位置点和第一物体点相绑定的第一特征点,根据该第一特征点获取第一AR原点坐标;该坐标模块72在该第二AR终端14场景校验通过的情况下,通过屏幕映射获取第二位置点,进而获取第二位置点和第二物体点相绑定的第二特征点,根据该第二特征点获取第二AR原点坐标;其中,该第一场景信息包括该第一AR原点坐标,且该第二场景信息包括该二AR原点坐标。
在一个可行的实施例中,该发送模块62还用于将该第二AR终端14与该第一AR终端12进行网络链接,在网络链接成功的情况下,将该第一场景信息发送至该第二AR终端14。
需要说明的是,上述各个模块可以是功能模块也可以是程序模块,既可以通过软件来实现,也可以通过硬件来实现。对于通过硬件来实现的模块而言,上述各个模块可以位于同一处理器中;或者上述各个模块还可以按照任意组合的形式分别位于不同的处理器中。
在本实施例中,提供了一种空间位置的同步系统,图8为根据本申请实施例的一种空间位置同步系统的结构框图,如图8所示,该系统包括:第一AR终端12、第二AR终端14和处理设备82;该服务器在第一AR终端12设置为服务器模式,且第二AR终端14设置为客户端模式的情况下,将该第一AR终端12检测的第一场景信息发送至该第二AR终端14;该处理设备82将该第二AR终端14的该第一场景信息,和该第二AR终端14检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果。
通过上述实施例,通过处理设备82对多个AR终端的场景信息对比,获取同步世界坐标,从而提供了一种切实可行的应用于不同平台AR终端的同步方案,解决了多AR终端之间无法准确同步空间位置的问题,实现了多AR终端的精确匹配和同步。
在一个可行的实施例中,该处理设备82还用于基于Socket网络的帧同步,根据每帧用户操作同步,获取同步的终端位置信息和操作信息;该处理设备82根据该位置终端信息和该操作信息获取该同步结果。
在一个可行的实施例中,该处理设备82还用于基于该Socket网络的消息同步,根据该对比的结果获取同步场景和同步信息;其中,该同步信息包括构建的关键点几何体和中心坐标;该处理设备82根据该同步场景和该同步信息,获取该同步世界坐标,进而获取该同步结果。
在一个可行的实施例中,该处理设备82还用于接收重新创建的用户的动作信息,并获取该第一AR终端12和该第二AR终端14之间的该动作信息的共享结果;其中,基于每帧同步机制,控制该第一场景信息与该第二场景信息一致。
在一个可行的实施例中,该处理设备82还用于在该第一AR终端12场景校验通过的情况下,通过屏幕映射获取第一位置点,进而获取第一位置点和第一物体点相绑定的第一特征点,根据该第一特征点获取第一AR原点坐标;
该处理设备82在该第二AR终端14场景校验通过的情况下,通过屏幕映射获取第二位置点,进而获取第二位置点和第二物体点相绑定的第二特征点,根据该第二特征点获取第二AR原点坐标;其中,该第一场景信息包括该第一AR原点坐标,且该第二场景信息包括该二AR原点坐标。
在一个可行的实施例中,该处理设备82还用于将该第二AR终端14与该第一AR终端进行网络链接,在网络链接成功的情况下,将该第一场景信息发送至该第二AR终端14。
在一个可行的实施例中,提供了一种计算机设备,该计算机设备可以是服务器,图9为根据本发明实施例的一种计算机设备内部的结构图,如图9所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储同步世界坐标。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种空间位置同步方法。
本领域技术人员可以理解,图9中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
本实施例还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
可选地,在一个可行的实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
S1,在第一AR终端12设置为服务器模式,且第二AR终端14设置为客户端模式的情况下,将该第一AR终端12检测的第一场景信息发送至该第二AR终端14;
S2,将该第二AR终端14的该第一场景信息,和该第二AR终端14检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果。
需要说明的是,本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例,本实施例在此不再赘述。
另外,结合上述实施例中的空间位置的同步方法,本申请实施例可提供一种存储介质来实现。该存储介质上存储有计算机程序;该计算机程序被处理器执行时实现上述实施例中的任意一种空间位置的同步方法。
本领域的技术人员应该明白,以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (9)

1.一种空间位置的同步方法,其特征在于,所述方法包括:
在第一AR终端场景校验通过的情况下,通过屏幕映射获取第一位置点,进而获取所述第一位置点和第一物体点相绑定的第一特征点,根据所述第一特征点获取第一AR原点坐标;
在第二AR终端场景校验通过的情况下,通过屏幕映射获取第二位置点,进而获取所述第二位置点和第二物体点相绑定的第二特征点,根据所述第二特征点获取第二AR原点坐标;
在所述第一AR终端设置为服务器模式,且所述第二AR终端设置为客户端模式的情况下,将所述第一AR终端检测的第一场景信息发送至所述第二AR终端,其中,所述第一场景信息包括所述第一AR原点坐标;
将所述第二AR终端接收到的所述第一场景信息,和所述第二AR终端检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果,其中,所述第二场景信息包括所述第二AR原点坐标,包括:
基于Socket网络的消息同步,根据所述对比的结果获取同步场景和同步信息;其中,所述同步信息包括构建的关键点几何体和中心坐标;
根据所述同步场景和所述同步信息,获取所述同步世界坐标,进而获取所述同步结果。
2.根据权利要求1所述的同步方法,其特征在于,所述根据对比的结果获取同步世界坐标,进而获取同步结果包括:
基于Socket网络的帧同步,根据每帧用户操作同步,获取同步的终端位置信息和操作信息;
根据所述终端位置信息和所述操作信息获取所述同步结果。
3.根据权利要求1所述的同步方法,其特征在于,所述获取同步结果之后,所述方法还包括:
接收重新创建的用户的动作信息,并获取所述第一AR终端和所述第二AR终端之间的所述动作信息的共享结果;其中,基于每帧同步机制,控制所述第一场景信息与所述第二场景信息一致。
4.根据权利要求1所述的同步方法,其特征在于,所述将所述第一AR终端检测的第一场景信息发送至所述第二AR终端包括:
将所述第二AR终端与所述第一AR终端进行网络链接,在网络链接成功的情况下,将所述第一场景信息发送至所述第二AR终端。
5.根据权利要求4所述的同步方法,其特征在于,所述将所述第二AR终端与所述第一AR终端进行网络链接,包括:
当检测到所述第二AR终端时,所述第一AR终端调用委托方法,通过广播邀请所述第二AR终端加入共享会话;
当所述第二AR终端收到所述广播邀请时,调用所述委托方法,开始进入会话,实现所述第二AR终端与所述第一AR终端之间的网络链接。
6.一种空间位置的同步装置,其特征在于,所述装置包括:发送模块和同步模块;
所述发送模块,用于在第一AR终端场景校验通过的情况下,通过屏幕映射获取第一位置点,进而获取所述第一位置点和第一物体点相绑定的第一特征点,根据所述第一特征点获取第一AR原点坐标;
所述发送模块,用于在第二AR终端场景校验通过的情况下,通过屏幕映射获取第二位置点,进而获取所述第二位置点和第二物体点相绑定的第二特征点,根据所述第二特征点获取第二AR原点坐标;
所述发送模块,用于在第一AR终端设置为服务器模式,且第二AR终端设置为客户端模式的情况下,将所述第一AR终端检测的第一场景信息发送至所述第二AR终端,其中,所述第一场景信息包括所述第一AR原点坐标;
所述同步模块,用于将所述第二AR终端接收到的所述第一场景信息,和所述第二AR终端检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果,其中,所述第二场景信息包括所述第二AR原点坐标,包括:
基于Socket网络的消息同步,根据所述对比的结果获取同步场景和同步信息;其中,所述同步信息包括构建的关键点几何体和中心坐标;
根据所述同步场景和所述同步信息,获取所述同步世界坐标,进而获取所述同步结。
7.一种空间位置的同步系统,其特征在于,所述系统包括:第一AR终端、第二AR终端和处理设备;
所述处理设备在所述第一AR终端场景校验通过的情况下,通过屏幕映射获取第一位置点,进而获取第一位置点和第一物体点相绑定的第一特征点,根据所述第一特征点获取第一AR原点坐标;
所述处理设备在所述第二AR终端场景校验通过的情况下,通过屏幕映射获取第二位置点,进而获取第二位置点和第二物体点相绑定的第二特征点,根据所述第二特征点获取第二AR原点坐标;
所述处理设备在第一AR终端设置为服务器模式,且第二AR终端设置为客户端模式的情况下,将所述第一AR终端检测的第一场景信息发送至所述第二AR终端,其中,所述第一场景信息包括所述第一AR原点坐标;
所述处理设备将所述第二AR终端接收到的所述第一场景信息,和所述第二AR终端检测的第二场景信息进行对比,根据对比的结果获取同步世界坐标,进而获取同步结果,其中,所述第二场景信息包括所述第二AR原点坐标,包括:
基于Socket网络的消息同步,根据所述对比的结果获取同步场景和同步信息;其中,所述同步信息包括构建的关键点几何体和中心坐标;
根据所述同步场景和所述同步信息,获取所述同步世界坐标,进而获取所述同步结果。
8.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行权利要求1至5中任一项所述的空间位置的同步方法。
9.一种存储介质,其特征在于,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行权利要求1至5中任一项所述的空间位置的同步方法。
CN202010689743.XA 2020-07-17 2020-07-17 空间位置的同步方法、装置、系统、电子装置和存储介质 Active CN111966216B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010689743.XA CN111966216B (zh) 2020-07-17 2020-07-17 空间位置的同步方法、装置、系统、电子装置和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010689743.XA CN111966216B (zh) 2020-07-17 2020-07-17 空间位置的同步方法、装置、系统、电子装置和存储介质

Publications (2)

Publication Number Publication Date
CN111966216A CN111966216A (zh) 2020-11-20
CN111966216B true CN111966216B (zh) 2023-07-18

Family

ID=73360717

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010689743.XA Active CN111966216B (zh) 2020-07-17 2020-07-17 空间位置的同步方法、装置、系统、电子装置和存储介质

Country Status (1)

Country Link
CN (1) CN111966216B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018121779A1 (zh) * 2016-12-30 2018-07-05 中兴通讯股份有限公司 增强现实的实现方法、增强现实装置及系统
WO2018201935A1 (zh) * 2017-05-02 2018-11-08 广州爱九游信息技术有限公司 多化身位置同步系统、方法、装置及电子设备和存储介质
CN110673732A (zh) * 2019-09-27 2020-01-10 深圳市商汤科技有限公司 场景共享方法及装置、系统、电子设备和存储介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105898342A (zh) * 2015-12-30 2016-08-24 乐视致新电子科技(天津)有限公司 一种视频的多点同屏播放方法及系统
CN109426333B (zh) * 2017-08-23 2022-11-04 腾讯科技(深圳)有限公司 一种基于虚拟空间场景的信息交互方法及装置
CN109104632A (zh) * 2018-09-27 2018-12-28 聚好看科技股份有限公司 一种电视终端ar场景的实现方法及系统
CN110070617B (zh) * 2018-11-02 2023-01-10 北京微播视界科技有限公司 数据同步方法、装置、硬件装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018121779A1 (zh) * 2016-12-30 2018-07-05 中兴通讯股份有限公司 增强现实的实现方法、增强现实装置及系统
WO2018201935A1 (zh) * 2017-05-02 2018-11-08 广州爱九游信息技术有限公司 多化身位置同步系统、方法、装置及电子设备和存储介质
CN110673732A (zh) * 2019-09-27 2020-01-10 深圳市商汤科技有限公司 场景共享方法及装置、系统、电子设备和存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
面向实体沙盘虚实场景漫游的联动交互;徐众;;现代计算机(专业版)(16);全文 *

Also Published As

Publication number Publication date
CN111966216A (zh) 2020-11-20

Similar Documents

Publication Publication Date Title
KR102375307B1 (ko) 가상 현실 뷰포트를 공유하기 위한 방법, 장치, 및 시스템
CN111897507B (zh) 投屏方法、装置、第二终端和存储介质
US20230336684A1 (en) Cooperative photographing method and apparatus, electronic device, and computer-readable storage medium
US20120223960A1 (en) Image control method and image control system
CN104854574A (zh) 在实时通信和共享体验会话期间更新服务
US20230316529A1 (en) Image processing method and apparatus, device and storage medium
CN108470377A (zh) Ar看房装置
CN108430032B (zh) 一种实现vr/ar设备位置共享的方法及设备
US11877092B2 (en) Communication management device, image communication system, communication management method, and recording medium
CN109104632A (zh) 一种电视终端ar场景的实现方法及系统
CN115103150A (zh) 音视频在线会议的接入方法、装置、设备及介质
CN110415293B (zh) 交互处理方法、装置、系统和计算机设备
CN111966216B (zh) 空间位置的同步方法、装置、系统、电子装置和存储介质
CN106060528A (zh) 基于手机端和电子白板的增强现实方法及系统
US20230341993A1 (en) Moving a digital representation of a video conference participant to a new location in a virtual environment
WO2021187646A1 (ko) 아바타를 이용한 컨퍼런스 처리 방법 및 시스템
US20200001178A1 (en) Server device, and storage medium used in same
CN111459432A (zh) 虚拟内容的显示方法、装置、电子设备及存储介质
CN111314442B (zh) 基于分时控制的终端控制方法、装置、终端和计算机设备
CN113902747A (zh) 图像处理方法、计算机可读存储介质以及计算设备
CN113242398A (zh) 一种三维标注的音视频通话方法和系统
CN110673919A (zh) 截屏方法和装置
CN110213061B (zh) 同步通信方法、同步通信装置、同步通信设备及介质
Hu et al. Mobile camera based cross-screen interaction by object matching and tracking
US20240137463A1 (en) Communication management device, image communication system, communication management method, and recording medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant