CN112887419A - 基于物联网交互和智能通信的信息处理方法、系统及平台 - Google Patents
基于物联网交互和智能通信的信息处理方法、系统及平台 Download PDFInfo
- Publication number
- CN112887419A CN112887419A CN202110176190.2A CN202110176190A CN112887419A CN 112887419 A CN112887419 A CN 112887419A CN 202110176190 A CN202110176190 A CN 202110176190A CN 112887419 A CN112887419 A CN 112887419A
- Authority
- CN
- China
- Prior art keywords
- interaction
- internet
- things
- video playing
- interactive
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
Landscapes
- Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- Architecture (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明实施例提供一种基于物联网交互和智能通信的信息处理方法、系统及平台,通过获取物联网互动渲染流中每个待提取的互动渲染流片段,并获取待提取的互动渲染流片段中至少一个互动区域的位置转移状态向量,然后确定至少一个互动区域分别对应的至少一个第一互动物联网对象和至少一个第二互动物联网对象,并基于互动区域、至少一个第一互动物联网对象以及至少一个第二互动物联网对象的位置转移状态向量,确定互动渲染流片段中至少一个互动区域内的通信切换互动区域,从而能够针对存在通信切换互动的行为来有效确定互动区域内的通信切换互动区域,并将通信切换互动区域在物联网互动渲染流中以提醒的形式进行标注,从而提高用户的体验全面性。
Description
技术领域
本发明涉及物联网技术领域,具体而言,涉及一种基于物联网交互和智能通信的信息处理方法、系统及平台。
背景技术
随着物联网技术的快速发展,物联网在担任着越来越重要的角色,虚拟现实技术是如今最受关注的前沿科技之一,正在飞速发展着,现在包括虚拟现实硬件设备以及虚拟现实内容应用的各类虚拟现实产品已经逐渐进入了消费市场。例如,在进行物联网交互过程中的虚拟现实体验过程中,通常会预先绘制各个视频播放贴图(例如人机交互终端、安防终端、移动应用终端)的贴图绘制流,进而便于后续的动态虚拟体验。
在物联网对象的虚拟现实体验过程中,物联网对象之间通常会通过通信交互的实景渲染,以便于用户体验完整的物联网功能。然而,目前还没有设计方案能够针对存在通信切换互动的行为来有效确定互动区域内的通信切换互动区域,从而影响用户的体验全面性。
发明内容
为了至少克服现有技术中的上述不足,本发明的目的在于提供一种基于物联网交互和智能通信的信息处理方法、系统及平台,能够针对存在通信切换互动的行为来有效确定互动区域内的通信切换互动区域,并将所述通信切换互动区域在所述物联网互动渲染流中以提醒的形式进行标注,从而提高用户的体验全面性。
第一方面,本发明提供一种基于物联网交互和智能通信的信息处理方法,应用于云计算平台,所述云计算平台与多个人机交互设备端通信连接,所述方法包括:
从每个人机交互设备端中提取每个存在绘制叠加关系的视频播放贴图之间的完整虚拟现实绘制信息,并将每个所述完整虚拟现实绘制信息在同一对应的候选物联网互动场景进行渲染,获得物联网互动渲染流;
获取所述物联网互动渲染流中每个待提取的互动渲染流片段,并获取待提取的互动渲染流片段中至少一个互动区域的位置转移状态向量,所述互动渲染流片段为待提取的渲染过程片段,每个互动渲染流片段分别对应一个物联网完整交互过程;
确定所述至少一个互动区域分别对应的至少一个第一互动物联网对象和至少一个第二互动物联网对象,其中,任一个互动区域的第一互动物联网对象为以所述互动区域为边界、以目标长度为互动范围的互动几何空间内所包括的所有互动区域的物联网对象,所述第二互动物联网对象为与所述第一互动物联网对象存在互动的物联网对象;
基于所述互动区域、所述至少一个第一互动物联网对象以及所述至少一个第二互动物联网对象的位置转移状态向量,确定所述互动渲染流片段中所述至少一个互动区域内的通信切换互动区域,并将所述通信切换互动区域在所述物联网互动渲染流中以提醒的形式进行标注。
在第一方面的一种可能的实现方式中,所述基于所述互动区域、所述至少一个第一互动物联网对象以及所述至少一个第二互动物联网对象的位置转移状态向量,确定所述互动渲染流片段中所述至少一个互动区域内的通信切换互动区域的步骤,包括:
基于所述互动区域、所述互动区域对应的第一互动物联网对象以及所述互动区域对应的第二互动物联网对象的位置转移状态向量,提取所述互动区域的位置转移状态向量中具有通信互动切换特征的状态向量,所述状态向量用于表征所述至少一个互动区域在所述互动渲染流片段中所处的状态变化信息;
对提取到的所述状态向量进行预测处理,以得到所述至少一个互动区域的至少一个置信度,其中,一个置信度用于表征一个互动区域属于一个通信切换互动区域的可能性;
基于所述至少一个置信度,确定所述互动渲染流片段中所述至少一个互动区域内的通信切换互动区域。
在第一方面的一种可能的实现方式中,所述基于所述互动区域、所述互动区域对应的第一互动物联网对象以及所述互动区域对应的第二互动物联网对象的位置转移状态向量,提取所述互动区域的位置转移状态向量中具有通信互动切换特征的状态向量的步骤,包括:
基于所述互动区域、所述互动区域对应的第一互动物联网对象以及所述互动区域对应的第二互动物联网对象的位置转移状态向量,分别构建所述互动区域的全局状态向量以及所述互动区域与至少一个联动物联网对象之间的至少一个局部状态向量,所述全局状态向量用于表征所述互动区域在互动渲染流片段内所处的空间状态变化信息,一个局部状态向量用于表征所述互动区域与一个联动物联网对象之间的相对状态变化信息;
基于所述全局状态向量和所述至少一个局部状态向量,获取所述互动区域的状态向量。
在第一方面的一种可能的实现方式中,所述基于所述全局状态向量和所述至少一个局部状态向量,获取所述互动区域的状态向量的步骤,包括:
将所述全局状态向量分别与所述至少一个局部状态向量进行融合,得到所述互动区域的状态向量。
在第一方面的一种可能的实现方式中,所述对提取到的所述状态向量进行预测处理,以得到所述至少一个互动区域的至少一个置信度的步骤,包括:
从提取到的所述状态向量中提取待预测的多个候选状态向量单位信息,从待预测的多个候选状态向量单位信息中获取多个存在关联的第一通信行为数据和第二通信行为数据;
根据所述第一通信行为数据和所述第二通信行为数据确定通信切换感知连通图,并获取所述通信切换感知连通图的多个切换疑似节点,所述通信切换感知连通图的起点指代所述第一通信行为数据的第一通信行为,且终点指代所述第二通信行为数据的第二通信行为,每个切换疑似节点与每个通信切换互动区域存在一一对应关系;
获取所述通信切换感知连通图对应的预测人工智能模型,所述预测人工智能模型包括所述通信切换感知连通图的多个切换疑似节点对应的预测节点,且所述预测人工智能模型的输出值由所述通信切换感知连通图确定,所述预测人工智能模型的输出值用于表示所述多个切换疑似节点的通信切换参数满足通信切换预测条件的置信度;
根据预测人工智能模型的每个预测节点对所述通信切换感知连通图进行预测,得到每个预测节点对应的预测置信度,以得到所述至少一个互动区域的至少一个置信度。
在第一方面的一种可能的实现方式中,所述基于所述至少一个置信度,确定所述互动渲染流片段中所述至少一个互动区域内的通信切换互动区域的步骤,包括:
将所有置信度大于设定置信度的通信切换互动区域确定为所述至少一个互动区域内的通信切换互动区域。
在第一方面的一种可能的实现方式中,所述从每个人机交互设备端中提取每个存在绘制叠加关系的视频播放贴图之间的完整虚拟现实绘制信息的步骤,包括:
从每个人机交互设备端中获取候选物联网互动场景在每个绘制分层组件的绘制像素片段下的虚拟现实三维贴图,并按照预定的互动物联网形式对各个绘制像素片段下的虚拟现实三维贴图进行互动方式划分,分别生成每个互动物联网形式的贴图划分序列;
针对每个互动物联网形式,获取该互动物联网形式的贴图划分序列中每个视频播放贴图对应的贴图绘制流,并将每个视频播放贴图对应的贴图绘制流进行虚拟现实绘制;
在虚拟现实绘制过程中判断是否存在用于表示视频播放贴图存在绘制叠加的绘制叠加信息,并在检测到所述绘制叠加信息时,提取虚拟现实绘制的所述绘制叠加信息对应的第一视频播放贴图的第一贴图绘制流以及与所述第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图的第二贴图绘制流;
根据预设人工智能模型确定所述第一视频播放贴图和所述至少一个第二视频播放贴图之间的完整虚拟现实绘制信息。
在第一方面的一种可能的实现方式中,所述获取该互动物联网形式的贴图划分序列中每个视频播放贴图对应的贴图绘制流的步骤,包括:
判断是否与每个视频播放贴图已建立物联网互动关系;其中,所述物联网互动关系用于对视频播放贴图所对应的贴图绘制流的绘制业务进行设定,每个视频播放贴图对应一个物联网互动关系,不同物联网互动关系的互动方式不同;
若未与每个视频播放贴图关联对应的物联网互动关系,获取每个视频播放贴图的贴图绘制源信息;其中,所述贴图绘制源信息包括所述视频播放贴图的对应的贴图源标签,所述贴图源标签是所述视频播放贴图所生成贴图绘制流所对应的贴图源标签;
根据每个贴图绘制源信息对应的顶点映射字符对每个贴图绘制源信息进行解析识别,得到每个贴图绘制源信息对应的至少多个顶点映射分区,并从每个贴图绘制源信息对应的顶点映射分区中确定出存在位移变换信息的目标顶点映射分区;其中,所述位移变换信息是表征顶点映射分区对贴图源标签对应的顶点映射分区的位移变换节点;
根据每个视频播放贴图对应的目标顶点映射分区中的深度贴图与每个视频播放贴图关联对应的物联网互动关系,其中,所述物联网互动关系根据所述目标顶点映射分区中的深度贴图中的每个深度虚拟摄像机所对应的物联网互动关系确定;
根据所述每个视频播放贴图关联对应的物联网互动关系,从预先配置的贴图绘制流库中获取每个视频播放贴图对应的贴图绘制流,其中,所述贴图绘制流库包括每个视频播放贴图在不同物联网互动关系下的贴图绘制流。
第二方面,本发明实施例还提供一种基于物联网交互和智能通信的信息处理装置,应用于云计算平台,所述云计算平台与多个人机交互设备端通信连接,所述装置包括:
提取模块,用于从每个人机交互设备端中提取每个存在绘制叠加关系的视频播放贴图之间的完整虚拟现实绘制信息,并将每个所述完整虚拟现实绘制信息在同一对应的候选物联网互动场景进行渲染,获得物联网互动渲染流;
获取模块,用于获取所述物联网互动渲染流中每个待提取的互动渲染流片段,并获取待提取的互动渲染流片段中至少一个互动区域的位置转移状态向量,所述互动渲染流片段为待提取的渲染过程片段,每个互动渲染流片段分别对应一个物联网完整交互过程;
第一确定模块,用于确定所述至少一个互动区域分别对应的至少一个第一互动物联网对象和至少一个第二互动物联网对象,其中,任一个互动区域的第一互动物联网对象为以所述互动区域为边界、以目标长度为互动范围的互动几何空间内所包括的所有互动区域的物联网对象,所述第二互动物联网对象为与所述第一互动物联网对象存在互动的物联网对象;
第二确定模块,用于基于所述互动区域、所述至少一个第一互动物联网对象以及所述至少一个第二互动物联网对象的位置转移状态向量,确定所述互动渲染流片段中所述至少一个互动区域内的通信切换互动区域,并将所述通信切换互动区域在所述物联网互动渲染流中以提醒的形式进行标注。
第三方面,本发明实施例还提供一种基于物联网交互和智能通信的信息处理系统,所述于物联网交互和智能通信的信息处理系统包括云计算平台以及与所述云计算平台通信连接的多个人机交互设备端;
所述云计算平台用于从每个人机交互设备端中提取每个存在绘制叠加关系的视频播放贴图之间的完整虚拟现实绘制信息,并将每个所述完整虚拟现实绘制信息在同一对应的候选物联网互动场景进行渲染,获得物联网互动渲染流;
所述云计算平台用于获取所述物联网互动渲染流中每个待提取的互动渲染流片段,并获取待提取的互动渲染流片段中至少一个互动区域的位置转移状态向量,所述互动渲染流片段为待提取的渲染过程片段,每个互动渲染流片段分别对应一个物联网完整交互过程;
所述云计算平台用于确定所述至少一个互动区域分别对应的至少一个第一互动物联网对象和至少一个第二互动物联网对象,其中,任一个互动区域的第一互动物联网对象为以所述互动区域为边界、以目标长度为互动范围的互动几何空间内所包括的所有互动区域的物联网对象,所述第二互动物联网对象为与所述第一互动物联网对象存在互动的物联网对象;
所述云计算平台用于基于所述互动区域、所述至少一个第一互动物联网对象以及所述至少一个第二互动物联网对象的位置转移状态向量,确定所述互动渲染流片段中所述至少一个互动区域内的通信切换互动区域,并将所述通信切换互动区域在所述物联网互动渲染流中以提醒的形式进行标注。
第四方面,本发明实施例还提供一种云计算平台,所述云计算平台包括处理器、机器可读存储介质和网络接口,所述机器可读存储介质、所述网络接口以及所述处理器之间通过总线系统相连,所述网络接口用于与至少一个人机交互设备端通信连接,所述机器可读存储介质用于存储程序、指令或代码,所述处理器用于执行所述机器可读存储介质中的程序、指令或代码,以执行第一方面或者第一方面中任意一个可能的设计中的基于物联网交互和智能通信的信息处理方法。
第五方面,本发明实施例提供一种计算机可读存储介质,计算机可读存储介质中存储有指令,当其被执行时,使得计算机执行上述第一方面或者第一方面中任意一个可能的设计中的基于物联网交互和智能通信的信息处理方法。
基于上述任意一个方面,本发明通过获取物联网互动渲染流中每个待提取的互动渲染流片段,并获取待提取的互动渲染流片段中至少一个互动区域的位置转移状态向量,然后确定至少一个互动区域分别对应的至少一个第一互动物联网对象和至少一个第二互动物联网对象,并基于互动区域、至少一个第一互动物联网对象以及至少一个第二互动物联网对象的位置转移状态向量,确定互动渲染流片段中至少一个互动区域内的通信切换互动区域,从而能够针对存在通信切换互动的行为来有效确定互动区域内的通信切换互动区域,并将通信切换互动区域在物联网互动渲染流中以提醒的形式进行标注,从而提高用户的体验全面性。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它相关的附图。
图1为本发明实施例提供的基于物联网交互和智能通信的信息处理系统的应用场景示意图;
图2为本发明实施例提供的基于物联网交互和智能通信的信息处理方法的流程示意图;
图3为本发明实施例提供的基于物联网交互和智能通信的信息处理装置的功能模块示意图;
图4为本发明实施例提供的用于实现上述的基于物联网交互和智能通信的信息处理方法的云计算平台的结构组件示意框图。
具体实施方式
下面结合说明书附图对本发明进行具体说明,方法实施例中的具体操作方法也可以应用于装置实施例或系统实施例中。
图1是本发明一种实施例提供的基于物联网交互和智能通信的信息处理系统10的交互示意图。基于物联网交互和智能通信的信息处理系统10可以包括云计算平台100以及与云计算平台100通信连接的人机交互设备端200。图1所示的基于物联网交互和智能通信的信息处理系统10仅为一种可行的示例,在其它可行的实施例中,该基于物联网交互和智能通信的信息处理系统10也可以仅包括图1所示组成部分的其中一部分或者还可以包括其它的组成部分。
本实施例中,人机交互设备端200可以包括移动设备、平板计算机、膝上型计算机等或其任意组合。在一些实施例中,移动设备可以包括物联网设备、可穿戴设备、智能移动设备、虚拟现实设备、或增强现实设备等,或其任意组合。在一些实施例中,物联网设备可以包括智能电器设备的控制设备、智能监控设备、智能电视、智能摄像机等,或其任意组合。在一些实施例中,可穿戴设备可包括智能手环、智能鞋带、智能玻璃、智能头盔、智能手表、智能服装、智能背包、智能配件等,或其任何组合。在一些实施例中,智能移动设备可以包括智能手机、个人数字助理、游戏设备等,或其任意组合。在一些实施例中,虚拟现实设备和增强现实设备可以包括虚拟现实头盔、虚拟现实玻璃、虚拟现实贴片、增强现实头盔、增强现实玻璃、或增强现实贴片等,或其任意组合。例如,虚拟现实设备和增强现实设备可以包括各种虚拟现实产品等。
本实施例中,基于物联网交互和智能通信的信息处理系统10中的云计算平台100和人机交互设备端200可以通过配合执行以下方法实施例所描述的基于物联网交互和智能通信的信息处理方法,具体云计算平台100和人机交互设备端200的执行步骤部分可以参照以下方法实施例的详细描述。
本实施例中,本实施例中,上述的基于物联网交互和智能通信的信息处理系统10可以在各种应用场景下实现,例如区块链应用场景、智能家居应用场景、智能控制应用场景等。
为了解决前述背景技术中的技术问题,图2为本发明实施例提供的基于物联网交互和智能通信的信息处理方法的流程示意图,本实施例提供的基于物联网交互和智能通信的信息处理方法可以由图1中所示的云计算平台100执行,下面对该基于物联网交互和智能通信的信息处理方法进行详细介绍。
步骤S110,从每个人机交互设备端200中提取每个存在绘制叠加关系的视频播放贴图之间的完整虚拟现实绘制信息,并将每个完整虚拟现实绘制信息在同一对应的候选物联网互动场景进行渲染,获得物联网互动渲染流。
步骤S120,获取物联网互动渲染流中每个待提取的互动渲染流片段,并获取待提取的互动渲染流片段中至少一个互动区域的位置转移状态向量。
步骤S130,确定至少一个互动区域分别对应的至少一个第一互动物联网对象和至少一个第二互动物联网对象。
步骤S140,基于互动区域、至少一个第一互动物联网对象以及至少一个第二互动物联网对象的位置转移状态向量,确定互动渲染流片段中至少一个互动区域内的通信切换互动区域,并将通信切换互动区域在物联网互动渲染流中以提醒的形式进行标注。
本实施例中,针对步骤S120,互动渲染流片段可以为待提取的渲染过程片段,每个互动渲染流片段分别对应一个物联网完整交互过程。例如,一个物联网完整交互过程可以是指一个物联网交互业务从开始到结束的过程。其中,位置转移状态向量可以是指在渲染过程中相对应的位置区域的转移状态变化,例如从一个位置区域转移到另一个位置区域过程中的渲染状态的转移变化,此部分的获取过程为现有技术,在此不作赘述。
本实施例中,针对步骤S130,任一个互动区域的第一互动物联网对象为以互动区域为边界、以目标长度为互动范围的互动几何空间内所包括的所有互动区域的物联网对象,第二互动物联网对象为与第一互动物联网对象存在互动的物联网对象。其中,每个物联网对象可以理解为一个物联网设备或者多个物联网设备构成的系统。
本实施例中,针对步骤S140,在将通信切换互动区域在物联网互动渲染流中以提醒的形式进行标注的过程中,可以基于用户预先设定的渲染提醒方式进行提醒,这样用户在后续虚拟现实体验过程中可以直观观察到通信切换互动的过程中,以便于对每个物联网对象进行了解。
基于上述设计,本实施例通过获取物联网互动渲染流中每个待提取的互动渲染流片段,并获取待提取的互动渲染流片段中至少一个互动区域的位置转移状态向量,然后确定至少一个互动区域分别对应的至少一个第一互动物联网对象和至少一个第二互动物联网对象,并基于互动区域、至少一个第一互动物联网对象以及至少一个第二互动物联网对象的位置转移状态向量,确定互动渲染流片段中至少一个互动区域内的通信切换互动区域,从而能够针对存在通信切换互动的行为来有效确定互动区域内的通信切换互动区域,并将通信切换互动区域在物联网互动渲染流中以提醒的形式进行标注,从而提高用户的体验全面性。
在一种可能的实现方式中,对于步骤S110而言,发明人研究发现,在传统方案中,通常并未考虑到不同互动物联网形式的差异,从而容易造成绘制过程中出现绘制冲突的情况,并且在绘制过程中,不同的视频播放贴图之间可能会存在一些叠加绘制效果,这些叠加绘制效果可以进一步丰富物联网的体验形式,例如针对相同功能形式的多个物联网设备而言,可以帮助用户进一步体验物联网的实时交互过程。然而,目前缺少针对单独的每个关联的视频播放贴图的绘制结果独立处理方案,导致在实际虚拟现实体验过程中无法针对性地以关联的视频播放贴图为独立体验目标进行后续的动态虚拟体验。
基于此,步骤S110可以通过以下示例性的子步骤实现,详细描述如下。
子步骤S111,从每个人机交互设备端200中获取候选物联网互动场景在每个绘制分层组件的绘制像素片段下的虚拟现实三维贴图,并按照预定的互动物联网形式对各个绘制像素片段下的虚拟现实三维贴图进行互动方式划分,分别生成每个互动物联网形式的贴图划分序列。
其中,绘制分层组件可以是指对于一个渲染场景而言,通常会包括多个绘制层,例如实景层、菜单选项层等,每个绘制层可以分别由相对应的绘制分层组件继续控制执行。
其中,虚拟现实三维贴图可以用于表示候选物联网互动场景在每个绘制分层组件的绘制像素片段下的具体展示的实体绘制模型。例如,可以利用三维动画软件(比如3dsMax、Maya或Houdini)在计算机中建立一个虚拟的世界。然后,在这个虚拟的三维世界中添加场景和三维卡通角色等三维模型。最后,设定模型的动画曲线、虚拟摄影机的运动轨迹和其它动画参数,渲染得到动态贴图,然后收集这些动态贴图从而便于后续虚拟现实绘制过程中的调取。
本实施例中,预定的互动物联网形式可以根据实际设计需求进行灵活选择,例如办公协同物联网形式、商场体验互联网形式等,在此不作详细限定。
步骤S112,针对每个互动物联网形式,获取该互动物联网形式的贴图划分序列中每个视频播放贴图对应的贴图绘制流,并将每个视频播放贴图对应的贴图绘制流进行虚拟现实绘制。
步骤S113,在虚拟现实绘制过程中判断是否存在用于表示视频播放贴图存在绘制叠加的绘制叠加信息,并在检测到绘制叠加信息时,提取虚拟现实绘制的绘制叠加信息对应的第一视频播放贴图的第一贴图绘制流以及与第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图的第二贴图绘制流。
步骤S114,根据预设人工智能模型确定第一视频播放贴图和至少一个第二视频播放贴图之间的完整虚拟现实绘制信息。
基于上述步骤,本实施例通过基于预定的互动物联网形式对各个绘制像素片段下的虚拟现实三维贴图进行互动方式划分,从而考虑到不同互动物联网形式的差异,改善绘制过程中出现绘制冲突的情况,此外通过结合候选物联网互动场景的绘制数据类型信息和模拟绘制流信息,以对比二者绘制单位空间的绘制状态序列后在绘制像素片段的每个相应的绘制单位空间下分别对候选物联网互动场景中的各个模型资源进行绘制,可以便于基于前面模拟时的模拟绘制情况针对一些重要的绘制单位空间进行快速绘制,提高绘制效率,减少用户的等待时间。
在一种可能的实现方式中,针对步骤S112,考虑一部分视频播放贴图可能是调整后增加的,因此对于步骤S112而言,还可以通过以下示例性的子步骤来实现,详细描述如下。
子步骤S1121,判断是否与每个视频播放贴图已建立物联网互动关系。
本实施例中,物联网互动关系可以用于对视频播放贴图所对应的贴图绘制流的绘制业务进行设定,每个视频播放贴图对应一个物联网互动关系,不同物联网互动关系的互动方式不同。
子步骤S1122,若未与每个视频播放贴图关联对应的物联网互动关系,获取每个视频播放贴图的贴图绘制源信息。
本实施例中,贴图绘制源信息包括视频播放贴图的对应的贴图源标签,贴图源标签是视频播放贴图所生成贴图绘制流所对应的贴图源标签。
子步骤S1123,根据每个贴图绘制源信息对应的顶点映射字符对每个贴图绘制源信息进行解析识别,得到每个贴图绘制源信息对应的至少多个顶点映射分区,并从每个贴图绘制源信息对应的顶点映射分区中确定出存在位移变换信息的目标顶点映射分区。
本实施例中,位移变换信息是表征顶点映射分区对贴图源标签对应的顶点映射分区的位移变换节点。
子步骤S1124,根据每个视频播放贴图对应的目标顶点映射分区中的深度贴图与每个视频播放贴图关联对应的物联网互动关系。
本实施例中,物联网互动关系根据目标顶点映射分区中的深度贴图中的每个深度虚拟摄像机所对应的物联网互动关系确定。
子步骤S1125,根据每个视频播放贴图关联对应的物联网互动关系,从预先配置的贴图绘制流库中获取每个视频播放贴图对应的贴图绘制流。
本实施例中,贴图绘制流库包括每个视频播放贴图在不同物联网互动关系下的贴图绘制流。
在一种可能的实现方式中,针对步骤S113,本实施例在提取虚拟现实绘制的绘制叠加信息对应的第一视频播放贴图的第一贴图绘制流以及与第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图的第二贴图绘制流的过程中,可以从虚拟现实绘制过程中产生的虚拟现实绘制记录信息中提取虚拟现实绘制的绘制叠加信息对应的第一视频播放贴图的第一贴图绘制流以及与第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图的第二贴图绘制流。其中,与第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图可以是指与第一视频播放贴图存在相关联的联动效应的第二视频播放贴图。
例如,如果某个视频播放贴图需要在第一视频播放贴图绘制的过程中叠加绘制,那么该视频播放贴图可以理解为与第一视频播放贴图存在绘制叠加关系的第二视频播放贴图。
在一种可能的实现方式中,针对步骤S114,可以通过以下示例性的子步骤实现,详细描述如下。
子步骤S1141,将第一贴图绘制流和第二贴图绘制流添加到预设的沉浸式叠加绘制队列,并基于沉浸式叠加绘制队列建立第一贴图绘制流的多个第一沉浸式叠加绘制参数以及第二贴图绘制流的多个第二沉浸式叠加绘制参数。
子步骤S1142,根据每个第一沉浸式叠加绘制参数确定第一视频播放贴图的第一透镜扭曲信息,并根据每个第二沉浸式叠加绘制参数确定第二视频播放贴图的第二透镜扭曲信息,而后将第一透镜扭曲信息和第二透镜扭曲信息映射至预设投射矩阵,得到第一透镜扭曲信息对应的第一视场角度重绘制流以及第二透镜扭曲信息对应的第二视场角度重绘制流,并确定预设投射矩阵中的多个虚拟成像画面,对多个虚拟成像画面进行汇总得到至少多个不同类别的虚拟成像序列,针对每个虚拟成像序列,在预设的虚拟现实绘制进程中绘制虚拟成像序列中的每个虚拟成像画面对应的第一视场角度重绘制流和第二视场角度重绘制流。
子步骤S1143,根据虚拟成像序列中的每个虚拟成像画面对应的第一视场角度重绘制流和第二视场角度重绘制流的绘制结果按照渲染顺序进行拼接生成的模拟绘制流,根据预设人工智能模型对拼接生成的模拟绘制流进行还原,确定第一视频播放贴图和至少一个第二视频播放贴图之间的完整虚拟现实绘制信息。
如此,可以在实际虚拟现实体验过程中针对性地以关联的视频播放贴图为独立体验目标进行后续的动态虚拟体验。
示例性地,在子步骤S1141中,可以通过以下详细的实施方式实现,例如可以描述如下。
(1)确定沉浸式叠加绘制队列的叠加绘制配置信息。
本实施例中,叠加绘制配置信息用于表征沉浸式叠加绘制队列对先后添加到的贴图绘制流进行处理时所分配的沉浸式叠加绘制单元,沉浸式叠加绘制单元用于表征沉浸式叠加绘制队列对添加到的贴图绘制流进行绘制时的绘制特征节点信息。
(2)基于叠加绘制配置信息,确定将第一贴图绘制流添加到沉浸式叠加绘制队列所对应的第一绘制特征节点信息以及将第二贴图绘制流添加到沉浸式叠加绘制队列所对应的第二绘制特征节点信息。
(3)根据第一绘制特征节点信息和第二绘制特征节点信息确定在将第一贴图绘制流和第二贴图绘制流添加到沉浸式叠加绘制队列时是否存在绘制叠加。
本实施例中,绘制叠加可以用于表征沉浸式叠加绘制队列的绘制存在叠加同步行为。
(4)若确定在将第一贴图绘制流和第二贴图绘制流添加到沉浸式叠加绘制队列时不存在绘制叠加,则对第二绘制特征节点信息进行调整得到第三绘制特征节点信息,并基于第一绘制特征节点信息和第三绘制特征节点信息将第一贴图绘制流和第二贴图绘制流添加到沉浸式叠加绘制队列。
本实施例中,第三绘制特征节点信息与第二绘制特征节点信息之间的特征差距与第一绘制特征节点信息和第二绘制特征节点信息之间的特征差距匹配。
(5)若确定在将第一贴图绘制流和第二贴图绘制流添加到沉浸式叠加绘制队列时存在绘制叠加,则持续采用第一绘制特征节点信息和第二绘制特征节点信息将第一贴图绘制流和第二贴图绘制流添加到沉浸式叠加绘制队列。
在一种可能的实现方式中,仍旧在子步骤S1141中,在基于沉浸式叠加绘制队列建立第一贴图绘制流的多个第一沉浸式叠加绘制参数以及第二贴图绘制流的多个第二沉浸式叠加绘制参数的过程中,可以通过以下详细的实施方式实现,例如可以描述如下。
(6)基于沉浸式叠加绘制队列确定第一贴图绘制流的第一绘制节点序列以及第二贴图绘制流的第二绘制节点序列。
其中,值得说明的是,绘制节点序列可以用于表征贴图绘制流在不同绘制节点下的绘制互动关系,例如可以表示过渡绘制互动关系、覆盖绘制互动关系、增加绘制互动关系等等,在此不作具体想定。
(7)分别根据第一绘制节点序列以及第二绘制节点序列在沉浸式叠加绘制队列中建立第一贴图绘制流的多个第一沉浸式叠加绘制参数以及第二贴图绘制流的多个第二沉浸式叠加绘制参数。
在一种可能的实现方式中,针对步骤S1142,为了保证同步性和连贯性,便于后续观测,可以通过以下详细的实施方式实现,例如可以描述如下。
(1)根据每个第一沉浸式叠加绘制参数中的多个绘制节点以及每相邻两个绘制节点之间的绘制模型碰撞参数确定每个第一沉浸式叠加绘制参数对应的绘制节点时序轴
(2)基于绘制节点时序轴确定第一视频播放贴图的第一透镜扭曲信息。
其中,第一沉浸式叠加绘制参数中的每个绘制节点对应设置有绘制模型碰撞循环参数,绘制模型碰撞循环参数与任意一个绘制节点的绘制模型碰撞循环参数之间的匹配参数作为对应的绘制模型碰撞参数,绘制模型碰撞循环参数根据绘制节点在第一沉浸式叠加绘制参数中的绘制轨道确定。
(3)将每个第二沉浸式叠加绘制参数的绘制节点和绘制节点对应的绘制模型碰撞循环参数列出,得到每个第二沉浸式叠加绘制参数对应的第一投射绘制对象和第二投射绘制对象。
其中,示例性地,第一投射绘制对象可以为第二沉浸式叠加绘制参数的绘制节点对应的投射绘制对象,第二投射绘制对象可以为第二沉浸式叠加绘制参数的绘制模型碰撞循环参数对应的投射绘制对象。
(4)确定第一投射绘制对象相对于第二投射绘制对象的第一三维空间关系以及第二投射绘制对象相对于第二投射绘制对象的第二三维空间关系。
(5)获取第一三维空间关系和第二三维空间关系中具有相同的空间点连续性的至少三个目标三维位置,并根据目标三维位置确定出第二沉浸式叠加绘制参数的第二透镜扭曲信息。
其中,示例性地,空间点连续性用于表征每两个三维位置之间的绘制模型碰撞循环关系。
在一种可能的实现方式中,仍旧针对步骤S1142,在对多个虚拟成像画面进行汇总得到至少多个不同类别的虚拟成像序列的过程中,可以通过以下详细的实施方式实现,例如可以描述如下。
(6)确定预设投射矩阵中的每个虚拟成像画面对应的视场角度重绘制流的数量。
(7)确定每个虚拟成像画面对应的视场角度重绘制流的类别绘制区间。
其中,类别绘制区间可以为每个虚拟成像画面对应的视场角度重绘制流中第一视场角度重绘制流与第二视场角度重绘制流的重合比例。
(8)确定每个虚拟成像画面对应的第一视场角度重绘制流和第二视场角度重绘制流的矢量立体绘制信息。
其中,矢量立体绘制信息可以通过对第一视场角度重绘制流和第二视场角度重绘制流对应设定数量个视场角度重绘制画面进行矢量角度特征值(例如灰度特征值、各个RGB颜色值的均值特征值等)计算得到。
(9)根据每个虚拟成像画面对应的视场角度重绘制流的数量、类别绘制区间和矢量立体绘制信息确定每个虚拟成像画面的帧特征序列(即以视场角度重绘制流的数量、类别绘制区间和矢量立体绘制信息为顺序形成的序列)。
(10)基于每个虚拟成像画面的帧特征序列对每个虚拟成像画面进行汇总,得到至少多个不同类别的虚拟成像序列。
例如,可以把帧特征序列中的各个特征参数存在至少一个相同特征参数的虚拟成像画面汇总到该相同特征参数所对应的类别的虚拟成像序列,从而到至少多个不同类别的虚拟成像序列。
在一种可能的实现方式中,仍旧针对步骤S1142,在预设的虚拟现实绘制进程中绘制虚拟成像序列中的每个虚拟成像画面对应的第一视场角度重绘制流和第二视场角度重绘制流的过程中,可以通过以下详细的实施方式实现,例如可以描述如下。
(11)确定每个虚拟成像序列中每个虚拟成像画面对应的帧特征序列的叠加绘制配置信息。
(12)根据叠加绘制配置信息确定每个汇总中的每个虚拟成像画面对应的第一视场角度重绘制流和第二视场角度重绘制流的沉浸式叠加绘制误差。
其中,沉浸式叠加绘制误差可以用于表征每个虚拟成像画面对应的第一视场角度重绘制流和第二视场角度重绘制流的绘制误差情况。
(13)判断每个沉浸式叠加绘制误差与虚拟现实绘制进程对应的基准绘制误差的差值是否在预设差值区间内。
其中,预设差值区间可以用于表征虚拟现实绘制进程处于正常运行时每个沉浸式叠加绘制误差所处的区间。
(13)在每个沉浸式叠加绘制误差与虚拟现实绘制进程对应的基准同步系数的差值均落入预设差值区间时,可以基于虚拟现实绘制进程运行虚拟成像序列中的每个虚拟成像画面对应的第一视场角度重绘制流和第二视场角度重绘制流。
(14)否则,在每个沉浸式叠加绘制误差与虚拟现实绘制进程对应的基准同步系数的差值均未落入预设差值区间时,可以根据虚拟现实绘制进程的线程脚本对未落入预设差值区间内的差值对应的沉浸式叠加绘制误差对应的叠加绘制配置信息进行修正,并返回根据叠加绘制配置信息确定每个汇总中的每个虚拟成像画面对应的第一视场角度重绘制流和第二视场角度重绘制流的沉浸式叠加绘制误差的步骤。
在一种可能的实现方式中,对于步骤S140而言,可以通过以下的示例性子步骤来实现,详细描述如下。
子步骤S141,基于互动区域、互动区域对应的第一互动物联网对象以及互动区域对应的第二互动物联网对象的位置转移状态向量,提取互动区域的位置转移状态向量中具有通信互动切换特征的状态向量。
本实施例中,状态向量可以用于表征至少一个互动区域在互动渲染流片段中所处的状态变化信息。
子步骤S142,对提取到的状态向量进行预测处理,以得到至少一个互动区域的至少一个置信度。
本实施例中,一个置信度可以用于表征一个互动区域属于一个通信切换互动区域的可能性,该通信切换互动区域可以预先在渲染场景中按照单元格或者功能业务格进行划分。
子步骤S143,基于至少一个置信度,确定互动渲染流片段中至少一个互动区域内的通信切换互动区域。
示例性地,子步骤S141可以通过以下具体的实施方式来实现。
(1)基于互动区域、互动区域对应的第一互动物联网对象以及互动区域对应的第二互动物联网对象的位置转移状态向量,分别构建互动区域的全局状态向量以及互动区域与至少一个联动物联网对象之间的至少一个局部状态向量。
本实施例中,全局状态向量用于表征互动区域在互动渲染流片段内所处的空间状态变化信息,一个局部状态向量用于表征互动区域与一个联动物联网对象之间的相对状态变化信息。
(2)基于全局状态向量和至少一个局部状态向量,获取互动区域的状态向量。例如,可以将全局状态向量分别与至少一个局部状态向量进行融合,得到互动区域的状态向量。
示例性地,子步骤S142可以通过以下具体的实施方式来实现。
(1)从提取到的状态向量中提取待预测的多个候选状态向量单位信息,从待预测的多个候选状态向量单位信息中获取多个存在关联的第一通信行为数据和第二通信行为数据。
(2)根据第一通信行为数据和第二通信行为数据确定通信切换感知连通图,并获取通信切换感知连通图的多个切换疑似节点。
例如,通信切换感知连通图的起点指代第一通信行为数据的第一通信行为,且终点指代第二通信行为数据的第二通信行为,每个切换疑似节点与每个通信切换互动区域存在一一对应关系。
(3)获取通信切换感知连通图对应的预测人工智能模型,预测人工智能模型包括通信切换感知连通图的多个切换疑似节点对应的预测节点,且预测人工智能模型的输出值由通信切换感知连通图确定,预测人工智能模型的输出值用于表示多个切换疑似节点的通信切换参数满足通信切换预测条件的置信度。
(4)根据预测人工智能模型的每个预测节点对通信切换感知连通图进行预测,得到每个预测节点对应的预测置信度,以得到至少一个互动区域的至少一个置信度。
示例性地,在子步骤S143中,可以将所有置信度大于设定置信度的通信切换互动区域确定为至少一个互动区域内的通信切换互动区域。
图3为本公开实施例提供的基于物联网交互和智能通信的信息处理装置300的功能模块示意图,本实施例可以根据上述云计算平台100执行的方法实施例对该基于物联网交互和智能通信的信息处理装置300进行功能模块的划分,也即该基于物联网交互和智能通信的信息处理装置300所对应的以下各个功能模块可以用于执行上述云计算平台100执行的各个方法实施例。其中,该基于物联网交互和智能通信的信息处理装置300可以包括提取模块310、获取模块320、第一确定模块330以及第二确定模块340,下面分别对该基于物联网交互和智能通信的信息处理装置300的各个功能模块的功能进行详细阐述。
提取模块310,用于从每个人机交互设备端200中提取每个存在绘制叠加关系的视频播放贴图之间的完整虚拟现实绘制信息,并将每个完整虚拟现实绘制信息在同一对应的候选物联网互动场景进行渲染,获得物联网互动渲染流。其中,提取模块310可以用于执行上述的步骤S110,关于提取模块310的详细实现方式可以参照上述针对步骤S110的详细描述即可。
获取模块320,用于获取物联网互动渲染流中每个待提取的互动渲染流片段,并获取待提取的互动渲染流片段中至少一个互动区域的位置转移状态向量,互动渲染流片段为待提取的渲染过程片段,每个互动渲染流片段分别对应一个物联网完整交互过程。其中,获取模块320可以用于执行上述的步骤S120,关于获取模块320的详细实现方式可以参照上述针对步骤S120的详细描述即可。
第一确定模块330,用于确定至少一个互动区域分别对应的至少一个第一互动物联网对象和至少一个第二互动物联网对象,其中,任一个互动区域的第一互动物联网对象为以互动区域为边界、以目标长度为互动范围的互动几何空间内所包括的所有互动区域的物联网对象,第二互动物联网对象为与第一互动物联网对象存在互动的物联网对象。其中,第一确定模块330可以用于执行上述的步骤S130,关于第一确定模块330的详细实现方式可以参照上述针对步骤S130的详细描述即可
第二确定模块340,用于基于互动区域、至少一个第一互动物联网对象以及至少一个第二互动物联网对象的位置转移状态向量,确定互动渲染流片段中至少一个互动区域内的通信切换互动区域,并将通信切换互动区域在物联网互动渲染流中以提醒的形式进行标注。其中,第二确定模块340可以用于执行上述的步骤S140,关于第二确定模块340的详细实现方式可以参照上述针对步骤S140的详细描述即可。
需要说明的是,应理解以上装置的各个模块的划分仅仅是一种逻辑功能的划分,实际实现时可以全部或部分集成到一个物理实体上,也可以物理上分开。且这些模块可以全部以软件通过处理元件调用的形式实现。也可以全部以硬件的形式实现。还可以部分模块通过处理元件调用软件的形式实现,部分模块通过硬件的形式实现。例如,提取模块310可以为单独设立的处理元件,也可以集成在上述装置的某一个芯片中实现,此外,也可以以程序代码的形式存储于上述装置的存储器中,由上述装置的某一个处理元件调用并执行以上提取模块310的功能。其它模块的实现与之类似。此外这些模块全部或部分可以集成在一起,也可以独立实现。这里所描述的处理元件可以是一种集成电路,具有信号的处理能力。在实现过程中,上述方法的各步骤或以上各个模块可以通过处理器元件中的硬件的集成逻辑电路或者软件形式的指令完成。
例如,以上这些模块可以是被配置成实施以上方法的一个或多个集成电路,例如:一个或多个特定集成电路(application specific integrated circuit,ASIC),或,一个或多个微处理器(digital signal processor,DSP),或,一个或者多个现场可编程门阵列(field programmable gate array,FPGA)等。再如,当以上某个模块通过处理元件调度程序代码的形式实现时,该处理元件可以是通用处理器,例如中央处理器(centralprocessing unit,CPU)或其它可以调用程序代码的处理器。再如,这些模块可以集成在一起,以片上系统(system-on-a-chip,SOC)的形式实现。
图4示出了本公开实施例提供的用于实现上述的控制设备的云计算平台100的硬件结构示意图,如图4所示,云计算平台100可包括处理器110、机器可读存储介质120、总线130以及收发器140。
在具体实现过程中,至少一个处理器110执行机器可读存储介质120存储的计算机执行指令(例如图3中所示的基于物联网交互和智能通信的信息处理装置300包括的提取模块310、获取模块320、第一确定模块330以及第二确定模块340),使得处理器110可以执行如上方法实施例的基于物联网交互和智能通信的信息处理方法,其中,处理器110、机器可读存储介质120以及收发器140通过总线130连接,处理器110可以用于控制收发器140的收发动作,从而可以与前述的人机交互设备端200进行数据收发。
处理器110的具体实现过程可参见上述云计算平台100执行的各个方法实施例,其实现原理和技术效果类似,本实施例此处不再赘述。
在上述的图4所示的实施例中,应理解,处理器可以是中央处理单元(英文:Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(英文:Digital Signal Processor,DSP)、专用集成电路(英文:ApplicationSpecificIntegrated Circuit,ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合发明所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
机器可读存储介质120可能包含高速RAM存储器,也可能还包括非易失性存储NVM,例如至少一个磁盘存储器。
总线130可以是工业标准体系结构(Industry Standard Architecture,ISA)总线、外部设备互连(Peripheral Component Interconnect,PCI)总线或扩展工业标准体系结构(Extended Industry Standard Architecture,EISA)总线等。总线130可以分为地址总线、数据总线、控制总线等。为便于表示,本申请附图中的总线并不限定仅有一根总线或一种类型的总线。
此外,本公开实施例还提供一种可读存储介质,所述可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如上基于物联网交互和智能通信的信息处理方法。
上述的可读存储介质可以是由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。可读存储介质可以是通用或专用计算机能够存取的任何可用介质。
最后应说明的是:以上各实施例仅用以说明本公开的技术方案,而非对其限制;尽管参照前述各实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本公开各实施例技术方案的范围。
Claims (10)
1.一种基于物联网交互和智能通信的信息处理方法,其特征在于,应用于云计算平台,所述云计算平台与多个人机交互设备端通信连接,所述方法包括:
从每个人机交互设备端中提取每个存在绘制叠加关系的视频播放贴图之间的完整虚拟现实绘制信息,并将每个所述完整虚拟现实绘制信息在同一对应的候选物联网互动场景进行渲染,获得物联网互动渲染流;
获取所述物联网互动渲染流中每个待提取的互动渲染流片段,并获取待提取的互动渲染流片段中至少一个互动区域的位置转移状态向量,所述互动渲染流片段为待提取的渲染过程片段,每个互动渲染流片段分别对应一个物联网完整交互过程;
确定所述至少一个互动区域分别对应的至少一个第一互动物联网对象和至少一个第二互动物联网对象,其中,任一个互动区域的第一互动物联网对象为以所述互动区域为边界、以目标长度为互动范围的互动几何空间内所包括的所有互动区域的物联网对象,所述第二互动物联网对象为与所述第一互动物联网对象存在互动的物联网对象;
基于所述互动区域、所述至少一个第一互动物联网对象以及所述至少一个第二互动物联网对象的位置转移状态向量,确定所述互动渲染流片段中所述至少一个互动区域内的通信切换互动区域,并将所述通信切换互动区域在所述物联网互动渲染流中以提醒的形式进行标注;
所述从每个人机交互设备端中提取每个存在绘制叠加关系的视频播放贴图之间的完整虚拟现实绘制信息的步骤,包括:
从每个人机交互设备端中获取候选物联网互动场景在每个绘制分层组件的绘制像素片段下的虚拟现实三维贴图,并按照预定的互动物联网形式对各个绘制像素片段下的虚拟现实三维贴图进行互动方式划分,分别生成每个互动物联网形式的贴图划分序列;
针对每个互动物联网形式,获取该互动物联网形式的贴图划分序列中每个视频播放贴图对应的贴图绘制流,并将每个视频播放贴图对应的贴图绘制流进行虚拟现实绘制;
在虚拟现实绘制过程中判断是否存在用于表示视频播放贴图存在绘制叠加的绘制叠加信息,并在检测到所述绘制叠加信息时,提取虚拟现实绘制的所述绘制叠加信息对应的第一视频播放贴图的第一贴图绘制流以及与所述第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图的第二贴图绘制流;
根据预设人工智能模型确定所述第一视频播放贴图和所述至少一个第二视频播放贴图之间的完整虚拟现实绘制信息;
其中,在提取虚拟现实绘制的所述绘制叠加信息对应的第一视频播放贴图的第一贴图绘制流以及与所述第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图的第二贴图绘制流的过程中,从虚拟现实绘制过程中产生的虚拟现实绘制记录信息中提取虚拟现实绘制的绘制叠加信息对应的第一视频播放贴图的第一贴图绘制流以及与第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图的第二贴图绘制流,其中,与第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图可以是指与第一视频播放贴图存在相关联的联动效应的第二视频播放贴图;
其中,如果某个视频播放贴图需要在第一视频播放贴图绘制的过程中叠加绘制,则该视频播放贴图为与第一视频播放贴图存在绘制叠加关系的第二视频播放贴图。
2.根据权利要求1所述的基于物联网交互和智能通信的信息处理方法,其特征在于,所述基于所述互动区域、所述至少一个第一互动物联网对象以及所述至少一个第二互动物联网对象的位置转移状态向量,确定所述互动渲染流片段中所述至少一个互动区域内的通信切换互动区域的步骤,包括:
基于所述互动区域、所述互动区域对应的第一互动物联网对象以及所述互动区域对应的第二互动物联网对象的位置转移状态向量,提取所述互动区域的位置转移状态向量中具有通信互动切换特征的状态向量,所述状态向量用于表征所述至少一个互动区域在所述互动渲染流片段中所处的状态变化信息;
对提取到的所述状态向量进行预测处理,以得到所述至少一个互动区域的至少一个置信度,其中,一个置信度用于表征一个互动区域属于一个通信切换互动区域的可能性;
基于所述至少一个置信度,确定所述互动渲染流片段中所述至少一个互动区域内的通信切换互动区域。
3.根据权利要求2所述的基于物联网交互和智能通信的信息处理方法,其特征在于,所述基于所述互动区域、所述互动区域对应的第一互动物联网对象以及所述互动区域对应的第二互动物联网对象的位置转移状态向量,提取所述互动区域的位置转移状态向量中具有通信互动切换特征的状态向量的步骤,包括:
基于所述互动区域、所述互动区域对应的第一互动物联网对象以及所述互动区域对应的第二互动物联网对象的位置转移状态向量,分别构建所述互动区域的全局状态向量以及所述互动区域与至少一个联动物联网对象之间的至少一个局部状态向量,所述全局状态向量用于表征所述互动区域在互动渲染流片段内所处的空间状态变化信息,一个局部状态向量用于表征所述互动区域与一个联动物联网对象之间的相对状态变化信息;
基于所述全局状态向量和所述至少一个局部状态向量,获取所述互动区域的状态向量。
4.根据权利要求3所述的基于物联网交互和智能通信的信息处理方法,其特征在于,所述基于所述全局状态向量和所述至少一个局部状态向量,获取所述互动区域的状态向量的步骤,包括:
将所述全局状态向量分别与所述至少一个局部状态向量进行融合,得到所述互动区域的状态向量。
5.根据权利要求2所述的基于物联网交互和智能通信的信息处理方法,其特征在于,所述对提取到的所述状态向量进行预测处理,以得到所述至少一个互动区域的至少一个置信度的步骤,包括:
从提取到的所述状态向量中提取待预测的多个候选状态向量单位信息,从待预测的多个候选状态向量单位信息中获取多个存在关联的第一通信行为数据和第二通信行为数据;
根据所述第一通信行为数据和所述第二通信行为数据确定通信切换感知连通图,并获取所述通信切换感知连通图的多个切换疑似节点,所述通信切换感知连通图的起点指代所述第一通信行为数据的第一通信行为,且终点指代所述第二通信行为数据的第二通信行为,每个切换疑似节点与每个通信切换互动区域存在一一对应关系;
获取所述通信切换感知连通图对应的预测人工智能模型,所述预测人工智能模型包括所述通信切换感知连通图的多个切换疑似节点对应的预测节点,且所述预测人工智能模型的输出值由所述通信切换感知连通图确定,所述预测人工智能模型的输出值用于表示所述多个切换疑似节点的通信切换参数满足通信切换预测条件的置信度;
根据预测人工智能模型的每个预测节点对所述通信切换感知连通图进行预测,得到每个预测节点对应的预测置信度,以得到所述至少一个互动区域的至少一个置信度。
6.根据权利要求2所述的基于物联网交互和智能通信的信息处理方法,其特征在于,所述基于所述至少一个置信度,确定所述互动渲染流片段中所述至少一个互动区域内的通信切换互动区域的步骤,包括:
将所有置信度大于设定置信度的通信切换互动区域确定为所述至少一个互动区域内的通信切换互动区域。
7.根据权利要求1所述的基于物联网交互和智能通信的信息处理方法,其特征在于,所述获取该互动物联网形式的贴图划分序列中每个视频播放贴图对应的贴图绘制流的步骤,包括:
判断是否与每个视频播放贴图已建立物联网互动关系;其中,所述物联网互动关系用于对视频播放贴图所对应的贴图绘制流的绘制业务进行设定,每个视频播放贴图对应一个物联网互动关系,不同物联网互动关系的互动方式不同;
若未与每个视频播放贴图关联对应的物联网互动关系,获取每个视频播放贴图的贴图绘制源信息;其中,所述贴图绘制源信息包括所述视频播放贴图的对应的贴图源标签,所述贴图源标签是所述视频播放贴图所生成贴图绘制流所对应的贴图源标签;
根据每个贴图绘制源信息对应的顶点映射字符对每个贴图绘制源信息进行解析识别,得到每个贴图绘制源信息对应的至少多个顶点映射分区,并从每个贴图绘制源信息对应的顶点映射分区中确定出存在位移变换信息的目标顶点映射分区;其中,所述位移变换信息是表征顶点映射分区对贴图源标签对应的顶点映射分区的位移变换节点;
根据每个视频播放贴图对应的目标顶点映射分区中的深度贴图与每个视频播放贴图关联对应的物联网互动关系,其中,所述物联网互动关系根据所述目标顶点映射分区中的深度贴图中的每个深度虚拟摄像机所对应的物联网互动关系确定;
根据所述每个视频播放贴图关联对应的物联网互动关系,从预先配置的贴图绘制流库中获取每个视频播放贴图对应的贴图绘制流,其中,所述贴图绘制流库包括每个视频播放贴图在不同物联网互动关系下的贴图绘制流。
8.一种云计算平台,其特征在于,所述云计算平台包括处理器、机器可读存储介质和网络接口,所述机器可读存储介质、所述网络接口以及所述处理器之间通过总线系统相连,所述网络接口用于与至少一个人机交互设备端通信连接,所述机器可读存储介质用于存储程序、指令或代码,所述处理器用于执行所述机器可读存储介质中的程序、指令或代码,以执行权利要求1-7中任意一项的基于物联网交互和智能通信的信息处理方法。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中配置有程序、指令或代码,当所述程序、指令或代码被执行时实现权利要求1-7中任意一项的基于物联网交互和智能通信的信息处理方法。
10.一种基于物联网交互和智能通信的信息处理系统,其特征在于,所述于物联网交互和智能通信的信息处理系统包括云计算平台以及与所述云计算平台通信连接的多个人机交互设备端;
所述云计算平台用于从每个人机交互设备端中提取每个存在绘制叠加关系的视频播放贴图之间的完整虚拟现实绘制信息,并将每个所述完整虚拟现实绘制信息在同一对应的候选物联网互动场景进行渲染,获得物联网互动渲染流;
所述云计算平台用于获取所述物联网互动渲染流中每个待提取的互动渲染流片段,并获取待提取的互动渲染流片段中至少一个互动区域的位置转移状态向量,所述互动渲染流片段为待提取的渲染过程片段,每个互动渲染流片段分别对应一个物联网完整交互过程;
所述云计算平台用于确定所述至少一个互动区域分别对应的至少一个第一互动物联网对象和至少一个第二互动物联网对象,其中,任一个互动区域的第一互动物联网对象为以所述互动区域为边界、以目标长度为互动范围的互动几何空间内所包括的所有互动区域的物联网对象,所述第二互动物联网对象为与所述第一互动物联网对象存在互动的物联网对象;
所述云计算平台用于基于所述互动区域、所述至少一个第一互动物联网对象以及所述至少一个第二互动物联网对象的位置转移状态向量,确定所述互动渲染流片段中所述至少一个互动区域内的通信切换互动区域,并将所述通信切换互动区域在所述物联网互动渲染流中以提醒的形式进行标注;
所述从每个人机交互设备端中提取每个存在绘制叠加关系的视频播放贴图之间的完整虚拟现实绘制信息的方式,包括:
从每个人机交互设备端中获取候选物联网互动场景在每个绘制分层组件的绘制像素片段下的虚拟现实三维贴图,并按照预定的互动物联网形式对各个绘制像素片段下的虚拟现实三维贴图进行互动方式划分,分别生成每个互动物联网形式的贴图划分序列;
针对每个互动物联网形式,获取该互动物联网形式的贴图划分序列中每个视频播放贴图对应的贴图绘制流,并将每个视频播放贴图对应的贴图绘制流进行虚拟现实绘制;
在虚拟现实绘制过程中判断是否存在用于表示视频播放贴图存在绘制叠加的绘制叠加信息,并在检测到所述绘制叠加信息时,提取虚拟现实绘制的所述绘制叠加信息对应的第一视频播放贴图的第一贴图绘制流以及与所述第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图的第二贴图绘制流;
根据预设人工智能模型确定所述第一视频播放贴图和所述至少一个第二视频播放贴图之间的完整虚拟现实绘制信息;
其中,在提取虚拟现实绘制的所述绘制叠加信息对应的第一视频播放贴图的第一贴图绘制流以及与所述第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图的第二贴图绘制流的过程中,从虚拟现实绘制过程中产生的虚拟现实绘制记录信息中提取虚拟现实绘制的绘制叠加信息对应的第一视频播放贴图的第一贴图绘制流以及与第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图的第二贴图绘制流,其中,与第一视频播放贴图存在绘制叠加关系的至少一个第二视频播放贴图可以是指与第一视频播放贴图存在相关联的联动效应的第二视频播放贴图;
其中,如果某个视频播放贴图需要在第一视频播放贴图绘制的过程中叠加绘制,则该视频播放贴图为与第一视频播放贴图存在绘制叠加关系的第二视频播放贴图。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110176190.2A CN112887419A (zh) | 2020-06-21 | 2020-06-21 | 基于物联网交互和智能通信的信息处理方法、系统及平台 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110176190.2A CN112887419A (zh) | 2020-06-21 | 2020-06-21 | 基于物联网交互和智能通信的信息处理方法、系统及平台 |
CN202010569971.3A CN111787081B (zh) | 2020-06-21 | 2020-06-21 | 基于物联网交互和智能通信的信息处理方法及云计算平台 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010569971.3A Division CN111787081B (zh) | 2020-06-21 | 2020-06-21 | 基于物联网交互和智能通信的信息处理方法及云计算平台 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112887419A true CN112887419A (zh) | 2021-06-01 |
Family
ID=72757102
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110176177.7A Withdrawn CN112887418A (zh) | 2020-06-21 | 2020-06-21 | 基于物联网交互和智能通信的信息处理方法及系统 |
CN202010569971.3A Active CN111787081B (zh) | 2020-06-21 | 2020-06-21 | 基于物联网交互和智能通信的信息处理方法及云计算平台 |
CN202110176190.2A Withdrawn CN112887419A (zh) | 2020-06-21 | 2020-06-21 | 基于物联网交互和智能通信的信息处理方法、系统及平台 |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110176177.7A Withdrawn CN112887418A (zh) | 2020-06-21 | 2020-06-21 | 基于物联网交互和智能通信的信息处理方法及系统 |
CN202010569971.3A Active CN111787081B (zh) | 2020-06-21 | 2020-06-21 | 基于物联网交互和智能通信的信息处理方法及云计算平台 |
Country Status (1)
Country | Link |
---|---|
CN (3) | CN112887418A (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112433655B (zh) * | 2020-12-04 | 2021-09-07 | 武汉迈异信息科技有限公司 | 基于云计算的信息流交互处理方法及云计算验证互动中心 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105760106B (zh) * | 2016-03-08 | 2019-01-15 | 网易(杭州)网络有限公司 | 一种智能家居设备交互方法和装置 |
CN107194832A (zh) * | 2017-05-02 | 2017-09-22 | 向军 | 一种基于移动互联网和物联网的智能旅游景区系统 |
US10338695B1 (en) * | 2017-07-26 | 2019-07-02 | Ming Chuan University | Augmented reality edugaming interaction method |
CN109448137B (zh) * | 2018-10-23 | 2023-01-10 | 网易(杭州)网络有限公司 | 交互方法、交互装置、电子设备及存储介质 |
CN110908556A (zh) * | 2019-10-24 | 2020-03-24 | 深圳传音控股股份有限公司 | 交互方法、交互装置、移动终端及计算机可读存储介质 |
-
2020
- 2020-06-21 CN CN202110176177.7A patent/CN112887418A/zh not_active Withdrawn
- 2020-06-21 CN CN202010569971.3A patent/CN111787081B/zh active Active
- 2020-06-21 CN CN202110176190.2A patent/CN112887419A/zh not_active Withdrawn
Also Published As
Publication number | Publication date |
---|---|
CN111787081B (zh) | 2021-03-23 |
CN111787081A (zh) | 2020-10-16 |
CN112887418A (zh) | 2021-06-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111626817B (zh) | 基于电子商务大数据的用户画像解析方法及人工智能平台 | |
CN109947967B (zh) | 图像识别方法、装置、存储介质和计算机设备 | |
US10810430B2 (en) | Augmented reality with markerless, context-aware object tracking | |
JP7475772B2 (ja) | 画像生成方法、画像生成装置、コンピュータ機器、及びコンピュータプログラム | |
JP7461478B2 (ja) | メモリおよびデバイスのトラッキングを使用する拡張現実アプリケーションにおけるオクルージョンハンドリングのための方法と関連装置 | |
CN112016475A (zh) | 一种人体检测识别方法和装置 | |
CN111476875B (zh) | 智慧建筑楼宇物联网对象模拟方法及楼宇云服务器 | |
CN111626816B (zh) | 基于电子商务直播的图像互动信息处理方法及云计算平台 | |
CN111787081B (zh) | 基于物联网交互和智能通信的信息处理方法及云计算平台 | |
CN114697703A (zh) | 视频数据生成方法、装置、电子设备及存储介质 | |
CN111787080B (zh) | 基于人工智能和物联网交互的数据处理方法及云计算平台 | |
CN111107264A (zh) | 图像处理方法、装置、存储介质以及终端 | |
US20210110617A1 (en) | Method and apparatus for presenting augmented reality data, device, storage medium and program | |
CN117830305B (zh) | 对象测量方法、装置、设备及介质 | |
CN117726963A (zh) | 画面数据处理方法、装置、电子设备及介质 | |
KR20180075222A (ko) | 전자 장치 및 그 동작 방법 | |
CN118102033A (zh) | 视频处理方法、装置及计算机可读存储介质 | |
CN116977519A (zh) | 注视点渲染的测试方法、装置、计算机设备和存储介质 | |
CN115345971A (zh) | 一种模型纹理切换方法及装置 | |
CN117237514A (zh) | 图像处理方法和图像处理装置 | |
CN115439845A (zh) | 基于图神经网络的图像外推方法、装置、存储介质及终端 | |
CN114663327A (zh) | 融合方法、装置、计算机设备和存储介质 | |
CN117014596A (zh) | 评估方法、评估装置、设备及存储介质、程序产品 | |
CN115880605A (zh) | 测试处理方法及装置 | |
CN117931019A (zh) | 元素选择处理方法、装置、计算机设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20210601 |
|
WW01 | Invention patent application withdrawn after publication |