CN109561278B - 一种增强现实的显示系统及方法 - Google Patents

Abstract

本发明适用于装修技术领域，提供了一种增强现实的显示系统及方法，包括：接收并存储历史数据采集设备发送的图像信息数据和文本信息数据；接收实时场景采集设备发送的实景视频数据，并基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容；将生成的增强现实显示内容发送至所述增强现实显示设备，以使所述增强现实显示设备接收并显示所述服务器发送的增强现实显示内容。通过上述方式，给工人或者负责人装修或翻新带来很大的便利。

Description

一种增强现实的显示系统及方法

技术领域

本发明属于装修技术领域，尤其涉及一种增强现实的显示系统及方法。

背景技术

随着生活质量的提升以及建筑施工技术的不断发展，大众对建筑、房屋美观性的要求越来越高，于是，原有的装修风格可能并不能继续满足大众的审美，多数房主或者物业想要对房屋或者建筑进行装修或翻新。

现有的装修(翻新)方式是工人去现场查看原装修，然后根据原装修提出新的装修或翻新方案。可见，现有的装修或翻新方式需要工人或者负责人来回跑，以了解客户需求、原装修以及房屋结构，给工人或者负责人带来很大的不便。

发明内容

有鉴于此，本发明实施例提供了一种增强现实的显示系统及方法，以解决现有技术中装修、翻新给工人或负责人带来不便的问题。

本发明实施例的第一方面提供了一种增强现实的显示系统，包括：

历史数据采集设备、实时场景采集设备、服务器和增强现实显示设备；

所述历史数据采集设备用于在机电系统的施工完成前采集所述机电系统中各个物理部件的图像信息数据和文本信息数据，并将采集的图像信息数据和文本信息数据发送至所述服务器；

所述服务器用于接收并存储所述历史数据采集设备发送的图像信息数据和文本信息数据；

所述实时场景采集设备用于在接收到所述增强现实设备发送的显示请求时，根据所述显示请求确定采集场景，并采集所述采集场景的实景视频数据，将采集的实景视频数据发送至所述服务器；

所述服务器还用于接收所述实时场景采集设备发送的实景视频数据，基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的增强现实显示内容，得到显示有隐蔽物理部件的增强现实显示内容，并将生成的增强现实显示内容发送至所述增强现实显示设备；

所述增强现实显示设备接收并显示所述服务器发送的增强现实显示内容。

本发明实施例的第二方面提供了一种增强现实的显示方法，应用于服务器，包括：

接收并存储历史数据采集设备发送的图像信息数据和文本信息数据；所述历史数据采集设备在机电系统的施工完成前采集机电系统中各个物理部件的图像信息数据和文本信息数据；

接收实时场景采集设备发送的实景视频数据，并基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容；所述实时场景采集设备在接收到增强现实设备发送的显示请求时，根据所述显示请求确定采集场景，并采集所述采集场景的实景视频数据；

将生成的增强现实显示内容发送至所述增强现实显示设备，以使所述增强现实显示设备接收并显示所述服务器发送的增强现实显示内容。

本发明实施例的第三方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如上第二方面所述方法的步骤。

本发明实施例与现有技术相比存在的有益效果是：

本发明实施例提供了一种增强现实的显示系统及方法，包括历史数据采集设备、实时场景采集设备、服务器和增强现实显示设备；历史数据采集设备在机电系统的施工完成前采集所述机电系统中各个物理部件的图像信息数据和文本信息数据，并将采集的图像信息数据和文本信息数据发送至所述服务器；在需要装修或翻新的时候，用户通过增强现实设备向实时场景采集设备发送查看增强现实显示内容的显示请求，实时场景采集设备在接收到显示请求后，确定采集场景，并采集所述采集场景的实景视频数据，将采集的实景视频数据发送至所述服务器，以使所述服务器基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，并发送给增强现实显示设备显示。可见，通过上述方式，由于在施工完成前对机电系统的各个物理部件的图像信息数据和文本信息数据进行了记录，这样，在一定年限之后，如果要对房屋或者建筑进行重装修或翻新，即使装修工人或翻新工人不清楚房屋或者建筑的结构，例如，隐蔽的管道或者布线，也不用亲临现场，而只需在远端通过查看生成的增强现实显示内容进行了解，以使装修工人或翻新工人制定房屋、建筑装修或者翻新的方案，同时，通过上述方式，还能将隐蔽物理部件也进行显示，能够更加的方便装修工人或翻新工人对房屋或者建筑的结构进行更为清楚的了解，提出更好的装修或翻新建议。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1示出了本发明实施例一提供的增强现实的显示系统的组成示意图；

图2示出了本发明实施例一提供的卫生间机电系统的示意图；

图3示出了本发明实施例一提供的步骤“结合所述图像信息数据、所述文本信息数据和所述实景视频数据，生成显示有隐蔽物理部件的增强现实显示内容”的实现流程示意图；

图4示出了本发明实施例一提供的位置的示意图；

图5示出了本发明实施例一提供的步骤“接收并显示所述服务器发送的增强现实显示内容”的实现流程示意图；

图6示出了本发明实施例一提供的观看角度的示意图；

图7示出了本发明实施例二提供的增强现实的显示方法的实现流程示意图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解的是，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

实施例一

图1示出了本发明实施例一提供的一种增强现实的显示系统100，包括：

历史数据采集设备110、实时场景采集设备120、服务器130和增强现实显示设备140；

所述历史数据采集设备用于在机电系统的施工完成前采集所述机电系统中各个物理部件的图像信息数据和文本信息数据，并将采集的图像信息数据和文本信息数据发送至所述服务器130；

所述服务器130用于接收并存储所述历史数据采集设备110发送的图像信息数据和文本信息数据；

所述实时场景采集设备用于在接收到所述增强现实设备发送的显示请求时，根据所述显示请求确定采集场景，并采集所述采集场景的实景视频数据，将采集的实景视频数据发送至所述服务器130；

所述服务器130还用于接收所述实时场景采集设备120发送的实景视频数据，基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，并将生成的增强现实显示内容发送至所述增强现实显示设备；

所述增强现实显示设备140接收并显示所述服务器130发送的增强现实显示内容。

上述系统，包括历史数据采集设备110、实时场景采集设备120、服务器130和增强现实显示设备140；历史数据采集设备110在机电系统的施工完成前采集所述机电系统中各个物理部件的图像信息数据和文本信息数据，并将采集的图像信息数据和文本信息数据发送至所述服务器130；在需要装修或翻新的时候，用户通过增强现实设备向实时场景采集设备120发送查看增强现实显示内容的显示请求，实时场景采集设备120在接收到显示请求后，确定采集场景，并采集所述采集场景的实景视频数据，将采集的实景视频数据发送至所述服务器130，以使所述服务器130基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，并发送给增强现实显示设备140显示。可见，通过上述方式，由于在施工完成前对机电系统的各个物理部件的图像信息数据和文本信息数据进行了记录，这样，在一定年限之后，如果要对房屋或者建筑进行重装修或翻新，即使装修工人或翻新工人不清楚房屋或者建筑的结构，例如，隐蔽的管道或者布线，也不用亲临现场，而只需在远端通过查看生成的增强现实显示内容进行了解，以使装修工人或翻新工人制定房屋、建筑装修或者翻新的方案，同时，通过上述方式，还能将隐蔽物理部件也进行显示，能够更加的方便装修工人或翻新工人对房屋或者建筑的结构进行更为清楚的了解，提出更好的装修或翻新建议。

所述服务器130，为高性能计算机或高性能计算机集群。

所述增强现实显示内容，为增强现实视频或增强现实全景图像。

所述机电系统，可以包括以下至少一项：电梯系统、空调系统、消防系统、供电系统、供水系统、排水系统和供暖系统。例如，当机电系统为家庭机电系统时，所述机电系统可以包括空调系统、消防系统、供电系统、供水系统、排水系统和供暖系统；当机电系统为建筑机电系统时，所述机电系统可以包括电梯系统、空调系统、消防系统、供电系统、供水系统、排水系统和供暖系统。

所述机电系统包括构成所述机电系统的物理部件以及控制部分物理部件工作的控制部件。例如图2所示的家庭卫生间的排水系统，该系统包括隐蔽于墙体内的物理部件：排水管道；以及暴露于墙体之外的物理部件：洗手台等。

在本发明实施例中，所述隐蔽物理部件，为由于遮挡导致无法直接看到或者很难直接看到的物理部件，例如无法直接看到的物理部件：隐蔽于墙体内的排水管道、线缆；很难直接看到的物理部件：被其他物理部件部分遮挡的物理部件。

在施工完成前，利用历史数据采集设备110采集机电系统中各个物理部件的图像信息数据和文本信息数据。例如，当机电系统为家庭卫生间排水系统时，利用历史数据采集设备110采集排水管道以及洗手台的图像信息数据和文本信息数据。

可选的，所述历史数据采集设备110包括能够拍摄图像的拍摄设备以及记录、存储文本信息数据的记录设备。例如，能够拍摄图像的拍摄设备为手机；能够记录、存储文本信息数据的记录设备为电脑。

优选的，所述历史数据采集设备110为能够同时进行拍摄且能够记录、存储文本信息数据的设备，例如，所述历史数据采集设备110为包含摄像头的笔记本电脑或包含摄像头且大存储空间的平板电脑。在这里，由于历史数据采集设备110可以同时实现拍摄和记录的功能，能够节约硬件成本，即不需要利用两种设备(手机和电脑)来完成各个物理部件的图像信息数据和文本信息数据的采集。

在本发明实施例中，利用历史数据采集设备110拍摄机电系统中各个物理部件的图像，得到图像信息数据，以记录物理部件在房屋或者建筑中的放置情况和物理部件的外形情况，例如，放置情况可以是：隐蔽于墙体的放置还是暴露于墙体外的放置，或者，和旁边其他物理部件的相对位置，朝哪个角度进行放置。

在本发明实施例中，利用历史数据采集设备110对文本信息数据进行记录，得到文本信息数据。所述文本信息数据，可以包括但不限于：机电系统的平面图纸、三维图纸，机电系统中物理部件的参数(例如，物理部件名称、型号和/或重量)、机电系统施工单位、机电系统的使用说明、机电系统中物理部件的放置位置、平均使用年限、价格等。

在本发明实施例中，需要说明的是，为了能够采集到某一个机电系统详细的图像信息数据和文本信息数据，在施工前、施工进行时和施工完成时都需要对图像信息数据和文本信息数据进行采集，并将施工进行时和施工完成时采集的图像信息数据和文本信息数据发送至服务器130，同时，服务器130在接收到图像信息数据和文本信息数据会对其进行区别记录，即服务器130会将接收到的图像信息数据和文本信息数据分类存储，例如，服务器130将不同房间或者不同建筑内的机电系统的图像信息数据和文本信息数据放置在不同文件夹，并进行不同的命名后存储。

在本发明实施例中，若用户想要对某一房屋或者建筑进行重装或翻新，此时，需要查看该房屋或建筑的原始构造情况，于是，用户可以在增强现实显示设备140上点击查看某一房屋或建筑的显示按钮，以使增强现实显示设备140向实时场景采集设备120发送显示请求，采集对应场景的实景视频数据，在实时场景采集设备120采集到实景视频数据之后，将采集的实景视频数据发送至服务器130，以使服务器130结基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容。

其中，所述增强现实显示设备140，为能够将增强现实显示内容进行显示的设备，例如，所述增强现实显示设备140，为增强现实眼镜或增强现实头盔或增强现实手机或增强现实电脑。所述实时场景采集设备120，为能够对场景进行拍摄的设备，即所述实时场景采集设备120为包括摄像头的设备，例如，所述实时场景采集设备120为手机、平板电脑或笔记本电脑。

在本发明实施例中，如图3所示，所述结基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，具体包括：

S11、判断所述采集场景内的物理部件是否被预置物理部件全部包含。

所述采集场景内的物理部件包括采集场景的可见物理部件和隐蔽物理部件。在这里，预先生成采集场景内所有物理部件的清单。

所述预置物理部件，为预先设定好的多个物理部件，相应的，所以预置物理部件的增强现实显示内容也是预置的。可以理解的是，由于预置的物理部件有限，所以当构建真实场景的增强现实显示内容的时候，采集场景的物理部件不一定在预置物理部件都包含有，故对应的预置物理部件的。

S12、若所述采集场景内的物理部件被预置物理部件全部包含，则基于所述图像信息数据、所述文本信息数据、所述实景视频数据和所述预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容。

在这里，由于采集场景内的物理部件被预置物理部件全部包含，所以可以直接结合实景视频数据和预置物理部件的虚拟显示内容将采集场景内的所有物理部件进行显示，并且根据图像信息数据和文本信息数据的记载，还可以将预置物理部件的虚拟显示内容显示到对应位置处。

S13、若所述采集场景内有物理部件没有被预置物理部件包含，则判断所述采集场景内未被所述预置物理部件包含的缺失物理部件是否被所述实景视频数据包含。

在这里，若所述采集场景内有物理部件没有被预置物理部件包含，则继续判断其是否被实景视频数据包含。可以理解的是，由于拍摄的实景视频并不能看到隐蔽物理部件，而只能看到一些暴露于墙体之外的部件，所以为了使装修工人或者装修负责人看到房屋或建筑的全貌(可以直接看到的物理部件以及隐蔽物理部件)，提出更好的装修或翻新意见，需要将隐蔽物理部件一起显示。于是，若其即没有被预置物理部件包含也没有被实景视频数据包含，则需要生成该物理部件的虚拟显示内容，以得到最终的增强现实显示内容。

S14、若所述缺失物理部件没有被所述实景视频数据包含，则基于所述图像信息数据和所述文本信息数据，得到所述缺失物理部件的虚拟显示内容；并根据所述图像信息数据、所述文本信息数据、所述缺失物理部件的虚拟显示内容、所述预置物理部件的虚拟显示内容和所述实景视频数据，得到显示有隐蔽物理部件的增强现实显示内容。

在这里，若有缺失物理部件没有被所述实景视频数据包含，则基于所述图像信息数据和所述文本信息数据，生成该缺失物理部件的虚拟显示内容。例如，基于该物理部件的图像信息数据确定其部件属性，长、宽、高、外观等，再结合其文本信息数据，利用三维建模软件，得到缺失物理部件的虚拟显示内容。然后再根据所述图像信息数据、所述文本信息数据、所述缺失物理部件的虚拟显示内容、所述预置物理部件的虚拟显示内容和所述实景视频数据，得到显示有隐蔽物理部件的增强现实显示内容。例如，根据实景视频数据显示实际拍摄的物理部件，根据置物理部件的虚拟显示内容显示未被实景视频数据包含的物理部件，根据所述图像信息数据和所述文本信息数据显示缺失物理部件的虚拟显示内容，以完成采集场景内所有物理部件的显示，最后根据图像信息数据、所述文本信息数据，确定这些物理部件的位置、朝向和外观等，即可得到显示有隐蔽物理部件的增强现实显示内容。

在本发明实施例中，为了提高增强现实显示内容的观看体验，从多个角度以及多个位置拍摄物理部件以及实景视频数据，这样，服务器130可以根据文本信息数据、多角度以及多位置点拍摄的图像信息数据和实景视频数据，制作多角度、多位置点的增强现实显示内容，并将制作的多角度、多位置点的增强现实显示内容发送至增强现实显示设备140。

以房屋为例进行说明，如图4所示，将房屋看做一个平面，并将其划分为多个小正方形块，每个小正方形块表示一个位置，同时为了更具体的表示位置，为每个小正方形块设置坐标，例如，将左下角的小正方形块的坐标设置为：(0,0)。在本发明实施例中，站在不同的位置以不同角度，通过历史数据采集设备110采集图像信息数据以及通过实景数据采集设备采集实景视频数据，得到多角度以及多位置点拍摄的图像信息数据和实景视频数据。

相应的，如图5所示，所述接收并显示所述服务器130发送的增强现实显示内容，包括：

S21、接收所述服务器130发送的增强现实显示内容。

S22、获取所述增强现实显示设备140的观看位置信息和观看角度信息，根据所述观看位置信息和所述观看角度信息显示所述增强现实显示内容。

所述增强现实显示设备140的显示屏为触摸屏，用户可以通过手指在显示屏滑动的方式查看不同区域的显示情况，然后通过点击屏幕某一位置的方式确定观看位置，即将用户点击的屏幕的位置确定为观看位置。

在这里，为了能够从各个角度观看房屋或建筑的全貌，增强现实显示设备140感应用户的观看角度。例如，当增强现实显示设备140为增强现实眼镜或者增强现实头盔时，增强现实显示设备140感应用户头部的摆动，确定用户头部最终的角度，并将该角度确定为增强现实显示设备140的观看角度，如图6所示。需要说明的是，将用户正对前方时的观看角度确定为0°，向右观看时的观看角度确定为正角度(例如，20°)，向左观看时的观看角度确定为负角度(例如，-20°)。

需要说明的是，这里的观看角度还可以是三维观看角度，即不止有左右的角度变化，还可以有上下的角度变化。

在本发明实施例中，所述增强现实的显示系统100，还包括：

维修管理设备；所述维修管理设备中存储有所述机电系统每次维修之后的变更数据；

所述服务器130在所述基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容之前，还用于向所述维修管理设备发送获取变更数据请求，以使所述维修管理设备在接收到所述获取变更数据请求之后，向所述服务器130发送变更数据；

所述服务器130还用于接收所述维修管理设备发送的变更数据；

相应的，所述基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，包括：

基于所述变更数据、所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的增强现实显示内容，得到显示有隐蔽物理部件的增强现实显示内容。

所述维修管理设备，可以包括但不限于平板电脑和笔记本电脑。

在本发明实施例中，机电系统的内容变更之后，需要对变更内容进行记录，拍摄经过变更的图像信息数据和对变更情况进行描述的文本数据，即所述变更数据，反映所述图像信息数据和文本信息数据的变更情况。

例如，原先的文本数据记录的是管道数量为8，为了改善排水效果，管道进行了重新设置，由原先的8管道设置为了9管道，于是，变更数据中记录的文本数据为：管道数量8->管道数量9；再如，原先洗手台的位置为正对卧室门，房主觉得这样的设置让卧室变的比较潮湿，于是将洗手台的位置变更到了洗手间内，于是，变更数据中记录的文本数据为：洗手台位置：与卧室门正对->洗手间内靠窗位置。

可以理解的是，由于施工完成前采集得到的图像信息数据和文本信息数据可能会经过更改，所以为了保证向用户展示的增强现实显示内容是真实有效的场景视频，需要对机电系统的变更数据进行记录，以结合所述图像信息数据、所述文本信息数据、所述变更数据和所述实景视频数据，生成显示有隐蔽物理部件的增强现实显示内容。

在本发明实施例中，增强现实显示设备140为设置有触摸屏的设备；

所述增强现实显示设备140在所述接收并显示所述服务器130发送的增强现实显示内容之后，还用于根据触摸操作生成信息显示请求并将所述信息显示请求发送至所述服务器130；

所述服务器130接收所述信息显示请求，根据所述信息显示请求确定物理部件，并将确定的物理部件的预置信息发送至所述增强现实显示设备140；

所述增强现实显示设备140接收所述预置信息，并将所述预置信息在所述增强现实显示内容中的确定的物理部件的周围进行显示。

所述预置信息，为预先设置的物理部件的信息，所述信息为文本信息数据中的部分信息。可以理解的是，所述预置信息的类型为文本类型。例如，所述预置信息为物理部件的物理部件名称、型号、平均使用年限、价格等。

进一步的，所述增强现实显示设备140在接收到预置信息之后，为了比较某一物理部件当前的信息，还可以通过增强现实显示设备140向所述服务器130发送预置信息比较请求，以从服务器130获取预置信息的比较信息。

例如，在增强现实显示设备140显示预置信息的同时，增强现实显示设备140的显示界面会显示预置信息比较按钮(虚拟按钮)，用户可以通过该按钮触发生成预置信息比较请求，并发送给服务器130；服务器130在接收到该预置信息比较请求之后，根据预置信息的内容查询对应内容，比如，预置信息的内容为价格，那么服务器130可以查询该物理部件的当前价格(例如，可以是经过统计的平均价格)，或者是获取并查询该物理部件的价格周期，即每年、或者每个季度，该物理部件的价格具有怎样的规律；服务器130在查询之后，把该物理部件的当前价格或者是价格周期反馈给增强现实显示设备140或者是对应的APP，以在该APP上查看预置信息、服务器130反馈的预置信息的比较信息。

需要说明的是，服务器130在接收到预置信息比较请求之后，提取要查询的内容，然后将该内容发送至多个搜索引擎进行搜索，以获取到与查询内容对应的内容。例如，服务器130提取的查询内容为：物理部件XX的价格，于是将其发送至百度、Google等搜索引擎，并获取搜索引擎的反馈价格信息。

在这里，为了更好的确定装修或翻新方案，例如，查看某一物理部件的预置信息，看看有没有经过更新的性能各方面更好的物理部件，

在这里，装修工人或者装修负责人若是需要查看某个物理部件的预置信息，则可以直接点击或触摸该物理部件，增强现实显示设备140在检测到该物理部件被点击或触摸操作之后，生成该物理部件的信息显示请求，并将生成的信息显示请求发送至服务器130，以使服务器130返回预置信息。

通过上述方式，装修工人或者装修负责人可以通过查看某一物理部件的具体信息，根据各个物理部件的具体信息确定机电系统的装修设置可能存在的问题，作为后续装修或翻新的参考。

在本发明实施例中，所述服务器130中存储有多个机电系统的装修注意信息；

所述增强现实显示设备140在所述接收并显示所述服务器130发送的增强现实显示内容之后，还用于向所述服务器130发送装修注意请求，以使所述服务器130向所述增强现实显示设备140发送所述机电系统的装修注意信息；

所述增强现实显示设备140还用于接收所述服务器130发送的所述装修注意信息，并将所述装修注意信息和所述增强现实显示内容一起在所述触摸屏显示。

所述装修注意信息，为装修或翻新的意见性信息。例如，某一机电系统的装修注意信息为：该机电系统的某一位置处有承重墙，所以在该机电系统的施工阶段，故意避开了该承重墙进行施工(例如机电系统中某些物理部件的设置位置)，由此导致最终施工后的效果不够美观。

在这里，装修工人或者装修负责人若是需要查看某个机电系统的装修注意信息，则可以直接点击或触摸屏幕，增强现实显示设备140在检测到该机电系统的增强现实显示内容被点击或触摸之后，生成该机电系统的装修注意请求，并将生成的装修注意请求发送至服务器130，以使服务器130返回装修注意信息。

上述方式，由于能够通过增强现实显示设备140看到装修注意信息，使得装修翻新工人或者装修翻新负责人不用亲临现场进行实地查看或者减少去到现场的次数，也能了解到房屋或者建筑的具体结构以及需要注意的情况，作为后续房屋、建筑的装修、翻新的参考。

在本发明实施例中，若某一个物理部件是可以开启的物理部件，则由于之前已经记录了详细的图像信息数据和文本信息数据，则此时可以控制该物理部件开启。例如，点击增强现实显示内容中显示的电梯系统的电梯门，于是可以控制该电梯门开启，进而可以看到电梯门内的场景。

实施例二

图7示出了本发明实施例二提供的一种增强现实的显示方法的实现流程示意图。本实施例中的增强现实的显示方法的执行主体为服务器。详述如下：

S101、接收并存储历史数据采集设备发送的图像信息数据和文本信息数据；所述历史数据采集设备在机电系统的施工完成前采集机电系统中各个物理部件的图像信息数据和文本信息数据。

S102、接收实时场景采集设备发送的实景视频数据，并基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容；所述实时场景采集设备在接收到增强现实设备发送的显示请求时，根据所述显示请求确定采集场景，并采集所述采集场景的实景视频数据。

S103、将生成的增强现实显示内容发送至所述增强现实显示设备，以使所述增强现实显示设备接收并显示所述服务器发送的增强现实显示内容。

上述方案，首先接收并存储历史数据采集设备发送的图像信息数据和文本信息数据，其中，所述历史数据采集设备在机电系统的施工完成前采集机电系统中各个物理部件的图像信息数据和文本信息数据；然后接收实时场景采集设备发送的实景视频数据，并基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，其中，所述实时场景采集设备在接收到增强现实设备发送的显示请求时，根据所述显示请求确定采集场景，并采集所述采集场景的实景视频数据；最后，将生成的增强现实显示内容发送至所述增强现实显示设备，以使所述增强现实显示设备接收并显示所述服务器发送的增强现实显示内容。可见，通过上述方式，由于在施工完成前对机电系统的各个物理部件的图像信息数据和文本信息数据进行了记录，这样，在一定年限之后，如果要对房屋或者建筑进行重装修或翻新，即使装修工人或翻新工人不清楚房屋或者建筑的结构，例如，隐蔽的管道或者布线，也不用亲临现场，而只需通过查看生成的增强现实显示内容进行了解，便于装修工人或翻新工人制定房屋、建筑装修或者翻新的方案，同时，通过上述方式，还能将隐蔽物理部件也进行显示，能够更加的方便装修工人或翻新工人对房屋或者建筑的结构进行更为清楚的了解，提出更好的装修或翻新建议。

在本发明实施例中，所述增强现实的显示方法，在步骤S102所述基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容之前，还包括：

向维修管理设备发送获取变更数据请求，以使所述维修管理设备在接收到所述获取变更数据请求之后，向所述服务器发送变更数据；所述维修管理设备中存储有所述机电系统每次维修之后的变更数据，所述变更数据反映所述图像信息数据和/或文本信息数据的变更情况；

接收所述维修管理设备发送的变更数据；

相应的，步骤S102所述基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，包括：

基于所述变更数据、所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的增强现实显示内容，得到显示有隐蔽物理部件的增强现实显示内容。

在本发明实施例中，所述增强现实的显示方法，在步骤S103接收并显示所述服务器发送的增强现实显示内容之后，还包括：

接收增强现实显示设备发送的信息显示请求，根据所述信息显示请求确定物理部件，并将确定的物理部件的预置信息发送至所述增强现实显示设备，以将所述预置信息在所述增强现实显示内容中的确定的物理部件的周围进行显示；所述信息显示请求根据触摸操作生成；所述增强现实显示设备设置有触摸屏。

在本发明实施例中，所述增强现实的显示方法，在步骤S103所述接收并显示所述服务器发送的增强现实显示内容之后，还包括：

获取所述增强现实显示设备发送的所述机电系统的装修注意请求，并将所述装修注意请求发送至所述增强现实显示设备，以使所述增强现实显示设备将所述装修注意信息和所述增强现实显示内容一起在所述触摸屏显示；所述服务器中存储有多个机电系统的装修注意信息。

在本发明实施例中，步骤S102所述基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，包括：

判断所述采集场景内的物理部件是否被预置物理部件全部包含；

若所述采集场景内的物理部件被预置物理部件全部包含，则基于所述图像信息数据、所述文本信息数据、所述实景视频数据和所述预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容；

若所述采集场景内有物理部件没有被预置物理部件包含，则判断所述采集场景内未被所述预置物理部件包含的缺失物理部件是否被所述实景视频数据包含；若所述缺失物理部件没有被所述实景视频数据包含，则基于所述图像信息数据和所述文本信息数据，得到所述缺失物理部件的虚拟显示内容；并根据所述图像信息数据、所述文本信息数据、所述缺失物理部件的虚拟显示内容、所述预置物理部件的虚拟显示内容和所述实景视频数据，得到显示有隐蔽物理部件的增强现实显示内容。

在本发明实施例中，步骤S103接收并显示所述服务器发送的增强现实显示内容，包括：

接收所述服务器发送的增强现实显示内容；

获取所述增强现实显示设备的观看位置信息和观看角度信息，根据所述观看位置信息和所述观看角度信息显示所述增强现实显示内容。

需要说明的是，本发明实施例二提出的增强现实的显示方法与本发明实施例一提出的增强现实的显示系统基于相同的发明构思，方法实施例与系统实施例中的相应技术内容可互相适用，此处不再详述。

实施例三

在本发明的另一实施例中提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令被处理器执行时实现：

接收并存储历史数据采集设备发送的图像信息数据和文本信息数据；所述历史数据采集设备在机电系统的施工完成前采集机电系统中各个物理部件的图像信息数据和文本信息数据；

接收实时场景采集设备发送的实景视频数据，并基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容；所述实时场景采集设备在接收到增强现实设备发送的显示请求时，根据所述显示请求确定采集场景，并采集所述采集场景的实景视频数据；

将生成的增强现实显示内容发送至所述增强现实显示设备，以使所述增强现实显示设备接收并显示所述服务器发送的增强现实显示内容。

上述计算机可读存储介质，接收并存储历史数据采集设备发送的图像信息数据和文本信息数据，其中，所述历史数据采集设备在机电系统的施工完成前采集机电系统中各个物理部件的图像信息数据和文本信息数据；然后接收实时场景采集设备发送的实景视频数据，并基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，其中，所述实时场景采集设备在接收到增强现实设备发送的显示请求时，根据所述显示请求确定采集场景，并采集所述采集场景的实景视频数据；最后，将生成的增强现实显示内容发送至所述增强现实显示设备，以使所述增强现实显示设备接收并显示所述服务器发送的增强现实显示内容。可见，通过上述方式，由于在施工完成前对机电系统的各个物理部件的图像信息数据和文本信息数据进行了记录，这样，在一定年限之后，如果要对房屋或者建筑进行重装修或翻新，即使装修工人或翻新工人不清楚房屋或者建筑的结构，例如，隐蔽的管道或者布线，也不用亲临现场，而只需通过查看生成的增强现实显示内容进行了解，便于装修工人或翻新工人制定房屋、建筑装修或者翻新的方案，同时，通过上述方式，还能将隐蔽物理部件也进行显示，能够更加的方便装修工人或翻新工人对房屋或者建筑的结构进行更为清楚的了解，提出更好的装修或翻新建议。

进一步的，所述计算机程序被处理器执行时还实现：

在所述基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容之前，向维修管理设备发送获取变更数据请求，以使所述维修管理设备在接收到所述获取变更数据请求之后，向所述服务器发送变更数据；所述维修管理设备中存储有所述机电系统每次维修之后的变更数据，所述变更数据反映所述图像信息数据和/或文本信息数据的变更情况；

接收所述维修管理设备发送的变更数据；

基于所述变更数据、所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的增强现实显示内容，得到显示有隐蔽物理部件的增强现实显示内容。

进一步的，所述计算机程序被处理器执行时还实现：

在所述接收并显示所述服务器发送的增强现实显示内容之后，接收增强现实显示设备发送的信息显示请求，根据所述信息显示请求确定物理部件，并将确定的物理部件的预置信息发送至所述增强现实显示设备，以将所述预置信息在所述增强现实显示内容中的确定的物理部件的周围进行显示；所述信息显示请求根据触摸操作生成；所述增强现实显示设备设置有触摸屏。

进一步的，所述计算机程序被处理器执行时还实现：

在所述接收并显示所述服务器发送的增强现实显示内容之后，获取所述增强现实显示设备发送的所述机电系统的装修注意请求，并将所述装修注意请求发送至所述增强现实显示设备，以使所述增强现实显示设备将所述装修注意信息和所述增强现实显示内容一起在所述触摸屏显示；所述服务器中存储有多个机电系统的装修注意信息。

进一步的，所述计算机程序被处理器执行时还实现：

判断所述采集场景内的物理部件是否被预置物理部件全部包含；

若所述采集场景内的物理部件被预置物理部件全部包含，则基于所述图像信息数据、所述文本信息数据、所述实景视频数据和所述预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容；

若所述采集场景内有物理部件没有被预置物理部件包含，则判断所述采集场景内未被所述预置物理部件包含的缺失物理部件是否被所述实景视频数据包含；若所述缺失物理部件没有被所述实景视频数据包含，则基于所述图像信息数据和所述文本信息数据，得到所述缺失物理部件的虚拟显示内容；并根据所述图像信息数据、所述文本信息数据、所述缺失物理部件的虚拟显示内容、所述预置物理部件的虚拟显示内容和所述实景视频数据，得到显示有隐蔽物理部件的增强现实显示内容。

进一步的，所述计算机程序被处理器执行时还实现：

接收所述服务器发送的增强现实显示内容；

获取所述增强现实显示设备的观看位置信息和观看角度信息，根据所述观看位置信息和所述观看角度信息显示所述增强现实显示内容。

所述计算机可读存储介质可以是前述任一实施例所述的设备的内部存储单元，例如设备的硬盘或内存。所述计算机可读存储介质也可以是所述设备的外部存储设备，例如所述设备上配备的插接式硬盘，智能存储卡(Smart Media Card，SMC)，安全数字(SecureDigital，SD)卡，闪存卡(Flash Card)等。进一步地，所述计算机可读存储介质还可以既包括所述设备的内部存储单元也包括外部存储设备。所述计算机可读存储介质用于存储所述计算机程序及所述设备所需的其他程序和数据。所述计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。

需要说明的是，本发明实施例三提出的计算机可读存储介质与本发明实施例二提出的增强现实的显示方法基于相同的发明构思，设备实施例与方法实施例中的相应技术内容可互相适用，此处不再详述。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的设备和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。例如，以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、设备或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种增强现实的显示系统，其特征在于，包括：

历史数据采集设备、实时场景采集设备、服务器和增强现实显示设备；

所述历史数据采集设备用于在机电系统的施工完成前采集所述机电系统中各个物理部件的图像信息数据和文本信息数据，并将采集的图像信息数据和文本信息数据发送至所述服务器；

所述服务器用于接收并存储所述历史数据采集设备发送的图像信息数据和文本信息数据；

所述实时场景采集设备用于在接收到所述增强现实设备发送的显示请求时，根据所述显示请求确定采集场景，并采集所述采集场景的实景视频数据，将采集的实景视频数据发送至所述服务器；

所述服务器还用于接收所述实时场景采集设备发送的实景视频数据，基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的增强现实显示内容，得到显示有隐蔽物理部件的增强现实显示内容，并将生成的增强现实显示内容发送至所述增强现实显示设备；其中，所述隐蔽物理部件，为由于遮挡导致无法直接看到或者很难看到的物理部件；

所述增强现实显示设备接收并显示所述服务器发送的增强现实显示内容。

2.如权利要求1所述的显示系统，其特征在于，还包括维修管理设备；所述维修管理设备中存储有所述机电系统每次维修之后的变更数据，所述变更数据反映所述图像信息数据和/或文本信息数据的变更情况；

所述服务器在所述基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容之前，还用于向所述维修管理设备发送获取变更数据请求，以使所述维修管理设备在接收到所述获取变更数据请求之后，向所述服务器发送变更数据；

所述服务器还用于接收所述维修管理设备发送的变更数据；

相应的，所述基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，包括：

基于所述变更数据、所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的增强现实显示内容，得到显示有隐蔽物理部件的增强现实显示内容。

3.如权利要求1所述的显示系统，其特征在于，所述增强现实显示设备设置有触摸屏；

所述增强现实显示设备在所述接收并显示所述服务器发送的增强现实显示内容之后，还用于根据触摸操作生成信息显示请求并将所述信息显示请求发送至所述服务器；

所述服务器接收所述信息显示请求，根据所述信息显示请求确定物理部件，并将确定的物理部件的预置信息发送至所述增强现实显示设备；

所述增强现实显示设备接收所述预置信息，并将所述预置信息在所述增强现实显示内容中的确定的物理部件的周围进行显示。

4.如权利要求1所述的显示系统，其特征在于，所述服务器中存储有多个机电系统的装修注意信息；

所述增强现实显示设备在所述接收并显示所述服务器发送的增强现实显示内容之后，还用于向所述服务器发送装修注意请求，以使所述服务器向所述增强现实显示设备发送所述机电系统的装修注意信息；

所述增强现实显示设备还用于接收所述服务器发送的所述装修注意信息，并将所述装修注意信息和所述增强现实显示内容一起在触摸屏显示。

5.如权利要求1所述的显示系统，其特征在于，所述基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，包括：

判断所述采集场景内的物理部件是否被预置物理部件全部包含；

若所述采集场景内的物理部件被预置物理部件全部包含，则基于所述图像信息数据、所述文本信息数据、所述实景视频数据和所述预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容；

若所述采集场景内有物理部件没有被预置物理部件包含，则判断所述采集场景内未被所述预置物理部件包含的缺失物理部件是否被所述实景视频数据包含；

若所述缺失物理部件没有被所述实景视频数据包含，则基于所述图像信息数据和所述文本信息数据，得到所述缺失物理部件的虚拟显示内容；并根据所述图像信息数据、所述文本信息数据、所述缺失物理部件的虚拟显示内容、所述预置物理部件的虚拟显示内容和所述实景视频数据，得到显示有隐蔽物理部件的增强现实显示内容。

6.如权利要求1所述的显示系统，其特征在于，所述接收并显示所述服务器发送的增强现实显示内容，包括：

接收所述服务器发送的增强现实显示内容；

获取所述增强现实显示设备的观看位置信息和观看角度信息，根据所述观看位置信息和所述观看角度信息显示所述增强现实显示内容。

7.如权利要求1至6任一项所述的显示系统，其特征在于，所述机电系统包括以下至少一项：电梯系统、空调系统、消防系统、供电系统、供水系统、排水系统和供暖系统。

8.一种增强现实的显示方法，应用于服务器，其特征在于，包括：

接收并存储历史数据采集设备发送的图像信息数据和文本信息数据；所述历史数据采集设备在机电系统的施工完成前采集机电系统中各个物理部件的图像信息数据和文本信息数据；

接收实时场景采集设备发送的实景视频数据，并基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容；所述实时场景采集设备在接收到增强现实设备发送的显示请求时，根据所述显示请求确定采集场景，并采集所述采集场景的实景视频数据；其中，所述隐蔽物理部件，为由于遮挡导致无法直接看到或者很难看到的物理部件；

将生成的增强现实显示内容发送至所述增强现实显示设备，以使所述增强现实显示设备接收并显示所述服务器发送的增强现实显示内容。

9.如权利要求8所述的显示方法，其特征在于，在所述基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容之前，还包括：

向维修管理设备发送获取变更数据请求，以使所述维修管理设备在接收到所述获取变更数据请求之后，向所述服务器发送变更数据；所述维修管理设备中存储有所述机电系统每次维修之后的变更数据，所述变更数据反映所述图像信息数据和/或文本信息数据的变更情况；接收所述维修管理设备发送的变更数据；

相应的，所述基于所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的虚拟显示内容，得到显示有隐蔽物理部件的增强现实显示内容，包括：

基于所述变更数据、所述图像信息数据、所述文本信息数据、所述实景视频数据和预置物理部件的增强现实显示内容，得到显示有隐蔽物理部件的增强现实显示内容。

10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求8或9任一项所述方法的步骤。

Images