CN108108023A - 一种显示方法和显示系统 - Google Patents

Abstract

本申请公开了一种显示方法和显示系统，方法包括：以第一方式按照第一时间间隔获得第一图像的集合；第一方式为采集装置采集其所在环境的方式；以第二方式获得至少一张第二图像，第二方式和第一方式不同；采用预设处理方式处理第一图像的集合中的每张第一图像和至少一张第二图像，生成第三图像的集合；预设处理方式包括：确定第一图像和第二图像的重叠区域以及重叠区域的优先显示关系；以第二时间间隔显示第三图像的集合；第三图像包括第一区域，第一区域为所述重叠区域的至少部分，所述第一区域显示所述第一图像的至少部分图像；从而使得第二图像能够真正融入到真实世界的图像中，给人一种真实的感觉，提高了用户体验。

Description

一种显示方法和显示系统

技术领域

本申请涉及虚拟现实技术领域，更具体的说是涉及一种显示方法和显示系统。

背景技术

智能体验设备作为新型体验设备逐渐发展起来，目前主要包括VR(VirtualReality，虚拟现实)智能体验设备、AR(Augmented Reality，增强现实)智能体验设备以及MR(Mix Reality，混合现实)智能体验设备。由于VR智能体验设备只能使得用户置身在三维虚拟空间中，无法与现实世界互动，因此，能够实现虚拟世界和现实世界的结合的AR智能体验设备或MR智能体验设备得到了越来越多用户的青睐。

而目前，AR或MR智能体验设备在将虚拟世界和现实世界进行结合时，虚拟世界场景也会遮挡现实世界场景，给人一种不真实的感觉。因此，如何使得虚拟世界融入到现实世界中成为本领域技术人员亟待解决的技术问题。

发明内容

有鉴于此，本申请提供一种显示方法和显示系统，以解决上述技术问题。

为实现上述目的，本申请提供如下技术方案：

一种显示方法，包括：

以第一方式按照第一时间间隔获得第一图像的集合；其中，所述第一方式为采集装置采集其所在环境的方式；

以第二方式获得至少一张第二图像，所述第二方式和所述第一方式不同；

采用预设处理方式处理所述第一图像的集合中的每张第一图像和所述至少一张第二图像，生成第三图像的集合；所述预设处理方式包括：确定所述第一图像和所述第二图像的重叠区域以及所述重叠区域的优先显示关系；

以第二时间间隔显示所述第三图像的集合；其中，所述第三图像包括第一区域，所述第一区域为所述重叠区域的至少部分，所述第一区域显示所述第一图像的至少部分图像。

优选的，

所述以第二方式获得第二图像，包括：以第二方式获取第二图像的集合；所述采用预设处理方式处理所述第一图像的集合中的每张第一图像和所述至少一张第二图像，生成第三图像集合，包括：

采用预设处理方式依次处理具有对应关系的所述第一图像的集合中的每张第一图像和所述第二图像的集合中的对应的第二图像，生成第三图像集合。

优选的，所述第三图像还包括第二区域，所述第二区域显示所述第二图像的至少部分图像。

优选的，所述第二区域为所述第一图像和所述第二图像的重叠区域中区别于所述第一区域的部分重叠区域的另一部分重叠区域。

优选的，所述第一区域中，所述第一图像的显示优先级高于所述第二图像的显示优先级，以使得所述第一区域显示所述第一图像的至少部分图像；

所述第二区域中，所述第二图像的显示优先级高于所述第一图像的显示优先级，以使得所述第二区域显示所述第二图像的至少部分图像；

或者，所述第一区域和所述第二区域中，所述第一图像的显示优先级均高于所述第二图像的显示优先级；

所述第一区域中的所述第一图像的透明度处于第一阈值范围以使得所述第一区域显示所述第一图像的至少部分；

所述第二区域中所述第一图像的透明度处于第二阈值范围以使得所述第二区域显示所述第二图像的至少部分。

优选的，所述第一区域显示的所述第一图像的至少部分图像用于表征可识别对象；

或者，所述第二区域中未显示的部分第一图像具有预设属性标记。

优选的，所述第三图像中仅具有第一图像的部分图像，全部显示在所述第一区域中，所述第二区域为非重叠区域；

其中，所述第一区域显示的所述第一图像的至少部分图像用于表征可识别对象；

或者，所述第一图像的部分图像为去除所述第一图像中具有预设属性标记的部分图像后剩余的部分图像。

一种显示系统，包括：

采集装置，用于按照第一时间间隔采集其所在环境的第一图像；

处理装置，用于以第二方式获得至少一张第二图像，并采用预设处理方式处理所述第一图像的集合中的每张第一图像和所述至少一张第二图像，生成第三图像的集合；所述第二方式区别于所述采集设备采集所述第一图像的方式；所述预设处理方式包括：确定所述第一图像和所述第二图像的重叠区域以及所述重叠区域的优先显示关系；

显示装置，用于以第二时间间隔显示所述第三图像的集合；其中，所述第三图像包括第一区域，所述第一区域为所述重叠区域的至少部分，所述第一区域显示所述第一图像的至少部分图像。

优选的，还包括：

至少部分位于所述采集装置的采集范围内的交互设备，用于提供输入数据，以使得所述处理装置基于所述输入数据确定所述至少一张第二图像；或，

至少部分位于所述采集装置的采集范围内的标记设备，用于使得所述采集装置所采集的第一图像具有一预设属性标记。

优选的，所述采集装置和所述显示装置集成在一头戴设备上。

经由上述的技术方案可知，与现有技术相比，本申请实施例提供了一种显示方法，通过第一方式按照第一时间间隔获得第一图像的集合，该第一方式为采集装置采集其所在环境的方式，以第二方式获得至少一张第二图像，将第一图像的集合中的每张第一图像和至少一张第二图像进行预设处理方式的处理，从而生成第三图像，该预设处理方式包括：确定第一图像和第二图像的重叠区域以及重叠区域的优先显示关系，以第二时间间隔显示第三图像集合，其中，第三图像包括第一区域，第一区域为重叠区域的至少部分，第一区域显示第一图像的至少部分图像。由此可见，本申请中，在将通过两种方式获取的图像来生成第三图像时，是将两种方式获取的图像进行了重叠，通过采集装置采集的其所在环境的第一图像的至少部分图像，即真实世界的至少部分图像能遮挡通过第二方式获得的图像，如遮挡虚拟世界图像，从而使得第二图像能够真正融入到真实世界的图像中，给人一种真实的感觉，提高了用户体验。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本申请一种显示方法第一实施例公开的流程示意图；

图2为本申请第一实施例工的头戴设备设置采集装置的结构示意图；

图3为本申请一种显示方法第二实施例公开的流程示意图；

图4a为本申请一种显示方法第三实施例公开的第一图像；

图4b为本申请一种显示方法第三实施例公开的第二图像；

图4c为本申请一种显示方法第三实施例公开的第三图像；

图5a为本申请一种显示方法第五实施例公开的第三图像；

图5b为本申请一种显示方法第五实施例公开的第一图像的部分图像；

图5c为本申请一种显示方法第五实施例公开的第二图像；

图6为本申请一种显示系统的第一实施例公开的结构示意图；

图7为本申请一种显示系统的第二实施例公开的结构示意图；

图8为本申请一种显示系统的第三实施例公开的结构示意图；

图9a为本申请一个应用实例公开的第一图像；

图9b为本申请一个应用实例公开的第二图像；

图9c为本申请一个应用实例公开的第三图像。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请公开了一种显示方法的第一实施例中，如图1所示，一种显示方法包括以下步骤：

步骤101：以第一方式按照第一时间间隔获得第一图像的集合；

第一方式为采集装置采集其所在环境的方式。

采集装置按照第一时间间隔获取第一图像的集合，该第一时间间隔对应于采集装置的采集频率，具体来说，采集装置按照第一时间间隔获取的第一图像的集合用于表征一视频文件。由于视频文件是由一帧一帧的图像组成的，本申请就是对视频文件中的一帧一帧的第一图像进行处理，即对第一图像的集合中的每张第一图像进行处理。

该采集装置具体可以为摄像机或摄像头。

可选的，第一方式具体可以为采集装置采集其所在环境的用户视角范围内的方式，如将采集装置设置在头戴设备上用户眼睛附近且朝向与用户视线方向同向，从而使得采集装置的采集范围与用户视角范围基本类似，实现采集装置采集其所在环境的用户视角范围内的第一图像的集合。

步骤102：以第二方式获得至少一张第二图像；

其中，第二方式与第一方式不同。

第二图像可以用于表征虚拟世界/虚拟场景的图像，而第二方式可以为从网络下载图像、从存储位置读取图像的方式、计算生成图像的方式等各种构建第二图像的方式，如可依据构建的虚拟场景，让图像渲染软件生成至少一张第二图像。

步骤103：采集预设处理方式处理第一图像的集合中的每张第一图像和所述至少一张第二图像，生成第三图像的集合；

该预设处理方式包括：确定第一图像和第二图像的重叠区域以及重叠区域的优先显示关系。

本申请中，针对实时获取的第一图像的集合中的每张第一图像进行处理，确定第一图像和第二图像的重叠区域以及重叠区域的优先显示关系，通过所确定的重叠区域以及重叠区域的优先显示关系对每张第一图像和至少一张第二图像进行处理，来生成第三图像的集合，第三图像的集合中的第三图像的数量与第一图像的集合中第一图像的数量相同。

步骤104：以第二时间间隔显示第三图像的集合。

其中，第三图像包括第一区域，第一区域为重叠区域的至少部分，第一区域显示第一图像的至少部分图像。也就是说，在重叠区域的至少部分区域中，显示的是第一图像的至少部分图像，即在重叠区域由第一图像的至少部分图像遮挡第二图像。

该第二时间间隔对应于显示第三图像的集合中的第三图像的显示频率，具体的，第二时间间隔与第一时间间隔可以相同也可以不同。比如都是每秒60帧，或者第一时间间隔是每秒30帧，第二时间间隔是每秒60帧，或者第一时间间隔是每秒120帧，第二时间间隔是每秒60帧。

需说明的是，本申请公开的一种显示方法中，作为一种优选的实现方式，为了能够使得用户看到一种三维显示效果，在采集第一图像的集合时，具体可以是通过至少两个采集装置按照第一时间间隔分别实时获取第一图像的集合。那么在生成第三图像的集合时，分别将不同采集装置采集的第一图像的集合中的每张第一图像与至少一张第二图像进行处理来生成第三图像的集合。与之对应的，基于每一采集装置所采集的第一图像的集合而生成的第三图像的集合的显示位置与该采集装置的设置位置对应。

以两个采集装置为例，如图2所示，头戴设备100上设置有两个采集装置，分别为10A和10B，头戴设备100上还设置有显示装置20。为了便于描述，将10A称为第一采集装置，将10B称为第二采集装置，第一采集装置10A设置在头戴设备上用户左眼附近，用于采集左眼视角范围内的第一图像的集合，第二采集装置10B设置在头戴设备上用户右眼附近，用于采集右眼视角范围内的第一图像的集合。假设图像的处理由处理装置进行，那么处理装置分别将第一采集装置10A采集的第一图像的集合中的每张第一图像与至少一张第二图像进行处理来生成第三图像的集合，将第二采集装置10B采集的第一图像的集合中的每张第一图像与至少一张第二图像进行处理来生成第三图像的集合。与之对应的，基于第一采集装置10A所采集的第一图像的集合而生成的第三图像的集合的显示位置为显示装置20的显示区域Y1，该显示区域Y1与第一采集装置10A的设置位置对应，基于第二采集装置10B所采集的第一图像的集合而生成的第三图像的集合的显示位置为显示装置20的显示区域Y2，该显示区域Y2与第二采集装置10B的设置位置对应。

在本申请上述实施例中，在将通过两种方式获取的图像来生成第三图像时，是将两种方式获取的图像进行了重叠，通过采集装置采集的其所在环境的第一图像的至少部分图像，即真实世界的至少部分图像能遮挡通过第二方式获得的图像，如遮挡虚拟世界图像，从而使得第二图像能够真正融入到真实世界的图像中，给人一种真实的感觉，提高了用户体验。

本申请公开了一种显示方法的第二实施例中，如图3所示，一种显示方法包括以下步骤：

步骤301：以第一方式按照第一时间间隔获得第一图像的集合；

其中，第一方式为采集装置采集其所在环境的方式。

步骤302：以第二方式获取第二图像的集合；

第二方式与第一方式不同。

步骤303：采用预设处理方式依次处理具有对应关系的所述第一图像的集合中的每张第一图像和所述第二图像的集合中的对应的第二图像，生成第三图像集合；

其中，采集装置的采集帧率与第二图像的获取帧率可以相同，也可以不同，比如，采集装置的采集帧率为每秒60帧，第二图像的获取帧率为每张30帧，或者100帧。那么，在将第一图像和第二图像进行处理时，是从第一图像的集合中的选取一帧第一图像，从第二图像的集合中的选取一帧第二图像，进行处理，生成第三图像。然后再进行下一次处理。

显然，第一图像集合中的多帧第一图像可以对应第二图像集合中的同一帧第二图像。或者，第一图像集合中的一帧第一图像可以对应第二图像集合中的多帧第二图像。或者，第二图像的集合中的第二图像与第一图像的集合中的第一图像具有一一对应关系。

选择时，可以是针对间隔短的为基准，在另一个集合中选择匹配的图像，其中，会产生不同的基准图像，对应相同的另一个集合中的图像。还可以是针对时间间隔长的为基准，在另一个集合中选择时间匹配的图像，其中，另一个集合中有些图像会被跳过。

如果时间间隔相同，则一一对应的选择。

预设处理方式包括：确定所述第一图像和所述第二图像的重叠区域以及所述重叠区域的优先显示关系。

步骤304：以第二时间间隔显示所述第三图像的集合。

其中，所述第三图像包括第一区域，所述第一区域为所述重叠区域的至少部分，所述第一区域显示所述第一图像的至少部分图像。

在本申请上述实施例中，在将通过两种方式获取的图像来生成第三图像时，是将两种方式获取的图像进行了重叠，通过采集装置采集的其所在环境的第一图像的至少部分图像，即真实世界的至少部分图像能遮挡通过第二方式获得的图像，如遮挡虚拟世界图像，从而使得第二图像能够真正融入到真实世界的图像中，给人一种真实的感觉，提高了用户体验。

在本申请公开的一种显示方法的第三实施例中，第三图像不仅包括第一区域，还包括第二区域。具体的，第一区域为第一图像和第二图像的重叠区域的至少部分。第一区域显示第一图像的至少部分图像，第二区域显示第二图像的至少部分图像。

如图4a-4c所示，图4a为第一图像，图4b为第二图像，图4c为第三图像，其中，第三图像包括第一区域S1和第二区域S2。第一区域S1为重叠区域的至少部分，显示第一图像的至少部分图像；第二区域S2显示第二图像的至少部分图像。

可以理解的是，第一图像和第二图像可以为尺寸相同的图像，当然也可以为尺寸不同的图像，对于尺寸不同的图像，可以直接将两个图像进行处理，确定两个图像的重叠区域以及显示优先级；也可以先转换为尺寸相同的图像，然后再进行处理，确定两个图像的重叠区域以及显示优先级。

在重叠区域中，显示优先级高的图像被显示，显示优先级低的图像被遮挡，例如，第一区域为重叠区域的至少部分，显示第一图像的至少部分，那么可以确定，第一区域中的第一图像的显示优先级高于第二图像的显示优先级。

而关于第三图像中，显示第二图像的至少部分图像的第二区域，本申请通过几个具体的实施例来详细进行说明。

本申请公开的一种显示方法的第四实施例用于对第三图像中的第一区域和第二区域进行描述，具体的，第二区域为第一图像和第二图像的重叠区域中区别于第一区域的部分重叠区域的另一部分重叠区域。也就是说，第一图像和第二图像的重叠区域包括第一区域和第二区域，该第一区域和第二区域为重叠区域中不同的区域，第一区域显示第一图像的至少部分，第二区域显示第二图像的至少部分。

这种情况下，作为一种实现方式，第一区域中，第一图像的显示优先级高于第二图像的显示优先级，以使得第一区域显示每张第一图像的至少部分图像；第二区域中，第二图像的显示优先级高于第一图像的显示优先级，以使得第二区域显示第二图像的至少部分图像。

也就是说，同一第一图像的不同部分图像具有不同的显示优先级，同一第二图像的不同部分图像也具有不同的显示优先级。在第一图像和第二图像的重叠区域中，第一区域所对应的部分第一图像的显示优先级高于第一区域所对应的部分第二图像的显示优先级，从而实现第一区域中的第一图像遮挡第一区域中的第二图像；在第一图像和第二图像的重叠区域中，第二区域所对应的部分第二图像的显示优先级高于第二区域所对应的部分第一图像的显示优先级，从而实现第二区域中的第二图像遮挡第二区域中的第一图像。

作为另一种实现方式，第一区域和第二区域中，第一图像的显示优先级均高于第二图像的显示优先级。由于在重叠区域的第一区域和第二区域中，第一图像的显示优先级均高于第二图像的显示优先级，因此正常情况下，第一区域和第二区域显示的均应该是第一图像的至少部分图像，但是在本实施例中，第一图像的不同部分图像设置有不同的透明度。

具体的，第一区域中第一图像的透明度处于第一阈值范围内以使得第一区域显示第一图像的至少部分，也就是说，透明度处于第一阈值范围的第一图像在覆盖第二图像时，不足以使得第二图像透过第一图像显示出来，使得第一区域显示的是第一图像的至少部分。这种情况，可以使用第一图像的默认透明度，即不改变第一图像的默认透明度以使得透明度处于第一阈值范围内。

第二区域中第一图像的透明度处于第二阈值范围以使得第二区域显示第二图像的至少部分，也就是说，透明度处于第二阈值范围的第一图像在覆盖第二图像时，能够使得第二图像透过第一图像显示出来，使得第二区域显示的是第二图像的至少部分。

本申请公开的一种显示方法的第五实施例用于对第三图像中的第一区域和第二区域进行另一种描述，具体的，第三图像包括第一区域和第二区域，第一区域为重叠区域的至少部分，第一区域显示所述第一图像的至少部分图像。第二区域显示第二图像的至少部分图像，该第二区域为非重叠区域。

在本实施例中，第三图像仅具有第一图像的部分图像，全部显示在第一区域中。且，第三图像中仅具有的第一图像的部分图像的显示优先级高于第二图像的显示优先级，即在第一区域下，第一图像遮挡第二区域。也就是说，在采用预设处理方式处理第一图像和第二图像中，对第一图像进行了裁剪，仅保留了第一图像的部分图像，且第一图像的部分图像全部位于重叠区域中第一区域中，并设置该第一图像的部分图像的显示优先级高于第二图像的显示优先级。

图5a所示的第三图像，包括第一区域S1和第二区域S2，第一图像的部分图像全部显示在第一区域S1中，第二区域S2显示的是第二图像，第三图像可以拆分出如图5b所示的第一图像的部分图像和如图5c所示的第二图像，而如图5b所示的第一图像为裁剪后的第一图像的部分图像，裁剪前的第一图像可以参考图4a。由此可以看出，第一图像的部分图像全部显示在第一区域，而第二区域为非重叠区域，显示的是第二图像的至少部分图像。

本申请公开的一种显示方法的第六实施例中，用于对上述第四实施例所描述的第三图像进行进一步说明。具体的，第三图像包括第一区域和第二区域，第一区域和第二区域为重叠区域中的不同部分。

一种方式中，第三图像的第一区域显示的第一图像的至少部分图像可以用于表征可识别对象。具体的，在采用预设处理方式对第一图像和第二图像进行处理时，可以先对第一图像中的可识别对象进行识别，从而确定第一图像中具有可识别对象的部分图像。

对应于重叠区域的第一区域和第二区域具有不同的显示优先级的实现方式下，在将第一图像和第二图像进行重叠时，将重叠区域中具有该可识别对象的部分第一图像的优先级设置为高于相应区域的部分第二图像的优先级，即具有可识别对象的部分第一图像遮挡相应区域的部分第二图像，将重叠区域中不具有该可识别对象的部分第一图像的优先级设置为低于相应区域的部分第二图像的优先级，即不具有可识别对象的部分第一图像被相应区域的部分第二图像遮挡，从而使得第一区域显示第一图像的至少部分图像，第二区域显示第二图像的至少部分图像。

而对于重叠区域的第一区域和第二区域，第一图像具有不同的透明度的实现方式下，在将第一图像和第二图像进行重叠时，设置第一图像的显示优先级均高于第二图像的显示优先级，实现第一图像遮挡第二图像。但是，设置重叠区域中，具有可识别对象的部分第一图像的透明度处于第一阈值范围内，不具有可识别对象的部分第一图像的透明度处于第二阈值范围内，使得第一区域显示第一图像，第二区域显示第二图像。

而从第一图像中识别出可识别对象的方式本申请并不局限，如预先设置有对象识别库，从而利用对象识别库对第一图像进行识别，以识别出第一图像中存在于对象识别库中的对象。或者第一图像中可识别对象具有特殊标记，基于该特殊标记，如特殊边框标记，来识别出该可识别对象。

另一种方式中，第二区域中未显示的部分第一图像具有预设属性标记，该预设属性标记可以为颜色参数标记，如，第一图像的部分图像可以为特殊颜色(绿色或蓝色)，从而通过颜色参数标记识别出第一图像中具有特殊颜色的部分。

对应于重叠区域的第一区域和第二区域具有不同的显示优先级的实现方式下，在将第一图像和第二图像进行重叠时，将重叠区域中不具有预设属性标记的部分第一图像的优先级设置为高于相应区域的部分第二图像的优先级，即不具有预设属性标记的部分第一图像遮挡相应区域的部分第二图像，将重叠区域中具有该预设属性标记的部分第一图像的优先级设置为低于相应区域的部分第二图像的优先级，即具有该预设属性标记的部分第一图像被相应区域的部分第二图像遮挡，从而使得第一区域显示第一图像的至少部分图像，第二区域显示第二图像的至少部分图像。

而对于重叠区域的第一区域和第二区域，第一图像具有不同的透明度的实现方式下，在将第一图像和第二图像进行重叠时，设置第一图像的显示优先级均高于第二图像的显示优先级，实现第一图像遮挡第二图像。但是，设置重叠区域中，不具有预设属性标记的部分第一图像的透明度处于第一阈值范围内，具有预设属性标记的部分第一图像的透明度处于第二阈值范围内，使得第一区域显示第一图像，第二区域显示第二图像。

需说明的是，本实施例六中，第三图像中的第一图像和第二图像均为完整的图像，仅是对第一图像的不同部分设置不同的显示优先级或者设置不同的透明度。

本申请公开的一种显示方法的第七实施例中，用于对上述第五实施例所描述的第三图像进行进一步说明。具体的，第三图像包括第一区域和第二区域，第一区域为重叠区域的至少部分，第二区域为非重叠区域。

第三图像仅具有第一图像的部分图像，全部显示在第一区域中。且，第三图像中仅具有的第一图像的部分图像的显示优先级高于第二图像的显示优先级。

一种方式下，第一区域显示的第一图像的至少部分图像用于表征可识别对象。具体的，在采用预设处理方式对第一图像和第二图像进行处理时，可以先对第一图像中的可识别对象进行识别，从而确定第一图像中具有可识别对象的部分图像，并且去除第一图像中不具有可识别对象的部分图像，仅保留具有可识别的部分图像。那么，将第一图像中仅保留的具有可识别对象的部分图像与第二图像进行重叠，将重叠区域中具有该可识别对象的部分第一图像的优先级设置为高于相应区域的部分第二图像的优先级，对应于第一区域，即在第一区域中，具有可识别对象的部分第一图像遮挡相应区域的第二图像，而第二区域为非重叠区域，不存在遮挡关系，显示有第二图像的至少部分图像。

从第一图像中识别出可识别对象的方式本申请并不局限，如预先设置有对象识别库，从而利用对象识别库对第一图像进行识别，以识别出第一图像中存在于对象识别库中的对象。或者第一图像中可识别对象具有特殊标记，基于该特殊标记，如特殊边框标记，来识别出该可识别对象。

另一种方式下，第一图像的部分图像为去除第一图像中具有预设属性标记的部分图像后剩余的部分图像。该预设属性标记可以为颜色参数标记，如，第一图像的部分图像可以为特殊颜色(绿色或蓝色)，从而通过颜色参数标记识别出第一图像中具有特殊颜色的部分。

具体的，在采用预设处理方式对第一图像和第二图像进行处理时，可以先确定第一图像中具有预设属性标记的部分图像，并将该部分去除，保留第一图像中不具备预设属性标记的部分图像。那么，将第一图像的剩余图像与第二图像进行重叠，将重叠区域中具有剩余部分的第一图像的优先级设置为高于相应区域的部分第二图像的优先级，对应于第一区域，即在第一区域中，去除第一图像中具有预设属性标记的部分图像后剩余的部分图像遮挡相应区域的第二图像，而第二区域为非重叠区域，不存在遮挡关系，显示有第二图像的至少部分图像。

需说明的是，本实施例七中，第三图像中的第一图像为不完整图像，第二图像为完整的图像。

在实际应用中，由于采集装置所处环境可能会随时发生改变，因此，在本申请公开的一种显示方法的第八实施例中，第一区域和第二区域在重叠区域中的位置和范围是可以发生变化的，第二区域可以变为第一区域，第一区域也可以变为第二区域。

具体的，当采集装置所处环境发生改变时，会使得第一图像的图像内容也发生改变。一种情况下，第一图像中可识别对象的图像范围可能增大，或者第一图像中具有预设属性标记的图像范围可能减小，那么相应的，之前生成的第三图像所对应的第二区域，在新生成的第三图像中，可能会变成第一区域。

另一种情况下，第一图像中可识别对象的图像范围可能减小，或者第一图像中具有预设属性标记的图像范围可能增大，那么相应的，之前生成的第三图像所对应的第一区域，在新生成的第三图像中，可能会产生第二区域。

也就是说，基于第三图像持续显示至少部分第二图像的过程中，采集装置所处环境的改变能够使得第三图像中所显示的第二图像发生改变，给用户的视觉效果即为能够看到真实环境中发生改变的对象，该对象不会被虚拟图像遮挡。

与上述一种显示方法对应的，本申请还公开了一种显示系统，以下通过几个实施例进行描述。

本申请公开的一种显示系统的第一实施例中，如图6所示，一种显示系统包括：采集装置10、处理装置20以及显示装置30。具体的：

采集装置10，用于按照第一时间间隔采集其所在环境的第一图像。该第一时间间隔对应于采集装置的采集频率，具体来说，采集装置按照第一时间间隔获取的第一图像的集合用于表征一视频文件。由于视频文件是由一帧一帧的图像组成的，本申请就是对视频文件中的一帧一帧的第一图像进行处理，即对第一图像的集合中的每张第一图像进行处理。

该采集装置具体可以为摄像机。

处理装置20，用于以第二方式获得至少一张第二图像，并采用预设处理方式处理所述第一图像的集合中的每张第一图像和所述至少一张第二图像，生成第三图像的集合。

第二图像可以用于表征虚拟世界的图像，第二方式为区别于采集设备采集所述第一图像的方式，具体的，第二方式可以为从网络下载图像、从存储位置读取图像的方式、自动生成图像的方式等各种构建第二图像的方式，如可以从虚拟世界渲染软件中获取至少一张第二图像。

所述预设处理方式包括：确定所述第一图像和所述第二图像的重叠区域以及所述重叠区域的优先显示关系。

本申请中，处理装置针对实时获取的第一图像的集合中的每张第一图像进行处理，确定第一图像和第二图像的重叠区域以及重叠区域的优先显示关系，通过所确定的重叠区域以及重叠区域的优先显示关系对每张第一图像和至少一张第二图像进行处理，来生成第三图像的集合，第三图像的集合中的第三图像的数量与第一图像的集合中第一图像的数量相同。

可选的，处理装置20可以用于第二方式获取第二图像的集合，从而采用预设处理方式依次处理具有对应关系的所述第一图像的集合中的每张第一图像和所述第二图像的集合中的每张第二图像，生成第三图像集合。其中，第二图像的集合中的第二图像与第一图像的集合中的第一图像具有一一对应关系。

显示装置30，用于以第二时间间隔显示所述第三图像的集合。

其中，第三图像包括第一区域，第一区域为重叠区域的至少部分，第一区域显示第一图像的至少部分图像。也就是说，在重叠区域的至少部分区域中，显示的是第一图像的至少部分图像，即在重叠区域由第一图像的至少部分图像遮挡第二图像。

该第二时间间隔对应于显示第三图像的集合中的第三图像的显示频率，具体的，第二时间间隔与第一时间间隔可以相同也可以不同。

可选的，采集装置10和显示装置20可以集成在一头戴设备上，该头戴设备具有佩戴装置，用于保持头戴设备和佩戴者头部的相对位置关系，比如佩戴装置可以为头盔壳体，眼镜架等设备。采集装置10具体可以用于采集其所在环境的用户视角范围内的方式，如将采集装置10设置在头戴设备上用户眼睛附近，从而使得采集装置10的采集范围与用户视角范围基本类似，实现采集装置10采集其所在环境的用户视角范围内的第一图像的集合。

需说明的是，本申请公开的一种显示系统中，作为一种优选的实现方式，为了能够使得用户看到一种三维显示效果，显示系统可以包括至少两个采集装置，至少两个采集装置按照第一时间间隔分别实时获取第一图像的集合。那么处理装置可以用于分别将不同采集装置采集的第一图像的集合中的每张第一图像与至少一张第二图像进行处理来生成第三图像的集合。与之对应的，基于每一采集装置所采集的第一图像的集合而生成的第三图像的集合在显示装置中的显示位置与该采集装置的设置位置对应。

在本申请上述实施例中，在将通过两种方式获取的图像来生成第三图像时，是将两种方式获取的图像进行了重叠，通过采集装置采集的其所在环境的第一图像的至少部分图像，即真实世界的至少部分图像能遮挡通过第二方式获得的图像，如遮挡虚拟世界图像，从而使得第二图像能够真正融入到真实世界的图像中，给人一种真实的感觉，提高了用户体验。

本申请公开的一种显示系统的第二实施例中，如图7所述，一种显示系统包括：采集装置10、处理装置20、显示装置30以及交互设备40；具体的：

采集装置10，用于按照第一时间间隔采集其所在环境的第一图像。

处理装置20，用于以第二方式获得至少一张第二图像，并采用预设处理方式处理所述第一图像的集合中的每张第一图像和所述至少一张第二图像，生成第三图像的集合。

其中，所述第二方式区别于所述采集设备采集所述第一图像的方式。

预设处理方式包括：确定所述第一图像和所述第二图像的重叠区域以及所述重叠区域的优先显示关系。

显示装置30，用于以第二时间间隔显示所述第三图像的集合。

其中，所述第三图像包括第一区域，所述第一区域为所述重叠区域的至少部分，所述第一区域显示所述第一图像的至少部分图像。

交互设备40的至少部分位于采集装置10的采集范围内，以使得采集装置10采集的第一图像中具有至少部分交互设备的部分图像。

交互设备40用于提供输入数据，以使得处理装置40基于所述输入数据确定所述至少一张第二图像。该输入数据可以为用户输入的数据。

可选的，交互设备40上还可以设置状态传感器，如6轴陀螺仪，该状态传感器采集的传感数据也提供给处理装置40，使得处理装置40基于输入数据和传感数据确定至少一张第二图像。

需说明的是，第一图像中的至少部分交互设备可以作为可识别对象，从而使得第一区域显示该具有可识别对象的部分第一图像。

本申请公开的一种显示系统的第三实施例中，如图8所示，一种显示系统包括：采集装置10、处理装置20、显示装置30以及标记设备50；具体的：

采集装置10，用于按照第一时间间隔采集其所在环境的第一图像。

处理装置20，用于以第二方式获得至少一张第二图像，并采用预设处理方式处理所述第一图像的集合中的每张第一图像和所述至少一张第二图像，生成第三图像的集合。

第二方式区别于所述采集设备采集所述第一图像的方式。

预设处理方式包括：确定所述第一图像和所述第二图像的重叠区域以及所述重叠区域的优先显示关系。

显示装置30，用于以第二时间间隔显示所述第三图像集合。

其中，所述第三图像包括第一区域，所述第一区域为所述重叠区域的至少部分，所述第一区域显示所述第一图像的至少部分图像。

标记设备50的至少部分位于采集装置10的采集范围内的标记设备50，用于使得采集装置所采集的第一图像具有一预设属性标记。

也就是说，该标记设备50可以起到标记采集装置10所采集的第一图像的部分图像的作用，如该标记设备50可以为绿幕或者蓝幕以实现对第一图像中的部分图像进行颜色标记。

需说明的是，本申请公开的一种显示系统中，可以既包括有交互设备又包括有标记设备，这种情况下，标记设备可以设置在交互设备上；当然也可以分开设置。

本申请公开的一种显示系统的以下多个实施例中，用于简单描述第三图像的实现方式，具体的：

在本申请公开的一种显示系统的一个实施例中，第三图像还包括第二区域，所述第二区域显示所述第二图像的至少部分图像。

在本申请公开的一种显示系统的另一实施例中，第二区域为所述第一图像和所述第二图像的重叠区域中区别于所述第一区域的部分重叠区域的另一部分重叠区域。

具体的，一种方式下，第一区域中，所述第一图像的显示优先级高于所述第二图像的显示优先级，以使得所述第一区域显示所述第一图像的至少部分图像；第二区域中，所述第二图像的显示优先级高于所述第一图像的显示优先级，以使得所述第二区域显示所述第二图像的至少部分图像。

另一种方式下，第一区域和第二区域中，第一图像的显示优先级均高于所述第二图像的显示优先级；第一区域中的所述第一图像的透明度处于第一阈值范围以使得所述第一区域显示所述第一图像的至少部分；第二区域中所述第一图像的透明度处于第二阈值范围以使得所述第二区域显示所述第二图像的至少部分。

在本实施例中，第一区域显示的所述第一图像的至少部分图像用于表征可识别对象；或者，第二区域中未显示的部分第一图像具有预设属性标记。

在本申请公开的一种显示系统的又一实施例中，第三图像中仅具有第一图像的部分图像，全部显示在所述第一区域中，所述第二区域为非重叠区域。

其中，所述第一区域显示的所述第一图像的至少部分图像用于表征可识别对象；或者，所述第一图像的部分图像为去除所述第一图像中具有预设属性标记的部分图像后剩余的部分图像。

需说明的是，关于本申请公开的一种显示系统的第三图像的具体实现方式可以参照上述关于一种显示方法的实施例，在此不再展开论述。

作为一个具体的应用场景，如图9a-9c所示，图9a为第一图像，图9b为第二图像，图9c为第三图像。在图9a所示的第一图像中，40对应于交互设备的部分图像，50对应于非交互设备，如可以为标记设备的部分图像。那么，在第三图像中，第一区域显示第一图像的部分图像40，第二区域对应于第一图像的部分图像50，用于显示第二图像。

对应于图9a-9c所对应的场景，交互设备可以为油门(图中未示出)以及方向盘，那么用户通过操作油门和/方向盘可以控制第二图像的改变，如通过操作方向盘转弯时，第二图像的改变给用户的视觉效果为仿佛真正的在开车转弯。

基于上述场景的描述，在本申请公开的一种显示系统的又一实施例中，标记设备可以设置在交互设备的边缘、也可以与交互设备间隔设置。

基于上述场景继续描述，采集装置所处的环境可能是随时发生变化的，如当用户的手抬起到车窗的位置，那么，用户的手会出现在采集装置内容，且会遮挡标记设备，即在交互设备和采集装置之间会存在对象的变化。这种情况下，采集装置所采集的第一图像会发生改变，相应的第三图像集合的显示效果为新产生的对象会遮挡第二图像，从而实现采集装置所处环境的变化使得第三图像发生变化。

而在上述场景中，当标记设备和交互设备之间具有一定的距离时，那么，采集装置所处的环境的改变也会导致采集装置所采集的第一图像改变，如有一个人从标记设备和交互设备之间走过，且位于采集装置的采集范围内。这种情况下，在标记设备和交互设备之间会存在对象的变化，相应的第三图像集合的显示效果也为新产生的对象会遮挡第二图像，从而实现采集装置所处环境的变化使得第三图像发生变化。

与上述场景对应的，在本申请公开的一种显示系统的又一实施例中，第一区域和第二区域在重叠区域中的位置和范围是可以发生变化的，第二区域可以变为第一区域，第一区域也可以变为第二区域。

具体的，当采集装置所处环境发生改变时，会使得第一图像的图像内容也发生改变。一种情况下，第一图像中可识别对象的图像范围可能增大，或者第一图像中具有预设属性标记的图像范围可能减小，那么相应的，之前生成的第三图像所对应的第二区域，在新生成的第三图像中，可能会变成第一区域。

另一种情况下，第一图像中可识别对象的图像范围可能减小，或者第一图像中具有预设属性标记的图像范围可能增大，那么相应的，之前生成的第三图像所对应的第一区域，在新生成的第三图像中，可能会产生第二区域。也就是说，基于第三图像持续显示至少部分第二图像的过程中，采集装置所处环境的改变能够使得第三图像中所显示的第二图像发生改变，给用户的视觉效果即为能够看到真实环境中发生改变的对象，该对象不会被虚拟图像遮挡。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种显示方法，其特征在于，包括：

以第一方式按照第一时间间隔获得第一图像的集合；其中，所述第一方式为采集装置采集其所在环境的方式；

以第二方式获得至少一张第二图像，所述第二方式和所述第一方式不同；

采用预设处理方式处理所述第一图像的集合中的每张第一图像和所述至少一张第二图像，生成第三图像的集合；所述预设处理方式包括：确定所述第一图像和所述第二图像的重叠区域以及所述重叠区域的优先显示关系；

以第二时间间隔显示所述第三图像的集合；其中，所述第三图像包括第一区域，所述第一区域为所述重叠区域的至少部分，所述第一区域显示所述第一图像的至少部分图像。

2.根据权利要求1所述的方法，其特征在于，

所述以第二方式获得第二图像，包括：以第二方式获取第二图像的集合；

所述采用预设处理方式处理所述第一图像的集合中的每张第一图像和所述至少一张第二图像，生成第三图像集合，包括：

采用预设处理方式依次处理具有对应关系的所述第一图像的集合中的每张第一图像和所述第二图像的集合中的对应的第二图像，生成第三图像集合。

3.根据权利要求1所述的方法，其特征在于，所述第三图像还包括第二区域，所述第二区域显示所述第二图像的至少部分图像。

4.根据权利要求3所述的方法，其特征在于，所述第二区域为所述第一图像和所述第二图像的重叠区域中区别于所述第一区域的部分重叠区域的另一部分重叠区域。

5.根据权利要求4所述的方法，其特征在于，所述第一区域中，所述第一图像的显示优先级高于所述第二图像的显示优先级，以使得所述第一区域显示所述第一图像的至少部分图像；

所述第二区域中，所述第二图像的显示优先级高于所述第一图像的显示优先级，以使得所述第二区域显示所述第二图像的至少部分图像；

或者，所述第一区域和所述第二区域中，所述第一图像的显示优先级均高于所述第二图像的显示优先级；

所述第一区域中的所述第一图像的透明度处于第一阈值范围以使得所述第一区域显示所述第一图像的至少部分；

所述第二区域中所述第一图像的透明度处于第二阈值范围以使得所述第二区域显示所述第二图像的至少部分。

6.根据权利要求5所述的方法，其特征在于，所述第一区域显示的所述第一图像的至少部分图像用于表征可识别对象；

或者，所述第二区域中未显示的部分第一图像具有预设属性标记。

7.根据权利要求3所述方法，其特征在于，所述第三图像中仅具有第一图像的部分图像，全部显示在所述第一区域中，所述第二区域为非重叠区域；

其中，所述第一区域显示的所述第一图像的至少部分图像用于表征可识别对象；

或者，所述第一图像的部分图像为去除所述第一图像中具有预设属性标记的部分图像后剩余的部分图像。

8.一种显示系统，其特征在于，包括：

采集装置，用于按照第一时间间隔采集其所在环境的第一图像；

处理装置，用于以第二方式获得至少一张第二图像，并采用预设处理方式处理所述第一图像的集合中的每张第一图像和所述至少一张第二图像，生成第三图像的集合；所述第二方式区别于所述采集设备采集所述第一图像的方式；所述预设处理方式包括：确定所述第一图像和所述第二图像的重叠区域以及所述重叠区域的优先显示关系；

显示装置，用于以第二时间间隔显示所述第三图像的集合；其中，所述第三图像包括第一区域，所述第一区域为所述重叠区域的至少部分，所述第一区域显示所述第一图像的至少部分图像。

9.根据权利要求8所述的系统，其特征在于，还包括：

至少部分位于所述采集装置的采集范围内的交互设备，用于提供输入数据，以使得所述处理装置基于所述输入数据确定所述至少一张第二图像；或，

至少部分位于所述采集装置的采集范围内的标记设备，用于使得所述采集装置所采集的第一图像具有一预设属性标记。

10.根据权利要求8所述的系统，其特征在于，所述采集装置和所述显示装置集成在一头戴设备上。