CN115248501A - 增强现实设备的显示方法、装置和增强现实设备 - Google Patents

增强现实设备的显示方法、装置和增强现实设备 Download PDF

Info

Publication number
CN115248501A
CN115248501A CN202110459994.3A CN202110459994A CN115248501A CN 115248501 A CN115248501 A CN 115248501A CN 202110459994 A CN202110459994 A CN 202110459994A CN 115248501 A CN115248501 A CN 115248501A
Authority
CN
China
Prior art keywords
lens
area
image
coordinate range
electrochromic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110459994.3A
Other languages
English (en)
Other versions
CN115248501B (zh
Inventor
王小根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Shixiang Technology Co Ltd
Original Assignee
Guangzhou Shixiang Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Shixiang Technology Co Ltd filed Critical Guangzhou Shixiang Technology Co Ltd
Priority to CN202110459994.3A priority Critical patent/CN115248501B/zh
Publication of CN115248501A publication Critical patent/CN115248501A/zh
Application granted granted Critical
Publication of CN115248501B publication Critical patent/CN115248501B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02F—OPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/15—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on an electrochromic effect
    • G02F1/153—Constructional details
    • G—PHYSICS
    • G02—OPTICS
    • G02F—OPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/15—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on an electrochromic effect
    • G02F1/163—Operation of electrochromic cells, e.g. electrodeposition cells; Circuit arrangements therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/38—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using electrochromic devices

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Nonlinear Science (AREA)
  • Optics & Photonics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请涉及增强现实设备领域，具体涉及一种增强现实设备的显示方法、装置、计算机可读存储介质、电子设备和增强现实设备，所述方法包括：获取目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域，以及所述光线区域在镜片上的坐标范围；根据所述坐标范围控制所述镜片上的点阵电致变色材料层进行变色，对所述目标物进行遮挡；其中，所述点阵电致变色材料层敷设在所述镜片上的外侧；在所述镜片上的所述坐标范围对应区域绘制虚拟图案。本申请能够确保虚拟图像在增强现实设备中的整体画面的清晰度。

Description

增强现实设备的显示方法、装置和增强现实设备
技术领域
本申请涉及增强现实设备领域，具体涉及一种增强现实设备的显示方法、装置、计算机可读存储介质、电子设备和增强现实设备。
背景技术
增强现实(Augmented Reality)技术是一种将虚拟信息与真实世界巧妙融合的技术，广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段，将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后，应用到真实世界中，两种信息互为补充，从而实现对真实世界的“增强”。该增强现实技术是在透明的镜片上，叠加虚拟的成像，形成在现实的场景的虚拟影像的观感体验。
但是，在现有的增强现实技术，虚拟图像往往会受到真实的光线影响，使得虚拟图像的清晰度往往比不上通过镜片所看到的真实图像。而目前解决问题的办法是提高虚拟图像的显示亮度，或者在镜片前方增加遮光片。对于前者的解决方案会容易影响虚拟图像与现实场景的画面融合效果；对于后者的解决方案则在整个镜片上叠加遮光片，影响现实场景的画面获取效果。
发明内容
为克服现有的增强现实技术的现实场景与虚拟图像难以得到较好的融合画面的问题，本申请提供一种增强现实设备的显示方法、装置、计算机可读存储介质、电子设备和增强现实设备。
第一方面，本申请提供了一种增强现实设备的显示方法，包括以下步骤：
获取目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域，以及所述光线区域在镜片上的坐标范围；
根据所述坐标范围控制所述镜片上的点阵电致变色材料层进行变色，对所述目标物进行遮挡；其中，所述点阵电致变色材料层敷设在所述镜片上的外侧；
在所述镜片上的所述坐标范围对应区域绘制虚拟图案。
在第一方面的可选实施例中，所述获取目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域的步骤，包括：
获取目标物图像；
根据所述目标物图像与图像接收区域的距离和尺寸，计算所述目标物与图像接收区域之间的光路在所述镜片上的显示区域；
根据所述显示区域确定光线区域。
在第一方面的可选实施例中，所述根据所述显示区域确定光线区域的步骤，包括：
根据所述显示区域所覆盖的电致变色子块的集合，将所述电致变色子块的集合的区域对应于所述镜片的区域确定为光线区域；
其中，所述电致变色子块是在所述点阵电致变色材料层上划分的多个所述电致变色子单元，每个所述电致变色子块紧密组合，并根据对每个所述电致变色子块所添加的电场控制各自区域的透明度。
在第一方面的可选实施例中，所述根据所述坐标范围控制所述镜片上的点阵电致变色材料层进行变色的步骤包括：
根据所述光线区域在镜片上的坐标范围，得到敷设在所述坐标范围的镜片区域上的电致变色子块的集合；
向所述集合中所有电致变色子块的所添加的电场进行控制，使得所述电致变色子块所对应区域变色。
在第一方面的可选实施例中，所述获取目标物图像的步骤，包括：
获取实景图像，将所述实景图像与预设图像的形状相匹配，确认所述实景图像中包含目标物图像。
在第一方面的可选实施例中，所述在所述镜片上的所述坐标范围对应区域绘制虚拟图案的步骤，包括：
根据所述目标物图像确定添加的虚拟图案，在所述坐标范围的区域上绘制所述虚拟图案。
在第一方面的可选实施例中，所述的增强现实设备的显示方法，其特征在于，还包括：
获取所述显示区域边缘色度和亮度；
根据所述色度和亮度对所述绘制的虚拟图案的边缘区域进行渲染。
第二方面，本申请还提供了一种增强现实设备的显示装置，其包括：
坐标获取模块，用于获取目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域，以及所述光线区域在镜片上的坐标范围；
变色模块，用于根据所述坐标范围控制所述镜片上的点阵电致变色材料层进行变色，对所述目标物进行遮挡；其中，所述点阵电致变色材料层敷设在所述镜片上的外侧；
绘制模块，用于在所述镜片上的所述坐标范围对应区域绘制虚拟图案。
第三方面，本申请还提供了一种电子设备，该电子设备包括：
一个或多个处理器；
存储器；
一个或多个应用程序，其中一个或多个应用程序被存储在存储器中并被配置为由一个或多个处理器执行，一个或多个程序配置用于：执行实现第一方面所述的增强现实设备的显示方法。
第四方面，本申请还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现第一方面所述的增强现实设备的显示方法。
第五方面，本申请还提供了一种增强现实设备，其包括：
一显示装置，所述显示装置包括镜片和外侧敷设点阵电致变色材料层；其中，所述点阵电致变色材料层用于调节所敷设区域的透明度；
一控制器，用于向所述点阵电致变色材料层添加电场的控制信号，控制任一像素点的颜色和亮度所指定的坐标范围区域进行遮挡，以及向所述镜片的坐标范围发出绘制虚拟图案的控制信号。
在第一方面的可选实施例中，所述点阵电致变色材料层包括多个电致变色子块，每个所述电致变色子块紧密组合，并根据对每个所述电致变色子块所添加的电场控制各自区域的透明度。
本申请与现有技术相比，具有以下有益效果：
本申请提供了一种增强现实设备的显示方案，能够根据目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域，得到对应的坐标范围，改变该坐标范围对应至该点阵电致变色材料层的透明度，以改变对应镜片区域的明暗度，并在该坐标范围上重新绘制新的虚拟图案，从而避免了现实场景的光线对虚拟图像的影响，确保虚拟图像在增强现实设备中的整体画面的清晰度。
本申请附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1为本申请一个实施例所提供的增强现实设备的显示方法的流程示意图；
图2为本申请中现实场景中的目标物图像与增强现实设备和眼部设定区域的位置关系示意图；
图3为本申请中作为目标物的虚拟图像分别与增强现实设备和眼部设定区域的位置关系示意图；
图4为本申请实施例所提供的敷设于镜片上的点阵电致变色材料层的结构示意图；
图5为本申请实施例所提供的增强现实设备的结构示意图；
图6为本申请一个实施例所提供的增强现实设备的显示装置的结构示意图；
图7为本申请一个实施例所提供的一种增强现实设备的显示的电子设备的结构示意图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本申请的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作。
本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语(包括技术术语和科学术语)，具有与本申请所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语，应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非像这里一样被特定定义，否则不会用理想化或过于正式的含义来解释。
在本申请的实施例中，为了解决虚拟图像与实景图像相比清晰度不足，以及现实场景中存在图像与虚拟图像不协调的问题，本申请所提供的实施例中，针对虚拟图像的清晰度比不上真实图像的问题，对目标物进行成像遮挡，从而避免了现实场景的光线对虚拟成像的影响，确保虚拟图像在增强现实设备中的整体画面的清晰度。
参照图1，图1为本申请一个实施例所提供的增强现实设备的显示方法的流程示意图。该增强现实设备的显示方法，包括以下步骤：
S110、获取目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域，以及所述光线区域在镜片上的坐标范围。
在本实施例中的目标物是在镜片上的图像，该目标物可以是现实场景通过镜片的实景图像，也可以是在增强现实设备上形成的虚拟图像。
所该图像接收区域在本实施例中，是代表在增强现实设备内侧的空间内，目标物的实景图像或虚拟图像能够被收看到的图像接收区域。为了能够更清楚对本申请的技术方案进行清楚说明，在后续的说明中，以人作为佩戴该增强现实设备的用户，针对该用户使用增强现实设备的场景进行说明。
在该使用场景中，该图像接收区域为佩戴该增强现实设备的用户的眼球设定区域。根据该眼球设定区域，在佩戴该增强现实设备时，无论是现实场景通过镜片的实景图像，还是虚拟图像，均能被收看到。在本申请的实施例中，所谓被收看到的图像，实际上在增强现实设备上形成对应的光线区域。而该光线区域，则是在目标物与眼球设定区域之间的光路上所形成的。该光线区域在镜片上存在对应的图像镜片区域，在本实施例中，图像镜片区域以坐标进行表示，形成对应区域的坐标范围。
S120、根据所述坐标范围控制所述镜片上的点阵电致变色材料层进行变色，对所述目标物进行遮挡；其中，所述点阵电致变色材料层敷设在所述镜片上的外侧。
在本实施例中，在镜片的外侧敷设有点阵电致变色材料层，该点阵电致变色材料层能够根据所添加的电场以改变阵电致变色材料层对应区域的透明度，从而在镜片上形成不同透光程度的镜片区域。
根据上述步骤S110所获取的光线区域在镜片上的坐标范围，并将该坐标范围的位置信息发送至该增强现实设备。该增强现实设备根据该位置信息，控制该坐标范围对应的点阵电致变色材料层的添加电场，从而调节该坐标范围的透明度。在本实施例中，通过降低所添加的电场来降低该坐标范围的透明度，从而在镜片的该坐标范围内形成深色区域，从而对镜片上目标物进行遮挡作用。
S130、在所述镜片上的所述坐标范围对应区域绘制虚拟图案。
同时，在经过遮挡后的该坐标范围的镜片区域内绘制对应的虚拟图案，以增强该坐标范围的区域的图像显示效果。
在本申请所提供的增强现实设备的显示方法，能够根据目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域，得到对应的坐标范围，改变该坐标范围对应至该点阵电致变色材料层的透明度，以改变对应镜片区域的明暗度，并在该坐标范围上重新绘制新的虚拟图案，从而避免了现实场景的光线对虚拟图像的影响，确保虚拟图像在增强现实设备中的整体画面的清晰度。
若目标物为现实场景通过镜片的实景图像，则能够根据实景图像通过镜片的实时光线区域，实时调节坐标范围，并通过控制该坐标范围对应的点阵电致变色材料层变色，对该目标物进行遮挡，以减弱现实场景的光线对虚拟成像的影响，同时，也能够改变在眼球设定区域被收看到的图像。
若目标物为虚拟图像，则根据虚拟图像所在的光线区域得到对应至镜片上的坐标范围，并通过控制该坐标范围对应的点阵电致变色材料层变色，减弱该虚拟图像对应的区域的现实场景的光线，同时，根据该目标物的图像，在镜片上的坐标范围对应区域重新绘制该目标物的虚拟图案，以增强该虚拟图像的显示效果。
基于上述对实施例描述的基础上，步骤S110中的获取目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域的步骤可进一步包括：
获取目标物图像；根据所述目标物图像与图像接收区域的距离和尺寸，计算所述目标物与图像接收区域之间的光路在所述镜片上的显示区域；根据所述显示区域确定光线区域。
在上述过程中，首先通过设置在增强现实设备前侧的摄像装置获取现实场景的实景图像，并在该图像中捕获目标物图像。
对于目标物图像的获取，在本实施例中，可以通过将该实景图像与预设的目标物图像进行匹配，从而确认该实景图像中是否包含目标物图像。若包含，启动目标物图像的数据的获取指令。
在本实施例中，该增强现实设备可以设置探测器，如红外探测器。根据该目标物图像的数据的获取指令，对位于该增强现实设备前方的目标物与其实时距离和尺寸进行探测。参照图2，图2为本申请中现实场景中的目标物图像与增强现实设备和眼部设定区域的位置关系示意图。
参考图2，将目标物设定为A，根据探测的结果，得到目标物A与增强现实设备的距离为L1，并通过增强现实设备的设计参数得到该增强现实设备与眼部设定区域的距离为L2。根据距离比例关系，计算得到该目标物与眼部设定区域之间的光路在镜片上的显示区域。
该距离比例关系满足以下关系：
Figure BDA0003042066320000081
其中，Sa为目标物A的实际尺寸，So1为目标物A在镜片上的显示区域的尺寸。
在现实场景的实景图像中捕获目标物图像的位置，并根据显示区域的尺寸，确认目标物A在镜片上的显示区域所对应的光线区域。
若该目标物为虚拟图像，即该虚拟图像位于该增强现实设备与眼部设定区域之间。参照图3，图3为本申请中作为目标物的虚拟图像分别与增强现实设备和眼部设定区域的位置关系示意图。
参考图3，将虚拟图像设定为目标物B，目标物B与增强现实设备的距离为L3，目标物B与眼部设定区域的距离为L4。目标物B分别与增强现实设备和眼部设定区域的距离比例关系满足以下关系：
Figure BDA0003042066320000082
其中，Sb为目标物B的实际尺寸，So2为目标物B对应于镜片上的显示区域的尺寸。
根据显示区域的尺寸，确认目标物B在镜片上所对应的光线区域。的参照图4，图4为本申请实施例所提供的敷设于镜片上的点阵电致变色材料层的结构示意图。
在增强现实设备10上，对于上述所提供的点阵电致变色材料层，在本实施例中，被划分为多个电致变色子单元11，每个电致变色子单元11作为一个电致变色子块敷设在镜片外侧所对应的区域上。而且相邻的两个电致变色子块11之间紧密组合，在镜片的外侧区域不存在未被点阵电致变色材料层所敷设到的区域。对于每个电致变色子块11所添加的电场是相互独立的，根据各自所添加的电场，控制对应的电致变色子块的透明度，以调整该电致变色子块11对应镜片区域的透明度。
基于该点阵电致变色材料层的结构，上述根据所述显示区域确定光线区域的步骤可以进一步包括：根据所述显示区域所覆盖的电致变色子块的集合，将所述电致变色子块的集合的区域确定为光线区域。
根据上述实施例的镜片的显示区域，获取覆盖该显示区域的点阵电致变色材料层上的电致变色子块的集合，在本实施例中，以该电致变色子块的集合的区域对应于镜片区域确定为光线区域。
根据上述点阵电致变色材料层的结构，步骤S120的根据所述坐标范围控制所述镜片上的点阵电致变色材料层进行变色的步骤，包括：根据所述光线区域在镜片上的坐标范围，得到在所述坐标范围中的所述电致变色子块的集合；向所述集合中所有电致变色子块的所添加的电场进行控制，使得所述电致变色子块所对应区域变色。
在上述两个步骤中，根据确定该光线区域的坐标范围的位置信息，确定敷设于该坐标范围的镜片区域的点阵电致变色材料层上对应的电致变色子块的集合，并对该集合所有的电致变色子块所添加的电场进行分别控制，使得该电致变色子块的透明度发生相应变化，该镜片上的该坐标范围的区域也发生变化。
在本实施例中，若向电致变色子块所添加的电场减小，其透明度会下降，即对所敷设的镜片区域形成遮挡的效果。在本实施例中，对电致变色子块的电场的减小可以通过断电的方式实现。
对于步骤S140能够进一步包括：根据所述目标物确定添加的虚拟图案，在所述坐标范围的区域上绘制所述虚拟图案。
在本实施例中，为了能够对目标物图像进行充分遮挡，不同的目标物图像设定所添加的虚拟图案。
确定添加的虚拟图案的步骤，可以包括：根据目标物图像的尺寸，确定至少大于该尺寸的虚拟图案。或者，对应该目标物图像，已预先设定所添加的虚拟图案，根据该目标物图像的尺寸，调整待添加的虚拟图案的尺寸。
基于所绘制的虚拟图像，本申请所提供的实施例中，在步骤S130之后还能够包括：获取所述显示区域边缘色度和亮度；根据所述色度和亮度对所述绘制的虚拟图案的边缘区域进行渲染。
该显示区域为目标物图像在镜片的区域，该显示区域的边缘即为实景图像中位于显示区域边缘以外的区域。在本实施例中，获取与该显示区域的边缘的设定距离范围内的色度和亮度，并将该色度和亮度对所添加的虚拟图案的边缘进行渲染，使得虚拟图案与实景图像之间能够形成色度和亮度的平滑过渡效果，避免该虚拟图案在整体画面中存在显示突兀的问题产生。
例如，当前的实景图像为蓝天白云的图像，根据播放请求，播放的虚拟图像为一只在天空飞翔的鸟。但是收到当前的光线因素影响，用户通过该增强现实设备所能看到的鸟的图像清晰度较低，显示效果较差。因此，根据当前的鸟的虚拟图像的区域，降低对应区域的电致变色子块的透明度，并且，根据该鸟的虚拟图像确定所添加为对应的鸟的虚拟图案。该虚拟图案与目前的虚拟图像的重叠，提升该虚拟图像的清晰度。并且，根据该鸟的图案在镜片的当前的显示区域，确定对应的边缘，得到实景图像中该边缘的色度和亮度，并对该鸟的显示区域的边缘区域进行渲染，保证该添加的虚拟图案与实景图像之间图像的平滑过渡。
若上述的实景图像上存在一电线杆，为了达到更好的显示效果，希望对该电线杆进行遮挡。在本实施例中，预存电线杆的图像，根据该预存电线杆的图像与实景图像进行匹配，确定该实景图像上存在电线杆的图像，并以此生成电线杆图像的数据的获取指令，并利用探测器获取电线杆与增强现实设备实时距离和尺寸，得到电线杆的图像在镜片上当前的显示区域，根据该显示区域的坐标范围，得到对应的点阵电致变色材料层上的电致变色子块的集合，并调整对该电致变色子块的集合所添加的电场，降低对应镜片区域的明暗度，在用户所接收到的实景图像中对该电线杆图像进行遮挡。并根据该电线杆图像的位置和尺寸，添加云朵的虚拟图案。根据该云朵的图案在镜片的当前的显示区域，确定对应的边缘，得到实景图像中该边缘的色度和亮度，并对该云朵的显示区域的边缘区域进行渲染，保证该添加的虚拟图案与实景图像之间图像的平滑过渡。
参照图5，图5为本申请实施例所提供的增强现实设备的结构示意图。
对于上述提供的增强现实设备的显示方法，本申请还通过对应的增强现实设备，该显示设备包括显示装置和控制器。其中，该显示装置包括镜片和外侧敷设点阵电致变色材料层。该点阵电致变色材料层用于调节所敷设区域的透明度。该阵电致变色材料层包括被划分的多个电致变色子块，每个所述电致变色子块紧密组合，在镜片的外侧区域不存在未被点阵电致变色材料层所敷设到的区域。并根据对每个所述电致变色子块所添加的电场控制各自区域的透明度。
该控制器，用于向所述点阵电致变色材料层添加电场的控制信号，控制任一像素点的颜色和亮度所指定的坐标范围区域进行遮挡，以及向所述镜片的坐标范围发出绘制虚拟图案的控制信号。
基于与上述增强现实设备的显示方法相同的申请构思，本申请实施例还提供了一种增强现实设备的显示装置600。参考图6，图6为本申请一个实施例所提供的增强现实设备的显示装置的结构示意图。
坐标获取模块610，用于获取目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域，以及所述光线区域在镜片上的坐标范围；
变色模块620，用于根据所述坐标范围控制所述镜片上的点阵电致变色材料层进行变色，对所述目标物进行遮挡；其中，所述点阵电致变色材料层敷设在所述镜片上的外侧；
绘制模块630，用于在所述镜片上的所述坐标范围对应区域绘制虚拟图案。
本申请实施例所提供的增强现实设备的显示装置600，能够根据目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域，得到对应的坐标范围，改变该坐标范围对应至该点阵电致变色材料层的透明度，以改变对应镜片区域的明暗度，并在该坐标范围上重新绘制新的虚拟图案，从而避免了现实场景的光线对虚拟图像的影响，确保虚拟图像在增强现实设备中的整体画面的清晰度。
基于与本申请实施例中所示的方法相同的原理，本申请实施例中还提供了一种电子设备，该电子设备可以包括但不限于：处理器和存储器；存储器，用于存储计算机操作指令；处理器，用于通过调用计算机操作指令执行实施例所示的方法。与现有技术相比，本申请实施例中的电子设备能够根据目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域，得到对应的坐标范围，改变该坐标范围对应至该点阵电致变色材料层的透明度，以改变对应镜片区域的明暗度，并在该坐标范围上重新绘制新的虚拟图案，从而避免了现实场景的光线对虚拟图像的影响，确保虚拟图像在增强现实设备中的整体画面的清晰度。
参照图7，图7为本申请一个实施例所提供的一种增强现实设备的显示的电子设备的结构示意图。
在一个可选实施例中提供了一种电子设备，如图7所示，图7所示的电子设备700包括：处理器701和存储器703。其中，处理器701和存储器703相连，如通过总线702相连。可选地，电子设备700还可以包括收发器704。需要说明的是，实际应用中收发器704不限于一个，该电子设备700的结构并不构成对本申请实施例的限定。
其中，电子设备包括但不限于：移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图7示出的电子设备仅仅是一个示例，不应对本申请实施例的功能和使用范围带来任何限制。
本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，当其在计算机上运行时，使得计算机可以执行前述方法实施例中相应内容。与现有技术相比，本申请实施例中的计算机可读存储介质能够使得该增强现实设备避免现实场景的光线对虚拟图像的影响，确保虚拟图像在增强现实设备中的整体画面的清晰度。
上述计算机可读介质可以是上述电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备执行上述实施例所示的方法。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本申请中所涉及的公开范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述公开构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (12)

1.一种增强现实设备的显示方法，其特征在于，包括以下步骤：
获取目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域，以及所述光线区域在镜片上的坐标范围；
根据所述坐标范围控制所述镜片上的点阵电致变色材料层进行变色，对所述目标物进行遮挡；其中，所述点阵电致变色材料层敷设在所述镜片上的外侧；
在所述镜片上的所述坐标范围对应区域绘制虚拟图案。
2.根据权利要求1所述的方法，其特征在于，所述获取目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域的步骤，包括：
获取目标物图像；
根据所述目标物图像与图像接收区域的距离和尺寸，计算所述目标物与图像接收区域之间的光路在所述镜片上的显示区域；
根据所述显示区域确定光线区域。
3.根据权利要求2所述的方法，其特征在于，所述根据所述显示区域确定光线区域的步骤，包括：
根据所述显示区域所覆盖的电致变色子块的集合，将所述电致变色子块的集合的区域对应于所述镜片的区域确定为光线区域；
其中，所述电致变色子块是在所述点阵电致变色材料层上划分的多个所述电致变色子单元，每个所述电致变色子块紧密组合，并根据对每个所述电致变色子块所添加的电场控制各自区域的透明度。
4.根据权利要求3所述的方法，其特征在于，
所述根据所述坐标范围控制所述镜片上的点阵电致变色材料层进行变色的步骤包括：
根据所述光线区域在镜片上的坐标范围，得到敷设在所述坐标范围的镜片区域上的电致变色子块的集合；
向所述集合中所有电致变色子块的所添加的电场进行控制，使得所述电致变色子块所对应区域变色。
5.根据权利要求2所述的方法，其特征在于，所述获取目标物图像的步骤，包括：
获取实景图像，将所述实景图像与预设图像的形状相匹配，确认所述实景图像中包含目标物图像。
6.根据权利要求2所述的方法，其特征在于，所述在所述镜片上的所述坐标范围对应区域绘制虚拟图案的步骤，包括：
根据所述目标物图像确定添加的虚拟图案，在所述坐标范围的区域上绘制所述虚拟图案。
7.根据权利要求6所述的方法，其特征在于，还包括：
获取所述显示区域边缘色度和亮度；
根据所述色度和亮度对所述绘制的虚拟图案的边缘区域进行渲染。
8.一种增强现实设备的显示装置，其特征在于，包括：
坐标获取模块，用于获取目标物与图像接收区域之间的光路对应在镜片上所形成的光线区域，以及所述光线区域在镜片上的坐标范围；
变色模块，用于根据所述坐标范围控制所述镜片上的点阵电致变色材料层进行变色，对所述目标物进行遮挡；其中，所述点阵电致变色材料层敷设在所述镜片上的外侧；
绘制模块，用于在所述镜片上的所述坐标范围对应区域绘制虚拟图案。
9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1至7任一项所述的增强现实设备的显示方法。
10.一种电子设备，其特征在于，包括：
一个或多个处理器；
存储器；
一个或多个计算机程序，其中所述一个或多个计算机程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个计算机程序配置用于执行根据权利要求1至7任一项所述的增强现实设备的显示方法。
11.一种增强现实设备，其特征在于，包括：
一显示装置，所述显示装置包括镜片和外侧敷设点阵电致变色材料层；其中，所述点阵电致变色材料层用于调节所敷设区域的透明度；
一控制器，用于向所述点阵电致变色材料层添加电场的控制信号，控制任一像素点的颜色和亮度所指定的坐标范围区域进行遮挡，以及向所述镜片的坐标范围发出绘制虚拟图案的控制信号。
12.根据权利要求11所述的增强现实设备，其特征在于，
所述点阵电致变色材料层包括多个电致变色子块，每个所述电致变色子块紧密组合，并根据对每个所述电致变色子块所添加的电场控制各自区域的透明度。
CN202110459994.3A 2021-04-27 2021-04-27 增强现实设备的显示方法、装置和增强现实设备 Active CN115248501B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110459994.3A CN115248501B (zh) 2021-04-27 2021-04-27 增强现实设备的显示方法、装置和增强现实设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110459994.3A CN115248501B (zh) 2021-04-27 2021-04-27 增强现实设备的显示方法、装置和增强现实设备

Publications (2)

Publication Number Publication Date
CN115248501A true CN115248501A (zh) 2022-10-28
CN115248501B CN115248501B (zh) 2023-11-21

Family

ID=83695898

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110459994.3A Active CN115248501B (zh) 2021-04-27 2021-04-27 增强现实设备的显示方法、装置和增强现实设备

Country Status (1)

Country Link
CN (1) CN115248501B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4312191A1 (en) * 2022-07-29 2024-01-31 FUJI-FILM Corporation Image processing device, glasses-type information display device, image processing method, and image processing program

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105974589A (zh) * 2016-06-24 2016-09-28 赵宇 一种头戴式护目镜的近眼式显示器
US20170090194A1 (en) * 2015-09-24 2017-03-30 Halo Augmented Reality Ltd. System And Method For Subtractive Augmented Reality And Display Contrast Enhancement
CN106990532A (zh) * 2017-03-29 2017-07-28 张卓鹏 一种具有遮挡效应的增强现实显示系统及显示方法
US20170256095A1 (en) * 2016-03-02 2017-09-07 Siemens Medical Solutions Usa, Inc. Blocking screen in Augmented Reality
US20170323615A1 (en) * 2016-05-05 2017-11-09 Ostendo Technologies, Inc. Methods and Apparatus for Active Transparency Modulation
CN108537889A (zh) * 2018-03-26 2018-09-14 广东欧珀移动通信有限公司 增强现实模型的调整方法、装置、存储介质和电子设备
CN108830940A (zh) * 2018-06-19 2018-11-16 广东虚拟现实科技有限公司 遮挡关系处理方法、装置、终端设备及存储介质
CN110149458A (zh) * 2018-02-13 2019-08-20 中兴通讯股份有限公司 增强现实视觉元素显示的方法和装置
CN110349271A (zh) * 2019-07-11 2019-10-18 Oppo广东移动通信有限公司 透镜颜色调节方法、装置、存储介质及增强现实设备
CN110727109A (zh) * 2019-10-18 2020-01-24 蒂姆维澳(上海)网络技术有限公司 Ar眼镜及其控制方法
US20200184726A1 (en) * 2018-12-05 2020-06-11 Geun Sik Jo Implementing three-dimensional augmented reality in smart glasses based on two-dimensional data
CN112255800A (zh) * 2020-11-09 2021-01-22 Oppo广东移动通信有限公司 图像显示的控制方法及增强现实设备、装置、计算机可读存储介质
CN112581629A (zh) * 2020-12-09 2021-03-30 中国科学院深圳先进技术研究院 增强现实显示方法、装置、电子设备及存储介质
CN112616048A (zh) * 2020-12-14 2021-04-06 京东方科技集团股份有限公司 Ar眼镜及其显示方法和系统、图像处理方法及设备

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170090194A1 (en) * 2015-09-24 2017-03-30 Halo Augmented Reality Ltd. System And Method For Subtractive Augmented Reality And Display Contrast Enhancement
US20170256095A1 (en) * 2016-03-02 2017-09-07 Siemens Medical Solutions Usa, Inc. Blocking screen in Augmented Reality
US20170323615A1 (en) * 2016-05-05 2017-11-09 Ostendo Technologies, Inc. Methods and Apparatus for Active Transparency Modulation
CN105974589A (zh) * 2016-06-24 2016-09-28 赵宇 一种头戴式护目镜的近眼式显示器
CN106990532A (zh) * 2017-03-29 2017-07-28 张卓鹏 一种具有遮挡效应的增强现实显示系统及显示方法
CN110149458A (zh) * 2018-02-13 2019-08-20 中兴通讯股份有限公司 增强现实视觉元素显示的方法和装置
CN108537889A (zh) * 2018-03-26 2018-09-14 广东欧珀移动通信有限公司 增强现实模型的调整方法、装置、存储介质和电子设备
CN108830940A (zh) * 2018-06-19 2018-11-16 广东虚拟现实科技有限公司 遮挡关系处理方法、装置、终端设备及存储介质
US20200184726A1 (en) * 2018-12-05 2020-06-11 Geun Sik Jo Implementing three-dimensional augmented reality in smart glasses based on two-dimensional data
CN110349271A (zh) * 2019-07-11 2019-10-18 Oppo广东移动通信有限公司 透镜颜色调节方法、装置、存储介质及增强现实设备
CN110727109A (zh) * 2019-10-18 2020-01-24 蒂姆维澳(上海)网络技术有限公司 Ar眼镜及其控制方法
CN112255800A (zh) * 2020-11-09 2021-01-22 Oppo广东移动通信有限公司 图像显示的控制方法及增强现实设备、装置、计算机可读存储介质
CN112581629A (zh) * 2020-12-09 2021-03-30 中国科学院深圳先进技术研究院 增强现实显示方法、装置、电子设备及存储介质
CN112616048A (zh) * 2020-12-14 2021-04-06 京东方科技集团股份有限公司 Ar眼镜及其显示方法和系统、图像处理方法及设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4312191A1 (en) * 2022-07-29 2024-01-31 FUJI-FILM Corporation Image processing device, glasses-type information display device, image processing method, and image processing program

Also Published As

Publication number Publication date
CN115248501B (zh) 2023-11-21

Similar Documents

Publication Publication Date Title
US20230377183A1 (en) Depth-Aware Photo Editing
WO2021208648A1 (zh) 虚拟对象调整方法、装置、存储介质与增强现实设备
CN108525298B (zh) 图像处理方法、装置、存储介质及电子设备
JP5366547B2 (ja) 立体視表示装置
US9838673B2 (en) Method and apparatus for adjusting viewing area, and device capable of three-dimension displaying video signal
US20180130264A1 (en) Virtual reality editor
US20110216206A1 (en) Media viewing
CN108701351B (zh) 一种图像显示增强方法及装置
CN110166680A (zh) 设备成像方法、装置、存储介质及电子设备
CN114399437A (zh) 一种图像处理方法、装置、电子设备及存储介质
CN111095348A (zh) 基于摄像头的透明显示器
EP3664445A1 (en) Image processing method and device therefor
CN115248501B (zh) 增强现实设备的显示方法、装置和增强现实设备
CN109271123B (zh) 一种画面显示方法及画面显示装置
US9767580B2 (en) Apparatuses, methods, and systems for 2-dimensional and 3-dimensional rendering and display of plenoptic images
CN110312075A (zh) 设备成像方法、装置、存储介质及电子设备
CN110545375B (zh) 图像处理方法、装置、存储介质及电子设备
US10902669B2 (en) Method for estimating light for augmented reality and electronic device thereof
US11651529B2 (en) Image processing method, apparatus, electronic device and computer readable storage medium
EP2860697A1 (en) Method for displaying a content through a head mounted display device, corresponding electronic device and computer program product
US20180241982A1 (en) Method, apparatus and computer program product for generating composite images with three-dimensional effects and reducing pole contraction lines
RU2802724C1 (ru) Способ и устройство обработки изображений, электронное устройство и машиночитаемый носитель информации
US12001746B2 (en) Electronic apparatus, and method for displaying image on display device
CN116310020A (zh) 一种反光效果实现方法、装置、计算机设备和存储介质
CN113012015A (zh) 水印添加方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant