CN111273885A - 一种ar图像显示方法及ar设备 - Google Patents

一种ar图像显示方法及ar设备 Download PDF

Info

Publication number
CN111273885A
CN111273885A CN202010130272.9A CN202010130272A CN111273885A CN 111273885 A CN111273885 A CN 111273885A CN 202010130272 A CN202010130272 A CN 202010130272A CN 111273885 A CN111273885 A CN 111273885A
Authority
CN
China
Prior art keywords
image
environment
target
mask
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010130272.9A
Other languages
English (en)
Inventor
奉金龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN202010130272.9A priority Critical patent/CN111273885A/zh
Publication of CN111273885A publication Critical patent/CN111273885A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明实施例提供一种AR图像显示方法及AR设备,涉及通信技术领域,以解决现有的AR设备显示的AR图像质量较差的问题。该方法包括:获取AR设备所处环境的目标环境参数;根据目标环境参数,生成图像蒙版;将图像蒙版与目标AR图像进行叠加,得到适配环境色彩的图像像素数据;根据所述图像像素数据,显示相应的AR图像。该AR设备应用于显示AR图像的场景中。

Description

一种AR图像显示方法及AR设备
技术领域
本发明实施例涉及通信技术领域,尤其涉及一种AR图像显示方法及AR设备。
背景技术
随着增强现实(augmented reality,AR)技术的高速发展,各种各样的AR设备应运而生。
AR设备可以向用户呈现AR图像。具体的,以AR眼镜为例,AR眼镜中的近眼成像系统可以叠加AR眼镜所处环境的真实画面和AR眼镜中的微型显示器中的虚拟画面,然后再通过近眼成像系统中的一系列光学成像元件形成远处的虚像(即AR图像),并投射到人眼中。
然而,由于AR眼镜显示的AR图像是近眼成像系统将获取的外部环境的画面和虚拟画面直接叠加后的图像,因此当AR眼镜处于比较恶劣的环境(例如环境中光线较强或较弱)中时,可能使得AR眼镜获取的外部环境的画面质量较差,从而导致叠加后的AR图像质量较差。
发明内容
本发明实施例提供一种AR图像显示方法及AR设备,以解决现有的AR设备显示的AR图像质量较差的问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本发明实施例提供了一种AR图像显示方法,该方法可以应用于AR设备,该方法包括:获取AR设备所处环境的目标环境参数;且根据目标环境参数,生成图像蒙版;以及将图像蒙版与目标AR图像进行叠加,得到适配环境色彩的图像像素数据;并根据图像像素数据,显示相应的AR图像。
第二方面,本发明实施例提供一种AR设备,该AR设备包括获取模块、生成模块、叠加模块和显示模块。获取模块,用于获取AR设备所处环境的目标环境参数;生成模块,用于根据获取模块获取的目标环境参数,生成图像蒙版;叠加模块,用于将生成模块生成的图像蒙板与目标AR图像进行叠加,得到适配环境色彩的图像像素数据;显示模块,用于根据叠加模块叠加得到的图像像素数据,显示相应的AR图像。
第三方面,本发明实施例提供了一种AR设备,包括处理器、存储器及存储在该存储器上并可在该处理器上运行的计算机程序,该计算机程序被该处理器执行时实现如第一方面所述的AR图像显示方法的步骤。
第四方面,本发明实施例提供了一种计算机可读存储介质,该计算机可读存储介质上存储计算机程序,该计算机程序被处理器执行时实现如第一方面所述的AR图像显示方法的步骤。
在本发明实施例中,可以获取AR设备所处环境的目标环境参数;且根据目标环境参数,生成图像蒙版;以及将图像蒙版与目标AR图像进行叠加,得到适配环境色彩的图像像素数据;并根据该图像像素数据,显示相应的AR图像。通过该方案,由于在AR设备显示AR图像的过程中,AR设备可以根据AR设备所处环境的目标环境参数,生成图像蒙版,然后将该图像蒙版叠加在AR设备中的目标AR图像上,因此可以使得AR设备显示的AR图像与AR设备当前所处的环境适配,从而可以提高AR设备显示的AR图像的质量。
附图说明
图1为本发明实施例提供的一种可能的操作系统的架构示意图;
图2为本发明实施例提供的一种AR图像显示方法的流程示意图之一;
图3为本发明实施例提供的一种AR眼镜的结构示意图;
图4为本发明实施例提供的一种AR设备的示意图;
图5为本发明实施例提供的一种AR图像显示方法的流程示意图之二;
图6为本发明实施例提供的一种AR设备的结构示意图;
图7为本发明实施例提供的一种AR设备的硬件示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本文中的“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。“多个”是指两个或多于两个。
在本发明实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本发明实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
在本发明实施例的描述中,除非另有说明,“多个”的含义是指两个或者两个以上,例如,多个元件是指两个或者两个以上的元件等。
本发明实施例提供一种AR图像显示方法及AR设备,可以获取AR设备所处环境的目标环境参数;且根据目标环境参数,生成图像蒙版;以及将图像蒙版与目标AR图像进行叠加,得到适配环境色彩的图像像素数据;并根据该图像像素数据,显示相应的AR图像。通过该方案,由于在AR设备显示AR图像的过程中,AR设备可以根据AR设备所处环境的目标环境参数,生成图像蒙版,然后将该图像蒙版叠加在AR设备中的目标AR图像上,因此可以使得AR设备显示的AR图像与AR设备当前所处的环境适配,从而可以提高AR设备显示的AR图像的质量。
本发明实施例中的AR设备可以为具有操作系统的AR设备。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本发明实施例不作具体限定。
下面以一种可能的操作系统为例,介绍本发明实施例提供的AR图像显示方法所应用的软件环境。
如图1所示,为本发明实施例提供的一种可能的操作系统的架构示意图。在图1中,操作系统的架构包括4层,分别为:应用程序层、应用程序框架层、系统运行库层和内核层(具体可以为Linux内核层)。
其中,应用程序层包括操作系统中的各个应用程序(包括系统应用程序和第三方应用程序)。
应用程序框架层是应用程序的框架,开发人员可以在遵守应用程序的框架的开发原则的情况下,基于应用程序框架层开发一些应用程序。
系统运行库层包括库(也称为系统库)和操作系统运行环境。库主要为操作系统提供其所需的各类资源。操作系统运行环境用于为操作系统提供软件环境。
内核层是操作系统的操作系统层,属于操作系统软件层次的最底层。内核层基于Linux内核为操作系统提供核心系统服务和与硬件相关的驱动程序。
以操作系统为例,本发明实施例中,开发人员可以基于上述如图1所示的操作系统的系统架构,开发实现本发明实施例提供的AR图像显示方法的软件程序,从而使得该AR图像显示方法可以基于如图1所示的操作系统运行。即处理器或者AR设备可以通过在操作系统中运行该软件程序实现本发明实施例提供的AR图像显示方法。
本发明实施例提供的AR图像显示方法的执行主体可以为上述的AR设备,也可以为该AR设备中能够实现该AR图像显示方法的功能模块和/或功能实体,具体的可以根据实际使用需求确定,本发明实施例不作限定。下面以AR电子设备为例,对本发明实施例提供的AR图像显示方法进行示例性的说明。
本发明实施例中,在AR设备使用的过程中,AR设备可以将AR设备所处的外部环境的画面和AR设备中的虚拟画面叠加,并形成虚像投射到用户的眼中,如此可以使得用户看到AR图像。为了提高AR设备显示的AR图像的质量,AR设备可以根据AR设备的使用环境,对AR设备中的待显示的AR图像进行处理,从而使得AR设备显示的AR图像的与AR设备当前所处的环境适配,从而提高AR设备显示的AR图像的质量,进而适合用户长时间观看。
需要说明的是,本发明实施例中提及的AR设备可以为AR手机或AR眼镜等任意可能的AR设备。其中,本发明实施例是以AR眼镜为例进行示例性说明的,其并不对本申请造成任何限定。实际实现时,AR设备的类型具体可以根据实际使用需求确定,本发明实施例不做限定。
下面结合各个附图,对本发明实施例提供的AR图像显示方法进行示例性的说明。
如图2所示,本发明实施例提供一种AR图像显示方法,该方法应用于AR设备,该方法可以包括下述的S201-S204。
S201、AR设备获取AR设备所处环境的目标环境参数。
本发明实施例中,当AR设备显示AR图像时,AR设备可以先获取AR设备所处环境的目标环境参数,如此可以根据该目标环境参数,对AR设备中待显示的AR图像(例如本发明实施例中的目标AR图像)处理,从而可以使得AR设备显示的AR图像与其当前所处的环境适配,进而可以提高AR设备显示的AR图像的质量。
需要说明的是,本发明实施例中,上述AR设备所处环境可以为AR设备当前的使用环境。
另外,本发明实施例中,上述目标AR图像可以理解为:AR设备获取的AR设备所处环境的画面(即真实环境的画面)和AR设备中的虚拟画面叠加后的图像,也可以称为目标AR画面。
可选的,本发明实施例中,AR设备可以通过AR设备中的目标传感器,获取上述目标环境参数。
可选的,本发明实施例中,上述目标传感器可以为一个传感器,也可以为多个传感器集成的传感器,还可以包括多个独立的传感器。具体可以根据实际使用需求确定,本发明实施例不作限定。
本发明实施例中,上述目标环境参数可以包括至少一种用于指示AR设备所处环境的光线环境的参数。
可选的,本发明实施例中,上述目标环境参数可以包括AR设备所处环境的光线亮度值和AR设备所处环境的环境颜色值。
当然,实际实现时,上述目标环境参数还可以包括其它任意可能的参数,具体可以根据实际使用需求确定,本发明实施例不作限定。
可选的,本发明实施例中,在上述目标环境参数包括AR设备所处环境的光线亮度值和AR设备所处环境的环境颜色值的情况下,上述S201具体可以通过下述的S201a实现。
S201a、AR设备获取光线亮度值和环境颜色值。
本发明实施例中,当AR设备显示AR图像时,AR设备可以先获取上述光线亮度值和环境颜色值,从而根据该光线亮度值和环境颜色值确定AR设备当前所处的环境,进而可以对AR设备中目标AR图像进行处理,以使得其显示的AR图像与AR设备当前所处的环境适配。
可选的,本发明实施例中,上述光线亮度值和环境颜色值可以通过AR设备中的同一个传感器获取,也可以通过AR设备中的不同传感器获取。具体可以根据实际使用需求确定,本发明实施例不作限定。
可选的,本发明实施例中,在上述光线亮度值和环境颜色值通过AR设备中的同一个传感器获取的情况下,该传感器可以先获取光线亮度值,也可以先获取环境颜色值,还可以同时获取光线亮度值和环境颜色值。具体可以根据实际使用需求确定,本发明实施例不作限定。
可选的,本发明实施例中,AR设备可以通过AR设备中的光线传感器,获取上述光线亮度值。其中,该光线传感器也可以称为光线感应器。
需要说明的是,本发明实施例中,上述光线亮度值可以为AR设备所处环境的太阳光的亮度值,该光线亮度值的大小可以用于表示AR设备所处环境的太阳光的光线亮度的强弱。
示例性的,如果光线传感器获取的光线亮度值比较小,那么可以表示AR设备所处环境的太阳光的光线亮度比较弱;如果光线传感器获取的光线亮度值比较大,那么可以表示AR设备所处环境的太阳光的光线亮度比较强。
本发明实施例中,上述光线传感器可以实时地获取(也可以称为捕获)AR设备所处环境的太阳光的光线亮度值。
可选的,本发明实施例中,AR设备可以通过AR设备中的色彩传感器获取上述环境颜色值。其中,该色彩传感器也可以称为颜色识别传感器或颜色传感器。
本发明实施例中,上述环境颜色值可以为AR设备所处环境的红、绿、蓝(即RGB)颜色色值。
本发明实施例中,上述色彩传感器可以实时地获取(或捕获)AR设备所处环境的RGB颜色色值。
示例性的,本发明实施例中,以上述AR设备为AR眼镜为例,如图3所示,光线传感器11a和色彩传感器11b可以均设置在AR眼镜的正面中部的位置。如此,可以便于光线传感器和色彩传感器获取AR眼镜所处环境的光线环境的参数,并且可以使得AR眼镜的重量比较均衡。
当然,实际实现时,上述光线传感器和色彩传感器还可以设置在AR眼镜其它任意可能的位置,具体可以根据实际使用需求确定,本发明实施例不作限定。
本发明实施例中,由于上述光线传感器可以实时地获取AR设备所处环境的太阳光的光线亮度值,色彩传感器可以实时地获取AR设备所处环境的RGB颜色值,因此AR设备可以实时且准确地获取AR设备当前所处环境的环境参数,如此当AR设备所处环境发生变化时,AR设备能够及时对其显示的AR图像处理,以使得该AR图像与AR设备所处环境适配,从而可以使得AR设备显示的AR图像能够与各种环境适配。
S202、AR设备根据目标环境参数,生成图像蒙版。
本发明实施例中,在AR设备获取到上述目标环境参数之后,AR设备可以根据该目标环境参数,生成上述图像蒙版,从而采用该图像蒙版对AR设备中的目标AR图像进行处理。
可选的,本发明实施例中,AR设备可以通过AR设备中的色彩计算系统,生成上述图像蒙版。
可选的,本发明实施例中,色彩计算系统,可以根据目标环境参数,计算得到蒙版图像色彩值,从而根据该蒙版图像色彩值,得到上述图像蒙版,如此可以生成上述图像蒙版。
需要说明的是,本发明实施例中,上述蒙版图像色彩值包括可以图像的亮度和图像的RGB颜色色值。
可选的,本发明实施例中,上述色彩计算模块可以通过图像调整算法、亮度调整算法和色彩调节算法中的至少一项计算上述蒙版图像色彩值。
当然,实际实现时,色彩计算模块还可以通过其它任意可能的算法计算上述蒙版图像色彩值,具体可以根据实际使用需求确定,本发明实施例不作限定。
本发明实施例中,色彩计算系统可以根据上述目标环境参数,确定AR设备当前所处环境,然后根据该目标环境参数进行匹配计算,得到适配环境(即AR设备当前所处环境)色彩的蒙版图像色彩值,从而可以根据该蒙版图像色彩值,得到上述图像蒙版。
可选的,本发明实施例中,色彩计算系统可以采用图层叠加的方式进行设计。如此,AR设备获取到上述目标环境参数之后,色彩计算系统可以立即将目标环境参数分解成四层图像蒙版(具体可以为四层图像蒙版的参数值),分别为亮度层(A层),R层,G层,B层。然后色彩计算模块可以再根据AR设备使用的场景分别对这四层图像蒙版的参数值调节进行,然后合并该四层图像蒙版的参数值,得到上述蒙版图像色彩值,该蒙版图像色彩值指示的图像蒙版即为上述图像蒙版。也就是说,该四层图像蒙版的参数值,最后可以形成一个合成的图像蒙版,即上述图像蒙版。
可选的,本发明实施例中,在上述目标环境参数包括光线亮度值和环境颜色值的情况下,在AR设备获取到光线亮度值和环境颜色值之后,色彩计算系统可以根据光线亮度值和环境颜色值,计算出适合AR设备当前的使用环境的蒙版图像色彩值,从而生成上述图像蒙版。具体的,色彩计算系统可以根据该光线亮度值和环境颜色值确定AR设备当前的使用环境,从而可以根据其当前的使用环境,计算得到适配环境色彩的蒙版图像色彩值,从而生成适配环境色彩的图像蒙版,从而可以使得该图像蒙版叠加在目标AR图像之后,AR设备可以得到适配环境色彩的图像像素数据,以使得AR设备根据该图像像素数据显示的AR图像的色彩(包括亮度、色彩等)比较适中,适合人眼观看,从而可以提高AR设备显示的AR图像的质量。
示例性的,如图4所示,光线传感器11a在获取到AR设备所处环境的光线亮度值之后,光线传感器11a可以向色彩计算系统12发送该光线亮度值,色彩传感器11b在获取到AR设备所处环境的环境颜色值之后,色彩传感器11b可以向色彩计算系统12发送该环境颜色值,如此色彩计算系统12可以根据该光线亮度值和该环境颜色值,计算得到适配AR设备当前所处环境色彩的蒙版图像色彩值,从而得到适配AR设备当前所处环境色彩的图像蒙版。
本发明实施例中,当上述光线亮度值比较大时,AR设备可以确定AR设备当前所处环境的太阳光的光线亮度比较强,那么AR设备生成的图像蒙版可以使得目标AR图像的光线亮度降低,从而可以使得AR设备显示的目标AR图像的显示亮度比较柔和,适合人眼观看,从而可以提高AR设备显示的目标AR图像的质量。
可选的,本发明实施例中,AR设备可以结合AR设备的使用场景,生成上述图像蒙版。
本发明实施例中,上述AR设备的使用场景可以包括AR设备的预设使用模式。
当然,实际实现时,上述AR设备的使用场景还可以包括其它任意可能的信息,具体可以根据实际使用需求确定,本发明实施例不作限定。
可选的,本发明实施例中,上述S202具体可以通过下述的S202a实现。
S202a、根据目标环境参数和AR设备的预设使用模式,生成图像蒙版。
本发明实施例中,在AR设备获取到上述目标环境参数之后,AR设备可以结合该目标环境参数和上述预设使用模式,生成上述图像蒙版。
可选的,本发明实施例中,上述预设使用模式可以为AR设备的厂商在AR设备中预设的使用模式,也可以为AR设备的厂商提供设置接口,用户在AR设备中预设的使用模式,具体可以根据实际使用需求确定,本发明实施例不作限定。
可选的,本发明实施例中,上述预设使用模式可以为护眼模式、夜间模式或者阅读模式等任意可能的模式。具体可以根据实际使用需求确定,本发明实施例不作限定。
示例性的,假设上述预设模式为护眼模式,AR设备可以根据上述目标环境参数和护眼模式对应的显示参数,对生成相应的图像蒙版,以使得该蒙版叠加在目标AR图像之后,符合护眼使用需求,从而不保证用户长时间使用AR设备时,其视力健康不受损害。
本发明实施例中,由于预设使用模式可以表示用户的使用需求,因此AR设备结合预设使用模式和目标环境参数生成的图像蒙版,可以使得通过图像蒙版处理后的目标AR图像最大程度符合用户的使用需求,从而使得AR设备显示的AR图像满足用户的使用需求。
S203、AR设备将图像蒙版与目标AR图像进行叠加,得到适配环境色彩的图像像素数据。
本发明实施例中,在AR设备生成上述图像蒙版之后,AR设备可以将该图像蒙版与上述目标AR图像叠加,从而得到上述适配环境色彩的图像像素数据。
可选的,本发明实施例中,上述AR设备将图像蒙版与目标AR图像进行叠加具体可以为:将图像蒙版对应的蒙版图像色彩值与目标AR图像对应的的色彩值(也可以称为AR图像的显示参数值)进行叠加,从而可以得到叠加后的显示参数值,即可以得到上述适配环境色彩的图像像素数据。
可选的,本发明实施例中,上述S203具体可以通过下述的S203a实现。
S203a、AR设备将图像蒙版对应的蒙版图像色彩值与目标AR图像对应的色彩值叠加,得到图像像素数据。
本发明实施例中,AR设备可以将上述图像蒙版对应的蒙版图像色彩值与目标AR图像对应的色彩值叠加,从而可以得到上述适配环境色彩的图像像素数据。
可选的,本发明实施例中,AR设备中的微型显示系统可以对上述目标AR图像对应的色彩值和上述蒙版图像色彩值进行叠加处理。具体的,当其接收到AR设备真实需要绘制的AR图像(即上述目标AR图像)和色彩计算模块生成的图像蒙版时,微型显示模块可以获取目标AR图像对应的色彩值,并获取图像蒙版对应的蒙版图像色彩值,从而将二者进行叠加,如此可以生成最后的具有适配环境色彩的图像像素数据(也可以称为画面像素数据)。
示例性的,如图4所示,在色彩计算系统12计算得到适配AR设备当前所处环境的蒙版图像色彩值之后,微型显示系统13可以将该蒙版图像色彩值和目标AR图像对应的色彩值进行叠加,从而可以得到上述适配环境色彩的图像像素数据,进而得到适合人眼观看的AR图像的显示参数值。
S204、AR设备根据图像像素数据,显示相应的AR图像。
本发明实施例中,在AR设备得到上述适配环境色彩的图像像素数据之后,AR设备可以按照该图像像素数据显示AR图像,即显示相应的AR图像。
可以理解,上述AR设备显示的AR图像可以为上述目标AR图像叠加上述图像蒙版后的AR图像,以下称为图像像素数据对应的AR图像。
可选的,本发明实施例中,AR设备中的目标显示器可以显示上述图像像素数据对应的AR图像显示。
可选的,本发明实施例中,目标显示器还可以对上述进行图像像素数据对应的AR图像渲染。
本发明实施例中,AR设备的显示系统可以为将各种微型显示屏、棱镜、自由曲面、birdbath、光波导等光学元件的组合在一起的系统。其中,微型显示屏(即本发明实施例中的目标显示器)可以用来为AR设备提供显示内容。微型显示屏可以为自发光的有源器件,也可以为需要外部光源照明的液晶显示屏,还可以为基于微机电系统(micro electromechanical system,MEMS)技术的数字微镜阵列(digital micro-mirror device,DMD)和激光束扫描仪(laser beam scanning,LBS)。具体可以根据实际使用需求确定,本发明实施例不作限定。
需要说明的是,上述DMD可以为数字式光处理器(digital light processing,DLP)的核心。
可选的,本发明实施例中,当微型显示屏为自发光的有源器件时,该微型显示屏可以为发光二极管面板,例如微型有机发光二极管(micro organic light-emitting diode,micro-OLED)或微型发光二极管(micro light-emitting diode,micro-LED)。具体可以根据实际使用需求确定,本发明实施例不作限定。
可选的,本发明实施例中,当微型显示屏为需要外部光源照明的液晶显示屏时,该微型显示屏可以为透射式的液晶显示器(liquid crystal display,LCD);或为反射式的液晶附硅(liquid crystal on silicon,LCOS),也可以称为硅基液晶。具体可以根据实际使用需求确定,本发明实施例不作限定。
本发明实施例提供一种AR图像显示方法,由于在AR设备显示AR图像的过程中,AR设备可以根据AR设备所处环境的目标环境参数,生成图像蒙版,然后将该图像蒙版叠加在AR设备中的目标AR图像上,因此可以使得AR设备显示的AR图像与AR设备当前所处的环境适配,从而可以提高AR设备显示的AR图像的质量。
可选的,本发明实施例中,如果用户认为AR设备显示的AR图像与其想要观看的AR图像的画面参数不一致,用户可以通过在AR设备上的输入,触发AR设备生成参数调节指令,从而可以触发AR设备调节其显示的AR图像的显示参数。
示例性的,结合图2,如图5所示,本发明实施例提供的AR图像显示方法还可以包括下述的S205和S206。
S205、AR设备根据用户的输入指令,生成参数调节指令。
其中,上述输入指令用于指示调节AR设备显示的AR图像的显示参数。
S206、AR设备根据参数调节指令,调节AR设备显示的AR图像的显示参数。
本发明实施例中,如果用户想要触发AR设备调节AR设备显示的AR图像的显示参数,那么用户可以通过在AR设备上的输入,触发AR设备生成上述参数调节指令,然后AR设备可以根据该参数调节指令,调节AR设备显示的AR图像的显示参数。
可以理解,在AR设备调节其显示的AR图像的显示参数之后,用户观看到的AR图像的色彩发生变化。
可选的,本发明实施例中,用户可以在AR设备的调节控制器上输入,触发调节控制器生成上述参数调节指令。
可选的,本发明实施例中,上述参数调节指令中可以携带有AR设备显示的AR图像的显示参数的调整值;或者上述参数调节指令中可以携带有AR设备显示的AR图像调整后的画面参数值。
当然,实际实现时,参数调节指令中还可以包括其它任意可能的信息,具体可以根据实际使用需求确定,本发明实施例不作限定。
可选的,本发明实施例中,上述调节控制器可以为亮度控制器,还可以为颜色控制器,还可以为色彩控制器(包括亮度控制器和颜色控制器),具体可以根据实际使用需求确定,本发明实施例不作限定。
当然,实际实现时,上述调节控制器还可以为其它任意可能的控制器,具体可以根据实际使用需求确定,本发明实施例不作限定。
可选的,本发明实施例中,上述调节控制器可以设置在AR设备中便于用户操作的位置。
可选的,本发明实施例中,在上述AR设备为AR眼镜的情况下,上述调节控制器可以设置在AR眼镜的镜框的侧边,或者可以设置在AR眼镜的镜腿上。具体可以根据实际使用需求确定,本发明实施例不作限定。
示例性的,在AR设备为AR眼镜的情况下,如图3所示,调节控制器14可以设置在AR眼镜的境况的左侧边,即AR眼镜的正面的左侧。
本发明实施例中,由于AR设备可以根据用户的输入指令,生成触发调节AR设备显示的AR图像的显示参数的参数调节指令,因此用户可以根据其观看需求,触发AR设备改变其显示的AR图像的显示参数,从而可以使得AR设备显示AR图像的方式比较灵活。
可选的,本发明实施例中,在上述S204之后,本发明实施例提供的AR图像显示方法还可以包括下述的S207。
S207、AR设备通过AR设备中的近眼成像系统,对显示的AR图像成像。
可以理解,上述近眼成像系统可以用于AR设备中的AR图像成像,从而可以使得用户观看到AR图像。
本发明实施例中,在AR设备显示上述图像像素数据对应的AR图像之后,近眼成像系统可以通过光学元件,对该AR图像成像,以使得该AR图像形成的远处的虚像,从而可以向用户呈现该AR图像,即用户可以清楚地观看到该AR图像。
本发明实施例提供一种AR设备300,如图6所示,该AR设备300包括获取模块301、生成模块302、叠加模块303和显示模块304。获取模块301,用于获取AR设备所处环境的目标环境参数;生成模块302,用于根据获取模块301获取的目标环境参数,生成图像蒙版;叠加模块303,用于将生成模块302生成的图像蒙板与目标AR图像进行叠加,得到适配环境色彩的图像像素数据;显示模块304,用于根据叠加模块303叠加得到的图像像素数据,显示相应的AR图像。
可选的,目标环境参数包括AR设备所处环境的光线亮度值和环境颜色值;获取模块301,具体用于获取光线亮度值和环境颜色值。
可选的,生成模块302,具体用于根据目标环境参数和AR设备的预设使用模式,生成图像蒙版。
可选的,叠加模块303,具体用于将图像蒙版对应的蒙版图像色彩值与目标AR图像对应的色彩值叠加,得到图像像素数据。
可选的,如图6所示,AR设备300还包括调节模块305。生成模块302,还用于根据用户的输入指令,生成参数调节指令,输入指令用于指示调节AR设备显示的AR图像的显示参数;调节模块305,用于根据生成模块302生成的参数调节指令,调节AR设备显示的AR图像的显示参数。
可选的,如图6所示,AR设备300还包括成像模块306。成像模块306,还用于在显示模块304显示相应的AR图像之后,通过AR设备中的近眼成像系统,对显示的AR图像成像。
本发明实施例提供一种AR设备,由于在AR设备显示AR图像的过程中,AR设备可以根据AR设备所处环境的目标环境参数,生成图像蒙版,然后将该图像蒙版叠加在AR设备中的目标AR图像上,因此可以使得AR设备显示的AR图像与AR设备当前所处的环境适配,从而可以提高AR设备显示的AR图像的质量。
图7为本发明实施例提供的一种AR设备的硬件示意图,该AR设备100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解,图7中示出的AR设备结构并不构成对AR设备的限定,AR设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,AR设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载AR设备、可穿戴设备、以及计步器等。
其中,处理器110,可以用于获取AR设备所处环境的目标环境参数,并根据目标环境参数,生成图像蒙版,以及将图像蒙板与目标AR图像进行叠加,得到适配环境色彩的图像像素数据;显示单元106可以用于根据处理器110得到的图像像素数据,显示相应的AR图像。
本发明实施例提供一种AR设备,由于在AR设备显示AR图像的过程中,AR设备可以根据AR设备所处环境的目标环境参数,生成图像蒙版,然后将该图像蒙版叠加在AR设备中的目标AR图像上,因此可以使得AR设备显示的AR图像与AR设备当前所处的环境适配,从而可以提高AR设备显示的AR图像的质量。
应理解的是,本发明实施例中,射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器110处理;另外,将上行的数据发送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过无线通信系统与网络和其他设备通信。
AR设备通过网络模块102为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元103可以将射频单元101或网络模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元103还可以提供与AR设备100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元103包括扬声器、蜂鸣器以及受话器等。
输入单元104用于接收音频或视频信号。输入单元104可以包括图形处理器(Graphics Processing Unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或网络模块102进行发送。麦克风1042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。
AR设备100还包括至少一种传感器105,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度,接近传感器可在AR设备100移动到耳边时,关闭显示面板1061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别AR设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器105还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板1061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板1061。
用户输入单元107可用于接收输入的数字或字符信息,以及产生与AR设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作)。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,接收处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071,用户输入单元107还可以包括其他输入设备1072。具体地,其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板1071可覆盖在显示面板1061上,当触控面板1071检测到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型,随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图7中,触控面板1071与显示面板1061是作为两个独立的部件来实现AR设备的输入和输出功能,但是在某些实施例中,可以将触控面板1071与显示面板1061集成而实现AR设备的输入和输出功能,具体此处不做限定。
接口单元108为外部装置与AR设备100连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到AR设备100内的一个或多个元件或者可以用于在AR设备100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器110是AR设备的控制中心,利用各种接口和线路连接整个AR设备的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块,以及调用存储在存储器109内的数据,执行AR设备的各种功能和处理数据,从而对AR设备进行整体监控。处理器110可包括一个或多个处理单元;优选的,处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
AR设备100还可以包括给各个部件供电的电源111(比如电池),可选的,电源111可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,AR设备100包括一些未示出的功能模块,在此不再赘述。
可选的,本发明实施例还提供一种AR设备,包括如图7所示的处理器110,存储器109,存储在存储器109上并可在处理器110上运行的计算机程序,该计算机程序被处理器110执行时实现上述AR图像显示方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被如图7所示的处理器执行时实现上述AR图像显示方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random AccessMemory,RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台AR设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (10)

1.一种增强现实AR图像显示方法,应用于AR设备,其特征在于,所述方法包括:
获取所述AR设备所处环境的目标环境参数;
根据所述目标环境参数,生成图像蒙版;
将所述图像蒙板与目标AR图像进行叠加,得到适配环境色彩的图像像素数据;
根据所述图像像素数据,显示相应的AR图像。
2.根据权利要求1所述的方法,其特征在于,所述目标环境参数包括所述AR设备所处环境的光线亮度值和环境颜色值;
所述获取所述AR设备所处环境的目标环境参数,包括:
获取所述光线亮度值和所述环境颜色值。
3.根据权利要求1所述的方法,其特征在于,所述根据所述目标环境参数,生成图像蒙版,包括:
根据所述目标环境参数和所述AR设备的预设使用模式,生成所述图像蒙版。
4.根据权利要求1所述的方法,其特征在于,所述将所述图像蒙版与目标AR图像进行叠加,得到适配环境色彩的图像像素数据,包括:
将所述图像蒙版对应的蒙版图像色彩值与所述目标AR图像对应的色彩值叠加,得到所述图像像素数据。
5.根据权利要求1至4中任一项所述的方法,其特征在于,所述方法还包括:
根据用户的输入指令,生成参数调节指令,所述输入指令用于指示调节所述AR设备显示的AR图像的显示参数;
根据所述参数调节指令,调节所述AR设备显示的AR图像的显示参数。
6.根据权利要求1至4中任一项所述的方法,其特征在于,所述显示相应的AR图像之后,所述方法还包括:
通过所述AR设备中的近眼成像系统,对显示的AR图像成像。
7.一种AR设备,其特征在于,所述AR设备包括获取模块、生成模块、叠加模块和显示模块;
所述获取模块,用于获取所述AR设备所处环境的目标环境参数;
所述生成模块,用于根据所述获取模块获取的所述目标环境参数,生成图像蒙版;
所述叠加模块,用于将所述生成模块生成的所述图像蒙板与目标AR图像进行叠加,得到适配环境色彩的图像像素数据;
所述显示模块,用于根据所述叠加模块叠加得到的所述图像像素数据,显示相应的AR图像。
8.根据权利要求7所述的AR设备,其特征在于,所述目标环境参数包括所述AR设备所处环境的光线亮度值和环境颜色值;
所述获取模块,具体用于获取所述光线亮度值和所述环境颜色值。
9.根据权利要求7所述的AR设备,其特征在于,所述生成模块,具体用于根据所述目标环境参数和所述AR设备的预设使用模式,生成所述图像蒙版。
10.根据权利要求7所述的AR设备,其特征在于,所述叠加模块,具体用于将所述图像蒙版对应的蒙版图像色彩值与所述目标AR图像对应的色彩值叠加,得到所述图像像素数据。
CN202010130272.9A 2020-02-28 2020-02-28 一种ar图像显示方法及ar设备 Pending CN111273885A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010130272.9A CN111273885A (zh) 2020-02-28 2020-02-28 一种ar图像显示方法及ar设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010130272.9A CN111273885A (zh) 2020-02-28 2020-02-28 一种ar图像显示方法及ar设备

Publications (1)

Publication Number Publication Date
CN111273885A true CN111273885A (zh) 2020-06-12

Family

ID=71002452

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010130272.9A Pending CN111273885A (zh) 2020-02-28 2020-02-28 一种ar图像显示方法及ar设备

Country Status (1)

Country Link
CN (1) CN111273885A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113923423A (zh) * 2021-10-22 2022-01-11 北京乐驾科技有限公司 调整ar眼镜视图色彩的方法和电子设备、存储介质
CN115904090A (zh) * 2023-01-10 2023-04-04 联通沃音乐文化有限公司 虚拟场景展示方法和头戴式显示设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105741343A (zh) * 2016-01-28 2016-07-06 联想(北京)有限公司 一种信息处理方法及电子设备
CN108986199A (zh) * 2018-06-14 2018-12-11 北京小米移动软件有限公司 虚拟模型处理方法、装置、电子设备及存储介质
CN109255841A (zh) * 2018-08-28 2019-01-22 百度在线网络技术(北京)有限公司 Ar图像呈现方法、装置、终端及存储介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105741343A (zh) * 2016-01-28 2016-07-06 联想(北京)有限公司 一种信息处理方法及电子设备
CN108986199A (zh) * 2018-06-14 2018-12-11 北京小米移动软件有限公司 虚拟模型处理方法、装置、电子设备及存储介质
CN109255841A (zh) * 2018-08-28 2019-01-22 百度在线网络技术(北京)有限公司 Ar图像呈现方法、装置、终端及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113923423A (zh) * 2021-10-22 2022-01-11 北京乐驾科技有限公司 调整ar眼镜视图色彩的方法和电子设备、存储介质
CN115904090A (zh) * 2023-01-10 2023-04-04 联通沃音乐文化有限公司 虚拟场景展示方法和头戴式显示设备

Similar Documents

Publication Publication Date Title
CN110488977B (zh) 虚拟现实显示方法、装置、系统及存储介质
CN107957839B (zh) 一种显示控制方法及移动终端
US11451706B2 (en) Photographing method and mobile terminal
CN108833753B (zh) 一种图像获取及应用方法、终端及计算机可读存储介质
CN109743498B (zh) 一种拍摄参数调整方法及终端设备
CN111246121B (zh) 拍摄补光方法、电子设备及介质
CN111049973B (zh) 一种屏幕显示的控制方法、电子设备及计算机可读存储介质
CN107248137B (zh) 一种实现图像处理的方法及移动终端
CN109257505B (zh) 一种屏幕控制方法及移动终端
WO2021136266A1 (zh) 虚拟画面同步方法及穿戴式设备
CN107153500B (zh) 一种实现图像显示的方法及设备
US20220286622A1 (en) Object display method and electronic device
CN108845785B (zh) 一种显示方法及终端
CN111443765A (zh) 电子设备及屏幕显示方法
CN110798621A (zh) 一种图像处理方法及电子设备
CN110866465A (zh) 电子设备的控制方法及电子设备
CN111246111B (zh) 拍摄方法、电子设备及介质
CN110602390B (zh) 一种图像处理方法及电子设备
CN109859718B (zh) 屏幕亮度调整方法及终端设备
CN111273885A (zh) 一种ar图像显示方法及ar设备
CN109995391B (zh) 一种图片显示方法、智能穿戴终端及计算机可读存储介质
CN109167917B (zh) 一种图像处理方法及终端设备
CN109104573B (zh) 一种确定对焦点的方法及终端设备
CN107913519B (zh) 2d游戏的渲染方法及移动终端
CN109756630A (zh) 一种屏幕控制方法及终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination