CN114125424B - 一种图像处理的方法及其相关设备 - Google Patents

一种图像处理的方法及其相关设备 Download PDF

Info

Publication number
CN114125424B
CN114125424B CN202010874308.4A CN202010874308A CN114125424B CN 114125424 B CN114125424 B CN 114125424B CN 202010874308 A CN202010874308 A CN 202010874308A CN 114125424 B CN114125424 B CN 114125424B
Authority
CN
China
Prior art keywords
image frame
ith image
ith
hmd
black pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010874308.4A
Other languages
English (en)
Other versions
CN114125424A (zh
Inventor
王森驰
付钟奇
沈钢
赖武军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN202010874308.4A priority Critical patent/CN114125424B/zh
Priority to PCT/CN2021/109966 priority patent/WO2022042212A1/zh
Publication of CN114125424A publication Critical patent/CN114125424A/zh
Application granted granted Critical
Publication of CN114125424B publication Critical patent/CN114125424B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/344Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

本申请实施例公开了一种图像处理的方法及其相关设备,可有效削弱鬼像对视觉效果所造成的影响,提高用户体验。本申请的方法包括:获取第i个图像帧的黑像素点占比,黑像素点占比为第i个图像帧的黑像素点的数量与第i个图像帧的像素点的数量之间的比值,i为大于或等于1的整数;若确定第i个图像帧的黑像素点占比大于或等于第一阈值,则将第i个图像帧的对比度降低至第二阈值,并将第i个图像帧的亮度降低至第三阈值,得到调整后的第i个图像帧;将调整后的第i个图像帧发送至头戴式显示器HMD,使得HMD显示调整后的第i个图像帧。

Description

一种图像处理的方法及其相关设备
技术领域
本申请涉及虚拟现实(virtual reality,VR)技术领域,尤其涉及一种图像处理的方法及其相关设备。
背景技术
随着显示技术的进步,VR技术被越来越多的被应用于现实生活中,使用户能够享受到身临其境的视觉体验。在VR技术中,用户穿上头戴式显示器(head mount display,HMD)后,可通过终端设备向HMD发送想要观看的图像,以使得HMD显示该图像供用户观看。
图1为本申请实施例提供的VR技术的一个示意图。如图1所示,HMD包括光源、镜片组和传感器。当HMD要显示图像时,先通过光源向镜片组发射光束。在光束进入镜片组后,其中一部分光束按照预先设置的路径达到传感器,这一部分光束可在传感器处形成目标图像(即图1中的实线部分)。然而,另一部分光束则不按照预先设置的路径进行传播,而是在各个镜片中经过多个反射和折射,最终在传感器处形成明显的鬼像(图1中的虚线部分)。此时,传感器给用户呈现的画面包含目标图像和鬼像,且鬼像在目标图像附近形成重影,影响用户的观感。
因此,如何在VR技术中减小鬼像对视觉效果所造成的的影响,成为了亟待解决的问题。
发明内容
本申请实施例提供了一种图像处理的方法及其相关设备,可有效削弱鬼像对视觉效果所造成的影响,提高用户体验。
本申请实施例的第一方面提供了一种图像处理的方法,该方法包括:
当用户需要在HMD上观看某个应用时,用户可在终端设备上启动该应用,使得终端设备对该应用的多个图像帧进行处理,再将图像帧发送至HMD进行显示。在图像帧处理过程中,终端设备可先获取该应用的第i个图像帧的黑像素点占比。其中,第i个图像帧的黑像素点占比为第i个图像帧的黑像素点的数量与第i个图像帧的像素点的数量之间的比值,i为大于或等于1的整数。
然后,若终端设备确定第i个图像帧的黑像素点占比大于或等于第一阈值,则确定第i个图像帧中存在大面积黑色的区域以及一部分较亮的区域。若HMD直接显示第i个图像帧,较亮的区域所产生的鬼像投射在黑色的区域上,用户在视觉上会明显感受到鬼像的存在。此时,终端设备可将第i个图像帧的对比度降低至第二阈值,并将第i个图像帧的亮度降低至第三阈值,得到调整后的第i个图像帧。
最后,终端设备将调整后的第i个图像帧发送至HMD,使得HMD显示调整后的第i个图像帧,以供用户观看。由于调整后的第i个图像帧相对于原始的第i个图像帧,降低了对比度和亮度,使得第i个图像帧中较亮的区域变得较为暗淡,且较亮的区域与黑色的区域之间的颜色差异变得较小。因此,当HMD显示调整后的第i个图像帧,较亮的区域所产生的鬼像即使投射在黑色的区域上,鬼像显得暗淡甚至消失,故可有效削弱鬼像对视觉效果所造成的影响,提高用户体验。
在一种可能的实现方式中,获取第i个图像帧的黑像素点占比之后,方法还包括:若确定第i个图像帧的黑像素点占比小于第一阈值,则将第i个图像帧发送至HMD,使得HMD显示第i个图像帧。
在一种可能的实现方式中,获取第i个图像帧的黑像素点占比之前,方法还包括:若确定第1个图像帧至第i-1个图像帧的黑像素点占比均小于第一阈值,且确定i-1为第四阈值,则在获取到第i个图像帧后,直接将第i个图像帧发送至HMD,使得HMD显示第i个图像帧。
在一种可能的实现方式中,将调整后的第i个图像帧发送至头戴式显示器HMD之后,方法还包括:若确定第i+1个图像帧至第i+j-1个图像帧的黑像素点占比均小于第一阈值,且确定j-1为第五阈值,则在获取到第i+j个图像帧后,直接将第i+j个图像帧发送至HMD,使得HMD显示第i+j个图像帧。
在一种可能的实现方式中,获取第i个图像帧的黑像素点占比之前,方法还包括:获取第i个图像帧;若确定i大于或等于第六阈值,则直接将第i个图像帧发送至HMD,使得HMD显示第i个图像帧。
在一种可能的实现方式中,获取第i个图像帧的黑像素点占比包括:获取第i个图像帧中各个像素点的红绿蓝RGB值,并将RGB值为0的像素点确定为黑像素点;获取第i个图像帧的黑像素点的数量,以及第i个图像帧的像素点的数量;根据第i个图像帧的黑像素点的数量以及第i个图像帧的像素点的数量,确定第i个图像帧的黑像素点占比。
本申请实施例的第二方面提供了一种图像处理的装置,该装置包括:
第一获取模块,用于获取第i个图像帧的黑像素点占比,黑像素点占比为第i个图像帧的黑像素点的数量与第i个图像帧的像素点的数量之间的比值,i为大于或等于1的整数。
调整模块,用于若确定第i个图像帧的黑像素点占比大于或等于第一阈值,则将第i个图像帧的对比度降低至第二阈值,并将第i个图像帧的亮度降低至第三阈值,得到调整后的第i个图像帧。
发送模块,用于将调整后的第i个图像帧发送至头戴式显示器HMD,使得HMD显示调整后的第i个图像帧。
从上述装置可以看出:若确定第i个图像帧的黑像素点占比大于或等于第一阈值,则将第i个图像帧的亮度降低至第三阈值,得到调整后的第i个图像帧。然后,将调整后的第i个图像帧发送至HMD,使得HMD显示调整后的第i个图像帧。由于调整后的第i个图像帧相对于原始的第i个图像帧,降低了对比度和亮度,使得第i个图像帧中较亮的区域变得较为暗淡,且较亮的区域与黑色的区域之间的颜色差异变得较小。因此,当HMD显示调整后的第i个图像帧,较亮的区域所产生的鬼像即使投射在黑色的区域上,鬼像显得暗淡甚至消失,故可有效削弱鬼像对视觉效果所造成的影响,提高用户体验。
在一种可能的实现方式中,发送模块,还用于若确定第i个图像帧的黑像素点占比小于第一阈值,则将第i个图像帧发送至HMD,使得HMD显示第i个图像帧。
在一种可能的实现方式中,发送模块,还用于若确定第1个图像帧至第i-1个图像帧的黑像素点占比均小于第一阈值,且确定i-1为第四阈值,则直接将第i个图像帧发送至HMD,使得HMD显示第i个图像帧。
在一种可能的实现方式中,发送模块,还用于若确定第i+1个图像帧至第i+j-1个图像帧的黑像素点占比均小于第一阈值,且确定j-1为第五阈值,则在获取到第i+j个图像帧后,直接将第i+j个图像帧发送至HMD,使得HMD显示第i+j个图像帧。
在一种可能的实现方式中,该装置还包括:第二获取模块,用于获取第i个图像帧。发送模块,还用于若确定i大于或等于第六阈值,则直接将第i个图像帧发送至HMD,使得HMD显示第i个图像帧。
在一种可能的实现方式中,第一获取模块,还用于:获取第i个图像帧中各个像素点的RGB值,并将RGB值为0的像素点确定为黑像素点。获取第i个图像帧的黑像素点的数量,以及第i个图像帧的像素点的数量。根据第i个图像帧的黑像素点的数量以及第i个图像帧的像素点的数量,确定第i个图像帧的黑像素点占比。
本申请实施例的第三方面提供了一种图像处理的装置,该装置包括:
一个或一个以上中央处理器,存储器,输入输出接口,有线或无线网络接口,电源;
存储器为短暂存储存储器或持久存储存储器;
中央处理器配置为与存储器通信,在图像处理的装置上执行存储器中的指令操作以执行第一方面或第一方面的任一种可能的实现方式中的方法。
本申请实施例的第四方面提供了一种计算机可读存储介质,包括指令,当指令在计算机上运行时,使得计算机执行如第一方面或第一方面的任一种可能的实现方式中的方法。
本申请实施例的第五方面提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行如第一方面或第一方面的任一种可能的实现方式中的方法。
从以上技术方案可以看出,本申请实施例具有以下优点:
本申请实施例中,若终端设备确定第i个图像帧的黑像素点占比大于或等于第一阈值,则将第i个图像帧的亮度降低至第三阈值,得到调整后的第i个图像帧。然后,终端设备将调整后的第i个图像帧发送至HMD,使得HMD显示调整后的第i个图像帧。由于调整后的第i个图像帧相对于原始的第i个图像帧,降低了对比度和亮度,使得第i个图像帧中较亮的区域变得较为暗淡,且较亮的区域与黑色的区域之间的颜色差异变得较小。因此,当HMD显示调整后的第i个图像帧,较亮的区域所产生的鬼像即使投射在黑色的区域上,鬼像显得暗淡甚至消失,故可有效削弱鬼像对视觉效果所造成的影响,提高用户体验。
附图说明
图1为本申请实施例提供的VR技术的一个示意图;
图2为本申请实施例提供的VR系统的一个示意图;
图3为本申请实施例提供的图像处理的方法的一个流程示意图;
图4为本申请实施例提供的图像处理的装置的一个结构示意图;
图5为本申请实施例提供的图像处理的装置的另一结构示意图。
具体实施方式
本申请实施例提供了一种图像处理的方法及其相关设备,可有效削弱鬼像对视觉效果所造成的影响,提高用户体验。
本申请实施例可应用于VR系统中。图2为本申请实施例提供的VR系统的一个示意图,如图2所示,该系统包括:HMD和终端设备,其中,HMD和终端设备通信连接,二者可以进行信息交互。为了方便说明,下文以用户需要通过VR技术观看某个应用(例如,某个软件、某个视频等等)的场景进行介绍。用户在终端设备上启动想观看的应用后,终端设备可向HMD逐帧发送该应用的图像帧。用户所穿戴的HMD在接收到图像帧后,可显示图像帧供用户观看。因此,当HMD持续显示该应用的连续多个图像帧时,用户则可以观看流畅的应用播放画面,从而体验VR技术带来的真实体验。
然而,当HMD显示图像帧的时候,HMD的光源发射的光束可能不按预先设置的路径完成传播,导致最终呈现给用户的画面中存在鬼像,影响用户的观感。为了减小鬼像对视觉效果所造成的影响,本申请实施例提供了一种图像处理的方法。
图3为本申请实施例提供的图像处理的方法的一个流程示意图。如图3所示,该方法包括:
301、获取第i个图像帧,i为大于或等于1的整数。
本实施例中,当用户启动终端设备上的某个应用后,终端设备可获取该应用的第i个图像帧,i为大于或等于1的整数。具体地,终端设备可逐帧获取应用的每一个图像帧,例如,终端设备可依次获取到应用的第1个图像帧、第2个图像帧、第3个图像帧、…、第n个图像帧等等。需要说明的是,应用的连续多个图像帧在经过HMD显示后,可以给用户呈现动态的播放画面,给予用户真实的观看体验。
302、判断i是否大于或等于第六阈值,若不是,则执行步骤303,若是,则执行步骤304。
终端设备在获取到应用的第i个图像帧后,可判断i是否大于或等于第六阈值,若i小于第六阈值,则终端设备初步确定需执行图像处理功能,若i大于或等于第六阈值,则终端设备确定不需执行图像处理功能。具体地,可根据实际需求提前为终端设备设置图像帧的帧号阈值(即第六阈值),从而帧号小于第六阈值的图像帧则需要进行图像处理(即步骤305至步骤309),帧号等于或大于第六阈值的图像帧不需进行图像处理。
例如,某个应用具有100000个图像帧,为了减少终端设备的工作量,可提前设置第六阈值为2001。因此,终端设备在获取到第1个图像帧至第2000个图像帧中的任意一个图像帧时,由于这部分图像帧的帧号均小于2001,终端设备在获取到这部分图像帧中的任意一个后,则初步确定需要进行图像处理。终端设备在获取到第2001个图像帧至第100000个图像帧时,由于这部分图像帧的帧号均大于或等于2001,终端设备在获取到这部分图像帧中的任意一个后,则确定不需要进行图像处理。
303、判断第1个图像帧至第i-1个图像帧的黑像素点占比是否均小于第一阈值,且i-1是否为第四阈值,若不是,则执行步骤305,若是,则执行步骤304。
在终端设备初步确定第i个图像需要进行图像处理后,则再次判断第i个图像帧是否需要进行图像处理。具体地,终端设备可先获取第1个图像帧至第i-1个图像帧之前的处理情况,并判断是否满足以下条件:第1个图像帧至第i-1个图像帧的黑像素点占比均小于第一阈值(第一阈值为根据实际需求提前设置的黑像素点占比阈值),且i-1为第四阈值。若满足前述条件,则终端设备最终确定第i个图像不需要进行图像处理,若不满足前述条件,则终端设备最终确定第i个图像需要进行图像处理。
例如,设第四阈值为60(第四阈值可根据实际需求进行设置,此处不做限定)。当获取到第i个图像帧时(i为61,且i小于第六阈值),说明终端设备已对第1个图像帧至第60个图像帧完成了图像处理。此时,终端设备可获取第1个图像帧至第60个图像帧的图像处理情况,若终端设备确定这部分图像帧中的每个图像帧的黑像素点占比均小于第一阈值,则可最终确定该应用从第i个图像帧起,第i个图像帧以及后续的图像帧均不再需要进行图像处理。若终端设备确定这部分图像帧中的每个图像帧的黑像素点占比并非均小于第一阈值,则可确定该应用从第i个图像帧需要进行图像处理。
值得注意的是,应用中任意一个图像帧的黑像素点占比指该图像帧的黑像素点的数量与该图像帧的像素点的数量之间的比值。具体地,可先获取该图像帧所有像素点的RGB值,并将RGB值为0的像素点确定为黑像素点。然后,获取该图像帧的黑像素点的数量,以及该图像帧的像素点的数量。最后,根据该图像帧的黑像素点的数量以及该图像帧的像素点的数量,确定该图像帧的黑像素点占比。
可以理解的是,若某个图像帧的黑像素点占比大于或等于第一阈值,说明该图像帧中存在大面积黑色的区域以及一小部分较亮的区域,此类图像帧的鬼像比较明显,通常需要进行图像处理,若某个图像帧的黑像素点占比小于第一阈值,说明该图像帧中黑色的区域的大小以及较亮的区域的大小之间的差距较小,此类图像帧的鬼像比较不明显,通常不需进行图像处理。因此,终端设备若判断某个应用刚启动后的前若干图像帧的黑像素点占比均小于第一阈值,则默认后续的图像帧均不需要进行图像处理。例如,应用的启动画面通常为最可能出现鬼像的画面(启动画面中的背景为黑色且画面仅包含应用的logo),若终端设备判断该应用刚启动后的连续60个图像帧的黑像素点占比均小于第一阈值,则默认该应用从第61个图像帧起,后续图像帧均不需要进行图像处理,从而减小终端设备的工作量,以实现节能。
304、直接将第i个图像帧发送至HMD,使得HMD显示第i个图像帧。
若步骤302中终端设备确定第i个图像帧不需进行图像处理,或步骤304中终端设备确定第i个图像帧不需进行图像处理,则终端设备直接将未处理的第i个图像帧发送至HMD,使得HMD显示未经过处理的第i个图像帧(即应用中原始的第i个图像帧),供用户观看。
305、获取第i个图像帧的黑像素点占比。
终端设备最终确定第i个图像帧需要进行图像处理后,则先获取第i个图像帧的黑像素点占比,第i个图像帧的黑像素点占比为第i个图像帧的黑像素点的数量与第i个图像帧的像素点的数量之间的比值。应理解,黑色像素点占比的计算方法可参考步骤303中的相关说明,此处不再赘述。
306、判断第i个图像帧的黑像素点占比是否大于或等于第一阈值,若是,则执行步骤307,若不是,则执行步骤308。
终端设备在得到第i个图像帧的黑像素点占比后,则判断第i个图像帧的黑像素点占比是否大于或等于第一阈值。
307、将第i个图像帧的对比度降低至第二阈值,并将第i个图像帧的亮度降低至第三阈值,得到调整后的第i个图像帧。
若终端设备确定第i个图像帧的黑像素点占比大于或等于第一阈值,则对第i个图像帧的参数进行调整。具体地,终端设备将第i个图像帧的对比度降低至第二阈值(第二阈值为根据实际需求设置的对比度阈值),并将第i个图像帧的亮度降低至第三阈值(第三阈值为根据实际需求设置的亮度阈值),得到调整后的第i个图像帧。
具体地,在调整第i个图像帧的对比度和亮度时,通常是动态调整的过程。例如,终端设备可调用第一平滑函数,将第i个图像帧的对比度从当前值逐渐降低至第二阈值。又如,终端设备可调用第二平滑函数,将第i个图像帧的亮度从当前值逐渐降低至第三阈值等等。
308、将第i个图像帧发送至HMD,使得HMD显示所述第i个图像帧。
若终端设备确定第i个图像帧的黑像素点占比小于第一阈值,终端设备将已处理(即已经经过黑色像素点占比的判断)但未调整(不需进行参数调整)的第i个图像帧发送至HMD(即应用中原始的第i个图像帧),供用户观看。
309、将调整后的第i个图像帧发送至头戴式显示器HMD,使得HMD显示调整后的第i个图像帧。
得到调整后的第i个图像帧后,终端设备将调整后的第i个图像帧发送至头戴式显示器HMD,使得HMD显示调整后的第i个图像帧。由于调整后的第i个图像帧相对于原始的第i个图像帧,降低了对比度和亮度,使得第i个图像帧中较亮的区域变得较为暗淡,且较亮的区域与黑色的区域之间的颜色差异变得较小。因此,当HMD显示调整后的第i个图像帧,较亮的区域所产生的鬼像即使投射在黑色的区域上,鬼像显得暗淡甚至消失。
310、判断第i+1个图像帧至第i+j-1个图像帧的黑像素点占比是否均小于第一阈值,且j-1是否为第五阈值,若是,则执行步骤311。
在完成第i个图像帧的调整后,则终端设备会对第i+1个图像帧、第i+2个图像帧、…、第i+j-1个图像帧中的每个图像帧执行如同步骤301至步骤309的操作,若终端设备确定第i+1个图像帧至第i+j-1个图像帧的黑像素点占比均小于第一阈值,且确定j-1为第五阈值,相当于确定从第i+j个图像帧起,后续图像帧均不再需进行图像处理。
311、在获取到第i+j个图像帧后,直接将第i+j个图像帧发送至HMD,使得HMD显示第i+j个图像帧。
终端设备确定第i+1个图像帧至第i+j-1个图像帧的黑像素点占比均小于第一阈值,且确定j-1为第五阈值,则确定后续图像帧不再需进行图像处理。因此,终端设备在获取到第i+j个图像帧后(不执行步骤302),直接将未处理的第i+j个图像帧发送至HMD,使得HMD显示原始的第i+j个图像帧。
例如,设第五阈值为200,且i为100,且终端设备刚完成对第100个图像帧的参数调整,以该次调整作为终端设备最近一次的调整操作。以最近一次调整操作为参考点,若接下来终端设备确定第101个图像帧至第300个图像帧的黑像素点占比均小于第一阈值,则默认从第301个图像帧起,后续的图像帧均不需在进行图像处理,即直接发送原始的后续图像帧至HMD进行显示,从而减小终端设备的工作量,以进一步实现节能。
本实施例中,若确定第i个图像帧的黑像素点占比大于或等于第一阈值,则将第i个图像帧的亮度降低至第三阈值,得到调整后的第i个图像帧。然后,将调整后的第i个图像帧发送至HMD,使得HMD显示调整后的第i个图像帧。由于调整后的第i个图像帧相对于原始的第i个图像帧,降低了对比度和亮度,使得第i个图像帧中较亮的区域变得较为暗淡,且较亮的区域与黑色的区域之间的颜色差异变得较小。因此,当HMD显示调整后的第i个图像帧,较亮的区域所产生的鬼像即使投射在黑色的区域上,鬼像显得暗淡甚至消失,故可有效削弱鬼像对视觉效果所造成的影响,提高用户体验。
以上是对本申请实施例提供的图像处理的方法所进行的详细说明,以下将对本申请实施例提供的图像处理的装置进行介绍。图4为本申请实施例提供的图像处理的装置的一个结构示意图,如图4所示,该装置包括:
第一获取模块401,用于获取第i个图像帧的黑像素点占比,黑像素点占比为第i个图像帧的黑像素点的数量与第i个图像帧的像素点的数量之间的比值,i为大于或等于1的整数。
调整模块402,用于若确定第i个图像帧的黑像素点占比大于或等于第一阈值,则将第i个图像帧的对比度降低至第二阈值,并将第i个图像帧的亮度降低至第三阈值,得到调整后的第i个图像帧。
发送模块403,用于将调整后的第i个图像帧发送至头戴式显示器HMD,使得HMD显示调整后的第i个图像帧。
在一种可能的实现方式中,发送模块403,还用于若确定第i个图像帧的黑像素点占比小于第一阈值,则将第i个图像帧发送至HMD,使得HMD显示第i个图像帧。
在一种可能的实现方式中,发送模块403,还用于若确定第1个图像帧至第i-1个图像帧的黑像素点占比均小于第一阈值,且确定i-1为第四阈值,则直接将第i个图像帧发送至HMD,使得HMD显示第i个图像帧。
在一种可能的实现方式中,发送模块403,还用于若确定第i+1个图像帧至第i+j-1个图像帧的黑像素点占比均小于第一阈值,且确定j-1为第五阈值,则在获取到第i+j个图像帧后,直接将第i+j个图像帧发送至HMD,使得HMD显示第i+j个图像帧。
在一种可能的实现方式中,该装置还包括:第二获取模块400,用于获取第i个图像帧。发送模块,还用于若确定i大于或等于第六阈值,则直接将第i个图像帧发送至HMD,使得HMD显示第i个图像帧。
在一种可能的实现方式中,第一获取模块401,还用于:获取第i个图像帧中各个像素点的RGB值,并将RGB值为0的像素点确定为黑像素点。获取第i个图像帧的黑像素点的数量,以及第i个图像帧的像素点的数量。根据第i个图像帧的黑像素点的数量以及第i个图像帧的像素点的数量,确定第i个图像帧的黑像素点占比。
需要说明的是,上述装置各模块/单元之间的信息交互、执行过程等内容,由于与本申请方法实施例基于同一构思,其带来的技术效果与本申请方法实施例相同,具体内容可参见本申请前述所示的方法实施例中的叙述,此处不再赘述。
图5为本申请实施例提供的图像处理的装置的另一结构示意图。如图5所示,该装置可以是如图3中的终端设备,该装置可包括一个或一个以上处理器501,存储器502,输入输出接口503,有线或无线网络接口504,电源505。
存储器502可以是短暂存储或持久存储。更进一步地,处理器501可以配置为与存储器502通信,在图像处理的装置上执行存储器502中的一系列指令操作。
本实施例中,处理器501可以执行前述图3所示实施例中的方法步骤,具体此处不再赘述。
本实施例中,处理器501中的具体功能模块划分可以与前述图5中所描述的第一获取模块、第二获取模块、调整模块、发送模块等模块的功能模块划分方式类似,此处不再赘述。
本申请实施例还提供了一种计算机可读存储介质,包括指令,当指令在计算机上运行时,使得计算机执行如图3所示的方法。
本申请实施例的第五方面提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行如图3所示的方法。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

Claims (10)

1.一种图像处理的方法,其特征在于,所述方法包括:
获取第i个图像帧的黑像素点占比,所述黑像素点占比为所述第i个图像帧的黑像素点的数量与所述第i个图像帧的像素点的数量之间的比值,i为大于或等于1的整数;
若确定所述第i个图像帧的黑像素点占比大于或等于第一阈值,则将所述第i个图像帧的对比度降低至第二阈值,并将所述第i个图像帧的亮度降低至第三阈值,得到调整后的第i个图像帧;
将所述调整后的第i个图像帧发送至头戴式显示器HMD,使得所述HMD显示所述调整后的第i个图像帧。
2.根据权利要求1所述的方法,其特征在于,所述获取第i个图像帧的黑像素点占比之后,所述方法还包括:
若确定所述第i个图像帧的黑像素点占比小于所述第一阈值,则将所述第i个图像帧发送至所述HMD,使得所述HMD显示所述第i个图像帧。
3.根据权利要求1或2所述的方法,其特征在于,所述获取第i个图像帧的黑像素点占比之前,所述方法还包括:
若确定第1个图像帧至第i-1个图像帧的黑像素点占比均小于所述第一阈值,且确定i-1为第四阈值,则直接将所述第i个图像帧发送至所述HMD,使得所述HMD显示所述第i个图像帧。
4.根据权利要求1所述的方法,其特征在于,所述将所述调整后的第i个图像帧发送至头戴式显示器HMD之后,所述方法还包括:
若确定第i+1个图像帧至第i+j-1个图像帧的黑像素点占比均小于所述第一阈值,且确定j-1为第五阈值,则在获取到第i+j个图像帧后,直接将第i+j个图像帧发送至所述HMD,使得所述HMD显示所述第i+j个图像帧。
5.根据权利要求1至4任意一项所述的方法,其特征在于,所述获取第i个图像帧的黑像素点占比之前,所述方法还包括:
获取第i个图像帧;
若确定i大于或等于第六阈值,则直接将所述第i个图像帧发送至所述HMD,使得所述HMD显示所述第i个图像帧。
6.根据权利要求1至5任意一项所述的方法,其特征在于,所述获取第i个图像帧的黑像素点占比包括:
获取第i个图像帧中各个像素点的红绿蓝RGB值,并将RGB值为0的像素点确定为黑像素点;
获取所述第i个图像帧的黑像素点的数量,以及所述第i个图像帧的像素点的数量;
根据所述第i个图像帧的黑像素点的数量以及所述第i个图像帧的像素点的数量,确定所述第i个图像帧的黑像素点占比。
7.一种图像处理的装置,其特征在于,所述装置包括:
第一获取模块,用于获取第i个图像帧的黑像素点占比,所述黑像素点占比为所述第i个图像帧的黑像素点的数量与所述第i个图像帧的像素点的数量之间的比值,i为大于或等于1的整数;
调整模块,用于若确定所述第i个图像帧的黑像素点占比大于或等于第一阈值,则将所述第i个图像帧的对比度降低至第二阈值,并将所述第i个图像帧的亮度降低至第三阈值,得到调整后的第i个图像帧;
发送模块,用于将所述调整后的第i个图像帧发送至头戴式显示器HMD,使得所述HMD显示所述调整后的第i个图像帧。
8.一种图像处理的装置,其特征在于,包括:
一个或一个以上中央处理器,存储器,输入输出接口,有线或无线网络接口,电源;
所述存储器为短暂存储存储器或持久存储存储器;
所述中央处理器配置为与所述存储器通信,在所述图像处理的装置上执行所述存储器中的指令操作以执行权利要求1至6中任意一项所述的方法。
9.一种计算机可读存储介质,包括指令,当所述指令在计算机上运行时,使得计算机执行如权利要求1至6中任意一项所述的方法。
10.一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行如权利要求1至6中任意一项所述的方法。
CN202010874308.4A 2020-08-26 2020-08-26 一种图像处理的方法及其相关设备 Active CN114125424B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010874308.4A CN114125424B (zh) 2020-08-26 2020-08-26 一种图像处理的方法及其相关设备
PCT/CN2021/109966 WO2022042212A1 (zh) 2020-08-26 2021-08-02 一种图像处理的方法及其相关设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010874308.4A CN114125424B (zh) 2020-08-26 2020-08-26 一种图像处理的方法及其相关设备

Publications (2)

Publication Number Publication Date
CN114125424A CN114125424A (zh) 2022-03-01
CN114125424B true CN114125424B (zh) 2022-10-04

Family

ID=80352659

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010874308.4A Active CN114125424B (zh) 2020-08-26 2020-08-26 一种图像处理的方法及其相关设备

Country Status (2)

Country Link
CN (1) CN114125424B (zh)
WO (1) WO2022042212A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116709003A (zh) * 2022-10-09 2023-09-05 荣耀终端有限公司 一种图像处理方法和电子设备
CN116152473B (zh) * 2022-12-26 2023-08-08 深圳市数聚能源科技有限公司 一种二维图片转换成ar图像降低黑像素干扰的方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102244797A (zh) * 2010-05-14 2011-11-16 乐金显示有限公司 立体图像显示器和驱动该立体图像显示器的方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8085217B2 (en) * 2006-08-08 2011-12-27 Nvidia Corporation System, method, and computer program product for compensating for crosstalk during the display of stereo content
WO2010019922A1 (en) * 2008-08-15 2010-02-18 Real D Enhanced ghost compensation for stereoscopic imagery
JP5760465B2 (ja) * 2011-02-04 2015-08-12 セイコーエプソン株式会社 虚像表示装置
WO2015105347A1 (en) * 2014-01-09 2015-07-16 Samsung Electronics Co., Ltd. Wearable display apparatus
US10228562B2 (en) * 2014-02-21 2019-03-12 Sony Interactive Entertainment Inc. Realtime lens aberration correction from eye tracking
US9766464B2 (en) * 2015-12-17 2017-09-19 Microsoft Technology Licensing, Llc Reducing ghost images
US20180172981A1 (en) * 2016-12-16 2018-06-21 Fusao Ishii Wearable display
CN110554500B (zh) * 2018-05-31 2022-09-16 中强光电股份有限公司 头戴式显示装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102244797A (zh) * 2010-05-14 2011-11-16 乐金显示有限公司 立体图像显示器和驱动该立体图像显示器的方法

Also Published As

Publication number Publication date
CN114125424A (zh) 2022-03-01
WO2022042212A1 (zh) 2022-03-03

Similar Documents

Publication Publication Date Title
EP3054424A1 (en) Image rendering method and apparatus
CN114125424B (zh) 一种图像处理的方法及其相关设备
CN108156533B (zh) 智能电视背光调节方法、智能电视以及存储介质
EP3405943A1 (en) Method and apparatus for reducing myopiagenic effect of electronic displays
CN113299245B (zh) 显示设备局部背光调节方法、装置、显示设备及存储介质
US10650507B2 (en) Image display method and apparatus in VR device, and VR device
EP2492907B1 (en) Image processing apparatus, storage medium storing image processing program, and image processing method
JP2012108379A (ja) 情報表示システム、装置、方法及びプログラム
CN112289278A (zh) 屏幕亮度调节方法、屏幕亮度调节装置和电子设备
WO2021169583A1 (zh) 虚拟现实显示设备及其控制方法
KR20040095685A (ko) 디지털 디스플레이 패널에서의 콘트래스트를 개선하는영상 처리 방법
EP4090006A2 (en) Image signal processing based on virtual superimposition
US10114447B2 (en) Image processing method and apparatus for operating in low-power mode
CN115185083A (zh) 一种ar头戴显示器自适应刷新率和分辨率渲染方法
US10477135B2 (en) Display apparatus, display control apparatus, and display control method
CN111613168A (zh) 一种影像显示处理方法、装置以及计算机可读存储介质
CN107179822B (zh) 信息处理方法及装置、显示设备及计算机存储介质
WO2023276566A1 (ja) 画像表示システムおよび画像表示方法
US20210287326A1 (en) Apparatus and method
US11270475B2 (en) Variable rendering system and method
GB2569791A (en) Display system with defect correction
US20220036633A1 (en) Shader for reducing myopiagenic effect of graphics rendered for electronic display
KR102214439B1 (ko) 저전력 모드를 위한 영상 처리 방법 및 장치
CN112911269A (zh) 色彩校正方法与电子装置
WO2017120753A1 (zh) 一种显示装置的显示方法、显示装置及虚拟现实vr系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant