CN110489580B - 图像处理方法、装置、显示屏组件以及电子设备 - Google Patents
图像处理方法、装置、显示屏组件以及电子设备 Download PDFInfo
- Publication number
- CN110489580B CN110489580B CN201910788103.1A CN201910788103A CN110489580B CN 110489580 B CN110489580 B CN 110489580B CN 201910788103 A CN201910788103 A CN 201910788103A CN 110489580 B CN110489580 B CN 110489580B
- Authority
- CN
- China
- Prior art keywords
- light source
- sample
- target
- image
- diffraction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 36
- 238000012545 processing Methods 0.000 claims description 30
- 238000000034 method Methods 0.000 claims description 26
- 238000003860 storage Methods 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 35
- 230000000694 effects Effects 0.000 description 9
- 238000003379 elimination reaction Methods 0.000 description 9
- 230000008030 elimination Effects 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 7
- 239000000463 material Substances 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000012360 testing method Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 239000012780 transparent material Substances 0.000 description 5
- 238000002474 experimental method Methods 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 229910003460 diamond Inorganic materials 0.000 description 3
- 239000010432 diamond Substances 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000004313 glare Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/53—Querying
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0266—Details of the structure or mounting of specific components for a display module assembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Library & Information Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
Abstract
本申请实施例公开了一种图像处理方法、装置、显示屏组件以及电子设备，涉及电子技术领域。在图像处理方法中，首先获取摄像头组件拍摄的目标图像，以及获取目标图像对应的目标光源信息，然后基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像，最后基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理。在本申请实施例中，由于可以先获得目标图像中的目标光源信息，再通过样本数据库中样本光源信息与样本衍射图像的对应关系，可以识别出目标图像对应的目标衍射图像，根据目标衍射图像可以对目标图像中衍射条纹进行消除处理，可以提高对目标图像中衍射条纹的消除的准确性。
Description
技术领域
本申请涉及电子技术领域，尤其涉及一种图像处理方法、装置、显示屏组件以及电子设备。
背景技术
随着电子技术的日趋发展，人们对于电子设备的使用需求也越来越高，用户可以通过电子设备中的摄像头进行拍照或者录像，因此对摄像头拍摄后图像的处理成为电子技术领域人员研究的重点。
在相关技术中，因为摄像头的拍摄角度或者拍摄环境的光源等因素，可能导致电子设备的摄像头出现炫光，致使摄像头拍摄的图像中出现衍射条纹，影响图像的质量和效果。
发明内容
本申请提供一种图像处理方法、装置、显示屏组件以及电子设备，可以解决相关技术中摄像头拍摄的图像中出现衍射条纹后，影响图像的质量和效果的技术问题。
第一方面，本申请实施例提供一种图像处理方法，应用于显示屏组件，所述显示屏组件下方设置有摄像头组件，该方法包括：
获取所述摄像头组件拍摄的目标图像，获取所述目标图像所包含的衍射图像区域的目标光源信息；
基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定所述目标光源信息对应的目标样本衍射图像；
基于所述目标图像与所述目标样本衍射图像，对所述目标图像中的衍射条纹进行消除处理。
第二方面，本申请实施例提供一种图像处理装置，应用于显示屏组件，所述显示屏组件下方设置有摄像头组件，该装置包括：
目标图像获取模块，用于获取所述摄像头组件拍摄的目标图像，获取所述目标图像所包含的衍射图像区域的目标光源信息；
目标样本衍射图像确定模块，用于基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定所述目标光源信息对应的目标样本衍射图像；
衍射条纹处理模块，用于基于所述目标图像与所述目标样本衍射图像，对所述目标图像中的衍射条纹进行消除处理。
第三方面，本申请实施例提供一种显示屏组件，该显示屏组件包括：
显示屏本体；
电路层，设置在所述显示屏本体的下方；
基底层，设置在所述电路层的下方，且所述基底层下方设置有摄像头组件；
其中，所述电路层中与所述摄像头组件相对的区域开有预设形状的开孔，和/或所述电路层中与所述摄像头组件相对的区域的线路宽度，小于所述电路层中不与所述摄像头组件相对的区域的线路宽度。
第四方面，本申请实施例提供一种计算机存储介质，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行上述的方法的步骤。
第五方面，本申请实施例提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述的方法的步骤，且所述电子设备还包括上述的显示屏组件。
本申请一些实施例提供的技术方案带来的有益效果至少包括：
在本申请实施例中，首先获取摄像头组件拍摄的目标图像，以及获取目标图像所包含的衍射图像区域的目标光源信息，然后基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像，最后基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理。由于可以先获得目标图像中的目标光源信息，再通过样本数据库中样本光源信息与样本衍射图像的对应关系，可以识别出目标图像对应的目标衍射图像，根据目标衍射图像可以对目标图像中衍射条纹进行消除处理，可以提高对目标图像中衍射条纹的消除的准确性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1A为本申请实施例提供的一种图像处理方法的应用场景示意图；
图1B为本申请实施例提供的光的衍射形成过程的示意图；
图2为申请实施例提供的一种图像处理方法的流程示意图；
图3为本申请实施例提供的一种图像处理方法的目标图像举例示意图；
图4为本申请实施例提供的另一种图像处理方法的流程示意图；
图5为本申请实施例提供的一种样本光源信息下获取样本衍射图像的示意；
图6为本申请实施例提供的另一种样本光源信息下获取样本衍射图像的示意图；
图7为本申请实施例提供的另一种图像处理方法的流程示意图；
图8A为本申请实施例提供的另一种图像处理方法的流程示意图；
图8B为本申请实施例提供的一种样本数据库存储数据方式的举例示意图；
图9为本申请实施例提供的另一种图像处理方法的流程示意图；
图10为本申请实施例提供的目标图像的第一种举例示意图；
图11为本申请实施例提供的目标样本衍射图像的举例示意图；
图12A为本申请实施例提供的目标图像的第二种举例示意图；
图12B为本申请实施例提供的目标图像的第三种举例示意图；
图13为本申请实施例提供的一种图像处理装置的结构示意图；
图14为本申请实施例提供的另一种图像处理装置的结构示意图；
图15为本申请实施例提供的目标图像获取模块的结构示意图；
图16为本申请实施例提供的目标样本衍射图像确定模块的结构示意图；
图17为本申请实施例提供的衍射条纹处理模块的结构示意图；
图18为本申请实施例提供的一种显示屏组件的结构示意图；
图19为本申请实施例提供的一种电路层结构的举例示意图；
图20为本本申请实施例提供的另一种电路层结构的举例示意图；
图21为本申请实施例提供了一种电子设备的结构示意图。
具体实施方式
请参阅图1A，图1A为本申请实施例提供的一种图像处理方法的应用场景示意图。
可选地，本申请实施例中提供的一种图像处理方法可以应用于各种显示屏组件以及电子设备中。如图1A所示，当显示屏组件下方设置有摄像头组件，通过摄像头组件拍摄图像时，光线可以穿过显示屏组件进入摄像头组件中，显示屏组件中此时可能会发生光的衍射，造成摄像头组件拍摄的图像中存在衍射条纹，影响图像的质量和效果。
摄像头组件拍摄的图像中存在衍射条纹的原因是，由于摄像头组件的拍摄角度或者拍摄环境的光源等因素，导致进入摄像头组件的光线发生光的衍射，使得电子设备的摄像头组件出现炫光现象。图1B为本申请实施例提供的光的衍射形成过程的示意图，如图1B所示，炫光现象是指镜头在传输影像的过程中会受到某些非理想性因素的影响，比如光线通过小孔或者较小的缝隙进入镜头发生光的衍射，而使光线误差偏转造成像差，会导致摄像头拍摄的图像中出现衍射条纹。因此当光线穿过显示屏组件中的小孔或者缝隙进入摄像头组件时，可能会造成摄像头组件拍摄的图像中存在衍射条纹。
在相关技术中，通过识别图像中光源位置，来判断衍射条纹的规律性，对图像中的衍射条纹进行消除，但是由于光发生衍射后的衍射条纹的规律性无法准确判断，因此无法准确识别并消除图像中的衍射条纹。所以可以提出一种图像处理方法，以满足人们对于更好地对图像中的衍射条纹进行处理的需求。
为方便描述，下面以图像处理方法应用于显示屏组件，且显示屏组件下方设置有摄像头组件为例，介绍图像处理方法的实施过程。
请参阅图2，图2为申请实施例提供的一种图像处理方法的流程示意图。
如图2所示，图像处理方法包括：
S120、获取摄像头组件拍摄的目标图像，获取目标图像所包含的衍射图像区域的目标光源信息。
可选地，处理器接收拍摄指令，控制摄像头组件拍摄目标图像。其中拍摄指令可以是基于用户触摸显示面板的操作产生，可以是基于用户按压物理按键的操作产生，还可以是基于用户输入的语音产生，此处不限定拍摄拍摄指令产生的形式。处理器获取摄像头组件拍摄的目标图像，目标图像可以为没有做任何修改的原始图像或者对原始图像进行处理后的图像。例如，目标图像可以是摄像头组件对某一场景进行拍摄后，获得的没有任何修改的原始图像；目标图像还可以是摄像头组件对某一场景进行拍摄后，将获得的原始图像进行参数修改并保存至图像库中，用户基于图像库选择的图像。
由于目标图像中可能会出现目标衍射图像，因此可以根据预设的判定方式或者规则，将目标图像划分为衍射图像区域以及非衍射图像区域。图3为本申请实施例提供的一种图像处理方法的目标图像举例示意图，由图3可知目标图像包括衍射图像区域302以及非衍射图像区域304，为了便于区别，衍射图像区域302用虚线予以标记。由于衍射图像区域302是光源发出的光线透过显示屏组件后产生的，因此衍射图像区域302中包含了目标光源3022以及衍射条纹3024。
可选地，处理器可以获取衍射图像区域中目标光源的目标光源信息。其中目标光源信息可以包括目标光源位置、目标光源形状、目标光源尺寸、目标光源颜色以及目标光源强度中的至少一种。其中，目标光源信息可以包括目标光源相对于目标图像中实际场景的信息，例如，目标图像中人物头部实际宽度为12厘米，通过预设算法以及目标光源与人物头部之间的距离，可以换算出目标光源的宽度为20厘米，也即目标光源尺寸可以是相对于目标图像中的实际人物的实际尺寸。目标光源信息还可以包括目标光源相对于目标图像中像素的信息，例如，目标图像中目标光源尺寸可以是宽度为1000像素，长度为900像素；再例如，目标图像中目标光源位置可以为目标光源所包含的像素的像素位置。
S140、基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像。
其中，可以通过预先实验或者训练，获取样本光源信息与样本衍射图像的对应关系。例如，设置至少一个样本光源条件，样本光源条件包括测试场景、样本光源以及装配有显示屏组件且显示屏组件下方设置有摄像头组件的测试电子设备，且各样本光源条件的样本光源信息是已知的，样本光源信息包括光源位置、光源形状、光源尺寸、光源颜色以及光源强度中的至少一种。在各样本光源信息下，获取摄像头组件拍摄的样本图像以及样本图像中的样本衍射图像，那么每一个样本衍射图像将对应一个样本光源信息，也即样本光源信息与样本衍射图像具有对应关系，将样本光源信息与样本衍射图像的对应关系保存在样本数据库中。这样实施的目的是，通过获取通过预先训练或者实验得到的样本光源信息与样本衍射图像的对应关系，当目标图像中的目标光源信息与样本光源信息相匹配时，可以分析或者判断出目标图像中出现的目标衍射图像，便于对目标图像中目标衍射图像中的衍射条纹进行处理。
可选地，由于样本数据库中样本光源信息与样本衍射图像具有对应关系，当目标光源信息与样本数据库中样本光源信息匹配时，可以确定目标光源信息对应的目标样本衍射图像。
S160、基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理。
由于目标样本衍射图像是在已知的样本光源信息下获取的，因此目标样本衍射图像与样本光源信息是对应的，在确定目标光源信息对应的目标样本衍射图像后，根据目标样本衍射图像，可以准确推断或者确定目标图像中目标衍射图像的衍射条纹以及强度等信息。可以通过确定目标图像与目标样本衍射图像相同图像区域，对目标图像中相同图像进行消除，以实现目标图像中衍射条纹的消除。还可以将目标图像与目标样本衍射图像做图像相减，对目标图像中的衍射条纹进行消除。还可以获取目标图像中各像素的像素坐标以及RGB值，以及目标样本衍射图像中各像素的像素坐标以及RGB值，进行像素比对，对目标图像中的衍射条纹进行消除。通过上述衍射条纹消除方式，可以提高衍射条纹消除的准确性，以及提高目标图像的最终的成像质量以及成像效果。
在本申请实施例中，首先获取摄像头组件拍摄的目标图像，以及获取目标图像所包含的衍射图像区域的目标光源信息，然后基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像，最后基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理。由于可以先获得目标图像中的目标光源信息，再通过样本数据库中样本光源信息与样本衍射图像的对应关系，可以识别出目标图像对应的目标衍射图像，根据目标衍射图像可以对目标图像中衍射条纹进行消除处理，可以提高对目标图像中衍射条纹的消除的准确性。
请参阅图4，图4为本申请实施例提供的另一种图像处理方法的流程示意图。
如图4所示，图像处理方法包括：
S420、获取至少一个样本光源信息，并获取各样本光源信息对应的样本衍射图像；其中，样本光源信息包括光源位置、光源形状、光源尺寸、光源颜色以及光源强度中的至少一种。
为了更好地消除目标图像中的衍射条纹，可以通过预先实验或者训练，获取存储有样本光源信息与样本衍射图像的对应关系的样本数据库。图5为本申请实施例提供的一种样本光源信息下获取样本衍射图像的示意图，如图5所示，将装配有显示屏组件且显示屏组件下方设置有摄像头组件的电子设备置于拍摄环境中，还可以将拍摄环境的背景设置为黑色，不仅可以保证摄像头组件拍摄的样本衍射图像中仅存在样本光源以及衍射条纹，还可以提高样本光源以及衍射条纹的对比度，便于后续对目标图像中衍射条纹的消除。
可选地，在拍摄环境中至少设置一个样本光源，移动样本光源的位置或者更换样本光源的规格，可以使得样本光源具有不同的样本光源条件，样本光源条件代表了样本光源的具体设置信息，样本光源信息的具体设置信息会影响样本光源发出的光线情况，进而影响摄像头组件拍摄的图像中的衍射图像。其中各样本光源条件具体设置信息也即样本光源信息可以是已知并记录下来。样本光源信息包括样本光源位置、样本光源形状、样本光源尺寸、样本光源颜色以及样本光源强度中的至少一种。在至少一个样本光源信息下，控制摄像头组件在各样本光源信息下对样本光源进行拍摄，可以获取各样本光源信息对应的样本衍射图像，样本衍射图像中包括样本光源以及衍射条纹。
图6为本申请实施例提供的另一种样本光源信息下获取样本衍射图像的示意图，图6与图5的区别在于，图6中样本光源信息中样本光源位置，和图5中样本光源信息中样本光源位置不同，使得在图6的样本光源信息下得到的样本衍射图像601，和在图5的样本光源信息下得到的样本衍射图像501不同。因此通过改变样本光源的样本光源信息，可以得到多个样本衍射图像，样本光源信息的数量可以根据实际情况进行设置，提高样本光源信息的数量，可以获取更多的样本衍射图像，也就可以提高对目标图像中衍射条纹的消除精确度以及消除效果。
与上述目标光源信息类似，样本光源信息可以包括样本光源在实际拍摄环境中的信息。例如，样本光源位置可以是样本光源与摄像头组件之间的相对位置；再例如，实际拍摄环境中某一位置的光照强度为500勒克斯，那么样本光源强度可以是样本光源实际发出的光照强度为1000勒克斯。样本光源信息还可以包括样本光源相对于样本衍射图像中像素的信息，例如，在某一样本光源信息下拍摄的样本图像，其中样本光源尺寸可以用样本衍射图像中的像素作为计算单位，样本光源尺寸中光源长度可以为700像素，光源宽度可以为600像素。
S440、将至少一个样本光源信息以及各样本光源信息对应的样本衍射图像保存至样本数据库。
由于在至少一个样本光源信息下，控制摄像头组件在各样本光源信息下对样本光源进行拍摄，可以获取各样本衍射图像，样本衍射图像中包括样本光源以及衍射条纹。因此样本光源信息和样本衍射图像具有对应的关系，可以将至少一个样本光源信息和各样本光源信息对应的样本衍射图像保存至样本数据库。其中样本数据库可以通过是装配的显示屏组件且显示屏组件下方设置有摄像头组件的测试电子设备得到。样本数据库可以至少包括两种存储方式，当样本数据库为本地存储时，将可以在以测试电子设备为样机批量制造电子设备时，将测试电子设备得到样本数据库预先导入至批量生产电子设备的存储介质中，这种样本存储方式可以提高电子设备对样本数据库的读取速度；当样本数据库为云存储时，可以将测试电子设备得到样本数据库上传到云端，其余电子设备可以随时通过网络对样本数据可进行访问或者读取，降低样本数据库对本地的存储压力。
S460、获取摄像头组件拍摄的目标图像，获取目标图像所包含的衍射图像区域的目标光源信息。
S480、基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像。
S4100、基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理。
其中，对于S420至S4100方法步骤中未披露的细节，请参照上述S120至S160方法步骤中的具体描述。
在本申请实施例中，通过预先实验或者训练，在至少一个样本光源信息下，控制摄像头组件在各样本光源信息下对样本光源进行拍摄，可以获取各样本衍射图像，最后获取存储有样本光源信息与样本衍射图像的对应关系的样本数据库，使得可以基于样本数据库中样本光源信息与样本衍射图像的对应关系，对目标图像中的衍射条纹进行消除处理。
请参阅图7，图7为本申请实施例提供的另一种图像处理方法的流程示意图。
如图7所示，图像处理方法包括：
S720、获取摄像头组件拍摄的目标图像。
处理器接收拍摄指令，控制摄像头组件进行拍摄目标图像。其中拍摄指令可以是基于用户触摸显示面板的操作产生，可以是基于用户按压物理按键的操作产生，还可以是基于用户输入的语音产生，此处不限定拍摄指令指令产生的形式。处理器获取摄像头组件拍摄的目标图像。
S740、获取目标图像中各像素的亮度值，将亮度值大于预设亮度阈值的像素集合组成的连通区域确定为衍射图像区域。
由于目标图像中可能会出现目标衍射图像，因此可以根据预设的判定方式或者规则，将目标图像划分为衍射图像区域以及非衍射图像区域。一种可行的方式是，获取目标图像中各像素的亮度值，将各像素的亮度值进行对，由于衍射区域包括光源区域以及衍射条区域，光源区域以及衍射条区域的亮度要高于非衍射图像区域的亮度，因此将亮度值大于预设亮度阈值的像素集合组成的连通区域确定为衍射图像区域，其中将像素集合组成的连通区域确定为衍射图像区域的目的是，避免将目标图像中局部出现的高亮区域或者个别的高亮像素作为衍射图像区域，提高衍射图像区域识别的准确性。目标图像中衍射图像区域以外的区域为非衍射图像区域。
S760、将衍射图像区域中的预设形状的区域确定为光源区域，获取光源区域的目标光源信息。
由于在实际拍摄环境中，目标光源的形状可以多种的，例如，目标光源的形状可以是圆形、方形或者菱形等，因此可以将衍射图像区域中的预设形状的区域确定为光源区域，预设形状可以是圆形、方形或者菱形等，再获取光源区域的目标光源信息作为目标图像的光标光源信息，目标光源信息可以包括目标光源位置、目标光源形状、目标光源尺寸、目标光源颜色以及目标光源强度中的至少一种。其中，目标光源信息可以包括目标光源相对于目标图像中实际场景的信息，例如，目标图像中人物头部宽度为12厘米，通过预设算法以及目标光源与人物头部之间的距离，可以换算出目标光源的宽度为20厘米，也即目标光源尺寸可以是相对于目标图像中的人物的尺寸。目标光源信息还可以包括目标光源相对于目标图像中像素的信息，例如，目标图像中目标光源尺寸可以是宽度为1000像素，长度为900像素；再例如，目标图像中目标光源位置可以为目标光源所包含的像素的像素位置。
获取光源区域的目标光源信息可以有多种实现方式，本申请中不限定其具体的实现方式，一些可行实现方式可以是，获取目标图像中各像素的亮度值以及像素坐标，确定光源区域中亮度值大于预设光源亮度阈值的像素点集合组成的区域确定为样本光源，将样本光源对应的像素坐标，作为目标光源的位置；获取样本光源中边缘像素的像素坐标，将边缘像素的像素坐标连接而成图形形状，作为样本光源形状；获取样本光源中对立边缘像素的像素坐标差，作为样本光源尺寸；获取样本光源中各像素具体的RGB色彩值，得到样本光源颜色；获取样本光源中各像素的平均亮度值，作为样本光源强度。
S780、基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像。
S7100、基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理。
其中，对于S780至S7100方法步骤中未披露的细节，请参照上述S140至S160方法步骤中的具体描述。
在在申请实施例中，获取目标图像中各像素的亮度值，将亮度值大于预设亮度阈值的像素集合组成的连通区域确定为衍射图像区域，进而可以获取衍射图像区域中光源区域的目标光源信息。根据目标光源信息中各像素的亮度值以及各像素的像素坐标，可以进一步得到目标光源信息的具体参数。
请参阅图8A，图8A为本申请实施例提供的另一种图像处理方法的流程示意图。
如图8A所示，图像处理方法包括：
S820、获取摄像头组件拍摄的目标图像，获取目标图像所包含的衍射图像区域的目标光源信息。
S840、基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像。
其中，对于S820至S840方法步骤中未披露的细节，请参照上述S120至S140方法步骤中的具体描述。
S860、在样本数据库中获取与目标光源信息相匹配的第一样本光源信息。
样本数据库中存储有样本光源信息与样本衍射图像，样本光源信息与样本衍射图像可以有多种存储方式，存储方式可以是表格、矩阵或者键值对等，下面样本光源信息与样本衍射图像是以键值对的存储方式，介绍样本数据库中数据的存储方式。
图8B为本申请实施例提供的一种样本数据库存储数据方式的举例示意图。
如图8B所示，样本数据库中包括多组键值对，每组键值对用于存储一个样本光源信息以及该样本光源信息下得到的样本衍射图像，具体的每组键值对包括一个缓存键以及一个缓存值，其中一个缓存键用于存储一个样本光源信息，一个缓存值用于存储该样本光源信息下得到的样本衍射图像。例如，在图8B中一组键值对中缓存键存储一种样本光源信息，可以是样本光源强度为500勒克斯以及样本光源形状为圆形，该组键值对中缓存值存储该样本光源信息下得到的样本衍射图像；另一组键值对中缓存键存储另一种样本光源信息，可以是样本光源强度为100勒克斯以及样本光源形状为方形，该组键值对中缓存值存储该样本光源信息下得到的另一种样本衍射图像。由于键值对中缓存键和缓存值是一一对应的关系，因此样本数据库通过缓存键的来存储数据，样本光源信息以及该样本光源信息下得到的样本衍射图像也是一一对应的，样本数据库采用该存储数据方式，可以提高通过样本光源信息查找样本衍射图像的速度。
可选地，确定目标图像的目标光源信息后，可以在样本数据库中获取与目标光源信息匹配的第一样本光源信息。由上述实施例可以得知，目标光源信息可以包括目标光源相对于目标图像中实际场景的信息，还可以包括目标光源相对于目标图像中像素的信息；样本光源信息可以包括样本光源在实际拍摄环境中的信息，还可以包括样本光源相对于样本衍射图像中像素的信息。因此目标光源信息和样本光源信息匹配的方式，可以根据目标光源信息和样本光源信息包括的信息类型进行设置。例如，当目标光源信息仅包括目标光源相对于目标图像中像素的信息，且样本光源信息仅包括样本光源相对于样本衍射图像中像素的信息时，那么仅需要根据目标光源信息，在样本数据库中遍历与目标光源信息相同的样本光源信息，将该样本光源信息作为第一样本光源信息即可。
S880、基于样本光源信息与样本衍射图像的对应关系，确定第一样本光源信息对应的第一样本衍射图像，将第一样本衍射图像确定为目标光源信息对应的目标样本衍射图像。
由于样本数据库中，样本光源信息以及该样本光源信息下得到的样本衍射图像是一一对应的，因此基于样本光源信息与样本衍射图像的对应关系，可以确定第一样本光源信息对应的第一样本衍射图像，将第一样本衍射图像确定为目标光源信息对应的目标样本衍射图像。
S8100、基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理。
在本申请实施例中，可以将样本光源信息与样本衍射图像以缓存键的方式存储至数据库中，由于键值对中缓存键和缓存值是一一对应的关系，因此样本数据库通过缓存键的来存储数据，样本光源信息以及该样本光源信息下得到的样本衍射图像也是一一对应的，这种存储方式可以提高通过样本光源信息查找样本衍射图像的速度。
请参阅图9，图9为本申请实施例提供的另一种图像处理方法的流程示意图。
如图9所示，图像处理方法包括：
S920、获取摄像头组件拍摄的目标图像，获取目标图像所包含的衍射图像区域的目标光源信息。
S940、基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像。
其中，对于S920至S940方法步骤中未披露的细节，请参照上述S120至S140方法步骤中的具体描述。
S960、获取目标图像与目标样本衍射图像的相同图像区域。
由于目标样本衍射图像是在目标光源信息下得到的，而目标图像的目标光源信息与样本光源信息是匹配的，因此目标图像与目标样本衍射图像具有相同的图像区域。
图10为本申请实施例提供的目标图像的第一种举例示意图，图11为本申请实施例提供的目标样本衍射图像的举例示意图。
图10为目标图像，图11为目标样本衍射图像，获取图10和图11中的相同图像区域，其中获取相同图像区域的方式可以不做限定，一种可行的实施方式是，获取图10中目标图像各像素的亮度值以及像素坐标，以及获取图11中目标样本衍射图像各像素的亮度值以及像素坐标，对图10和图11中各像素的亮度值以及像素坐标进行比对，得到亮度值相同且像素坐标相同的像素点集合组成的连通区域，该连通区域作为目标图像与目标样本衍射图像相同的图像区域。
S980、消除目标图像中的相同图像区域，并复原目标图像中的光源。
图12A为本申请实施例提供的目标图像的第二种举例示意图。
如图12A所示，用虚线标示出目标图像与目标样本衍射图像相同的图像区域1201，在获取目标图像与目标样本衍射图像相同的图像区域1201之后，可以消除目标图像中相同的图像区域1201，具体可以删除相同的图像区域1201中的像素。为提高目标图像的图像视觉效果，需要对目标图像中消除的区域做复原处理。由于衍射图像区域可以包括目标图像与目标样本衍射图像相同的图像区域1201，其相同的图像区域1201可以包括光源区域，因此需要对目标图像中光源区域进行复原。一种可行的方式是，根据光源区域各像素的亮度值、RGB值以及像素坐标值，对光源区域进行重现构建以及填充，以复原光源区域。复原光源区域后的图像如图12A中右边图像所示。
可选地，上述S960至S980还可以有其他实施方式，例如基于目标图像与目标样本衍射图像，将目标图像与目标样本衍射图像做图像相减，以消除目标图像中的相同图像区域，并复原目标图像中的光源区域。再例如，还可以获取目标图像中各像素的像素坐标以及RGB值，以及目标样本衍射图像中各像素的像素坐标以及RGB值，进行像素比对，对目标图像中的衍射条纹进行消除。
S9100、消除衍射图像区域中除光源区域以外的其他区域的图像。
由于目标图像中衍射图像区域通常不会和目标图像与目标样本衍射图像相同的图像区域完全一致，因此在消除目标图像中的相同图像区域之后，目标图像中还存在一些未被消除的衍射条纹。图12B为本申请实施例提供的目标图像的第三种举例示意图，在图12B中存在未被消除的衍射条纹1202，因此需要对衍射图像区域进行二次消除，也即消除衍射图像区域中除光源区域以外的其他区域的未被消除的衍射条纹1202，同时还需要对目标图像中除光源区域以外区域进行复原，复原后的图像如图12B中右边图像所示，也即最终的目标图像。例如，需要对衍射图像区域中衍射条纹所占用的区域进行修复，一种可行的方式是，还可以获取目标图像中衍射图像区域的边缘的像素亮度值和RGB值，以相同的像素亮度和RGB值构建以及填充衍射条纹占用的区域，以复原目标图像中的衍射图像区域。
在本申请实施例中，获取目标图像与目标样本衍射图像的相同图像区域，消除目标图像中的相同图像区域，并复原目标图像中的光源区域，以及消除衍射图像区域中除光源区域以外的其他区域的图像，在消除目标图像中衍射条纹的同时，还实现了对目标图像的复原，提高了目标图像的成像质量以及成像效果。
请参阅图13，图13为本申请实施例提供的一种图像处理装置的结构示意图。
如图13所示，图像处理装置1300应用于显示屏组件，显示屏组件下方设置有摄像头组件，该装置包括：
目标图像获取模块1310，用于获取摄像头组件拍摄的目标图像，获取目标图像所包含的衍射图像区域的目标光源信息。
目标样本衍射图像确定模块1320，用于基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像。
衍射条纹处理模块1330，用于基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理。
请参阅图14，图14为本申请实施例提供的另一种图像处理装置的结构示意图。
如图14所示，图像处理装置1300包括：
样本获取模块1340，用于获取至少一个样本光源信息，并获取至少一个样本光源信息中各样本光源信息对应的样本衍射图像。样本光源信息包括样本光源位置、样本光源形状、样本光源尺寸、样本光源颜色以及样本光源强度中的至少一种。
样本保存模块1350，用于将至少一个样本光源信息和各样本光源信息对应的样本衍射图像保存至样本数据库。
目标图像获取模块1310，用于获取摄像头组件拍摄的目标图像，获取目标图像所包含的衍射图像区域的目标光源信息。
目标样本衍射图像确定模块1320，用于基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像。
衍射条纹处理模块1330，用于基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理。
请参阅图15，图15为本申请实施例提供的目标图像获取模块的结构示意图。
如图15所示，上述实施例中目标图像获取模块1310包括：
衍射图像区域获取模块13102，用于获取目标图像中各像素的亮度值，将亮度值大于预设亮度阈值的像素集合组成的连通区域确定为衍射图像区域。
目标光源信息获取模块13104，用于将衍射图像区域中的预设形状的区域确定为光源区域，获取光源区域的目标光源信息。
请参阅图16，图16为本申请实施例提供的目标样本衍射图像确定模块的结构示意图。
如图16所示，上述实施例中目标样本衍射图像确定模块1320包括：
第一样本光源信息获取模块13202，用于在样本数据库中获取与目标光源信息相匹配的第一样本光源信息。
目标样本衍射图像确定模块13204，用于基于样本光源信息与样本衍射图像的对应关系，确定第一样本光源信息对应的第一样本衍射图像，将第一样本衍射图像确定为目标光源信息对应的目标样本衍射图像。
请参阅图17，图17为本申请实施例提供的衍射条纹处理模块的结构示意图。
如图17所示，上述实施例中衍射条纹处理模块1330包括：
相同图像区域获取模块13302，用于获取目标图像与目标样本衍射图像的相同图像区域。
第一消除模块13304，用于消除目标图像中的相同图像区域，并复原目标图像中的光源区域。
第二消除模块13306，用于消除衍射图像区域中除光源区域以外的其他区域的图像。
在本申请实施例中，图像处理装置包括目标图像获取模块，用于获取摄像头组件拍摄的目标图像，获取目标图像所包含的衍射图像区域的目标光源信息；目标样本衍射图像确定模块，用于基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像；衍射条纹处理模块，用于基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理。由于可以先获得目标图像中的目标光源信息，再通过样本数据库中样本光源信息与样本衍射图像的对应关系，可以识别出目标图像对应的目标衍射图像，根据目标衍射图像可以对目标图像中衍射条纹进行消除处理，可以提高对目标图像中衍射条纹的消除的准确性。
请参阅图18，图18为本申请实施例提供的一种显示屏组件的结构示意图。
如图18所示，显示屏组件1800包括：
显示屏本体1810可以包括层叠设置的盖板1812和偏光片1814，偏光片1814设置在盖板1812的下方。盖板1812用于对显示屏组件1800进行保护，避免外力对显示屏组件1800造成破坏，盖板1812可以采用透明且具有一定的硬度材料制成，例如，盖板1812可以由透明材质的玻璃制成。偏光片1814用于消除外界光线照射在显示屏组件1800后的反射光，使得用户更易观察到显示屏组件1800中显示的图像，偏光片1814可以采用具有透明性质的材料制成。
电路层1820，电路层1820设置在显示屏本体1810的下方，电路层1820中包括发光材料，以及驱动发光材料发光的驱动电路。其中驱动电路包括电子元器件以及导线，通过导线可以将电子与器件以及发光材料连接起来，驱动电路通过接受驱动信号，驱动多种以及多个发光材料的点亮，可以实现显示图像。
基底层1830，设置在电路层1820的下方，且基底层1830下方设置有摄像头组件1840。基底层1830可以包括层叠设置的固定膜1832以及支撑膜1834，固定膜1832设置在电路层1820的下方，支撑膜1834设置在固定膜1832的下方。其中固定膜1832用于固定电路层中的电子元器件和导线，保证电路层的结构稳定，固定膜1832可以使用透光材料制成。支撑膜1834用于支撑固定膜1832，以及支撑固定膜1832上固定的电子元器件以及导线，支撑膜1834也可以使用透光材料制成。
外界光线照射到显示屏本体1810上后，由于盖板1812和偏光片1814均可以使用透明材料制成，因此外界光线可以透过显示屏本体1810照射到电路层1820上。而电路层1820包括导线，以及导线连接的电子元器件和发光材料，导线与导线之间，或者导线与电子元器件之间存在缝隙，因此外界光线可以透过电路层中存在的缝隙照射到基底层1830上。基底层1830中固定膜1832以及支撑膜1834均可以使用透光材料制成，因此外界光线还可以透过基底层1830，进而进入基底层1830下方设置的摄像头组件1840中，摄像头组件1840外界光线进行拍摄成像。
当外界光线通过电路层1820中的缝隙照射到基底层1830上时，外界光线在穿过电路层1820时，可能会发生光的衍射，造成摄像头组件1840拍摄的图像中存在衍射条纹。可以利用上述实施例中提供的图像处理方法，对摄像头组件1840拍的图像进行衍射条纹的消除处理，以提高图像的成像质量以及成像效果。
请参阅图19，图19为本申请实施例提供的一种电路层结构的举例示意图。
由于摄像头组件1840设置在电路层1820的下方，也即电路层1820与摄像头组件1840中部分区域在位置上是对立的。可以在电路层1820中与摄像头组件1840相对的区域开有预设形状的开孔，其中开孔的预设形状可以是圆形、方形或者菱形等。图19为显示屏组件的爆炸图，在图19中，圆框中对电路层中的电路进行了放大，可以得知在电路层1820中与摄像头组件1840相对的区域开有预设形状的开孔，开孔的预设形状为圆形，当电路层1820中开设有圆形的开孔后，外界光线可以透过圆形的开孔透过电路层1820，会在摄像头组件1840拍摄的图像中存在有规律的衍射条纹，使得采用上述实施例中的图像处理方法，对图像中的衍射条纹进行消除处理时具有更好的效果。
请参阅图20，图20为本本申请实施例提供的另一种电路层结构的举例示意图。
可选地，还可以在电路层1820的布线时，对电路层1820中线路的宽度进行设置。图20为显示屏组件的爆炸图，在图20中圆框中对电路层中的电路进行了放大，将电路层1820中与摄像头组件1840相对的区域的线路宽度设置较窄，将电路层1820中不与摄像头组件1840相对的区域的线路宽度设置为正常宽度。使得电路层1820中与摄像头组件1840相对的区域的线路宽度，小于电路层1820中不与摄像头组件1840相对的区域的线路宽度。由于光的衍射与障碍物的缝隙尺寸有关，当缝隙的尺寸与光的波长尺寸接近时，光的衍射会比较明显。电路层1820采用这种结构，会使得使得电路层1820中与摄像头组件1840相对的区域的线路缝隙增大，一方面，可以在保证电路层1820正常电路功能的同时，可以使得电路层1820中与摄像头组件1840相对的区域的线路缝隙大于外界光线的波长，以减小外界光线穿过电路层1820发生的衍射；另一方面，仅将电路层1820中与摄像头组件1840相对的区域的线路宽度设置较窄，而其他区域线路宽度设置为正常宽度，可以减少电路层1820的制造成本。
此外，本申请实施例的说明是参阅附加的图示，用以例示本申请可用以实施的特定实施例。本申请中所提到的方向用语，例如，“上”、“下”、“前”、“后”、“左”、“右”、“内”、“外”、“侧面”等，仅是参考附加图式的方向，因此，使用的方向用语是为了更好、更清楚地说明及理解本申请，而不是指示或暗指所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本申请的限制。
在本申请实施例中，显示屏组件包括：显示屏本体；电路层，设置在显示屏本体的下方；基底层，设置在电路层的下方，且基底层下方设置有摄像头组件；其中，电路层中与摄像头组件相对的区域开有预设形状的开孔，和/或电路层中与摄像头组件相对的区域的线路宽度，小于电路层中不与摄像头组件相对的区域的线路宽度。显示屏组件采用上述结构，使得采用上述实施例中的图像处理方法，对图像中的衍射条纹进行消除处理时具有更好的效果。
本申请实施例还提供了一种计算机存储介质，计算机存储介质存储有多条指令，指令适于由处理器加载并执行如上述实施例中的任一项的方法的步骤。
进一步地，图21为本申请实施例提供了一种电子设备的结构示意图。如图21所示，电子设备2100可以包括：至少一个处理器2101，至少一个网络接口2104，用户接口2103，存储器2105，至少一个通信总线2102。
电子设备2100还包括上述实施例中的显示屏组件1800。
其中，通信总线2102用于实现这些组件之间的连接通信。
其中，用户接口2103可以包括摄像头(Camera)，可选用户接口2103还可以包括标准的有线接口、无线接口。
其中，网络接口2104可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。
其中，处理器2101可以包括一个或者多个处理核心。处理器2101利用各种接口和线路连接整个电子设备2100内的各个部分，通过运行或执行存储在存储器2105内的指令、程序、代码集或指令集，以及调用存储在存储器2105内的数据，执行电子设备2100的各种功能和处理数据。可选的，处理器2101可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable Logic Array，PLA)中的至少一种硬件形式来实现。处理器2101可集成中央处理器(Central Processing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示屏所需要显示的内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器2101中，单独通过一块芯片进行实现。
其中，存储器2105可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory，ROM)。可选的，该存储器2105包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器2105可用于存储指令、程序、代码、代码集或指令集。存储器2105可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等；存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器2105可选的还可以是至少一个位于远离前述处理器2101的存储装置。如图21所示，作为一种计算机存储介质的存储器2105中可以包括操作系统、网络通信模块、用户接口模块以及图像处理程序。
在图21所示的电子设备2100中，用户接口2103主要用于为用户提供输入的接口，获取用户输入的数据；而处理器2101可以用于调用存储器2105中存储的图像处理程序，并具体执行以下操作：
获取摄像头组件拍摄的目标图像，获取目标图像所包含的衍射图像区域的目标光源信息；
基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像；
基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理。
在一个实施例中，处理器2101在执行获取摄像头组件拍摄的目标图像之前，还执行以下操作：
获取至少一个样本光源信息，并获取采用所述至少一个样本光源信息中各样本光源信息拍摄的样本衍射图像，所述样本光源信息包括样本光源位置、样本光源形状、样本光源尺寸、样本光源颜色以及样本光源强度中的至少一种；
将所述至少一个样本光源信息以及采用所述各样本光源信息拍摄的样本衍射图像保存至样本数据库。
在一个实施例中，处理器2101在执行获取目标图像所包含的衍射图像区域的目标光源信息时，具体执行以下操作：
获取目标图像中各像素的亮度值，将亮度值大于预设亮度阈值的像素集合组成的连通区域确定为衍射图像区域；
将衍射图像区域中的预设形状的区域确定为光源区域，获取光源区域的目标光源信息。
在一个实施例中，处理器2101在执行基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定目标光源信息对应的目标样本衍射图像时，具体执行以下操作：
在样本数据库中获取与目标光源信息相匹配的第一样本光源信息；
基于样本光源信息与样本衍射图像的对应关系，确定第一样本光源信息对应的第一样本衍射图像，将第一样本衍射图像确定为目标光源信息对应的目标样本衍射图像。
在一个实施例中，处理器2101在执行基于目标图像与目标样本衍射图像，对目标图像中的衍射条纹进行消除处理时，具体执行以下操作：
获取目标图像与目标样本衍射图像的相同图像区域；
消除目标图像中的相同图像区域，并复原目标图像中的光源区域。
在一个实施例中，处理器2101在执行复原目标图像中的光源区域之后，还执行以下操作：
消除衍射图像区域中除光源区域以外的其他区域的图像。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其它实施例的相关描述。
以上为对本申请所提供的一种图像处理方法、装置、显示屏组件以及电子设备的描述，对于本领域的技术人员，依据本申请实施例的思想，在具体实施方式及应用范围上均会有改变之处，综上，本说明书内容不应理解为对本申请的限制。
Claims (10)
1.一种图像处理方法，应用于显示屏组件，所述显示屏组件下方设置有摄像头组件，其特征在于，所述方法包括：
获取所述摄像头组件拍摄的目标图像，获取所述目标图像所包含的衍射图像区域的目标光源信息；
基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定所述目标光源信息对应的目标样本衍射图像；
基于所述目标图像与所述目标样本衍射图像，对所述目标图像中的衍射条纹进行消除处理。
2.根据权利要求1所述的方法，其特征在于，所述获取所述摄像头组件拍摄的目标图像之前，还包括：
获取至少一个样本光源信息，并获取各样本光源信息对应的样本衍射图像；其中，所述样本光源信息包括样本光源位置、样本光源形状、样本光源尺寸、样本光源颜色以及样本光源强度中的至少一种；
将所述至少一个样本光源信息以及所述各样本光源信息对应的样本衍射图像保存至所述样本数据库。
3.根据权利要求1所述的方法，其特征在于，所述获取所述目标图像所包含的衍射图像区域的目标光源信息，包括：
获取所述目标图像中各像素的亮度值，将所述亮度值大于预设亮度阈值的像素集合组成的连通区域确定为衍射图像区域；
将所述衍射图像区域中的预设形状区域确定为光源区域，获取所述光源区域的目标光源信息。
4.根据权利要求1所述的方法，其特征在于，所述基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定所述目标光源信息对应的目标样本衍射图像，包括：
在所述样本数据库中获取与所述目标光源信息相匹配的第一样本光源信息；
基于样本光源信息与样本衍射图像的对应关系，确定所述第一样本光源信息对应的第一样本衍射图像，将所述第一样本衍射图像确定为所述目标光源信息对应的目标样本衍射图像。
5.根据权利要求3所述的方法，其特征在于，所述基于所述目标图像与所述目标样本衍射图像，对所述目标图像中的衍射条纹进行消除处理，包括：
获取所述目标图像与所述目标样本衍射图像的相同图像区域；
消除所述目标图像中的所述相同图像区域，并复原所述目标图像中的所述光源区域。
6.根据权利要求5所述的方法，其特征在于，所述复原所述目标图像中的所述光源区域之后，还包括：
消除所述衍射图像区域中除所述光源区域以外的其他区域的图像。
7.一种图像处理装置，应用于显示屏组件，所述显示屏组件下方设置有摄像头组件，其特征在于，所述装置包括：
目标图像获取模块，用于获取所述摄像头组件拍摄的目标图像，获取所述目标图像所包含的衍射图像区域的目标光源信息；
目标样本衍射图像确定模块，用于基于样本数据库中样本光源信息与样本衍射图像的对应关系，确定所述目标光源信息对应的目标样本衍射图像；
衍射条纹处理模块，用于基于所述目标图像与所述目标样本衍射图像，对所述目标图像中的衍射条纹进行消除处理。
8.一种显示屏组件，其特征在于，所述显示屏组件包括：
显示屏本体；
电路层，设置在所述显示屏本体的下方；
基底层，设置在所述电路层的下方，且所述基底层下方设置有摄像头组件；
其中，所述电路层中与所述摄像头组件相对的区域开有预设形状的开孔，和/或所述电路层中与所述摄像头组件相对的区域的线路宽度，小于所述电路层中不与所述摄像头组件相对的区域的线路宽度；
所述显示屏组件适用于权利要求1至6任一项所述的图像处理方法。
9.一种计算机存储介质，其特征在于，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行如权利要求1～6任意一项的所述方法的步骤。
10.一种电子设备，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现权利要求1～6任一项所述方法的步骤；
所述电子设备还包括如权利要求8的所述显示屏组件。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910788103.1A CN110489580B (zh) | 2019-08-26 | 2019-08-26 | 图像处理方法、装置、显示屏组件以及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910788103.1A CN110489580B (zh) | 2019-08-26 | 2019-08-26 | 图像处理方法、装置、显示屏组件以及电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110489580A CN110489580A (zh) | 2019-11-22 |
| CN110489580B true CN110489580B (zh) | 2022-04-26 |
Family
ID=68554071
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910788103.1A Active CN110489580B (zh) | 2019-08-26 | 2019-08-26 | 图像处理方法、装置、显示屏组件以及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110489580B (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113139911A (zh) * | 2020-01-20 | 2021-07-20 | 北京迈格威科技有限公司 | 图像处理方法及装置、图像处理模型的训练方法及装置 |
| CN114066785A (zh) * | 2020-07-31 | 2022-02-18 | 北京小米移动软件有限公司 | 图像处理方法及装置、终端和存储介质 |
| CN114066740A (zh) * | 2020-08-07 | 2022-02-18 | 北京小米移动软件有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN114079731A (zh) * | 2020-08-19 | 2022-02-22 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质以及终端 |
| CN111970447B (zh) * | 2020-08-25 | 2021-12-21 | 云谷（固安）科技有限公司 | 显示装置和移动终端 |
| CN112165616B (zh) * | 2020-11-13 | 2023-05-02 | 歌尔光学科技有限公司 | 一种摄像头模组的测试方法、装置、电子设备及存储介质 |
| CN113161398B (zh) | 2021-04-01 | 2022-03-15 | 武汉天马微电子有限公司 | 一种显示面板及显示装置 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102013092A (zh) * | 2010-11-26 | 2011-04-13 | 重庆大学 | 一种基于光照校正的图像复原方法 |
| CN102739922A (zh) * | 2011-03-22 | 2012-10-17 | 索尼公司 | 图像处理装置、图像处理方法和程序 |
| CN104184943A (zh) * | 2014-07-29 | 2014-12-03 | 小米科技有限责任公司 | 图像拍摄方法与装置 |
| JP2016050929A (ja) * | 2014-08-28 | 2016-04-11 | 株式会社緑野リサーチ | 位相撮影装置およびその復元方法 |
| CN107341771A (zh) * | 2016-04-28 | 2017-11-10 | 夏普株式会社 | 图像处理方法和图像处理装置 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101861599B (zh) * | 2008-09-17 | 2012-07-04 | 松下电器产业株式会社 | 图像处理装置、摄像装置、评价装置、图像处理方法以及光学系统评价方法 |
| US9068928B2 (en) * | 2010-09-03 | 2015-06-30 | The Arizona Board Of Regents On Behalf Of The University Of Arizona | White light Sagnac interferometer polarimeters |
| CN203279004U (zh) * | 2013-05-31 | 2013-11-06 | 信利光电股份有限公司 | 一种摄像头模组 |
| CN103780818B (zh) * | 2014-02-21 | 2017-04-19 | 联想(北京)有限公司 | 一种摄像头、摄像模组以及电子设备 |
| CN204089960U (zh) * | 2014-06-30 | 2015-01-07 | 惠州市泰宇光电有限公司 | 手机摄像头模组 |
| CN104517271B (zh) * | 2014-12-29 | 2018-05-18 | 小米科技有限责任公司 | 图像处理方法及装置 |
| CN107948498B (zh) * | 2017-10-30 | 2019-10-18 | 维沃移动通信有限公司 | 一种消除相机摩尔条纹方法及移动终端 |
| CN108525298B (zh) * | 2018-03-26 | 2020-08-04 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN108919544A (zh) * | 2018-06-26 | 2018-11-30 | Oppo广东移动通信有限公司 | 显示屏组件、电子设备及电子设备的制作方法 |
-
2019
- 2019-08-26 CN CN201910788103.1A patent/CN110489580B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102013092A (zh) * | 2010-11-26 | 2011-04-13 | 重庆大学 | 一种基于光照校正的图像复原方法 |
| CN102739922A (zh) * | 2011-03-22 | 2012-10-17 | 索尼公司 | 图像处理装置、图像处理方法和程序 |
| CN104184943A (zh) * | 2014-07-29 | 2014-12-03 | 小米科技有限责任公司 | 图像拍摄方法与装置 |
| JP2016050929A (ja) * | 2014-08-28 | 2016-04-11 | 株式会社緑野リサーチ | 位相撮影装置およびその復元方法 |
| CN107341771A (zh) * | 2016-04-28 | 2017-11-10 | 夏普株式会社 | 图像处理方法和图像处理装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110489580A (zh) | 2019-11-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110489580B (zh) | 图像处理方法、装置、显示屏组件以及电子设备 | |
| ES2863368T3 (es) | Método de procesamiento de imágenes, medio de almacenamiento y aparato electrónico | |
| KR102423175B1 (ko) | 심도 맵을 이용하여 이미지를 편집하기 위한 장치 및 그에 관한 방법 | |
| US11153520B2 (en) | Electronic device including camera module in display and method for compensating for image around camera module | |
| CN111311523B (zh) | 图像处理方法、装置、系统和电子设备 | |
| KR20200017072A (ko) | 이미지 분석에 기반하여, 디스플레이를 통해 표시된 영상과 메모리에 저장된 영상과 관련하여 알림을 제공하는 전자 장치 및 방법 | |
| US20170059305A1 (en) | Active illumination for enhanced depth map generation | |
| CN109685746A (zh) | 图像亮度调整方法、装置、存储介质及终端 | |
| CN110084204B (zh) | 基于目标对象姿态的图像处理方法、装置和电子设备 | |
| KR102423295B1 (ko) | 심도 맵을 이용하여 객체를 합성하기 위한 장치 및 그에 관한 방법 | |
| US20230230204A1 (en) | Image processing method and apparatus, and method and apparatus for training image processing model | |
| KR20200101741A (ko) | 영상에 보케 효과를 적용하는 전자 장치 및 그 제어 방법 | |
| KR20200117562A (ko) | 비디오 내에서 보케 효과를 제공하기 위한 전자 장치, 방법, 및 컴퓨터 판독가능 매체 | |
| KR102383134B1 (ko) | 우선 순위에 기반하여 이미지를 처리하는 전자 장치 및 그 동작 방법 | |
| US20120249753A1 (en) | Capturing method for images with different view-angles and capturing system using the same | |
| US20210097655A1 (en) | Image processing method and electronic device supporting the same | |
| US20230269492A1 (en) | Electronic device and method for displaying image in electronic device | |
| US8827460B2 (en) | Projector system and device, recording medium storing position detection program, and image providing method | |
| JP2017130794A (ja) | 情報処理装置、評価用チャート、評価システム、および性能評価方法 | |
| CN117274383A (zh) | 视点预测方法及装置、电子设备和存储介质 | |
| US11582430B2 (en) | Electronic device comprising image sensor and method of operation thereof | |
| CN109427089B (zh) | 基于环境光照条件的混合现实对象呈现 | |
| JPWO2018078862A1 (ja) | 画像解析システム、画像解析方法、およびプログラム | |
| JP6777507B2 (ja) | 画像処理装置および画像処理方法 | |
| CN106709427B (zh) | 键盘动作检测方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |