CN116503290B - 图像处理方法、装置、服务器及存储介质 - Google Patents
图像处理方法、装置、服务器及存储介质 Download PDFInfo
- Publication number
- CN116503290B CN116503290B CN202310732522.XA CN202310732522A CN116503290B CN 116503290 B CN116503290 B CN 116503290B CN 202310732522 A CN202310732522 A CN 202310732522A CN 116503290 B CN116503290 B CN 116503290B
- Authority
- CN
- China
- Prior art keywords
- image data
- pixel
- image
- target
- compensation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 38
- 230000002159 abnormal effect Effects 0.000 claims abstract description 134
- 238000012545 processing Methods 0.000 claims abstract description 86
- 238000012795 verification Methods 0.000 claims abstract description 52
- 238000000034 method Methods 0.000 claims abstract description 41
- 230000015654 memory Effects 0.000 claims description 31
- 238000005070 sampling Methods 0.000 claims description 31
- 230000015572 biosynthetic process Effects 0.000 claims description 12
- 238000003786 synthesis reaction Methods 0.000 claims description 12
- 238000013524 data verification Methods 0.000 claims description 10
- 238000004891 communication Methods 0.000 claims description 6
- 238000010606 normalization Methods 0.000 claims description 5
- 230000008439 repair process Effects 0.000 description 18
- 230000008569 process Effects 0.000 description 9
- 230000005856 abnormality Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000009825 accumulation Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Controls And Circuits For Display Device (AREA)
- Image Processing (AREA)
Abstract
本发明涉及图像显示技术领域,公开了一种图像处理方法、装置、服务器及存储介质。其中,该方法包括:获取当前接收到的针对于待显示图像的图像数据;对图像数据进行校验,生成图像校验结果;基于图像校验结果,对异常图像数据进行像素补偿,得到目标像素;采用目标像素对异常图像数据进行修复,生成目标显示数据。通过实施本发明,在BMC检测到其所捕获的图像数据出现异常时,能够采用像素补偿的方式对异常图像数据进行自适应修复,以得到目标显示数据,从而根据该目标显示数据生成正常的显示画面,实现了图像的正常显示。
Description
技术领域
本发明涉及图像显示技术领域,具体涉及一种图像处理方法、装置、服务器及存储介质。
背景技术
通常服务器的图像数据需要经基板管理控制器(Baseboard ManagementController,BMC)进行捕获处理,再通过网络传输至显示终端,并在显示终端显示图像数据所对应的显示画面。然而,在将图像数据向显示终端传输的过程中,由于随机存取存储器(Random Access Memory,RAM)内部存在有大量的缓存资源,在对图像数据读写过程中可能会因路径延时等问题而导致数据读写产生异常,出现图像数据受损,从而导致图像显示异常。
发明内容
有鉴于此,本发明实施例提供了一种图像处理方法、装置、服务器及存储介质,以解决图像数据受损而导致图像显示异常的问题。
第一方面,本发明实施例提供了一种图像处理方法,该方法包括:获取当前接收到的针对于待显示图像的图像数据;对图像数据进行校验,生成图像校验结果;基于图像校验结果,对异常图像数据进行像素补偿,得到目标像素;采用目标像素对异常图像数据进行修复,生成目标显示数据。
本发明实施例提供的图像处理方法,通过校验图像数据以确定当前所接收到的图像数据是否存在异常,当检测到图像数据存在异常时,对异常图像数据进行像素补偿,并通过补偿所得到的目标像素对异常图像数据进行修复,得到目标显示数据。由此在BMC检测到其所捕获的图像数据出现异常时,能够采用像素补偿的方式对异常图像数据进行自适应修复,以得到目标显示数据,从而根据该目标显示数据生成正常的显示画面,实现了图像的正常显示。
结合第一方面,在一种实施方式中,基于图像校验结果,对异常图像数据进行像素补偿,得到目标像素,包括:基于图像校验结果,确定异常图像数据所处的图像位置;获取位于图像位置之前的多个正常图像数据;采用多个正常图像数据的像素点值对异常图像数据进行像素补偿,生成目标像素。
本发明实施例提供的图像处理方法,采用正常的图像数据对异常图像数据进行像素补偿,以对异常图像数据的有效修复,使经过像素补偿后所得到的目标像素能够与正常的图像数据进行良好过渡,最大程度上保证了图像的完整性。
结合第一方面或其对应实施方式,在一种实施方式中,采用多个正常图像数据的像素点值对异常图像数据进行像素补偿,生成目标像素,包括:获取图像数据所对应实际图像块的第一像素点值;对多个正常图像数据进行采样处理和插值处理,得到各个正常图像数据对应的目标图像块;确定目标图像块的第二像素点值;基于第一像素点值与第二像素点值之间的像素差,对第一像素点值进行补偿处理,得到目标像素。
本发明实施例提供的图像处理方法,通过对多个正常图像数据进行采样和插值处理,以从目标图像块中提取出能够表征图像特征的像素点值,结合实际图像块的第一像素点值与目标图像块的第二像素点值,确定两者之间所存在的像素差,根据该像素差对第一像素点值进行补偿,以填充原始图像数据所缺失的像素点值,实现了对于异常图像数据的像素修复,保证了图像数据的像素完整性。
结合第一方面或其对应实施方式,在一种实施方式中,对多个正常图像数据进行采样处理和插值处理,得到各个正常图像数据对应的目标图像块,包括:对多个正常图像数据进行下采样处理,得到各个正常图像数据对应的下采样图像块;采用预设插值方式对各个下采样图像块进行上采样插值处理,得到目标图像块。
本发明实施例提供的图像处理方法,对多个正常图像数据进行下采样处理,以缩小图像进行图像特征数据的提取,并对各个下采样图像块进行上采样插值处理以恢复图像块的原始尺寸,保证图像块的显示分辨率不受影响。
结合第一方面或其对应实施方式,在一种实施方式中,确定目标图像块的第二像素点值,包括:解析目标图像块的通道信息,确定目标图像块所对应的颜色通道;检测并确定各个颜色通道的第二像素点值。
本发明实施例提供的图像处理方法,由于目标图像块具体多个颜色通道,通过检测各个颜色通道所对应的第二像素点值,便于根据各个颜色通道进行相应的像素修复,保证了像素修复的准确度。
结合第一方面或其对应实施方式,在一种实施方式中,基于第一像素点值与第二像素点值之间的像素差,对第一像素点值进行补偿处理,得到目标像素,包括:基于第一像素点值与第二像素点值之间的差值,生成补偿系数;采用补偿系数对第一像素点值进行补偿处理,得到目标像素。
本发明实施例提供的图像处理方法,结合第一像素点值与第二像素点值之间的差值生成相应的补偿系数,由此能够在异常图像数据中的像素缺失位置进行像素补偿处理,保证了像素补偿的准确度。
结合第一方面或其对应实施方式,在一种实施方式中,基于所述第一像素点值与所述第二像素点值之间的差值,生成补偿系数,包括:获取实际图像块中各个颜色通道所对应的第一像素点值,以及目标图像块中各个颜色通道所对应的第二像素点值;分别计算各个颜色通道所对应的第一像素点值与第二像素点值的差值,得到各个颜色通道所对应的像素差值;获取各个像素差值在各个颜色通道中对应的预设权重系数;将各个颜色通道所对应的预设权重系数与像素差值进行加权处理,生成针对于各个颜色通道的补偿系数。
结合第一方面或其对应实施方式,在一种实施方式中,将各个颜色通道所对应的预设权重系数与像素差值进行加权处理,生成针对于各个颜色通道的补偿系数,包括:
Cr = (Cr1(Hr-Wr)+ Cr2 (Hg-Wg) + Cr3(Hb-Wb));
Cg = (Cg1(Hr-Wr)+ Cg2(Hg-Wg) + Cg3(Hb-Wb));
Cb = (Cb1(Hr-Wr)+ Cb2(Hg-Wg) + Cb3(Hb-Wb));
其中,Cr、Cg和Cb分别表示R通道、G通道和B通道的补偿系数;Hr-Wr、Hg-Wg和Hb-Wb分别表示R通道、G通道和B通道的像素差值;Cr1、Cr2、Cr3、Cg1、Cg2、Cg3、Cb1、Cb2和Cb3分别表示各个像素差值在R通道、G通道和B通道中的预设权重系数。
本发明实施例提供的图像处理方法,结合各个颜色通道中对应的预设权重系数与像素差值进行加权处理,得到各个颜色通道的补偿系数,以保证经过像素补偿得到的目标像素能够与各个颜色通道相贴合,避免相邻颜色通道出现像素跳变的现象,使得相邻颜色通道之间能够进行平滑过渡。
结合第一方面或其对应实施方式,在一种实施方式中,采用补偿系数对第二像素点值进行补偿处理,得到目标像素,包括:分别计算各个正常图像数据所对应的补偿系数与第二像素点值的乘积,得到多个乘积结果;将多个乘积结果进行叠加,得到目标像素。
本发明实施例提供的图像处理方法,结合各个正常图像数据所对应的补偿系数与第二像素点值,计算异常图像数据当前所缺失的像素,便于通过接收到的正常图像数据进行像素的自适应修复,保证了图像修复效率,由此最大程度上保证了显示终端对于图像数据的正常接收,从而保证了图像显示帧率的稳定,最大程度上避免了图像数据接收延迟所导致的显示画面延迟。
结合第一方面或其对应实施方式,在一种实施方式中,在分别计算各个正常图像数据所对应的补偿系数与第二像素点值的乘积,得到多个乘积结果之前,还包括:对补偿系数进行归一化处理,得到归一化补偿系数。
结合第一方面或其对应实施方式,在一种实施方式中,目标像素的确定方式如下:
DST(r,g,b) = C1(r,g,b)×S1(r,g,b) + C2(r,g,b)×S2(r,g,b)+…+ Cn(r,g,b)×Sn(r,g,b)
其中,DST(r,g,b)表示目标像素;Cn(r,g,b)表示第n个正常图像数据所对应的归一化补偿系数;Sn(r,g,b)表示第n个正常图像数据所对应的第二像素点值。
本发明实施例提供的图像处理方法,在对补偿系数进行归一化处理后,采用归一化补偿系数进行目标像素的确定,由此能够实现对于目标像素的准确确定,避免补偿得到的目标像素与实际图像块的像素点值差距过大而影响图像修复效果。
结合第一方面或其对应实施方式,在一种实施方式中,在确定异常图像数据所处的图像位置之后,还包括:检测位于图像位置之前所接收到的图像数据是否正常;当位于图像位置之前所接收到的图像数据为异常图像数据时,丢弃针对于待显示图像的图像数据。
结合第一方面或其对应实施方式,在一种实施方式中,该方法还包括:当位于图像位置之前所接收到的图像数据为正常图像数据时,检测所接收到的正常图像数据的数量是否达到预设个数;当所接收到的正常图像数据的数量达到预设个数时,获取预设个数的正常图像数据。
本发明实施例提供的图像处理方法,通过检测位于图像位置之前所接收到的图像数据是否正常,以与当前图像数据所相邻的图像数据是否经过修复,若之前的相邻图像数据经过修复,为了避免图像数据的误差累加,则针对于当前所接收到的待显示图像的图像数据进行丢弃,保证显示终端所接收到的图像数据的准确性。
结合第一方面,在一种实施方式中,采用目标像素对异常图像数据进行修复,生成目标显示数据,包括:采用目标像素对异常图像数据进行像素填充,得到目标图像数据;对目标图像数据进行图像合成,生成目标显示数据。
本发明实施例提供的图像处理方法,将目标像素填充至异常图像数据中以得到像素完整的目标图像数据,从而根据该目标图像数据进行图像合成,保证目标显示数据的像素完整度。
结合第一方面,在一种实施方式中,该方法还包括:将目标图像数据按照预设存储模式写入第一存储空间。
本发明实施例提供的图像处理方法,将目标图像数据以预设存储模式写入第一存储空间中,便于从第一存储空间中进行图像数据的顺序读取,保证了目标图像数据的有序合成,避免合成错乱而影响图像显示,进一步提升了后续的图像显示效果。
结合第一方面,在一种实施方式中,对图像数据进行校验,生成图像校验结果,包括:采用预设校验方式校验图像数据是否存在异常;当图像数据存在异常时,生成图像校验失败结果;当图像数据不存在异常时,生成图像校验成功结果。
本发明实施例提供的图像处理方法,通过校验图像数据是否存在异常,由此便于在BMC系统中对异常图像数据进行修复处理,避免显示终端接收到异常图像数据而导致显示画面异常。
结合第一方面或其对应实施方式,在一种实施方式中,该方法还包括:基于图像校验结果,将校验成功的图像数据写入到第二存储空间。
本发明实施例提供的图像处理方法,根据图像校验结果确定校验成功的图像数据,将校验成功的图像数据写入存储空间中以进行图像数据的读取,由此保证输入至存储空间中的图像数据均为通过校验的正常图像数据,由此保证了显示终端所读取的图像数据均为正确的,最大程度上保证了的图像显示效果。
第二方面,本发明实施例提供了一种图像处理装置,该装置包括:图像数据获取模块,用于获取当前接收到的针对于待显示图像的图像数据;图像数据校验模块,用于对图像数据进行校验,生成图像校验结果;像素补偿模块,用于基于图像校验结果,对异常图像数据进行像素补偿,得到目标像素;图像生成模块,用于采用目标像素对异常图像数据进行修复,生成目标显示数据。
第三方面,本发明实施例提供了一种服务器,包括:存储器和处理器,存储器和处理器之间互相通信连接,存储器中存储有计算机指令,处理器通过执行计算机指令,从而执行上述第一方面或其对应的任一实施方式的图像处理方法。
第四方面,本发明实施例提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机指令,计算机指令用于使计算机执行上述第一方面或其对应的任一实施方式的图像处理方法。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明一些实施例的图像处理方法的流程示意图;
图2是根据本发明一些实施例的另一图像处理方法的流程示意图;
图3是根据本发明一些实施例的又一图像处理方法的流程示意图;
图4是根据本发明实施例的图像处理装置的结构框图;
图5是根据本发明实施例的图像处理装置的具体结构示意图;
图6是本发明实施例的计算机设备的硬件结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
目前,服务器的图像数据在传输至显示终端进行显示的过程中,需经BMC进行捕获、处理,再通过网络传输处理后的图像数据。具体地,BMC在捕获到图像数据向后级模块传输的过程中,由于内部存在大量RAM缓存资源,会导致位宽较大的图像数据在读写过程中出现路径延时等问题,从而导致图像数据的读写产生异常,进而造成显示终端的图像显示异常。
相关技术中,BMC在捕获到图像数据时,会对图像数据的接收长度进行校验,在接收长度不符合条件或校验失败的时候,为了确保整帧图像数据的正确性,则会丢失该帧图像数据来保证后级模块所接收数据的准确性。但是,使用丢帧的方式会导致显示画面的帧率不稳定,影响远程操作人员的体验。
对于没有接收到指定长度的图像数据包或者图像数据包校验失败时,采取重传机制,进行图像数据包的重新发送。但是,当重传次数过多的时候,就会造成一定的时间延迟,从而在图像传输到显示终端的时候就会出现一定程度的延迟,画面显示也会出现一定程度的延迟。
尽管相关技术中,显示终端在接收到受损图像后,可以基于图像纹理的深度学习的训练的方法恢复受损图像。但是基于图像纹理的深度学习在恢复受损图像时,其计算量较大,需要占用大量的计算资源与内存资源,不利于视频连续多帧图像处理,更不利于芯片内部集成实现。
基于此,本发明技术方案在BMC检测到其所捕获的图像数据出现异常时,能够采用像素补偿的方式对异常图像数据进行自适应修复,以得到目标显示数据,从而根据该目标显示数据生成正常的显示画面,实现了图像的正常显示。由此,通过BMC对其捕获到的异常图像数据进行修复,保证了其后级模块能够接收到正常的图像数据,并输出至显示终端进行显示,避免了丢帧所造成的显示帧率不稳定以及重传所导致的显示画面延迟的问题。而且,图像数据的发送端无需关注数据接收端是否正常接收,不再需要重传机制保证数据一定接收成功,减少了BMC中发送端的数据处理逻辑。而且,减少了对于计算资源与内存资源的占用,便于连续多帧的图像处理,从而在一定程度上促进了芯片内部集成化。
根据本发明实施例,提供了一种图像处理方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
在本实施例中提供了一种图像处理方法,可用于上述的服务器中的BMC系统,图1是根据本发明实施例的图像处理方法的流程图,如图1所示,该流程包括如下步骤:
步骤S101,获取当前接收到的针对于待显示图像的图像数据。
服务器对应有与其通信连接的显示终端,待显示图像为将要展示在显示终端中的图像。图像数据为待显示图像所对应的各像素的灰度值的数据集合,该图像数据以数据包的形式传输至服务器中的BMC系统,经由BMC系统进行捕获和处理后传输至显示终端。
具体地,在服务器向显示终端传输图像数据时,BMC系统中的前级捕获模块能够实时检测是否接收到携带图像数据的数据包,当检测到携带图像数据的数据包后,则对该数据进行捕获。
步骤S102,对图像数据进行校验,生成图像校验结果。
图像校验结果用于表征当前所接收到的图像数据的完整性,具体地,图像校验结果包括正常和异常。具体地,BMC系统可以采用预设的数据校验方式对其接收到的图像数据进行校验,以确定该图像数据是否存在异常,例如数据长度、数据包不完整等情况所导致的像素缺失。
步骤S103,基于图像校验结果,对异常图像数据进行像素补偿,得到目标像素。
目标像素为经过像素补偿所得到的补偿像素。具体地,根据图像校验结果可以确定出当前所捕获到的图像数据是否存在异常。对于不存在异常的正常图像数据,BMC系统可以将其放入接收缓冲区中;对于异常图像数据,BMC系统则可以进一步的定位存在像素缺失的位置,对该位置进行像素补偿,得到像素补偿处理之后的目标像素。
步骤S104,采用目标像素对异常图像数据进行修复,生成目标显示数据。
将目标像素填充到异常图像数据中,以对异常图像数据中所缺失的像素进行补偿,得到具有完整像素的目标显示数据。将该目标显示数据按照先进先出的方式输入至图像缓存区,以使显示终端从图像缓存区中依次读取图像数据,生成最终的显示画面。
本实施例提供的图像处理方法,通过校验图像数据以确定当前所接收到的图像数据是否存在异常,当检测到图像数据存在异常时,对异常图像数据进行像素补偿,并通过补偿所得到的目标像素对异常图像数据进行修复,得到目标显示数据。由此在BMC检测到其所捕获的图像数据出现异常时,能够采用像素补偿的方式对异常图像数据进行自适应修复,以得到目标显示数据,从而根据该目标显示数据生成正常的显示画面,实现了图像的正常显示。
在本实施例中提供了一种图像处理方法,可用于上述的服务器中的BMC系统,图2是根据本发明实施例的图像处理方法的流程图,如图2所示,该流程包括如下步骤:
步骤S201,获取当前接收到的针对于待显示图像的图像数据。详细说明参见上述实施例对应的相关描述,此处不再赘述。
步骤S202,对图像数据进行校验,生成图像校验结果。详细说明参见上述实施例对应的相关描述,此处不再赘述。
步骤S203,基于图像校验结果,对异常图像数据进行像素补偿,得到目标像素。
具体地,上述步骤S203包括:
步骤S2031,基于图像校验结果,确定异常图像数据所处的图像位置。
一帧图像中包含有多行像素点构成的图像数据,图像位置表示异常图像数据所处的行位置。每捕获一次图像数据即进行一次图像校验,每次都会生成相应的图像校验结果。根据该图像校验结果,可以确定当前所接收到图像数据在一帧图像中的位置行。
步骤S2032,获取位于图像位置之前的多个正常图像数据,该多个正常图像数据与异常图像数据顺序连接。
正常图像数据为不存在像素缺失问题的图像数据,在确定当前所接收到的图像数据存在异常时,此时为了保证图像数据之间的连续性和完整性,可以从缓存区中取出位于该图像位置之前所接收的多个正常图像数据,且该正常图像数据与当前异常图像数据在位置上是顺序连接的,例如,位于该图像位置前一行和前两行的正常图像数据。
步骤S2033,采用多个正常图像数据的像素点值对异常图像数据进行像素补偿,生成目标像素。
通过多个正常图像数据的像素点值对异常图像数据所处位置行进行像素补偿,计算该图像位置行的像素点值。将计算得到的多个像素点值确定为异常图像数据的目标像素。
在一些可选的实施例方式中,上述步骤S2033可以包括:
步骤a1,获取异常图像数据所对应实际图像块的第一像素点值。
步骤a2,对多个正常图像数据进行采样处理和插值处理,得到各个正常图像数据对应的目标图像块。
步骤a3,确定目标图像块的第二像素点值。
步骤a4,基于第一像素点值与第二像素点值之间的像素差,对第一像素点值进行补偿处理,得到目标像素。
实际图像块为异常图像数据所表征的像素块,第一像素点值为实际图像块中所包含颜色通道的像素值。目标图像块为经过采样插值处理后的图像数据所表征的像素块,第二像素点值为目标图像块所包含颜色通道的像素值。
将第一像素点与第二像素点进行作差处理,计算得到两者之间所存在的像素差,根据该像素差针对于第一像素点值进行补偿,以使经过补偿所得到的目标像素与第二像素点值相契合。
在一些可选的实施例方式中,上述步骤a2可以包括:
步骤a21,对多个正常图像数据进行下采样处理,得到各个正常图像数据对应的下采样图像块。
步骤a22,采用预设插值方式对各个下采样图像块进行上采样插值处理,得到目标图像块。
基于上文所述,此处的多个正常图像数据为异常图像数据所处图像位置之前所接收到的若干行图像数据。分别对各个正常图像数据进行下采样处理,以缩小图像进行图像特征数据的提取,得到相应的下采样图像块。例如,对各个正常图像数据进行2倍下采样,采样后得到下采样图像块为原图像块1/4大小的像素块。此处对于下采样倍数不作限定,本领域技术人员可以根据实际需求予以确定。
预设插值方式为预先设定的上采样插值方式,例如最近邻插值、双线性插值、转置卷积等方式。此处对于预设插值方式不作限定,本领域技术人员可以根据实际需求予以确定。
具体地,此处可以采用双线性插值方式对各个下采样图像块进行上采样插值处理,得到相应的目标图像块,以对下采样图像块的像素进行恢复,使经过上采样插值处理后得到的目标图像块的像素大小回复至下采样之前,保证后续的图像显示分辨率不受影响。
此处,通过双线性插值方式对下采样图像块进行恢复,避免了图像放大的不连续,提高了图像的放大质量。
此处,通过对多个正常图像数据进行采样和插值处理,以从目标图像块中提取出能够表征图像特征的像素点值,结合实际图像块的第一像素点值与目标图像块的第二像素点值,确定两者之间所存在的像素差,根据该像素差对第一像素点值进行补偿,以填充原始图像数据所缺失的像素点值,实现了对于异常图像数据的像素修复,保证了图像数据的像素完整性。
在一些可选的实施例方式中,上述步骤a3可以包括:
步骤a31,解析目标图像块的通道信息,确定目标图像块所对应的颜色通道。
步骤a32,检测并确定各个颜色通道的第二像素点值。
目标图像块中具有多个颜色通道,具体包括红(R)、绿(G)、蓝(B)三个颜色通道。通过解析目标图像块所包含的各个颜色通道,即可确定出针对于各个颜色通道所对应的第二像素点值,以便于根据各个颜色通道进行相应的像素修复,保证了像素修复的准确度。
在一些可选的实施例方式中,上述步骤a4可以包括:
步骤a41,基于第一像素点值与第二像素点值之间的差值,生成补偿系数。
计算第一像素点值与第二像素点值之间的差值,根据计算得到的实际像素差值,生成补偿系数。具体地,上述步骤a41具体可以包括:
步骤a411,获取实际图像块中各个颜色通道所对应的第一像素点值,以及目标图像块中各个颜色通道所对应的第二像素点值。
即,获取实际图像块中的R、G、B通道所对应的第一像素点值,以及目标图像块中的R、G、B通道所对应的第二像素点值。
步骤a412,分别计算各个颜色通道所对应的第一像素点值与第二像素点值的差值,得到各个颜色通道所对应的像素差值。
分别将R、G、B通道所对应的第一像素点值与第二像素点值进行作差,得到各个颜色通道所对应的像素差值。具体地,若R、G、B通道所对应的第一像素点值分别为Hr、Hg和Hb,第二像素点值分别为Wr、Wg和Wb,则可以得到R通道的像素差值为Hr-Wr、G通道的像素差值为Hg-Wg、B通道的像素差值为Hb-Wb。
步骤a413,获取各个像素差值在各个颜色通道中对应的预设权重系数。
预设权重系数为预先配置的针对于各个颜色通道的加权系数,每个颜色通道所对应的预设权重系数之和为1。在计算补偿系数时,BMC系统可以读取相应的配置信息,以从中获取针对于各个颜色通道的预设权重系数。
步骤a414,将各个颜色通道所对应的预设权重系数与像素差值进行加权处理,生成针对于各个颜色通道的补偿系数。
根据各个颜色通道所对应的预设权重系数以及像素差值确定补偿系数的方式如下:
Cr = (Cr1(Hr-Wr)+ Cr2 (Hg-Wg) + Cr3(Hb-Wb));
Cg = (Cg1(Hr-Wr)+ Cg2(Hg-Wg) + Cg3(Hb-Wb));
Cb = (Cb1(Hr-Wr)+ Cb2(Hg-Wg) + Cb3(Hb-Wb));
其中,Cr、Cg和Cb分别表示R通道、G通道和B通道的补偿系数;Hr-Wr、Hg-Wg和Hb-Wb分别表示R通道、G通道和B通道的像素差值;Cr1、Cr2、Cr3、Cg1、Cg2、Cg3、Cb1、Cb2和Cb3分别表示各个像素差值在R通道、G通道和B通道中的预设权重系数。
在一些可选的实施方式中,Cr1、Cr2和Cr3分别为0.33、0.34和0.33;Cg1、Cg2和Cg3分别为0.45、0.21和0.34;Cb1、Cb2和Cb3分别为0.15、0.48和0.37。当然,本领域技术人员还可以根据实际需求予以设定,此处并不作具体限定。
此处,结合各个颜色通道中对应的预设权重系数与像素差值进行加权处理,得到各个颜色通道的补偿系数,以保证经过像素补偿得到的目标像素能够与各个颜色通道相贴合,避免相邻颜色通道出现像素跳变的现象,使得相邻颜色通道之间能够进行平滑过渡。
步骤a42,采用补偿系数对第一像素点值进行补偿处理,得到目标像素。
由于异常图像数据对应的实际图像块存在像素缺失,因此实际图像块对应的第一像素点值需要进行补偿处理,以弥补像素缺失所导致图像数据受损。具体地,将上述计算得到的补偿系数对第一像素点值进行补偿处理,以得到补偿处理之后的目标像素。
具体地,上述步骤a42可以包括:
步骤a421,分别计算各个正常图像数据所对应的补偿系数与第二像素点值的乘积,得到多个乘积结果。
步骤a422,将多个乘积结果进行叠加,得到目标像素。
将各个正常图像数据中各个颜色通道的补偿系数C(r,g,b)以及第二像素点值S(r,g,b)进行相乘,得到对应的乘积结果为:C(r,g,b)×S(r,g,b)。将多个乘积结果进行累加,即可得到目标像素DST(r,g,b)。
其中,C(r,g,b)中的r、g、b分别表示该正常图像数据中的R通道、G通道和B通道的补偿系数Cr、Cg、Cb。S(r,g,b)中的r、g、b分别表示该正常图像数据经过采样插值处理后的R通道、G通道和B通道的像素点值。
此处,结合各个正常图像数据所对应的补偿系数与第二像素点值,计算异常图像数据当前所缺失的像素,便于通过接收到的正常图像数据进行像素的自适应修复,保证了图像修复效率,由此最大程度上保证了显示终端对于图像数据的正常接收,从而保证了图像显示帧率的稳定,最大程度上避免了图像数据接收延迟所导致的显示画面延迟。
具体地,在执行步骤a421之前还可以包括:对补偿系数进行归一化处理,得到归一化补偿系数,采用各个正常图像数据所对应的归一化补偿系数与第二像素点值进行相乘,得到相应的乘积结果再进行累加,得到目标像素。具体地,根据归一化补偿系数确定目标像素的方式如下:
DST(r,g,b) = C1(r,g,b)×S1(r,g,b) + C2(r,g,b)×S2(r,g,b)+…+ Cn(r,g,b)×Sn(r,g,b)
其中,DST(r,g,b)表示目标像素;n表示正常图像数据的数量;Cn(r,g,b)表示异常图像数据所处图像位置之前的第n个正常图像数据所对应的归一化补偿系数;Sn(r,g,b)表示异常图像数据所处图像位置之前的第n个正常图像数据所对应的第二像素点值。
具体地,以2个正常图像数据为例,归一化处理生成归一化补偿系数的方式如下:
C1r = C1r/(C1r + C2r);
C2r = C2r/(C1r + C2r);
C1g = C1g/(C1g + C2g);
C2g = C2g/(C1g + C2g);
C1b = C1b/(C1b + C2b);
C2b = C2b/(C1b + C2b)。
根据归一化补偿系数确定的目标像素DST(r,g,b)则为:
DST(r,g,b) = C1(r,g,b)×S1(r,g,b) + C2(r,g,b) ×S2(r,g,b)。
其中,C1(r,g,b)中的r、g、b分别表示异常图像数据所处图像位置之前的第1个的正常图像数据中的R通道、G通道和B通道的补偿系数C1r、C1g、C1b;C2(r,g,b)中的r、g、b分别表示异常图像数据所处图像位置之前的第2个的正常图像数据中的R通道、G通道和B通道的补偿系数C2r、C2g、C2b。S1(r,g,b)中的r、g、b分别表示异常图像数据所处图像位置之前的第1个的正常图像数据经过采样插值处理后的R通道、G通道和B通道的像素点值;S2(r,g,b)中的r、g、b分别表示异常图像数据所处图像位置之前的第2个的正常图像数据经过采样插值处理后的R通道、G通道和B通道的像素点值。
此处,在对补偿系数进行归一化处理后,采用归一化补偿系数进行目标像素的确定,由此能够实现对于目标像素的准确确定,避免补偿得到的目标像素与实际图像块的像素点值差距过大而影响图像修复效果。
在上述实施方式中,结合第一像素点值与第二像素点值之间的差值生成相应的补偿系数,由此能够在异常图像数据中的像素缺失位置进行像素补偿处理,保证了像素补偿的准确度。
在一些可选的实施例方式中,在执行步骤S2031之后还可以包括:
步骤b1,检测位于图像位置之前所接收到的图像数据是否正常。
步骤b2,当位于图像位置之前所接收到的图像数据为异常图像数据时,丢弃针对于待显示图像的图像数据。
步骤b3,当位于图像位置之前所接收到的图像数据为正常图像数据时,检测所接收到的正常图像数据的数量是否达到预设值;
步骤b4,当所接收到的正常图像数据的数量达到预设个数时,获取预设个数的正常图像数据。
BMC系统每次所捕获的图像数据均会进行校验,并会保存相应的校验结果,通过校验结果即可确定位于图像位置之前所接收到的图像数据是否正常。
在一些实施方式中,由于经过像素修复所得到的图像数据对应有相应的修复标签,BMC系统还可以在调取到位于图像位置之前所接收到的图像数据后,可以通过检测其是否存在修复标签以确定该图像数据是否正常。
当检测到该图像数据具有修复标签时,表示该图像数据是经过像素修复的异常图像数据,此时,若再次利用该经过修复的图像数据对再次接收到的异常图像数据进行修复,则容易造成误差累加。为了降低图像数据的误差,可以将该帧图像数据丢弃,即不传输针对于待显示图像的图像数据,避免图像的失真。
针对这种情况,BMC系统还可以向发送端发送图像数据请求,以使发送端再发送一次图像数据,若该图像数据仍然无法修复,则表示发送端发的图像数据为受损图像数据,此时,BMC系统可以直接将该受损图像数据发送至显示终端,以使技术人员在看到该受损图像数据后进行相应的检测,便于及时运维。
当检测到该图像数据不存在修复标签时,表示该图像数据为正常图像数据,此时,可以检测位于图像位置之前所接收到的正常图像数据的数量是否达到预设个数(该预设个数为预先设定,例如2、3、4等,此处并不作具体限定)。当确定所接收到的正常图像数据的数量达到预设个数时,则直接调取预设个数的正常图像数据对异常图像数据进行像素补偿即可。
当确定所接收到的正常图像数据的数量未达到预设个数时,表示像素补偿所需的正常图像数据的不足,无法对当前的异常图像数据进行修复,此时,为了保证经由BMC传输的图像数据均为正确的,则对当前所捕获的图像数据进行丢弃。
此时,为了保证显示终端所接收图像数据的完整性,可以向发送端发送图像数据请求,以使发送端再发送一次图像数据。若一直无法传输正确的图像数据,表示通信链路可能存在故障,此时可以在显示终端进行告警提醒。
在上述实施方式中,通过检测位于图像位置之前所接收到的图像数据是否正常,以与当前图像数据所相邻的图像数据是否经过修复,若之前的相邻图像数据经过修复,为了避免图像数据的误差累加,则针对于当前所接收到的待显示图像的图像数据进行丢弃,保证显示终端所接收到的图像数据的准确性。
步骤S204,采用目标像素对异常图像数据进行修复,生成目标显示数据。详细说明参见上述实施例对应的相关描述,此处不再赘述。
本实施例提供的图像处理方法,采用正常的图像数据对异常图像数据进行像素补偿,以对异常图像数据的有效修复,使经过像素补偿后所得到的目标像素能够与正常的图像数据进行良好过渡,最大程度上保证了图像的完整性和显示效果。
在本实施例中提供了一种图像处理方法,可用于上述的服务器中的BMC系统,图3是根据本发明实施例的图像处理方法的流程图,如图3所示,该流程包括如下步骤:
步骤S301,获取当前接收到的针对于待显示图像的图像数据。详细说明参见上述实施例对应的相关描述,此处不再赘述。
步骤S302,对图像数据进行校验,生成图像校验结果。
具体地,上述步骤S302可以包括:
步骤S3021,采用预设校验方式校验图像数据是否存在异常。
预设校验方式为预先设定的用于确定图像数据是否异常的校验方式。BMC系统所捕获的图像数据包可以写入BMC系统的缓冲区,继而按照先进先出的方式从缓冲区中依次读取各个图像数据包,对各个图像数据包进行校验。
此处的预设校验方式可以采用奇偶校验,能够采用一位数据即可对传输过程中所存在的异常图像数据进行有效校验,且其仅需要一些异或门就能够实现,实现方式较为简单。
步骤S3022,当图像数据存在异常时,生成图像校验失败结果。
当确定当前所校验的图像数据存在异常时,表示该图像数据存在像素缺失,此时,在该图像数据中打上校验失败的标签,生成图像校验失败结果,并将图像校验失败结果保存至RAM中,以便后续进行校验结果的查询。
步骤S3023,当图像数据不存在异常时,生成图像校验成功结果。
当确定当前所校验的图像数据不存在异常时,表示该图像数据为正常图像数据,此时,在该图像数据中打上校验成功的标签,生成图像校验成功结果,并将图像校验成功结果保存至RAM中,以便后续进行校验结果的查询以及正常图像数据的调取。
在一些可选的实施例方式中,该方法还包括:基于图像校验结果,将校验成功的图像数据写入到第二存储空间中。
第二存储空间为预先设定用于存储正常图像数据的存储区,例如BMC系统内部的RAM。当得到图像校验结果之后,BMC系统可以基于该图像校验结果从中选择出校验成功的正常图像数据,将其写入第二存储空间中。
此处,根据图像校验结果确定校验成功的图像数据,将校验成功的图像数据写入存储空间中以进行图像数据的读取,由此保证输入至存储空间中的图像数据均为通过校验的正常图像数据,由此保证了显示终端所读取的图像数据均为正确的,最大程度上保证了的图像显示效果。
步骤S303,基于图像校验结果,对异常图像数据进行像素补偿,得到目标像素。详细说明参见上述实施例对应的相关描述,此处不再赘述。
步骤S304,采用目标像素对异常图像数据进行修复,生成目标显示数据。
具体地,上述步骤S304可以包括:
步骤S3041,采用目标像素对异常图像数据进行像素填充,得到目标图像数据。
将经过像素补偿所生成的目标像素填充至异常图像数据所对应的像素缺失位置,以生成具有完整像素点值的目标图像数据。
步骤S3042,对目标图像数据进行图像合成,生成目标显示数据。
目标显示数据表示能够转换成图像的数据。具体地,将目标图像数据按照图像数据的接收顺序进行图像合成,即可得到相应的目标显示数据。继而,显示终端则可以将该目标显示数据转换为图像进行展示。
在一些可选的实施方式中,上述方法还可以包括:
步骤S305,将目标图像数据按照预设存储模式写入第一存储空间。
第一存储空间为预先设定的用于存储正常图像数据和目标图像数据的空间,例如BMC系统内部的缓冲区。预设存储模式为预先设定的存储模式,例如先进先出模式。BMC系统可以将其所捕获到的正常图像数据以及经过修复处理所得到的目标图像数据按照预设存储模式写入至第一存储空间。便于从第一存储空间中进行图像数据的顺序读取,保证了目标图像数据的有序合成,避免合成错乱而影响图像显示,进一步提升了后续的图像显示效果。
本实施例提供的图像处理方法,将目标像素填充至异常图像数据中以得到像素完整的目标图像数据,从而根据该目标图像数据进行图像合成,保证目标显示数据的像素完整度。通过校验图像数据是否存在异常,由此便于在BMC系统中对异常图像数据进行修复处理,避免显示终端接收到异常图像数据而导致显示画面异常。
在本实施例中还提供了一种图像处理装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以硬件来实现,但是硬件,或软件和硬件的组合的实现也是可能并被构想的。
本实施例提供一种图像处理装置,如图4所示,包括:
图像数据获取模块401,用于获取当前接收到的针对于待显示图像的图像数据。
图像数据校验模块402,用于对图像数据进行校验,生成图像校验结果。
像素补偿模块403,用于基于图像校验结果,对异常图像数据进行像素补偿,得到目标像素。
图像生成模块404,用于采用目标像素对异常图像数据进行修复,生成目标显示数据。
在一些可选的实施例方式中,上述像素补偿模块403可以包括:
图像位置确定单元,用于基于图像校验结果,确定异常图像数据所处的图像位置。
正常数据获取单元,用于获取位于图像位置之前的多个正常图像数据,该多个正常图像数据与异常图像数据顺序连接。
补偿处理单元,用于采用多个正常图像数据的像素点值对异常图像数据进行像素补偿,生成目标像素。
在一些可选的实施例方式中,上述补偿处理单元可以包括:
第一像素获取子单元,用于获取异常图像数据所对应实际图像块的第一像素点值。
采样插值子单元,用于对多个正常图像数据进行采样处理和插值处理,得到各个正常图像数据对应的目标图像块。
第二像素获取子单元,用于确定目标图像块的第二像素点值。
补偿处理子单元,用于基于第一像素点值与第二像素点值之间的像素差,对第一像素点值进行补偿处理,得到目标像素。
在一些可选的实施例方式中,上述采样插值子单元具体还用于:对多个正常图像数据进行下采样处理,得到各个正常图像数据对应的下采样图像块;采用预设插值方式对各个下采样图像块进行上采样插值处理,得到目标图像块。
在一些可选的实施例方式中,上述第二像素获取子单元具体还用于:解析目标图像块的通道信息,确定目标图像块所对应的颜色通道;检测并确定各个颜色通道的第二像素点值。
在一些可选的实施例方式中,上述补偿处理子单元具体还用于:基于第一像素点值与第二像素点值之间的差值,生成补偿系数;采用补偿系数对第一像素点值进行补偿处理,得到目标像素。
在一些可选的实施例方式中,上述补偿处理子单元具体还用于:获取实际图像块中各个颜色通道所对应的第一像素点值,以及目标图像块中各个颜色通道所对应的第二像素点值;分别计算各个颜色通道所对应的第一像素点值与第二像素点值的差值,得到各个颜色通道所对应的像素差值;获取各个像素差值在各个颜色通道中对应的预设权重系数;将各个颜色通道所对应的预设权重系数与像素差值进行加权处理,生成针对于各个颜色通道的补偿系数。
其中,根据各个颜色通道所对应的预设权重系数以及像素差值确定补偿系数的方式如下:
Cr = (Cr1(Hr-Wr)+ Cr2(Hg-Wg) + Cr3(Hb-Wb));
Cg = (Cg1(Hr-Wr)+ Cg2(Hg-Wg) + Cg3(Hb-Wb));
Cb = (Cb1(Hr-Wr)+ Cb2(Hg-Wg) + Cb3(Hb-Wb));
其中,Cr、Cg和Cb分别表示R通道、G通道和B通道的补偿系数;Hr-Wr、Hg-Wg和Hb-Wb分别表示R通道、G通道和B通道的像素差值;Cr1、Cr2、Cr3、Cg1、Cg2、Cg3、Cb1、Cb2和Cb3分别表示各个像素差值在R通道、G通道和B通道中的预设权重系数。
在一些可选的实施例方式中,上述补偿处理子单元具体还用于:分别计算各个正常图像数据所对应的补偿系数与第二像素点值的乘积,得到多个乘积结果;将多个乘积结果进行叠加,得到目标像素。
在一些可选的实施例方式中,上述补偿处理子单元具体还用于:对补偿系数进行归一化处理,得到归一化补偿系数。
具体地,根据归一化补偿系数确定目标像素的方式如下:
DST(r,g,b) = C1(r,g,b)×S1(r,g,b) + C2(r,g,b)×S2(r,g,b)+…+ Cn(r,g,b)×Sn(r,g,b)
其中,DST(r,g,b)表示目标像素;n表示正常图像数据的数量;Cn(r,g,b)表示异常图像数据所处图像位置之前的第n个正常图像数据所对应的归一化补偿系数;Sn(r,g,b)表示异常图像数据所处图像位置之前的第n个正常图像数据所对应的第二像素点值。
在一些可选的实施例方式中,上述像素补偿模块403还可以包括:
第一检测单元,用于检测位于图像位置之前所接收到的图像数据是否正常。
丢弃处理单元,用于当位于图像位置之前所接收到的图像数据为异常图像数据时,丢弃针对于待显示图像的图像数据。
第二检测单元,用于当位于图像位置之前所接收到的图像数据为正常图像数据时,检测所接收到的正常图像数据的数量是否达到预设值;
数据获取单元,用于当所接收到的正常图像数据的数量达到预设个数时,获取预设个数的正常图像数据。
在一些可选的实施例方式中,上述图像数据校验模块402可以包括:
校验单元,用于采用预设校验方式校验图像数据是否存在异常。
结果生成单元,用于当图像数据存在异常时,生成图像校验失败结果;当图像数据不存在异常时,生成图像校验成功结果。
在一些可选的实施例方式中,上述图像数据校验模块402还可以包括:
校验结果存储单元,用于基于图像校验结果,将校验成功的图像数据写入到第二存储空间中。
在一些可选的实施例方式中,上述图像生成模块404可以包括:
像素填充单元,用于采用目标像素对异常图像数据进行像素填充,得到目标图像数据。
合成单元,用于对目标图像数据进行图像合成,生成目标显示数据。
在一些可选的实施例方式中,上述图像处理装置还可以包括:
图像存储单元,用于将目标图像数据按照预设存储模式写入第一存储空间。
上述各个模块以及各个单元的更进一步的功能描述与上述对应实施例相同,在此不再赘述。
本实施例中的图像处理装置是以功能单元的形式来呈现,这里的单元是指ASIC电路,执行一个或多个软件或固定程序的处理器和存储器,和/或其他可以提供上述功能的器件。
本实施例提供的图像处理装置,通过校验图像数据以确定当前所接收到的图像数据是否存在异常,当检测到图像数据存在异常时,对异常图像数据进行像素补偿,并通过补偿所得到的目标像素对异常图像数据进行修复,得到目标显示数据。由此在BMC检测到其所捕获的图像数据出现异常时,能够采用像素补偿的方式对异常图像数据进行自适应修复,以得到目标显示数据,从而根据该目标显示数据生成正常的显示画面,实现了图像的正常显示。
此处示出了一种具体的图像处理装置,该图像处理装置设置在BMC系统中,如图5所示的具体硬件电路结构,该图像处理装置的具体工作原理如下:
(1)BMC系统将其捕获到的图像数据放入内部FIFO缓冲区进行缓存;
(2)将图像数据输入至数据校验模块中进行数据校验,将数据校验结果发送至选择器模块,并通过控制模块控制选择器模块将当前的图像数据及其数据校验结果写入内部RAM中保存;
(3)对于校验成功的图像数据在发送至选择器模块后,通过控制模块控制写入内部RAM中保存即可;
(4)对于校验失败的图像数据,数据校验模块则可以向控制模块发送校验失败的信号;
(5)控制模块根据该信号从内部RAM中读取所需的前若干行的像素点数据,并将其送入至数据采样模块进行下采样处理,得到经过下采样处理后的像素点数据;
(6)将下采样处理后的像素点数据送入插值计算模块,计算得到经过插值处理的前若干行的像素点数据;
(7)根据步骤(5)所读取到下采样前的像素点数据与步骤(6)所得到的经过插值处理的前若干行的像素点数据,计算补偿系数;
(8)对补偿系数进行归一化处理,得到归一化补偿系数;
(9)像素补偿模块采用归一化补偿系数生成缺失像素点的像素点值,并按照像素缺失位置写入到指定的RAM地址中,得到完整像素的目标图像数据;
(10)将生成的目标图像数据按照写入FIFO缓冲区,并按照FIFO的方式进行输出,以合并成目标显示数据发送至显示终端进行图像展示。
本发明实施例还提供一种服务器,具有上述图4所示的图像处理装置。
请参阅图6,图6是本发明可选实施例提供的一种服务器的结构示意图,如图6所示,该服务器包括:一个或多个处理器10、存储器20,以及用于连接各部件的接口,包括高速接口和低速接口。各个部件利用不同的总线互相通信连接,并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器可以对在计算机设备内执行的指令进行处理,包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如,耦合至接口的显示设备)上显示GUI的图形信息的指令。在一些可选的实施方式中,若需要,可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样,可以连接多个计算机设备,各个设备提供部分必要的操作(例如,作为服务器阵列、一组刀片式服务器、或者多处理器系统)。图6中以一个处理器10为例。
处理器10可以是中央处理器,网络处理器或其组合。其中,处理器10还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路,可编程逻辑器件或其组合。上述可编程逻辑器件可以是复杂可编程逻辑器件,现场可编程逻辑门阵列,通用阵列逻辑或其任意组合。
其中,所述存储器20存储有可由至少一个处理器10执行的指令,以使所述至少一个处理器10执行实现上述实施例示出的方法。
存储器20可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据服务器的使用所创建的数据等。此外,存储器20可以包括高速随机存取存储器,还可以包括非瞬时存储器,例如至少一个磁盘存储器件、闪存器件、或其他非瞬时固态存储器件。在一些可选的实施方式中,存储器20可选包括相对于处理器10远程设置的存储器,这些远程存储器可以通过网络连接至该计算机设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
存储器20可以包括易失性存储器,例如,随机存取存储器;存储器也可以包括非易失性存储器,例如,快闪存储器,硬盘或固态硬盘;存储器20还可以包括上述种类的存储器的组合。
该服务器对应有相应的输出装置。处理器10、存储器20和输出装置可以通过总线或者其他方式连接。输出装置可以包括显示设备、辅助照明装置(例如,LED)和触觉反馈装置(例如,振动电机)等。上述显示设备包括但不限于液晶显示器,发光二极管,显示器和等离子体显示器。在一些可选的实施方式中,显示设备可以是触摸屏。
该计算机设备还包括通信接口30,用于该服务器与其他设备或通信网络进行通信连接。
本发明实施例还提供了一种计算机可读存储介质,上述根据本发明实施例的方法可在硬件、固件中实现,或者被实现为可记录在存储介质,或者被实现通过网络下载的原始存储在远程存储介质或非暂时机器可读存储介质中并将被存储在本地存储介质中的计算机代码,从而在此描述的方法可被存储在使用通用计算机、专用处理器或者可编程或专用硬件的存储介质上的这样的软件处理。其中,存储介质可为磁碟、光盘、只读存储记忆体、随机存储记忆体、快闪存储器、硬盘或固态硬盘等;进一步地,存储介质还可以包括上述种类的存储器的组合。可以理解,计算机、处理器、微处理器控制器或可编程硬件包括可存储或接收软件或计算机代码的存储组件,当软件或计算机代码被计算机、处理器或硬件访问且执行时,实现上述实施例示出的方法。
虽然结合附图描述了本发明的实施例,但是本领域技术人员可以在不脱离本发明的精神和范围的情况下做出各种修改和变型,这样的修改和变型均落入由所附权利要求所限定的范围之内。
Claims (16)
1.一种图像处理方法,其特征在于,所述方法包括:
获取当前接收到的针对于待显示图像的图像数据;
对所述图像数据进行校验,生成图像校验结果;
基于所述图像校验结果,对异常图像数据进行像素补偿,得到目标像素,包括:基于所述图像校验结果,确定异常图像数据所处的图像位置;获取位于所述图像位置之前的多个正常图像数据,所述多个正常图像数据与所述异常图像数据顺序连接;采用所述多个正常图像数据的像素点值对所述异常图像数据进行像素补偿,生成所述目标像素;
采用所述目标像素对所述异常图像数据进行修复,得到目标显示数据;
其中,所述采用所述多个正常图像数据的像素点值对所述异常图像数据进行像素补偿,生成所述目标像素,包括:获取所述异常图像数据所对应实际图像块的第一像素点值;对所述多个正常图像数据进行采样处理和插值处理,得到各个所述正常图像数据对应的目标图像块;确定所述目标图像块的第二像素点值;基于所述第一像素点值与所述第二像素点值之间的像素差,对所述第一像素点值进行补偿处理,得到所述目标像素;
其中,所述基于所述第一像素点值与所述第二像素点值之间的像素差,对所述第一像素点值进行补偿处理,得到所述目标像素,包括:基于所述第一像素点值与所述第二像素点值之间的差值,生成补偿系数;采用所述补偿系数对所述第一像素点值进行补偿处理,得到所述目标像素;
其中,所述基于所述第一像素点值与所述第二像素点值之间的差值,生成补偿系数,包括:获取所述实际图像块中各个颜色通道所对应的所述第一像素点值,以及所述目标图像块中各个颜色通道所对应的所述第二像素点值;分别计算各个颜色通道所对应的所述第一像素点值与所述第二像素点值的差值,得到所述各个颜色通道所对应的像素差值;获取各个所述像素差值在所述各个颜色通道中对应的预设权重系数;将所述各个颜色通道所对应的所述预设权重系数与所述像素差值进行加权处理,生成针对于所述各个颜色通道的所述补偿系数。
2.根据权利要求1所述的方法,其特征在于,所述对所述多个正常图像数据进行采样处理和插值处理,得到各个所述正常图像数据对应的目标图像块,包括:
对所述多个正常图像数据进行下采样处理,得到各个所述正常图像数据对应的下采样图像块;
采用预设插值方式对各个所述下采样图像块进行上采样插值处理,得到所述目标图像块。
3.根据权利要求1所述的方法,其特征在于,所述确定所述目标图像块的第二像素点值,包括:
解析所述目标图像块的通道信息,确定所述目标图像块所对应的颜色通道;
检测并确定各个所述颜色通道的第二像素点值。
4.根据权利要求1所述的方法,其特征在于,所述将所述各个颜色通道所对应的所述预设权重系数与所述像素差值进行加权处理,生成针对于所述各个颜色通道的所述补偿系数,包括:
Cr = (Cr1(Hr-Wr)+ Cr2 (Hg-Wg) + Cr3(Hb-Wb));
Cg = (Cg1(Hr-Wr)+ Cg2(Hg-Wg) + Cg3(Hb-Wb));
Cb = (Cb1(Hr-Wr)+ Cb2(Hg-Wg) + Cb3(Hb-Wb));
其中,Cr、Cg和Cb分别表示R通道、G通道和B通道的补偿系数;Hr-Wr、Hg-Wg和Hb-Wb分别表示R通道、G通道和B通道的像素差值;Cr1、Cr2、Cr3、Cg1、Cg2、Cg3、Cb1、Cb2和Cb3分别表示各个像素差值在R通道、G通道和B通道中的预设权重系数。
5.根据权利要求1所述的方法,其特征在于,所述采用所述补偿系数对所述第二像素点值进行补偿处理,得到所述目标像素,包括:
分别计算各个所述正常图像数据所对应的所述补偿系数与所述第二像素点值的乘积,得到多个乘积结果;
将多个乘积结果进行叠加,得到所述目标像素。
6.根据权利要求5所述的方法,其特征在于,在所述分别计算各个所述正常图像数据所对应的所述补偿系数与所述第二像素点值的乘积,得到多个乘积结果之前,还包括:
对所述补偿系数进行归一化处理,得到归一化补偿系数。
7.根据权利要求6所述的方法,其特征在于,所述目标像素的确定方式如下:
DST(r,g,b) = C1(r,g,b)×S1(r,g,b) + C2(r,g,b)×S2(r,g,b)+…+ Cn(r,g,b)×Sn(r,g,b)
其中,DST(r,g,b)表示目标像素;Cn(r,g,b)表示第n个正常图像数据所对应的归一化补偿系数;Sn(r,g,b)表示第n个正常图像数据所对应的第二像素点值。
8.根据权利要求1所述的方法,其特征在于,在所述确定异常图像数据所处的图像位置之后,还包括:
检测位于所述图像位置之前所接收到的图像数据是否正常;
当位于所述图像位置之前所接收到的图像数据为异常图像数据时,丢弃针对于所述待显示图像的图像数据。
9.根据权利要求8所述的方法,其特征在于,还包括:
当位于所述图像位置之前所接收到的图像数据为正常图像数据时,检测所接收到的正常图像数据的数量是否达到预设个数;
当所接收到的正常图像数据的数量达到预设个数时,获取所述预设个数的所述正常图像数据。
10.根据权利要求1所述的方法,其特征在于,所述采用所述目标像素对所述异常图像数据进行修复,生成目标显示数据,包括:
采用所述目标像素对所述异常图像数据进行像素填充,得到目标图像数据;
对所述目标图像数据进行图像合成,生成所述目标显示数据。
11.根据权利要求10所述的方法,其特征在于,还包括:
将所述目标图像数据按照预设存储模式写入第一存储空间。
12.根据权利要求1所述的方法,其特征在于,所述对所述图像数据进行校验,生成图像校验结果,包括:
采用预设校验方式校验所述图像数据是否存在异常;
当所述图像数据存在异常时,生成图像校验失败结果;
当所述图像数据不存在异常时,生成图像校验成功结果。
13.根据权利要求12所述的方法,其特征在于,还包括:
基于所述图像校验结果,将校验成功的所述图像数据写入到第二存储空间。
14.一种图像处理装置,其特征在于,所述装置包括:
图像数据获取模块,用于获取当前接收到的针对于待显示图像的图像数据;
图像数据校验模块,用于对所述图像数据进行校验,生成图像校验结果;
像素补偿模块,用于基于所述图像校验结果,对异常图像数据进行像素补偿,得到目标像素;
图像生成模块,用于采用所述目标像素对所述异常图像数据进行修复,生成目标显示数据;
其中,所述像素补偿模块包括:
图像位置确定单元,用于基于所述图像校验结果,确定异常图像数据所处的图像位置;
正常数据获取单元,用于获取位于所述图像位置之前的多个正常图像数据,所述多个正常图像数据与所述异常图像数据顺序连接;
补偿处理单元,用于采用所述多个正常图像数据的像素点值对所述异常图像数据进行像素补偿,生成所述目标像素;
其中,所述补偿处理单元包括:
第一像素获取子单元,用于获取所述异常图像数据所对应实际图像块的第一像素点值;
采样插值子单元,用于对所述多个正常图像数据进行采样处理和插值处理,得到各个所述正常图像数据对应的目标图像块;
第二像素获取子单元,用于确定所述目标图像块的第二像素点值;
补偿处理子单元,用于基于所述第一像素点值与所述第二像素点值之间的像素差,对所述第一像素点值进行补偿处理,得到所述目标像素;
所述补偿处理子单元,还用于基于所述第一像素点值与所述第二像素点值之间的差值,生成补偿系数;采用所述补偿系数对所述第一像素点值进行补偿处理,得到所述目标像素;
所述补偿处理子单元,还用于获取所述实际图像块中各个颜色通道所对应的所述第一像素点值,以及所述目标图像块中各个颜色通道所对应的所述第二像素点值;分别计算各个颜色通道所对应的所述第一像素点值与所述第二像素点值的差值,得到所述各个颜色通道所对应的像素差值;获取各个所述像素差值在所述各个颜色通道中对应的预设权重系数;将所述各个颜色通道所对应的所述预设权重系数与所述像素差值进行加权处理,生成针对于所述各个颜色通道的所述补偿系数。
15.一种服务器,其特征在于,包括:
存储器和处理器,所述存储器和所述处理器之间互相通信连接,所述存储器中存储有计算机指令,所述处理器通过执行所述计算机指令,从而执行权利要求1至13中任一项所述的图像处理方法。
16.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机指令,所述计算机指令用于使计算机执行权利要求1至13中任一项所述的图像处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310732522.XA CN116503290B (zh) | 2023-06-20 | 2023-06-20 | 图像处理方法、装置、服务器及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310732522.XA CN116503290B (zh) | 2023-06-20 | 2023-06-20 | 图像处理方法、装置、服务器及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116503290A CN116503290A (zh) | 2023-07-28 |
CN116503290B true CN116503290B (zh) | 2023-09-12 |
Family
ID=87318633
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310732522.XA Active CN116503290B (zh) | 2023-06-20 | 2023-06-20 | 图像处理方法、装置、服务器及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116503290B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108182668A (zh) * | 2017-12-29 | 2018-06-19 | 努比亚技术有限公司 | 一种放大图像处理方法、终端及计算机可读存储介质 |
CN110570367A (zh) * | 2019-08-21 | 2019-12-13 | 苏州科达科技股份有限公司 | 鱼眼图像的校正方法、电子设备及存储介质 |
CN111462155A (zh) * | 2020-03-26 | 2020-07-28 | 深圳万拓科技创新有限公司 | 移动侦测方法、装置、计算机设备和存储介质 |
CN113014908A (zh) * | 2019-12-19 | 2021-06-22 | 西安诺瓦星云科技股份有限公司 | 图像检测方法、装置和系统及计算机可读存储介质 |
CN115082358A (zh) * | 2022-07-21 | 2022-09-20 | 深圳思谋信息科技有限公司 | 图像增强方法、装置、计算机设备和存储介质 |
-
2023
- 2023-06-20 CN CN202310732522.XA patent/CN116503290B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108182668A (zh) * | 2017-12-29 | 2018-06-19 | 努比亚技术有限公司 | 一种放大图像处理方法、终端及计算机可读存储介质 |
CN110570367A (zh) * | 2019-08-21 | 2019-12-13 | 苏州科达科技股份有限公司 | 鱼眼图像的校正方法、电子设备及存储介质 |
CN113014908A (zh) * | 2019-12-19 | 2021-06-22 | 西安诺瓦星云科技股份有限公司 | 图像检测方法、装置和系统及计算机可读存储介质 |
CN111462155A (zh) * | 2020-03-26 | 2020-07-28 | 深圳万拓科技创新有限公司 | 移动侦测方法、装置、计算机设备和存储介质 |
CN115082358A (zh) * | 2022-07-21 | 2022-09-20 | 深圳思谋信息科技有限公司 | 图像增强方法、装置、计算机设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN116503290A (zh) | 2023-07-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8463075B2 (en) | Dynamically resizing text area on a display device | |
JP5107880B2 (ja) | データ転送処理装置及び方法 | |
WO2022016927A1 (zh) | 图像处理方法、装置、终端设备及存储介质 | |
CN112783455B (zh) | 数据传输的控制方法、装置、介质及电子设备 | |
JP6229067B2 (ja) | データアクセス方法及び装置 | |
CN110401796B (zh) | 一种图像采集装置的抖动补偿方法和装置 | |
CN116503290B (zh) | 图像处理方法、装置、服务器及存储介质 | |
CN117849627A (zh) | 一种电池故障检测模型构建和电池故障检测方法及装置 | |
CN108388930A (zh) | 验证合同备件图片正确性与完整性的方法及装置 | |
KR100450320B1 (ko) | 디지털 티브이용 영상변환과 오류자동보정 장치 및 방법 | |
US11036574B2 (en) | Recovery of first failure data capture logs | |
CN109165372B (zh) | 一种网页加载方法、装置、设备及存储介质 | |
CN111614952A (zh) | 检测图像传输通道可靠性的方法及装置 | |
CN115700549A (zh) | 模型训练方法、故障确定方法、电子设备和程序产品 | |
CN112559340A (zh) | 一种画面测试方法、装置、设备及存储介质 | |
CN117234792B (zh) | 一种用于dpu的数据校验方法、装置、设备及介质 | |
CN115118961B (zh) | 视频数据测试系统、方法及其应用 | |
JP7377482B1 (ja) | ナンバープレート認識のためのシステム及び方法 | |
CN109240849A (zh) | 数据备份方法、装置及用于视频会议系统的多点控制单元 | |
JP7549411B1 (ja) | 情報処理装置、情報処理方法及びプログラム | |
US20240280436A1 (en) | Visualization device, visualization method, visualization program | |
CN117636794A (zh) | 显示数据处理系统及方法 | |
TWI512594B (zh) | 圖形使用者介面測試方法及測試裝置 | |
CN118675191A (zh) | 一种文本截图识别方法、系统、设备及计算机存储介质 | |
KR20220150178A (ko) | 2d 영상으로부터 추정한 깊이 정보의 오류 보정 방법 및 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |