CN114936987A - 一种镜头畸变校正方法、装置、设备及存储介质 - Google Patents

一种镜头畸变校正方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN114936987A
CN114936987A CN202210847026.4A CN202210847026A CN114936987A CN 114936987 A CN114936987 A CN 114936987A CN 202210847026 A CN202210847026 A CN 202210847026A CN 114936987 A CN114936987 A CN 114936987A
Authority
CN
China
Prior art keywords
pixel
neighborhood
pixels
determining
difference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210847026.4A
Other languages
English (en)
Other versions
CN114936987B (zh
Inventor
顾兴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Jidong Intelligent Technology Co ltd
Original Assignee
Wuhan Jidong Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Jidong Intelligent Technology Co ltd filed Critical Wuhan Jidong Intelligent Technology Co ltd
Priority to CN202210847026.4A priority Critical patent/CN114936987B/zh
Publication of CN114936987A publication Critical patent/CN114936987A/zh
Application granted granted Critical
Publication of CN114936987B publication Critical patent/CN114936987B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/80—Geometric correction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本申请公开了一种镜头畸变校正方法、装置、电子设备及存储介质，该方法包括：将校正后图像中目标像素的坐标映射到畸变图像中得到映射坐标；从畸变图像中确定映射坐标的多个邻域像素及最近邻域像素；确定多个邻域像素和最近邻域像素的像素值差异程度；基于像素值差异程度和邻域像素的像素值，确定目标像素的像素值。如此，在畸变图像校正时，考虑映射坐标的邻域像素与最近邻域像素之间的像素值差异，可使得到的目标像素的像素值更准确，在校正后图像中不会出现目标像素的像素值与畸变图像中映射坐标上对应像素值差异过大的情况，避免畸变图像上像素值波动较大的区域在校正后图像上出现异常的网状或环状波纹，改善校正后图像上物体边缘的模糊现象。

Description

一种镜头畸变校正方法、装置、设备及存储介质
技术领域
本发明涉及光学测量技术领域，尤其涉及一种镜头畸变校正方法、装置、电子设备及存储介质。
背景技术
飞行时间（Time of flight，ToF）技术是一种利用光的飞行时间来测量场景深度的技术。在实际应用中，由于TOF相机镜头存在镜头畸变，直接得到的TOF深度图像是畸变图像。现有技术对畸变图像进行镜头畸变校正时，为了避免校正后图像在场景边缘处出现锯齿现象，通常采用双线性插值或双三次插值法来确定校正后图像像素坐标处的像素值，具体是根据映射坐标的附近像素确定映射坐标处的像素值，作为校正后图像中与映射坐标相对应的目标像素坐标处的像素值。
然而，当畸变图像存在像素值剧烈波动的区域时，由于现有双线性插值或双三次插值法在映射坐标处的像素值时，仅考虑附近像素的距离权重，导致得到的处于波动区域的映射坐标处的像素值与附近像素的像素值存在明显差异。当畸变图像中像素值剧烈波动的区域达到一定面积时，会导致在校正后图像上存在异常的网状或环形波纹现象，校正效果较差。
发明内容
为解决上述技术问题，本申请实施例期望提供一种镜头畸变校正方法、装置、电子设备及存储介质。
本申请的技术方案是这样实现的：
第一方面，提供了一种镜头畸变校正方法，所述方法包括：
获取镜头的内部参数及畸变图像；
基于所述镜头的内部参数进行坐标映射，将校正后图像中目标像素的坐标映射到所述畸变图像中得到映射坐标；
从所述畸变图像中确定所述映射坐标周围的多个邻域像素的坐标，以及所述多个邻域像素的像素值；
基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素；
基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度；
基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值。
上述方案中，所述像素值差异程度包括：每个邻域像素对应的像素差权重；所述基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值，包括：基于所述多个邻域像素的坐标和所述映射坐标，确定各个邻域像素对应的距离权重；基于所述距离权重、所述像素差权重和所述多个邻域像素的像素值，确定所述目标像素的像素值。
上述方案中，所述像素值差异程度包括：每个邻域像素对应的像素差权重；所述基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度，包括：基于预设归类策略从所述多个邻域像素中确定出与所述最近邻域像素为同一类的像素，作为第一邻域像素；确定所述第一邻域像素对应的像素差权重为1；从所述多个邻域像素中确定出与所述最近邻域像素不为同一类的像素，作为第二邻域像素；确定所述第二邻域像素对应的像素差权重为0。
上述方案中，所述预设归类策略，包括至少以下之一：目标邻域像素对应的像素值与所述最近邻域像素对应的像素值之差小于第一预设阈值时，确定所述目标邻域像素与所述最近邻域像素为同一类；计算所述多个邻域像素的像素梯度方向；所述目标邻域像素与所述最近邻域像素落在垂直于所述像素梯度方向的同一条法线上时，确定所述目标邻域像素与所述最近邻域像素为同一类；基于图像阈值分割法确定所述多个邻域像素的像素值对应的分类阈值，所述目标邻域像素与所述最近邻域像素同大于或同小于所述分类阈值时，确定所述目标邻域像素与所述最近邻域像素为同一类。
上述方案中，所述像素值差异程度包括：每个邻域像素对应的像素差权重；所述基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度，包括：计算每个邻域像素的像素值和所述最近邻域像素的像素值的差值，作为每个邻域像素对应的像素差；将所述多个邻域像素对应的像素差代入像素差权重计算公式，得到每个邻域像素对应的像素差权重。
上述方案中，所述基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度，包括：基于所述多个邻域像素的像素值和第一图像插值法，计算所述映射坐标处的第一像素值，其中，所述第一图像插值法为基于距离加权的图像插值法；计算所述第一像素值与所述最近邻域像素的像素值的差值绝对值，作为所述多个邻域像素和所述最近邻域像素的像素值差异程度。
上述方案中，所述基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值，包括：确定所述差值绝对值大于或等于第二预设阈值时，将所述最近邻域像素的像素值作为所述目标像素的像素值；确定所述差值绝对值小于所述第二预设阈值时，将所述第一像素值作为所述目标像素的像素值。
上述方案中，所述基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素，包括：基于所述多个邻域像素的像素值确定所述映射坐标处于预设区域时，基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素。
上述方案中，所述方法还包括：基于所述多个邻域像素的像素值确定所述映射坐标不处于所述预设区域时，基于所述多个邻域像素的像素值和坐标，确定所述目标像素的像素值。
上述方案中，所述基于所述多个邻域像素的像素值确定所述映射坐标处于预设区域，包括以下至少之一：所述多个邻域像素的像素值对应的极差、方差、或标准差大于或等于第三预设阈值，确定所述映射坐标处于所述预设区域；所述多个邻域像素的像素值对应的像素梯度大于或等于第四预设阈值，确定所述映射坐标处于所述预设区域；所述多个邻域像素的像素值对应的强度均值或强度最小值小于或等于第五预设阈值，确定所述映射坐标处于所述预设区域；基于所述多个邻域像素的像素值和第二图像插值法，计算所述映射坐标处的第二像素值，其中，所述第二图像插值法为基于距离加权的图像插值法；所述第二像素值与所述最近邻域像素的像素值的差值绝对值大于或等于第六预设阈值时，确定所述映射坐标处于所述预设区域。
第二方面，提供了一种镜头畸变校正装置，所述装置包括：
获取模块，用于获取镜头的内部参数及畸变图像；
处理模块，用于基于所述镜头的内部参数进行坐标映射，将校正后图像中目标像素的坐标映射到所述畸变图像中得到映射坐标；
所述处理模块，还用于从所述畸变图像中确定所述映射坐标周围的多个邻域像素的坐标，以及所述多个邻域像素的像素值；基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素；基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度；基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值。
第三方面，提供了一种电子设备，所述电子设备包括：处理器和配置为存储能够在处理器上运行的计算机程序的存储器，其中，所述处理器配置为运行所述计算机程序时，执行前述方法的步骤。
第四方面，提供了一种计算机存储介质，其上存储有计算机程序，其中，该计算机程序被处理器执行时实现前述方法的步骤。
本申请公开一种镜头畸变校正方法、装置、电子设备及存储介质，在对畸变图像进行校正时，即确定目标像素的像素值时，考虑畸变图像中映射坐标的邻域像素与最近邻域像素之间的像素值差异，可以使得得到的目标像素的像素值更准确，在校正后图像中不会出现目标像素的像素值与畸变图像中映射坐标上对应像素值差异过大的情况，避免畸变图像上像素值波动较大的区域在校正后图像上出现异常的网状或环状波纹，改善校正后图像上物体边缘的模糊现象。
附图说明
图1为本申请实施例中镜头畸变校正方法的第一流程示意图；
图2为本申请实施例中映射坐标P的邻域像素示意图；
图3为本申请实施例中镜头畸变校正方法的第二流程示意图；
图4（a）为基于双线性插值方法得到的畸变校正后图像；
图4（b）为基于本申请畸变校正方法得到的畸变校正后图像；
图5为本申请实施例中镜头畸变校正装置的组成结构示意图；
图6为本申请实施例中电子设备的组成结构示意图。
具体实施方式
为了能够更加详尽地了解本申请实施例的特点与技术内容，下面结合附图对本申请实施例的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本申请实施例。
本申请实施例提出一种镜头畸变校正方法。图1为本申请实施例中镜头畸变校正方法的第一流程示意图，如图1所示，该镜头畸变校正方法具体可以包括：
步骤101：获取镜头的内部参数及畸变图像。
这里，畸变图像为由相机直接生成的，未经过畸变校正的图像。
这里，镜头的内部参数至少包括：焦距参数、主点、畸变参数等内部参数。实际应用中，这些镜头的内部参数可以对在镜头标定过程中得到。示例性的，在一些实施例中，所述方法还包括：基于镜头标定方法对相机进行镜头标定，得到所述镜头的内部参数。这里，镜头标定方法包括但不限于：传统摄像机标定方法、主动视觉相机标定方法、相机自标定法等。其中，传统摄像机标定方法，包括但不限于：张正友棋盘格标定方法、圆形标定板标定方法等。通过镜头标定方法除了能得到本申请中使用的内部参数外，还能得到镜头的外部参数。
步骤102：基于所述镜头的内部参数进行坐标映射，将校正后图像中目标像素的坐标映射到所述畸变图像中得到映射坐标。
实际应用中，可以将镜头的内部参数代入镜头畸变校正公式，求解畸变校正后图像（即无畸变图像）上每个像素坐标
Figure 519292DEST_PATH_IMAGE001
到畸变图像上的映射坐标
Figure 177807DEST_PATH_IMAGE002
。
示例性的，在实际应用中，求解过程的一个具体实施例为：
将畸变校正后图像中坐标
Figure 484154DEST_PATH_IMAGE003
映射到相机坐标系坐标
Figure 581423DEST_PATH_IMAGE004
：
Figure 522572DEST_PATH_IMAGE005
Figure 679884DEST_PATH_IMAGE006
径向畸变：
Figure 473528DEST_PATH_IMAGE007
Figure 108908DEST_PATH_IMAGE008
切向畸变：
Figure 406029DEST_PATH_IMAGE009
Figure 734242DEST_PATH_IMAGE010
将畸变后的相机坐标系坐标映射回图像坐标系，得到畸变图像上的映射坐标
Figure 546340DEST_PATH_IMAGE011
，为：
Figure 627822DEST_PATH_IMAGE012
Figure 169662DEST_PATH_IMAGE013
上式中，
Figure 544142DEST_PATH_IMAGE014
、
Figure 905854DEST_PATH_IMAGE015
为焦距参数，
Figure 555141DEST_PATH_IMAGE016
、
Figure 92432DEST_PATH_IMAGE017
为主点。
Figure 762448DEST_PATH_IMAGE018
为坐标
Figure 985357DEST_PATH_IMAGE019
到成像中心的距离，
Figure 438335DEST_PATH_IMAGE020
。
Figure 689188DEST_PATH_IMAGE021
、
Figure 202209DEST_PATH_IMAGE022
、
Figure 413878DEST_PATH_IMAGE023
为径向畸变参数，
Figure 172012DEST_PATH_IMAGE024
、
Figure 277371DEST_PATH_IMAGE025
为切向畸变参数。
步骤103：从所述畸变图像中确定所述映射坐标周围的多个邻域像素的坐标，以及所述多个邻域像素的像素值。
这里，邻域像素可以为畸变图像中映射坐标周围距离该映射坐标最近的M*N邻域内的像素。实际应用中，M、N为大于1的正整数，具体数值可根据实际需求进行设定。
步骤104：基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素。
这里，与其他邻域像素相比，最近邻域像素与映射坐标的距离最近，其像素值更接近映射坐标处的像素值。
步骤105：基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度。
步骤106：基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值。
示例性的，基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值，包括：基于所述像素值差异程度和所述多个邻域像素的像素值，得到映射坐标处的像素值，作为所述目标像素的像素值。
示例性的，多个邻域像素和所述最近邻域像素的像素值差异程度，可以由各个邻域像素和最近邻域像素的像素差权重表示。某一邻域像素对应的像素差权重越大，表征与其他邻域像素相比，该邻域像素的像素值与最近邻域像素的像素值间的差异越小。
示例性的，在一些实施例中，所述像素值差异程度包括：各个邻域像素对应的像素差权重；所述基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值，包括：基于所述多个邻域像素的坐标和所述映射坐标，确定各个邻域像素对应的距离权重；基于所述距离权重、所述像素差权重和所述多个邻域像素的像素值，确定所述目标像素的像素值。
这里，各个邻域像素对应的距离权重，用于表征各个邻域像素距离映射坐标的远近程度，某一邻域像素对应的距离权重越大，表征与其他邻域像素对应的像素差相比，该邻域像素的坐标与映射坐标的间的距离越近。
通过结合像素差权重和距离权重对多个邻域像素的像素值进行加权，得到的目标像素的像素值（等于映射坐标处的像素值）更准确，且不会出现目标像素的像素值与邻域像素的像素值差异过大的情况，避免校正后图像出现异常的网状或环形波纹的现象，提高校正效果。
下面对像素值差异程度包括各个邻域像素对应的像素差权重时，步骤105和步骤106的具体方法进行进一步举例说明。
示例性的，在一些实施例中，所述基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度，包括：基于预设归类策略从所述多个邻域像素中确定出与所述最近邻域像素为同一类的像素，作为第一邻域像素；确定所述第一邻域像素对应的像素差权重为1；从所述多个邻域像素中确定出与所述最近邻域像素不为同一类的像素，作为第二邻域像素；确定所述第二邻域像素对应的像素差权重为0。
这里，确定与最近邻域像素为同一类的第一邻域像素的像素差权重为1；确定第二邻域像素对应的像素差权重为0，相当于在后续的基于所述距离权重、像素差权重和多个邻域像素的像素值，确定所述目标像素的像素值时，只基于第一邻域像素的对应的像素值，确定目标像素的像素值。也就是说，仅根据与最近邻域像素为同一类的像素来确定目标像素的像素值。
示例性的，图2为本申请实施例中映射坐标P的邻域像素示意图。如图2所示，映射坐标P的邻域像素包括：邻域像素A、B、C、D，其对应的坐标分别为：
Figure 695714DEST_PATH_IMAGE026
，
Figure 191418DEST_PATH_IMAGE027
，
Figure 189461DEST_PATH_IMAGE028
，
Figure 585545DEST_PATH_IMAGE029
，映射坐标P的坐标为
Figure 768264DEST_PATH_IMAGE030
。
目标像素的像素值，可通过下式计算得到：
Figure 954526DEST_PATH_IMAGE031
Figure 552998DEST_PATH_IMAGE032
Figure 367370DEST_PATH_IMAGE033
Figure 393095DEST_PATH_IMAGE034
Figure 364855DEST_PATH_IMAGE035
式中，
Figure 439122DEST_PATH_IMAGE036
为映射坐标P处的像素值（作为目标像素的像素值），
Figure 311263DEST_PATH_IMAGE037
、
Figure 835785DEST_PATH_IMAGE038
、
Figure 262218DEST_PATH_IMAGE039
、
Figure 966607DEST_PATH_IMAGE040
分别为邻域像素A、B、C、D的像素值；
Figure 630938DEST_PATH_IMAGE041
、
Figure 326361DEST_PATH_IMAGE042
、
Figure 505670DEST_PATH_IMAGE043
、
Figure 249635DEST_PATH_IMAGE044
分别为邻域像素A、B、C、D对应的距离权重，
Figure 258218DEST_PATH_IMAGE045
、
Figure 390122DEST_PATH_IMAGE046
、
Figure 56727DEST_PATH_IMAGE047
、
Figure 807645DEST_PATH_IMAGE048
分别为邻域像素A、B、C、D对应的像素差权重。示例性的，邻域像素A、B为第一邻域像素，邻域像素C、D为第二邻域像素时，
Figure 571202DEST_PATH_IMAGE049
、
Figure 280532DEST_PATH_IMAGE050
均为1，
Figure 136230DEST_PATH_IMAGE051
、
Figure 549894DEST_PATH_IMAGE052
均为0。
示例性的，在一些实施例中，所述预设归类策略，包括至少以下之一：目标邻域像素对应的像素值与所述最近邻域像素对应的像素值之差小于第一预设阈值时，确定所述目标邻域像素与所述最近邻域像素为同一类；计算所述多个邻域像素的像素梯度方向；所述目标邻域像素与所述最近邻域像素落在垂直于所述像素梯度方向的同一条法线上时，确定所述目标邻域像素与所述最近邻域像素为同一类；基于图像阈值分割法确定所述多个邻域像素的像素值对应的分类阈值，所述目标邻域像素与所述最近邻域像素同大于或同小于所述分类阈值时，确定所述目标邻域像素与所述最近邻域像素为同一类。
示例性的，实际应用中，计算所述多个邻域像素的像素梯度方向，可以为计算以映射坐标为中心的M*N邻域像素的梯度方向。实际应用中，图像阈值分割法可以为最大类间方差法、直方图阈值法等阈值分割方法，根据该图像阈值分割法和邻域像素，可以确定出用于对邻域像素进行分类的分类阈值。
示例性的，在一些实施例中，所述像素值差异程度包括：每个邻域像素对应的像素差权重时，所述基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度，包括：计算每个邻域像素的像素值和所述最近邻域像素的像素值的差值，作为每个邻域像素对应的像素差；将所述多个邻域像素对应的像素差代入像素差权重计算公式，得到每个邻域像素对应的像素差权重。
示例性的，像素A为最近邻域像素时，邻域像素X对应的像素差权重
Figure 105640DEST_PATH_IMAGE053
计算公式可以为：
Figure 923555DEST_PATH_IMAGE054
式中，
Figure 564751DEST_PATH_IMAGE055
、
Figure 516527DEST_PATH_IMAGE056
分别为邻域像素X和最近邻域像素M对应的像素值。
示例性的，如图2所示的邻域像素示意图中，目标像素的像素值，可通过下式计算得到：
Figure 428245DEST_PATH_IMAGE057
式中，
Figure 948219DEST_PATH_IMAGE058
为映射坐标P处的像素值（作为目标像素的像素值），
Figure 139029DEST_PATH_IMAGE059
、
Figure 769861DEST_PATH_IMAGE060
、
Figure 300200DEST_PATH_IMAGE061
、
Figure 850130DEST_PATH_IMAGE062
分别为邻域像素A、B、C、D的像素值；式中
Figure 902137DEST_PATH_IMAGE063
Figure 133398DEST_PATH_IMAGE064
Figure 580560DEST_PATH_IMAGE065
Figure 239075DEST_PATH_IMAGE066
以邻域像素A对应的系数
Figure 76581DEST_PATH_IMAGE067
为例，对上式进行说明，
Figure 81839DEST_PATH_IMAGE041
、
Figure 258874DEST_PATH_IMAGE068
分别为邻域像素A对应的距离权重和像素差权重；
Figure 88289DEST_PATH_IMAGE069
为像素差权重系数，可根据实际需求进行预设。邻域像素B、C、D分别对应系数
Figure 740988DEST_PATH_IMAGE070
、
Figure 251734DEST_PATH_IMAGE071
、
Figure 939068DEST_PATH_IMAGE072
。
示例性的，如图2所示的邻域像素示意图中，目标像素的像素值，可通过下式计算得到：
Figure 437920DEST_PATH_IMAGE031
Figure 453281DEST_PATH_IMAGE073
Figure 626773DEST_PATH_IMAGE074
Figure 840717DEST_PATH_IMAGE075
Figure 215197DEST_PATH_IMAGE076
以邻域像素A对应的系数
Figure 842488DEST_PATH_IMAGE067
为例，对上式进行说明，
Figure 196502DEST_PATH_IMAGE077
、
Figure 530531DEST_PATH_IMAGE078
分别为邻域像素A对应的距离权重和像素差权重；
Figure 934968DEST_PATH_IMAGE079
为距离权重系数，
Figure 456079DEST_PATH_IMAGE080
为像素差权重系数，均可根据实际需求进行预设。邻域像素B、C、D分别对应系数
Figure 377899DEST_PATH_IMAGE070
、
Figure 628751DEST_PATH_IMAGE071
、
Figure 843570DEST_PATH_IMAGE081
。
示例性的，多个邻域像素和所述最近邻域像素的像素值差异程度，可以由采用第一图像插值法得到的映射坐标点的像素值和最近邻域像素的像素值的差值绝对值表示。其中，第一图像插值法为基于距离加权的图像插值法，如双线性插值法、双三次插值法等。
示例性的，在一些实施例中，所述基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度，包括：基于所述多个邻域像素的像素值和第一图像插值法，计算所述映射坐标处的第一像素值，其中，所述第一图像插值法为基于距离加权的图像插值法；计算所述第一像素值与所述最近邻域像素的像素值的差值绝对值，作为所述多个邻域像素和所述最近邻域像素的像素值差异程度。
示例性的，在一些实施例中，所述基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值，包括：确定所述差值绝对值大于或等于第二预设阈值时，将所述最近邻域像素的像素值作为所述目标像素的像素值；确定所述差值绝对值小于所述第二预设阈值时，将所述第一像素值作为所述目标像素的像素值。
这里，第一像素值与所述最近邻域像素的像素值的差值绝对值超过预设阈值时，表征通过距离加权得到的像素值与最近邻域像素的像素值差异程度较大，若采用第一像素值作为目标像素的像素值时，会导致在校正后图像上存在异常的网状或环形波纹现象。通过在该差值绝对值过大时，采用最近邻域像素的像素值可以避免该异常现象的产生。
另外，采用现有的基于距离加权的图像插值方法来确定处于深度图像中边缘区域（特别是前景和后景的深度差较大的区域）的像素值时，由于只对邻域像素的像素值进行距离加权平均，会出现飞点（或混合像素）的现象。本申请的考虑了邻域像素与最近邻域像素的像素值差异程度来确定映射坐标（插值点）处像素值的方法还能用来确定处于边缘区域的像素值，且采用本方法确定插值点处像素值时，可以减少新的飞点（混合像素）的产生。
示例性的，在一些实施例中，所述基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素，包括：基于所述多个邻域像素的像素值确定所述映射坐标处于预设区域时，基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素。
这里，预设区域为像素值剧烈波动的区域，即预设区域内各个像素的差异程度较大。映射坐标处于所述预设区域时，表征映射坐标周围的各个像素的像素值差异程度较大，在确定目标像素的像素值时，需要考虑邻域像素与最近邻域像素的像素值差异程度，若不考虑，会导致目标像素的准确度较低，在校正后图像中出现异常的网状或环形波纹，或导致在校正后图像中产生新的飞点（混合像素）。
示例性的，在一些实施例中，所述方法还包括：基于所述多个邻域像素的像素值确定所述映射坐标不处于所述预设区域时，基于所述多个邻域像素的像素值和坐标，确定所述目标像素的像素值。
这里，映射坐标不处于所述预设区域时，表征映射坐标周围的各个像素的像素值差异程度较小，在确定目标像素的像素值时，可以不考虑邻域像素与最近邻域像素的像素值差异程度。这里，基于所述多个邻域像素的像素值和坐标，确定所述目标像素的像素值，可以为采用现有的双线性插值法或三次插值等基于距离加权的图像插值法，确定目标像素坐标处的像素值。
通过针对不同的区域采用不同的目标像素值确定方法，在映射坐标处于非像素值剧烈波动的区域时，基于常规方法确定目标像素的像素值；在映射坐标处于像素值剧烈波动的区域时，确定出邻域像素和最近邻域像素的像素值差异程度，并将其用于目标像素的像素值的确定，可以在避免校正后图像上出现异常的网状或环形波纹现象的同时提高校正效率，另外，还能避免在校正后图像中产生新的飞点（混合像素）。
需要说明的是，在实际应用中，无论映射坐标是否处于所述预设区域，都可以采用本申请中101到106中的方法来确定目标像素坐标处的像素值。
这里，步骤101至步骤106的执行主体可以为实现本申请实施例镜头畸变校正方法的电子设备的处理器。
本申请实施例的技术方案，在对畸变图像进行校正时，即确定目标像素的像素值时，考虑畸变图像中映射坐标的邻域像素与最近邻域像素之间的像素值差异，可以使得得到的目标像素的像素值更准确，在校正后图像中不会出现目标像素的像素值与畸变图像中映射坐标上对应像素值差异过大的情况，避免畸变图像上像素值波动较大的区域在校正后图像上出现异常的网状或环状波纹，改善校正后图像上物体边缘的模糊现象。
为了能更加体现本申请的目的，在本申请上实施例的基础上，进行进一步的举例说明。图3为本申请实施例中镜头畸变校正方法的第二流程示意图。如图3所示，该镜头畸变校正方法包括：
步骤301：获取镜头的内部参数及畸变图像。
步骤302：基于所述镜头的内部参数进行坐标映射，将校正后图像中目标像素的坐标映射到所述畸变图像中得到映射坐标。
步骤303：从所述畸变图像中确定所述映射坐标周围的多个邻域像素的坐标，以及所述多个邻域像素的像素值。
步骤304：基于所述多个邻域像素的像素值确定所述映射坐标是否处于预设区域；若是，执行步骤305；若否，执行步骤308。
这里，预设区域为像素值剧烈波动的区域，即预设区域内，各个像素的像素值差异程度较大。映射坐标处于所述预设区域时，表征映射坐标周围的各个像素的像素值差异程度较大，在确定目标像素的像素值时，需要考虑邻域像素与最近邻域像素的像素值差异程度，若不考虑，会导致目标像素的准确度较差，在校正后图像中出现异常的网状或环形波纹。映射坐标不处于所述预设区域时，表征映射坐标周围的各个像素的像素值差异程度较小，在确定目标像素的像素值时，可以不考虑邻域像素与最近邻域像素的像素值差异程度。
示例性的，基于所述多个邻域像素的像素值确定所述映射坐标处于预设区域，包括以下至少之一：所述多个邻域像素的像素值对应的极差、方差、或标准差大于或等于第三预设阈值，确定所述映射坐标处于所述预设区域；所述多个邻域像素的像素值对应的像素梯度大于或等于第四预设阈值，确定所述映射坐标处于所述预设区域；所述多个邻域像素的像素值对应的强度均值或强度最小值小于或等于第五预设阈值，确定所述映射坐标处于所述预设区域；基于所述多个邻域像素的像素值和第二图像插值法，计算所述映射坐标处的第二像素值，其中，所述第二图像插值法为基于距离加权的图像插值法；所述第二像素值与所述最近邻域像素的像素值的差值绝对值大于或等于第六预设阈值时，确定所述映射坐标处于所述预设区域。
这里，多个邻域像素的像素值对应的极差，即为多个邻域像素对应的多个像素值中的最大值与最小值之差。示例性的，第二图像插值法为基于距离加权的图像插值法，如双线性插值法、双三次插值法等。
示例性的，待处理图像为深度图像时，深度图对应的强度图中每个像素的强度值，可以反应像素的置信度。通常，像素的强度越小，即该点接收到的信号强度越低，代表这个像素的置信度越低。信噪比SNR=信号（强度）/噪声，其中，噪声是一定的。当像素接收信号强度低时，SNR就低，解算的深度值受噪声干扰比较大，特别是信号（强度）小到0附近时，很容易出现深度值解算异常的现象。从而导致在一片信号（强度）都很低的区域，解算的深度值波动非常剧烈。因此，可以基于信号强度来确定映射坐标是否处于像素值剧烈波动的预设区域。
需要说明的是，上述确定所述映射坐标处于预设区域的多个方法可以单独使用，也可以结合使用。基于多个邻域像素的像素值确定所述映射坐标处于预设区域失败时，确定映射坐标不处于预设区域。
步骤305：基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素。
步骤306：基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度。
步骤307：基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值。
步骤308：基于所述多个邻域像素的像素值和坐标，确定所述目标像素的像素值。
这里，映射坐标不处于所述预设区域时，表征映射坐标周围的各个像素的像素值差异程度较小，在确定目标像素的像素值时，可以不考虑邻域像素与最近邻域像素的像素值差异程度。基于所述多个邻域像素的像素值和坐标，确定所述目标像素的像素值，可以为采用现有的双线性插值法或三次插值等基于距离加权的图像插值法，确定目标像素坐标处的像素值。示例性的，采用双线性插值法时，邻域像素为映射坐标周围最近的4个像素。
示例性的，在一些实施例中，所述基于所述多个邻域像素的像素值和坐标，确定所述目标像素的像素值，包括：基于所述多个邻域像素的坐标和所述映射坐标，确定各个邻域像素对应的距离权重；基于所述距离权重和所述多个邻域像素的像素值，确定所述目标像素的像素值。
示例性的，如图2所示的邻域像素示意图中，基于所述距离权重和所述多个邻域像素的像素值，确定所述目标像素的像素值，可通过下式计算得到：
Figure 851977DEST_PATH_IMAGE082
Figure 170963DEST_PATH_IMAGE083
Figure 417268DEST_PATH_IMAGE084
Figure 429086DEST_PATH_IMAGE085
Figure 190369DEST_PATH_IMAGE086
式中，
Figure 701595DEST_PATH_IMAGE087
为映射坐标P处的像素值（作为目标像素的像素值），
Figure 927040DEST_PATH_IMAGE088
、
Figure 781864DEST_PATH_IMAGE089
、
Figure 702546DEST_PATH_IMAGE090
、
Figure 301018DEST_PATH_IMAGE091
分别为邻域像素A、B、C、D的像素值。
Figure 646549DEST_PATH_IMAGE041
、
Figure 374071DEST_PATH_IMAGE042
、
Figure 172263DEST_PATH_IMAGE043
、
Figure 512108DEST_PATH_IMAGE044
分别为邻域像素A、B、C、D的距离权重。
示例性的，图4（a）为基于双线性插值方法得到的畸变校正后图像，图4（b）为基于本申请畸变校正方法得到的畸变校正后图像。如图4（a）和图4（b）所示，采用常规双线性插值方法得到的畸变校正后图像中存在异常的网状或环形波纹的现象，而采用本申请技术方案得到的校正后图像中不会出现异常的网状或环形波纹的现象。
这里，步骤301至步骤308的执行主体可以为实现本申请实施例镜头畸变校正方法的电子设备的处理器。
本申请实施例的技术方案，通过针对不同的区域采用不同的目标像素值确定方法，在映射坐标处于非像素值剧烈波动的区域时，基于常规方法确定目标像素的像素值；在映射坐标处于像素值剧烈波动的区域时，基于邻域像素和最近邻域像素的像素值差异程度确定目标像素的像素值的确定，可以在避免校正后图像上出现异常的网状或环形波纹现象的同时，提高校正效率。
图5为本申请实施例中镜头畸变校正装置的组成结构示意图，展示了一种镜头畸变校正方法的实现装置，该镜头畸变校正装置50具体包括：
获取模块501，用于获取镜头的内部参数及畸变图像；
处理模块502，用于基于所述镜头的内部参数进行坐标映射，将校正后图像中目标像素的坐标映射到所述畸变图像中得到映射坐标；
所述处理模块502，还用于从所述畸变图像中确定所述映射坐标周围的多个邻域像素的坐标，以及所述多个邻域像素的像素值；基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素；基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度；基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值。
在一些实施例中，所述像素值差异程度包括：每个邻域像素对应的像素差权重；所述处理模块502，用于基于所述多个邻域像素的坐标和所述映射坐标，确定各个邻域像素对应的距离权重；基于所述距离权重、所述像素差权重和所述多个邻域像素的像素值，确定所述目标像素的像素值。
在一些实施例中，所述像素值差异程度包括：每个邻域像素对应的像素差权重，所述处理模块502，用于基于预设归类策略从所述多个邻域像素中确定出与所述最近邻域像素为同一类的像素，作为第一邻域像素；确定所述第一邻域像素对应的像素差权重为1；从所述多个邻域像素中确定出与所述最近邻域像素不为同一类的像素，作为第二邻域像素；确定所述第二邻域像素对应的像素差权重为0。
在一些实施例中，所述预设归类策略，包括至少以下之一：目标邻域像素对应的像素值与所述最近邻域像素对应的像素值之差小于第一预设阈值时，确定所述目标邻域像素与所述最近邻域像素为同一类；计算所述多个邻域像素的像素梯度方向；所述目标邻域像素与所述最近邻域像素落在垂直于所述像素梯度方向的同一条法线上时，确定所述目标邻域像素与所述最近邻域像素为同一类；基于图像阈值分割法确定所述多个邻域像素的像素值对应的分类阈值，所述目标邻域像素与所述最近邻域像素同大于或同小于所述分类阈值时，确定所述目标邻域像素与所述最近邻域像素为同一类。
在一些实施例中，所述像素值差异程度包括：每个邻域像素对应的像素差权重，所述处理模块502，用于计算每个邻域像素的像素值和所述最近邻域像素的像素值的差值，作为每个邻域像素对应的像素差；将所述多个邻域像素对应的像素差代入像素差权重计算公式，得到每个邻域像素对应的像素差权重。
在一些实施例中，所述处理模块502，用于基于所述多个邻域像素的像素值和第一图像插值法，计算所述映射坐标处的第一像素值，其中，所述第一图像插值法为基于距离加权的图像插值法；计算所述第一像素值与所述最近邻域像素的像素值的差值绝对值，作为所述多个邻域像素和所述最近邻域像素的像素值差异程度。
在一些实施例中，所述处理模块502，用于确定所述差值绝对值大于或等于第二预设阈值时，将所述最近邻域像素的像素值作为所述目标像素的像素值；确定所述差值绝对值小于所述第二预设阈值时，将所述第一像素值作为所述目标像素的像素值。
在一些实施例中，所述处理模块502，用于基于所述多个邻域像素的像素值确定所述映射坐标处于预设区域时，基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素。
在一些实施例中，所述处理模块502，还用于基于所述多个邻域像素的像素值确定所述映射坐标不处于所述预设区域时，基于所述多个邻域像素的像素值和坐标，确定所述目标像素的像素值。
在一些实施例中，所述基于所述多个邻域像素的像素值确定所述映射坐标处于预设区域，包括以下至少之一：所述多个邻域像素的像素值对应的极差、方差、或标准差大于或等于第三预设阈值，确定所述映射坐标处于所述预设区域；所述多个邻域像素的像素值对应的像素梯度大于或等于第四预设阈值，确定所述映射坐标处于所述预设区域；所述多个邻域像素的像素值对应的强度均值或强度最小值小于或等于第五预设阈值，确定所述映射坐标处于所述预设区域；基于所述多个邻域像素的像素值和第二图像插值法，计算所述映射坐标处的第二像素值，其中，所述第二图像插值法为基于距离加权的图像插值法；所述第二像素值与所述最近邻域像素的像素值的差值绝对值大于或等于第六预设阈值时，确定所述映射坐标处于所述预设区域。
基于上述镜头畸变校正装置中各单元的硬件实现，本申请实施例还提供了一种电子设备。图6为本申请实施例中电子设备的组成结构示意图。如图6所示，该电子设备60包括：处理器601和配置为存储能够在处理器上运行的计算机程序的存储器602；其中，处理器601配置为运行计算机程序时，执行前述实施例中的方法的步骤。当然，实际应用时，如图6所示，该电子设备中的各个组件通过总线系统603耦合在一起。可理解，总线系统603用于实现这些组件之间的连接通信。总线系统603除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图6中将各种总线都标为总线系统603。
在实际应用中，上述处理器可以为特定用途集成电路（ASIC，ApplicationSpecific Integrated Circuit）、数字信号处理装置（DSPD，Digital Signal ProcessingDevice）、可编程逻辑装置（PLD，Programmable Logic Device）、现场可编程门阵列（Field－Programmable Gate Array，FPGA）、控制器、微控制器、微处理器中的至少一种。可以理解地，对于不同的设备，用于实现上述处理器功能的电子器件还可以为其它，本申请实施例不作具体限定。上述存储器可以是易失性存储器（volatile memory），例如随机存取存储器（RAM，Random-Access Memory）；或者非易失性存储器（non-volatile memory），例如只读存储器（ROM，Read-Only Memory），快闪存储器（flash memory），硬盘（HDD，Hard DiskDrive）或固态硬盘（SSD，Solid-State Drive）；或者上述种类的存储器的组合，并向处理器提供指令和数据。
在示例性实施例中，本申请实施例还提供了一种计算机可读存储介质，例如包括计算机程序的存储器，计算机程序可由电子设备的处理器执行，以完成前述方法的步骤。
应当理解，在本申请使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。本申请中表述“具有”、“可以具有”、“包括”和“包含”、或者“可以包括”和“可以包含”在本文中可以用于指示存在对应的特征(例如，诸如数值、功能、操作或组件等元素)，但不排除附加特征的存在。
应当理解，尽管在本申请可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开，不必用于描述特定的顺序或先后次序。例如，在不脱离本发明范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。本申请实施例所记载的技术方案之间，在不冲突的情况下，可以任意组合。在本申请所提供的几个实施例中，应该理解到，所揭露的方法、装置和设备，可以通过其它的方式实现。以上所描述的实施例仅仅是示意性的，例如，单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。另外，在本申请各实施例中的各功能单元可以全部集成在一个处理单元中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。

Claims (13)

1.一种镜头畸变校正方法，其特征在于，所述方法包括：
获取镜头的内部参数及畸变图像；
基于所述镜头的内部参数进行坐标映射，将校正后图像中目标像素的坐标映射到所述畸变图像中得到映射坐标；
从所述畸变图像中确定所述映射坐标周围的多个邻域像素的坐标，以及所述多个邻域像素的像素值；
基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素；
基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度；
基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值。
2.根据权利要求1所述的方法，其特征在于，所述像素值差异程度包括：每个邻域像素对应的像素差权重；
所述基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值，包括：
基于所述多个邻域像素的坐标和所述映射坐标，确定各个邻域像素对应的距离权重；
基于所述距离权重、所述像素差权重和所述多个邻域像素的像素值，确定所述目标像素的像素值。
3.根据权利要求1所述的方法，其特征在于，所述像素值差异程度包括：每个邻域像素对应的像素差权重；
所述基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度，包括：
基于预设归类策略从所述多个邻域像素中确定出与所述最近邻域像素为同一类的像素，作为第一邻域像素；
确定所述第一邻域像素对应的像素差权重为1；
从所述多个邻域像素中确定出与所述最近邻域像素不为同一类的像素，作为第二邻域像素；
确定所述第二邻域像素对应的像素差权重为0。
4.根据权利要求3所述的方法，其特征在于，所述预设归类策略，包括至少以下之一：
目标邻域像素对应的像素值与所述最近邻域像素对应的像素值之差小于第一预设阈值时，确定所述目标邻域像素与所述最近邻域像素为同一类；
计算所述多个邻域像素的像素梯度方向；
所述目标邻域像素与所述最近邻域像素落在垂直于所述像素梯度方向的同一条法线上时，确定所述目标邻域像素与所述最近邻域像素为同一类；
基于图像阈值分割法确定所述多个邻域像素的像素值对应的分类阈值，所述目标邻域像素与所述最近邻域像素同大于或同小于所述分类阈值时，确定所述目标邻域像素与所述最近邻域像素为同一类。
5.根据权利要求1所述的方法，其特征在于，所述像素值差异程度包括：每个邻域像素对应的像素差权重；
所述基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度，包括：
计算每个邻域像素的像素值和所述最近邻域像素的像素值的差值，作为每个邻域像素对应的像素差；
将所述多个邻域像素对应的像素差代入像素差权重计算公式，得到每个邻域像素对应的像素差权重。
6.根据权利要求1所述的方法，其特征在于，所述基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度，包括：
基于所述多个邻域像素的像素值和第一图像插值法，计算所述映射坐标处的第一像素值，其中，所述第一图像插值法为基于距离加权的图像插值法；
计算所述第一像素值与所述最近邻域像素的像素值的差值绝对值，作为所述多个邻域像素和所述最近邻域像素的像素值差异程度。
7.根据权利要求6所述的方法，其特征在于，所述基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值，包括：
确定所述差值绝对值大于或等于第二预设阈值时，将所述最近邻域像素的像素值作为所述目标像素的像素值；
确定所述差值绝对值小于所述第二预设阈值时，将所述第一像素值作为所述目标像素的像素值。
8.根据权利要求1所述的方法，其特征在于，所述基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素，包括：
基于所述多个邻域像素的像素值确定所述映射坐标处于预设区域时，基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素。
9.根据权利要求8所述的方法，其特征在于，所述方法还包括：
基于所述多个邻域像素的像素值确定所述映射坐标不处于所述预设区域时，基于所述多个邻域像素的像素值和坐标，确定所述目标像素的像素值。
10.根据权利要求8所述的方法，其特征在于，所述基于所述多个邻域像素的像素值确定所述映射坐标处于预设区域，包括以下至少之一：
所述多个邻域像素的像素值对应的极差、方差、或标准差大于或等于第三预设阈值，确定所述映射坐标处于所述预设区域；
所述多个邻域像素的像素值对应的像素梯度大于或等于第四预设阈值，确定所述映射坐标处于所述预设区域；
所述多个邻域像素的像素值对应的强度均值或强度最小值小于或等于第五预设阈值，确定所述映射坐标处于所述预设区域；
基于所述多个邻域像素的像素值和第二图像插值法，计算所述映射坐标处的第二像素值，其中，所述第二图像插值法为基于距离加权的图像插值法；
所述第二像素值与所述最近邻域像素的像素值的差值绝对值大于或等于第六预设阈值时，确定所述映射坐标处于所述预设区域。
11.一种镜头畸变校正装置，其特征在于，所述装置包括：
获取模块，用于获取镜头的内部参数及畸变图像；
处理模块，用于基于所述镜头的内部参数进行坐标映射，将校正后图像中目标像素的坐标映射到所述畸变图像中得到映射坐标；
所述处理模块，还用于从所述畸变图像中确定所述映射坐标周围的多个邻域像素的坐标，以及所述多个邻域像素的像素值；基于所述多个邻域像素的坐标和所述映射坐标，确定出与所述映射坐标距离最近的最近邻域像素；基于所述多个邻域像素的像素值和所述最近邻域像素的像素值，确定所述多个邻域像素和所述最近邻域像素的像素值差异程度；基于所述像素值差异程度和所述多个邻域像素的像素值，确定所述目标像素的像素值。
12.一种电子设备，其特征在于，所述电子设备包括：处理器和配置为存储能够在处理器上运行的计算机程序的存储器，
其中，所述处理器配置为运行所述计算机程序时，执行权利要求1至10任一项所述方法的步骤。
13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1至10任一项所述的方法的步骤。
CN202210847026.4A 2022-07-19 2022-07-19 一种镜头畸变校正方法、装置、设备及存储介质 Active CN114936987B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210847026.4A CN114936987B (zh) 2022-07-19 2022-07-19 一种镜头畸变校正方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210847026.4A CN114936987B (zh) 2022-07-19 2022-07-19 一种镜头畸变校正方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN114936987A true CN114936987A (zh) 2022-08-23
CN114936987B CN114936987B (zh) 2022-11-08

Family

ID=82867788

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210847026.4A Active CN114936987B (zh) 2022-07-19 2022-07-19 一种镜头畸变校正方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN114936987B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115580783A (zh) * 2022-09-05 2023-01-06 深圳市汇顶科技股份有限公司 像素值校正方法、装置以及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100090929A1 (en) * 2008-10-09 2010-04-15 Canon Kabushiki Kaisha Image processing system, image processing apparatus, aberration correction method, and computer-readable storage medium
JP2010258620A (ja) * 2009-04-22 2010-11-11 Sony Corp 画像処理装置、画像処理方法及びプログラム
CN102209180A (zh) * 2010-03-30 2011-10-05 索尼公司 图像处理设备和图像处理方法
JP2018180964A (ja) * 2017-04-14 2018-11-15 キヤノン株式会社 画像処理装置及び画像処理方法
CN110570367A (zh) * 2019-08-21 2019-12-13 苏州科达科技股份有限公司 鱼眼图像的校正方法、电子设备及存储介质
CN114283095A (zh) * 2021-12-30 2022-04-05 爱芯元智半导体(上海)有限公司 一种图像畸变校正方法、系统、电子设备及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100090929A1 (en) * 2008-10-09 2010-04-15 Canon Kabushiki Kaisha Image processing system, image processing apparatus, aberration correction method, and computer-readable storage medium
JP2010258620A (ja) * 2009-04-22 2010-11-11 Sony Corp 画像処理装置、画像処理方法及びプログラム
CN102209180A (zh) * 2010-03-30 2011-10-05 索尼公司 图像处理设备和图像处理方法
JP2018180964A (ja) * 2017-04-14 2018-11-15 キヤノン株式会社 画像処理装置及び画像処理方法
CN110570367A (zh) * 2019-08-21 2019-12-13 苏州科达科技股份有限公司 鱼眼图像的校正方法、电子设备及存储介质
CN114283095A (zh) * 2021-12-30 2022-04-05 爱芯元智半导体(上海)有限公司 一种图像畸变校正方法、系统、电子设备及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
郑佳等: "全景系统中大视场摄像机径向畸变校正算法研究", 《光学与光电技术》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115580783A (zh) * 2022-09-05 2023-01-06 深圳市汇顶科技股份有限公司 像素值校正方法、装置以及电子设备

Also Published As

Publication number Publication date
CN114936987B (zh) 2022-11-08

Similar Documents

Publication Publication Date Title
CN108932698B (zh) 图像畸变的校正方法、装置、电子设备和存储介质
CN110060200B (zh) 图像透视变换方法、装置及设备
CN110276734B (zh) 图像畸变校正方法和装置
CN108961383B (zh) 三维重建方法及装置
US10628916B2 (en) Image generating apparatus, image generating method, and program
KR101643607B1 (ko) 영상 데이터 생성 방법 및 장치
JP5980294B2 (ja) データ処理装置、撮像装置、およびデータ処理方法
KR101944208B1 (ko) 색 보정을 위한 장치 및 방법
CN111047615B (zh) 基于图像的直线检测方法、装置以及电子设备
US10306210B2 (en) Image processing apparatus and image capturing apparatus
CN110378944B (zh) 深度图处理方法、装置和电子设备
CN110400342B (zh) 深度传感器的参数调整方法、装置以及电子设备
CN110473294B (zh) 一种基于三维模型的纹理映射方法、装置及设备
CN114936987B (zh) 一种镜头畸变校正方法、装置、设备及存储介质
US20220086382A1 (en) Method controlling image sensor parameters
GB2547842A (en) Image processing device and method, image pickup device, program, and recording medium
US20220270204A1 (en) Image registration method, terminal, and computer storage medium
KR20140072470A (ko) 어안 렌즈용 왜곡 영상 처리 방법
CN111263067B (zh) 图像处理方法、装置、终端设备和存储介质
DK3189493T3 (en) PERSPECTIVE CORRECTION OF DIGITAL PHOTOS USING DEPTH MAP
CN112733624B (zh) 室内密集场景的人流密度检测方法、系统存储介质及终端
US8320698B2 (en) System and method for denoising using signal dependent adaptive weights
CN116385370A (zh) 鱼眼图像处理方法、装置、电子设备和存储介质
CN114862804A (zh) 检测方法及装置、电子设备及存储介质
CN110390689B (zh) 深度图处理方法、装置和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant