CN113269697B - 一种曲面屏图像的生成方法及装置 - Google Patents
一种曲面屏图像的生成方法及装置 Download PDFInfo
- Publication number
- CN113269697B CN113269697B CN202110811552.0A CN202110811552A CN113269697B CN 113269697 B CN113269697 B CN 113269697B CN 202110811552 A CN202110811552 A CN 202110811552A CN 113269697 B CN113269697 B CN 113269697B
- Authority
- CN
- China
- Prior art keywords
- image
- curved surface
- screen
- flattened
- splicing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 239000011159 matrix material Substances 0.000 claims description 68
- 238000012937 correction Methods 0.000 claims description 45
- 238000012545 processing Methods 0.000 claims description 34
- 238000005315 distribution function Methods 0.000 claims description 17
- 238000005070 sampling Methods 0.000 claims description 17
- 230000000877 morphologic effect Effects 0.000 claims description 9
- 230000008030 elimination Effects 0.000 claims description 6
- 238000003379 elimination reaction Methods 0.000 claims description 6
- 230000007547 defect Effects 0.000 abstract description 10
- 230000008569 process Effects 0.000 description 13
- 238000004364 calculation method Methods 0.000 description 9
- 238000001514 detection method Methods 0.000 description 9
- 230000008439 repair process Effects 0.000 description 5
- 230000006399 behavior Effects 0.000 description 4
- 238000010276 construction Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000011218 segmentation Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000001028 reflection method Methods 0.000 description 2
- 230000007306 turnover Effects 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- DTTPWCNKTMQMTE-TYNNPWLESA-N [(1R,2S,3S,4S,5R,6S,8R,12S,13S,16R,19S,20R,21S)-14-ethyl-2-hydroxy-4,6,19-trimethoxy-16-methyl-9,11-dioxa-14-azaheptacyclo[10.7.2.12,5.01,13.03,8.08,12.016,20]docosan-21-yl] acetate Chemical compound CCN1C[C@]2(C)CC[C@H](OC)[C@]34[C@@H]2[C@H](OC(C)=O)[C@@]2(OCO[C@@]22C[C@H](OC)[C@H]5C[C@]3(O)[C@@H]2[C@H]5OC)[C@@H]14 DTTPWCNKTMQMTE-TYNNPWLESA-N 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- DTTPWCNKTMQMTE-UHFFFAOYSA-N delphelatine Natural products O1COC2(C3C4OC)CC(OC)C4CC3(O)C34C(OC)CCC5(C)CN(CC)C4C21C(OC(C)=O)C53 DTTPWCNKTMQMTE-UHFFFAOYSA-N 0.000 description 1
- WNIGHBYIOLQQSJ-UHFFFAOYSA-N deltaline Natural products CCN1CC2(COC)CCC(O)C34C2C(OC(=O)C)C5(OCOC56CC(OC)C7CC3(O)C6C7O)C14 WNIGHBYIOLQQSJ-UHFFFAOYSA-N 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000004020 luminiscence type Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
- G06T11/206—Drawing of charts or graphs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/40—Filling a planar surface by adding surface attributes, e.g. colour or texture
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration using local operators
- G06T5/30—Erosion or dilatation, e.g. thinning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/136—Segmentation; Edge detection involving thresholding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20036—Morphological image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20112—Image segmentation details
- G06T2207/20132—Image cropping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30121—CRT, LCD or plasma display
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Quality & Reliability (AREA)
- Image Processing (AREA)
Abstract
本申请实施例公开了一种曲面屏图像的生成方法及装置，用于降低曲面屏缺陷检测或补偿难度。本申请实施例方法包括：获取平面拍摄图像和棱镜反射图像；根据平面拍摄图像和棱镜反射图像生成平面展平图像和反射展平图像；确定平面展平图像的上、下边缘拼接锚点组；确定上、下边缘展平曲面图像的第一、第二曲面拼接锚点组；根据第一、第二曲面拼接锚点组镜像翻转上、下边缘曲面展平图像；裁剪平面展平图像，以生成待拼接平面图像；裁剪上、下边缘曲面展平图像，以生成待对齐上、待对齐下曲面图像；对齐待对齐上、待对齐下曲面图像，以生成待拼接上、待拼接下曲面图像；将待拼接平面图像、待拼接上、待拼接下曲面图像进行加权缝合，生成曲面屏拼接图像。
Description
技术领域
本申请实施例涉及曲面屏领域，尤其涉及一种曲面屏图像的生成方法及装置。
背景技术
随着信息显示技术的不断发展，显示屏（Organic ElectroluminescenceDisplay，OLED）凭借其自发光、可弯曲、视角广泛、响应速度快、制程简单等优势，正逐步取代传统的LCD，快速深入的应用到现代社会的各个领域。
但随着市场对显示屏的显示品质的要求越来越高，对外观设计要求也越来越多样化，手机屏幕、平板电脑屏幕、笔记本电脑屏幕和台式电脑屏幕等电子产品显示屏的出货量和外观设计要求也同样越来越高，例如：刘海屏、水滴屏、大曲率OLED显示屏（曲面屏）等。在曲面屏的AOI检测及De-Mura系统中，由于屏体的发光像素已经延展到了曲面部分，在拍摄的图像中，曲面部分的图像会叠加透镜畸变、透视形变、旋转、仿射等因素引起的畸变。在进行像素点缺陷检查时，会存在像素定位难度大，精度低的问题；同时，由于形变的原因，其对应区域的像素光学亮度的修正也存在对齐不准的问题，也因此产生了很多衍生问题。当曲面屏的曲率较小时，可以通过展平算法处理曲面屏图像，但是对于曲率较大的曲面屏，例如曲率大于70°的曲面屏，展平算法处理的效果就会收到影响。当前，针对曲率较大的曲面屏通常使用棱镜反射方式让取像相机对曲面屏前面部分进行拍摄，但是使用棱镜反射方式拍摄时，曲面屏曲面部分的拍摄图像与曲面屏平面部分的拍摄图像是分离的，并且由于曲面部分的拍摄图像通过棱镜反射，与所述平面部分的拍摄图像相反，这对曲面屏的检测工作或修复工作的过程中像素位置确定和对齐带来了较大的困难，增加了曲面屏缺陷检测或补偿难度。
发明内容
本申请实施例第一方面提供了一种曲面屏图像的生成方法，其特征在于，包括：
获取平面拍摄图像和棱镜反射图像，所述平面拍摄图像和所述棱镜反射图像分别为取样相机通过正面拍摄方式和棱镜反射拍摄方式拍摄输入展平算法的目标曲面屏获取到的曲面屏拍摄图像，所述棱镜反射图像包括上边缘曲面图像和下边缘曲面图像，所述展平算法标定图像、平面拍摄图像和所述棱镜反射图像上都具有像素点阵，所述像素点阵中包含至少9（3*3）个点阵点；
对所述平面拍摄图像和所述棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像，所述展平处理用于展平所述平面拍摄图像和所述棱镜反射图像上的像素点阵，所述反射展平图像包括上边缘曲面展平图像和下边缘曲面展平图像；
确定所述平面展平图像的上边缘拼接锚点组和下边缘拼接锚点组，拼接锚点组为平面拍摄图像的所述像素点阵的点阵点的集合；
确定所述上边缘曲面展平图像上的第一曲面拼接锚点组和所述下边缘展平曲面图像上的第二曲面拼接锚点组，所述上边缘拼接锚点组和所述第一曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点，所述下边缘拼接锚点组和所述第二曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点；
根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组分别对所述上边缘曲面展平图像和所述下边缘曲面展平图像进行镜像翻转；
根据所述上边缘拼接锚点组和所述下边缘拼接锚点组对所述平面展平图像进行裁剪，以生成待拼接平面图像；
根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组对翻转后的所述上边缘曲面展平图像和所述下边缘曲面展平图像进行裁剪，以生成待对齐上曲面图像和待对齐下曲面图像；
根据所述待拼接平面图像为所述待对齐上曲面图像和所述待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像；
将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。
可选的，在所述将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像之后，所述生成方法还包括：
对所述曲面屏拼接图像进行消除灰度宏观差异操作，以生成目标曲面屏拼接图像。
可选的，所述对所述曲面屏拼接图像进行消除灰度宏观差异操作，以生成目标曲面屏拼接图像，包括：
对所述曲面屏拼接图像进行截取，以生成曲面屏截取图像；
对所述曲面屏截取图像进行灰度形态学膨胀处理，得到曲面屏中间图像；
获取所述曲面屏中间图像在纵向的灰度分布函数；
对所述纵向的灰度分布函数进行多项式拟合处理，以生成拟合多项式；
通过拟合多项式计算所述曲面屏拼接图像的灰度校正系数；
根据所述灰度校正系数对所述曲面屏拼接图像进行灰度校正，以生成目标曲面屏拼接图像。
可选的，所述根据所述待拼接平面图像为所述待对齐上曲面图像和所述待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像，包括：
确定所述上边缘拼接锚点组的上边缘锚点坐标组和所述下边缘拼接锚点组的下边缘锚点坐标组；
确定所述第一曲面拼接锚点组的第一曲面锚点坐标组和所述第二曲面拼接锚点组的第二曲面锚点坐标组；
根据所述上边缘锚点坐标组和所述第一曲面锚点坐标组计算上边缘对齐系数；
根据所述下边缘锚点坐标组和所述第二曲面锚点坐标组计算下边缘对齐系数；
生成上曲面空白图像和下曲面空白图像；
根据所述上边缘对齐系数对所述上曲面空白图像进行像素数据填充，以生成待拼接上曲面图像；
根据所述下边缘对齐系数对所述下曲面空白图像进行像素数据填充，以生成待拼接下曲面图像。
可选的，所述对所述平面拍摄图像和所述棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像，包括：
确定所述平面拍摄图像的中心点阵点坐标；
根据所述中心点阵点坐标在所述平面拍摄图像为每个点阵点确定对应的包络ROI区域；
根据所述包络ROI区域生成实际点阵点坐标阵列；
根据所述中心点阵点坐标生成对比点阵点坐标阵列，所述实际点阵点坐标阵列上每个点阵点在所述对比点阵点坐标阵列上都存在对应的点阵点；
根据所述实际点阵点坐标阵列和所述对比点阵点坐标阵列计算每个点阵点的畸变校正系数；
根据所述中心点阵点坐标生成展平空白图像；
根据所述畸变校正系数在所述展平空白图像上计算每个像素位置所对应的平面拍摄图像坐标位置；
将所述平面拍摄图像的灰度信息填充到所述展平空白图像，以生成平面展平图像；
将所述棱镜反射图像进行上述同所述平面拍摄图像相同的展平操作，以生成反射展平图像。
可选的，在所述获取平面拍摄图像和棱镜反射图像之前，所述生成方法还包括：
构造展平算法标定图像，展平算法标定图像上设置有像素点阵，像素点阵中包含至少9（3*3）个点阵点；
将所述展平算法标定图像输入目标曲面屏。
本申请实施例第二方面提供了一种曲面屏图像的生成装置，其特征在于，包括：
获取单元，用于获取平面拍摄图像和棱镜反射图像，所述平面拍摄图像和所述棱镜反射图像分别为取样相机通过正面拍摄方式和棱镜反射拍摄方式拍摄输入展平算法的目标曲面屏获取到的曲面屏拍摄图像，所述棱镜反射图像包括上边缘曲面图像和下边缘曲面图像，所述展平算法标定图像、平面拍摄图像和所述棱镜反射图像上都具有像素点阵，所述像素点阵中包含至少9（3*3）个点阵点；
展平单元，用于对所述平面拍摄图像和所述棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像，所述展平处理用于展平所述平面拍摄图像和所述棱镜反射图像上的像素点阵，所述反射展平图像包括上边缘曲面展平图像和下边缘曲面展平图像；
第一确定单元，用于确定所述平面展平图像的上边缘拼接锚点组和下边缘拼接锚点组，拼接锚点组为平面拍摄图像的所述像素点阵的点阵点的集合；
第二确定单元，用于确定所述上边缘曲面展平图像上的第一曲面拼接锚点组和所述下边缘展平曲面图像上的第二曲面拼接锚点组，所述上边缘拼接锚点组和所述第一曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点，所述下边缘拼接锚点组和所述第二曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点；
翻转单元，用于根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组分别对所述上边缘曲面展平图像和所述下边缘曲面展平图像进行镜像翻转；
第一裁剪单元，用于根据所述上边缘拼接锚点组和所述下边缘拼接锚点组对所述平面展平图像进行裁剪，以生成待拼接平面图像；
第二裁剪单元，用于根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组对翻转后的所述上边缘曲面展平图像和所述下边缘曲面展平图像进行裁剪，以生成待对齐上曲面图像和待对齐下曲面图像；
对齐单元，用于根据所述待拼接平面图像为所述待对齐上曲面图像和所述待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像；
拼接单元，用于将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。
可选的，所述生成装置还包括：
灰度调整单元，用于对所述曲面屏拼接图像进行消除灰度宏观差异操作，以生成目标曲面屏拼接图像。
可选的，所述灰度调整单元，具体为：
对所述曲面屏拼接图像进行截取，以生成曲面屏截取图像；
对所述曲面屏截取图像进行灰度形态学膨胀处理，得到曲面屏中间图像；
获取所述曲面屏中间图像在纵向的灰度分布函数；
对所述纵向的灰度分布函数进行多项式拟合处理，以生成拟合多项式；
通过拟合多项式计算所述曲面屏拼接图像的灰度校正系数；
根据所述灰度校正系数对所述曲面屏拼接图像进行灰度校正，以生成目标曲面屏拼接图像。
可选的，所述对齐单元，具体为：
确定所述上边缘拼接锚点组的上边缘锚点坐标组和所述下边缘拼接锚点组的下边缘锚点坐标组；
确定所述第一曲面拼接锚点组的第一曲面锚点坐标组和所述第二曲面拼接锚点组的第二曲面锚点坐标组；
根据所述上边缘锚点坐标组和所述第一曲面锚点坐标组计算上边缘对齐系数；
根据所述下边缘锚点坐标组和所述第二曲面锚点坐标组计算下边缘对齐系数；
生成上曲面空白图像和下曲面空白图像；
根据所述上边缘对齐系数对所述上曲面空白图像进行像素数据填充，以生成待拼接上曲面图像；
根据所述下边缘对齐系数对所述下曲面空白图像进行像素数据填充，以生成待拼接下曲面图像。
可选的，所述展平单元，具体为：
确定所述平面拍摄图像的中心点阵点坐标；
根据所述中心点阵点坐标在所述平面拍摄图像为每个点阵点确定对应的包络ROI区域；
根据所述包络ROI区域生成实际点阵点坐标阵列；
根据所述中心点阵点坐标生成对比点阵点坐标阵列，所述实际点阵点坐标阵列上每个点阵点在所述对比点阵点坐标阵列上都存在对应的点阵点；
根据所述实际点阵点坐标阵列和所述对比点阵点坐标阵列计算每个点阵点的畸变校正系数；
根据所述中心点阵点坐标生成展平空白图像；
根据所述畸变校正系数在所述展平空白图像上计算每个像素位置所对应的平面拍摄图像坐标位置；
将所述平面拍摄图像的灰度信息填充到所述展平空白图像，以生成平面展平图像；
将所述棱镜反射图像进行上述同所述平面拍摄图像相同的展平操作，以生成反射展平图像。
可选的，所述生成装置还包括：
构造单元，用于构造展平算法标定图像，展平算法标定图像上设置有像素点阵，像素点阵中包含至少9（3*3）个点阵点；
输入单元，用于将所述展平算法标定图像输入目标曲面屏。
本申请实施例的第三方面提供了一种曲面屏图像的生成装置，其特征在于，包括：
处理器、存储器、输入输出单元、总线；
处理器与存储器、输入输出单元以及总线相连；
处理器具体执行如下操作：
获取平面拍摄图像和棱镜反射图像，所述平面拍摄图像和所述棱镜反射图像分别为取样相机通过正面拍摄方式和棱镜反射拍摄方式拍摄输入展平算法的目标曲面屏获取到的曲面屏拍摄图像，所述棱镜反射图像包括上边缘曲面图像和下边缘曲面图像，所述展平算法标定图像、平面拍摄图像和所述棱镜反射图像上都具有像素点阵，所述像素点阵中包含至少9（3*3）个点阵点；
对所述平面拍摄图像和所述棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像，所述展平处理用于展平所述平面拍摄图像和所述棱镜反射图像上的像素点阵，所述反射展平图像包括上边缘曲面展平图像和下边缘曲面展平图像；
确定所述平面展平图像的上边缘拼接锚点组和下边缘拼接锚点组，拼接锚点组为平面拍摄图像的所述像素点阵的点阵点的集合；
确定所述上边缘曲面展平图像上的第一曲面拼接锚点组和所述下边缘展平曲面图像上的第二曲面拼接锚点组，所述上边缘拼接锚点组和所述第一曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点，所述下边缘拼接锚点组和所述第二曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点；
根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组分别对所述上边缘曲面展平图像和所述下边缘曲面展平图像进行镜像翻转；
根据所述上边缘拼接锚点组和所述下边缘拼接锚点组对所述平面展平图像进行裁剪，以生成待拼接平面图像；
根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组对翻转后的所述上边缘曲面展平图像和所述下边缘曲面展平图像进行裁剪，以生成待对齐上曲面图像和待对齐下曲面图像；
根据所述待拼接平面图像为所述待对齐上曲面图像和所述待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像；
将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。
可选的，处理器还用于执行第一方面中的任意可选方案的操作。
一种计算机可读存储介质，计算机可读存储介质上保存有程序，程序在计算机上执行时执行如前述第一方面以及第一方面的任意可选的方法。
从以上技术方案可以看出，本申请实施例具有以下优点：
本实施例中，首先获取取样相机通过正面拍摄方式拍摄目标曲面屏生成的平面拍摄图像，再获取取样相机通过棱镜反射拍摄方式拍摄目标曲面屏生成的棱镜反射图像。平面拍摄图像和棱镜反射图像上都具有像素点阵，棱镜反射图像上只有目标曲面屏曲面部分的图像，而平面拍摄图像包括目标曲面屏的曲面部分和平面部分二者的图像。对平面拍摄图像和棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像。在平面展平图像的两个曲面部分各选取一行清晰的点阵点作为上边缘拼接锚点组和下边缘拼接锚点组，再从上边缘曲面展平图像和下边缘曲面展平图像中选取对应行的点阵点分别作为第一曲面拼接锚点组和第二曲面拼接锚点组。由于取像相机通过棱镜反射方式拍摄目标曲面屏的曲面部分，所以需要将上边缘曲面展平图像和下边缘曲面展平图像分别根据第一曲面拼接锚点组和第二曲面拼接锚点组进行镜像翻转。然后根据上边缘拼接锚点组和下边缘拼接锚点组对平面展平图像进行裁剪，生成待拼接平面图像。根据第一曲面拼接锚点组和第二曲面拼接锚点组对上边缘曲面展平图像和下边缘曲面展平图像进行裁剪，生成待对齐上曲面图像和待对齐下曲面图像。根据待拼接平面图像为待对齐上曲面图像和待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像。将待拼接平面图像、待拼接上曲面图像和待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。曲面屏拼接图像将分离的目标曲面屏拍摄图像融合拼接了起来，降低了因为拍摄图像分离导致的检测工作或修复工作的过程中像素位置确定和对齐困难，减少了曲面屏缺陷检测或补偿难度。
附图说明
图1为本申请实施例中曲面屏图像的生成方法的一个实施例流程示意图；
图2为本申请实施例中曲面屏拍摄的一个场景示意图；
图3为本申请实施例中曲面屏拍摄的另一个场景示意图；
图4为本申请实施例中曲面屏拍摄的另一个场景示意图；
图5为本申请实施例中曲面屏图像拼接过程的一个示意图；
图6为本申请实施例中曲面屏图像拼接原理的一个示意图；
图7a、图7b和图7c为本申请实施例中曲面屏图像的生成方法的另一个实施例流程示意图；
图8为本申请实施例中曲面屏图像对齐过程的一个示意图；
图9为本申请实施例中曲面屏图像灰度调节的一个原理示意图；
图10为本申请实施例中曲面屏图像的生成装置的一个实施例流程示意图；
图11为本申请实施例中曲面屏图像的生成装置的另一个实施例流程示意图；
图12为本申请实施例中曲面屏图像的生成装置的另一个实施例流程示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的阐述，显然阐述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都应当属于本发明保护范围。
本申请实施例公开了一种曲面屏图像的生成方法及装置，用于减少曲面屏缺陷检测或补偿难度。
在本实施例方法中，曲面屏图像的生成方法可在系统实现，可以在服务器实现，也可以在终端实现，具体不做明确限定。为方便描述，本申请实施例使用终端为执行主体举例描述。
请参阅图1，本申请实施例提供了一种曲面屏图像的生成方法，包括：
101、获取平面拍摄图像和棱镜反射图像，所述平面拍摄图像和所述棱镜反射图像分别为取样相机通过正面拍摄方式和棱镜反射拍摄方式拍摄输入展平算法的目标曲面屏获取到的曲面屏拍摄图像，所述棱镜反射图像包括上边缘曲面图像和下边缘曲面图像，所述展平算法标定图像、平面拍摄图像和所述棱镜反射图像上都具有像素点阵，所述像素点阵中包含至少9（3*3）个点阵点；
终端获取平面拍摄图像和棱镜反射图像。平面拍摄图像和棱镜反射图像是使用取像相机通过正面拍摄方式和棱镜反射拍摄方式拍摄同一目标曲面屏得到的曲面屏拍摄图像。目标曲面屏需要在拍摄前输入展平算法，使得目标曲面屏上显示了具有像素点阵的标定Pattern画面，使得拍摄的图像上也具有像素点阵。
在对焦良好的情况下，对显示了标定Pattern画面的目标曲面屏进行标定Pattern的拍摄，以得到具有像素点阵的平面拍摄图像和棱镜反射图像。在对实际的目标曲面屏进行拍摄时，是将曲面屏从流水线上进行移动，移动到相机的拍摄区域中，对焦良好的情况下进行拍摄。
请参考图2至图4，正面拍摄方式为取像相机从目标曲面屏正面进行取像拍摄，当曲面屏的曲率较小时，可以通过取像相机拍摄目标曲面屏后，通过展平算法校正曲面屏图像，以此降低缺陷补偿难度。但是对于曲率较大的曲面屏，例如曲率大于70°的曲面屏，取像相机拍摄的曲面屏图像在曲面部分的点阵点会过度密集，使得难以确定点阵点坐标，进而降低了展平算法的校正。所以，当需要缺陷补偿的目标曲面屏的曲率过大时，通常会使用棱镜反射方式进行拍摄。如图3中所示，本实施例中，同时使用正面拍摄方式和棱镜反射拍摄方式拍摄输入展平算法标定图像的目标曲面屏，取像相机通过平面反射①、曲面反射②和棱镜反射③获取平面拍摄图像和棱镜反射图像。但是从图中可以看出，棱镜反射方式得到的棱镜反射图像与平面拍摄图像是分离的，并且由于曲面部分的拍摄图像通过棱镜反射，与所述平面部分的拍摄图像相反，这对曲面屏的检测工作或修复工作的过程中像素位置确定和对齐带来了较大的困难。所以本实施例中，需要对平面拍摄图像和棱镜反射图像进行裁剪拼接融合等操作。
102、对所述平面拍摄图像和所述棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像，所述展平处理用于展平所述平面拍摄图像和所述棱镜反射图像上的像素点阵，所述反射展平图像包括上边缘曲面展平图像和下边缘曲面展平图像；
终端对平面拍摄图像和棱镜反射图像进行展平处理，展平算法将平面拍摄图像和棱镜反射图像上的像素点阵进行展平，对点阵点进行校正，最终生成平面展平图像和反射展平图像。
103、确定所述平面展平图像的上边缘拼接锚点组和下边缘拼接锚点组，拼接锚点组为平面拍摄图像的所述像素点阵的点阵点的集合；
终端确定平面展平图像的上边缘拼接锚点组和下边缘拼接锚点组，拼接锚点组为平面拍摄图像的所述像素点阵的点阵点的集合。平面拍摄图像具有目标曲面屏的平面部分和曲面部分，而棱镜反射图像具有目标显示屏的曲面部分和少部分平面部分，要进行裁剪拼接融合，就需要在平面展平图像和反射展平图像上选取一个标定区域（拼接锚点组），即需要取平面展平图像和反射展平图像的共有点阵点集合作为裁剪拼接融合线。本实施例中，选取平面展平图像上边缘曲面部分清晰可见的一行点阵点作为上边缘拼接锚点组，选取平面展平图像下边缘曲面部分清晰可见的一行点阵点作为下边缘拼接锚点组。
104、确定所述上边缘曲面展平图像上的第一曲面拼接锚点组和所述下边缘展平曲面图像上的第二曲面拼接锚点组，所述上边缘拼接锚点组和所述第一曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点，所述下边缘拼接锚点组和所述第二曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点；
终端确定上边缘曲面展平图像上的第一曲面拼接锚点组和下边缘展平曲面图像上的第二曲面拼接锚点组。选取上边缘曲面展平图像上与上边缘拼接锚点组对应的点阵点作为第一曲面拼接锚点组，下边缘曲面展平图像的第二曲面拼接锚点组的选取方法相同。
105、根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组分别对所述上边缘曲面展平图像和所述下边缘曲面展平图像进行镜像翻转；
终端根据第一曲面拼接锚点组和第二曲面拼接锚点组分别对上边缘曲面展平图像和下边缘曲面展平图像进行镜像翻转。本实施例中，由于棱镜反射图像是通过棱镜反射取像的，所以会与平面拍摄图像的方向相反，导致上边缘曲面展平图像和下边缘曲面展平图像也存在方向相反的情况，所以需要将上边缘曲面展平图像和下边缘曲面展平图像进行翻转。
由于通过展平算法处理后的平面展平图像和反射展平图像上的拼接锚点组都是处于同一行且等距的，因此可以通过对上边缘曲面展平图像和下边缘曲面展平图像以拼接锚点所在行作为镜面进行镜像翻转，这样可以消除棱镜反射拍照带来的拓扑变化。
106、根据所述上边缘拼接锚点组和所述下边缘拼接锚点组对所述平面展平图像进行裁剪，以生成待拼接平面图像；
终端根据上边缘拼接锚点组和下边缘拼接锚点组对平面展平图像进行裁剪，以生成待拼接平面图像。具体的，需要预先设置一个拼接缝合余量，本实施例中的拼接缝合余量为取像相机像素和曲面屏像素的像素比：
拼接缝合余量的单位为像素，本实施例中2Δ=5。
在平面拍摄图像中，假设上边缘拼接锚点组所在的行为R2，下边缘拼接锚点组所在的行为R3，则取R2-Δ行R3+Δ行的部分图像作为待拼接平面图像。
107、根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组对翻转后的所述上边缘曲面展平图像和所述下边缘曲面展平图像进行裁剪，以生成待对齐上曲面图像和待对齐下曲面图像；
终端根据第一曲面拼接锚点组和第二曲面拼接锚点组对翻转后的上边缘曲面展平图像和下边缘曲面展平图像进行裁剪，以生成待对齐上曲面图像和待对齐下曲面图像。
在上边缘曲面展平图像中，假设第一曲面拼接锚点组所在的行为R1，则取1至R1+Δ行的图像作为待对齐上曲面图像。
在下边缘曲面展平图像中，假设第二曲面拼接锚点组所在的行为R4，则取R4-Δ行至最大行的图像作为待对齐下曲面图像。
108、根据所述待拼接平面图像为所述待对齐上曲面图像和所述待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像；
终端根据待拼接平面图像为待对齐上曲面图像和待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像。
由于展平算法误差的原因，直接使用裁切后的图像进行拼接时，会发生局部子像素的列方向错位的现象（通常像素错位不会超过2个图像像素）。为了纠正此现象的发生，在对待拼接图像进行缝合以前需要对待对齐上曲面图像和待对齐下曲面图像列方向上的曲面屏列向子像素分布进行对齐。
分别以待拼接平面图像的上下边缘作为对齐基准，对图像列方向上的曲面屏列向子像素（点阵点）分布进行对齐。
109、将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。
终端将待拼接平面图像、待拼接上曲面图像和待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。具体的，以拼接锚点所在行（Y方向）为对齐位置，将待拼接平面图像、待拼接上曲面图像和待拼接下曲面图像在2Δ内进行加权缝合，对齐和缝合过程根据曲面屏棱镜反射拍摄的曲边数量不同而不同，本实施例中包括待拼接上曲面图像和待拼接下曲面图像分别和待拼接平面图像的对齐和缝合。
请参考图5和图6，Im为待拼接平面图像，Iem为待拼接上曲面图像或待拼接下曲面图像。确定Y方向的对齐位置为ys，设计两个加权函数δm(y)和δem(y)，满足条件：δm(y)+δem(y)=1，分别在Y方向上针对Im和Iem进行加权叠加，对于缝合处的像素亮度，其计算公式如下：
其中，Iout(y)为纵坐标y的灰度值，Im(y)为待拼接平面图像在纵坐标y处的灰度值，Iem(y)为待拼接上曲面图像或待拼接下曲面图像在纵坐标y处的灰度值，y∈[ys-Δ，ys+Δ]。
本实施例中，首先获取取样相机通过正面拍摄方式拍摄目标曲面屏生成的平面拍摄图像，再获取取样相机通过棱镜反射拍摄方式拍摄目标曲面屏生成的棱镜反射图像。平面拍摄图像和棱镜反射图像上都具有像素点阵，棱镜反射图像上只有目标曲面屏曲面部分的图像，而平面拍摄图像包括目标曲面屏的曲面部分和平面部分二者的图像。对平面拍摄图像和棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像。在平面展平图像的两个曲面部分各选取一行清晰的点阵点作为上边缘拼接锚点组和下边缘拼接锚点组，再从上边缘曲面展平图像和下边缘曲面展平图像中选取对应行的点阵点分别作为第一曲面拼接锚点组和第二曲面拼接锚点组。由于取像相机通过棱镜反射方式拍摄目标曲面屏的曲面部分，所以需要将上边缘曲面展平图像和下边缘曲面展平图像分别根据第一曲面拼接锚点组和第二曲面拼接锚点组进行镜像翻转。然后根据上边缘拼接锚点组和下边缘拼接锚点组对平面展平图像进行裁剪，生成待拼接平面图像。根据第一曲面拼接锚点组和第二曲面拼接锚点组对上边缘曲面展平图像和下边缘曲面展平图像进行裁剪，生成待对齐上曲面图像和待对齐下曲面图像。根据待拼接平面图像为待对齐上曲面图像和待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像。将待拼接平面图像、待拼接上曲面图像和待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。曲面屏拼接图像将分离的目标曲面屏拍摄图像融合拼接了起来，降低了因为拍摄图像分离导致的检测工作或修复工作的过程中像素位置确定和对齐困难，减少了曲面屏缺陷检测或补偿难度。
请参阅图7a、图7b和图7c，本申请实施例提供了另一种曲面屏图像的生成方法，包括：
701、构造展平算法标定图像，展平算法标定图像上设置有像素点阵，像素点阵中包含至少9（3*3）个点阵点；
终端构造展平算法标定图像，展平算法标定图像上设置有像素点阵，像素点阵中包含至少9（3*3）个点阵点。
终端构造展平算法标定图像，展平算法标定图像上具有至少一个点阵点，点阵点组成了像素点阵，以使得在展平算法标定图像输入目标曲面屏时，使得目标曲面屏显示出预设的像素点阵。展平算法标定图像，是指根据曲面屏分辨率信息构造出来的BMP图像。标定Pattern画面：是指将展平算法标定图像显示在曲面屏上的显示屏画面，而拍摄曲面屏得到的图像，就是拍摄标定Pattern画面。下面对构造展平算法标定图像的方式进行举例说明：
若一块曲面屏的逻辑分辨率为Height（长边）×Width（短边），其中曲面部分的像素宽度为W，不考虑挖孔、刘海等异形因素对实际显示画面的影响，在要显示的标定Pattern画面上构造M行×N列的像素点阵（M和N通常都是奇数），点阵采用L×L的正方形像素方阵（其中L通常为奇数，本实施例中，L为3~15之间的奇数），图像的边缘部分必须均匀分布一行或一列点阵，边缘部分的点阵宽度或高度是其他区域点阵的一半。
702、将所述展平算法标定图像输入目标曲面屏；
终端将展平算法标定图像输入目标曲面屏，并通过取像相机获取具有像素点阵的平面拍摄图像和棱镜反射图像。在展平算法标定图像构造完成之后，会通过显示驱动仪器，在目标曲面屏上进行显示，显示出的画面为标定Pattern画面。通常使用PG显示驱动仪器来完成展平算法标定图像的输入。
703、获取平面拍摄图像和棱镜反射图像，所述平面拍摄图像和所述棱镜反射图像分别为取样相机通过正面拍摄方式和棱镜反射拍摄方式拍摄输入展平算法的目标曲面屏获取到的曲面屏拍摄图像，所述棱镜反射图像包括上边缘曲面图像和下边缘曲面图像，所述展平算法标定图像、平面拍摄图像和所述棱镜反射图像上都具有像素点阵，所述像素点阵中包含至少9（3*3）个点阵点；
本实施例中的步骤703与前述实施例中步骤101类似，此处不再赘述。
704、确定所述平面拍摄图像的中心点阵点坐标；
终端确定平面拍摄图像的中心点阵点坐标，中心点阵点坐标为平面拍摄图像中显示了标定Pattern画面的区域中的中心点阵点的位置。定位中心点阵点坐标的方法主要是通过确定中心点阵点探测区域，终端再根据中心点阵点探测区域确定中心点阵点坐标。
705、根据所述中心点阵点坐标在所述平面拍摄图像为每个点阵点确定对应的包络ROI区域；
终端以中心点阵点坐标为参考点，在平面拍摄图像上，为每个点阵点确定对应的包络ROI区域。
以中心点阵点坐标为基准是为了以中心点阵点做对齐操作。因为曲面屏中心位置处的畸变几乎为0，畸变越小的地方矫正量也越小，所以以中心点阵点坐标为基准对齐，进而生成包络ROI区域，每一个包络ROI区域中都存在一个点阵点。
在平面拍摄图像上描绘包络ROI区域的目的是将平面拍摄图像的显示画面的区域分割成固定的若干个矩形区域，每个矩形区域中包含一个点阵点。具体的方法是根据标定Pattern画面中像素点阵的分布周期、拍摄的平面拍摄图像和标定Pattern画面上的像素比例均匀的将显示画面的区域分割成M*N个矩形区域，这M*N个矩形区域即为包络ROI区域。
706、根据所述包络ROI区域生成实际点阵点坐标阵列；
终端根据包络ROI区域生成实际点阵点坐标阵列。
具体的，终端首先通过大津算法对包络ROI区域进行图像处理，以生成分割阈值g，再取子图像中灰度值大于分割阈值g的像素点进行计算，生成实际点阵点坐标阵列。
大津算法利用阈值将原图像分成前景与背景两个图像。前景：包含的参数有当前阈值下的前景的点数，质量矩，平均灰度。背景：包含的参数有当前阈值下的背景的点数，质量矩，平均灰度。当取最佳阈值时，背景应该与前景差别最大，关键在于如何选择衡量差别的标准，而在大津算法中这个衡量差别的标准就是最大类间方差。
假设包络ROI区域对应的的子图像为Is，区域宽度和高度都为W，如下运算：
其中，Is（i,j）为平面拍摄图像在点阵点坐标为（i,j）位置上的灰度信息，而Js（i,j）为计算后的灰度信息，当这个点阵点的灰度信息大于预设的分割阈值g时，Js（i,j）等于Is（i,j），反之Js（i,j）取0。由于在子图像中计算的图像坐标，所以上述公式中的xtopleft、ytopleft是子图像中左上角的图像位置坐标，公式中i与j分别为点阵点的横位置标识与纵位置标识。
707、根据所述中心点阵点坐标生成对比点阵点坐标阵列，所述实际点阵点坐标阵列上每个点阵点在所述对比点阵点坐标阵列上都存在对应的点阵点；
终端根据中心点阵点坐标生成对比点阵点坐标阵列，目的是用于和实际点阵点坐标阵列做对比，得到对比结果。根据中心点阵点坐标生成对比点阵点坐标阵列需要运用公式进行运算：
其中，i与j分别为点阵点的横位置标识与纵位置标识，假设中心点阵点坐标为（x00,y00），表示中心点阵点为基准点，点阵点（x01,y01）与中心点阵点处于同一横坐标位置，纵坐标位置相差1个单位。σ为曲面屏图像中像素和标定Pattern画面中的像素比，也称为Mapping比。一般在AOI检测系统及Demura系统中，σ值都为0.5的倍数，例如：3.5或4.0等。Width为曲面显示屏的显示宽度像素数，Height为显示屏显示高度像素，(xc,yc)为中心点阵点在曲面屏图像上的坐标。
708、根据所述实际点阵点坐标阵列和所述对比点阵点坐标阵列计算每个点阵点的畸变校正系数；
终端根据实际点阵点坐标阵列和对比点阵点坐标阵列计算每个点阵点的畸变校正系数，畸变校正系数用于将平面拍摄图像中的显示区域进行展平操作。具体的畸变校正系数的计算方式，首先需要将实际点阵点坐标阵列和对比点阵点坐标阵列的点阵点组成点对，即两个坐标阵列中对应的两个点阵点组成点阵，四个点对为一组。实际点阵点坐标阵列选取4个相邻的点阵点，对比点阵点坐标阵列选取对应的4个点阵点，计算畸变校正系数。假设4个理想点阵点为（x,y）、（x，,y）、（x,y，）以及（x，,y，），4个对应的实际点阵点为（x0,y0）、（x1,y1）、（x2,y2）以及（x3,y3），公式如下：
上述公式为理想坐标(x,y)到展平坐标位置(u,v)之间的转换关系，使用上式来拟合计算公式来估计畸变程度，针对每4个点对，其中，公式中展平坐标位置(u,v)对应的实际点阵点（x0,y0）、（x1,y1）、（x2,y2）以及（x3,y3），公式中i与j分别为点阵点的横位置标识与纵位置标识。公式中，(x,y)对应的理想点阵点（x,y）、（x，,y）、（x,y，）以及（x，,y，），xi表示x的i次方，yj同理。由于上述公式中，i与j的取值都只有0和1，所以在方程组中，会含有系数a00、a01、a10以及a11，为了简化公式，将a00写成a3，将a01写成a1，将a10写成a0，将a11写成a2，则有下列方程组：
计算上述的方程组，得到系数a0,a1,a2,a3，b0,b1,b2,b3，这些系数即为这四个实际点阵点的畸变校正系数，本实施例中，将实际点阵点阵列中每四个相邻点阵点作为一个点阵点组，生成多组点阵点，在理想点阵点阵列划分出对应的点阵点组，对应的点阵点组进行上述计算，得到8个畸变校正系数。例如：实际点阵点阵列中存在规则排列的64（8*8）个点阵点，理想点阵点阵列中存在对应实际点阵点阵列的规则排列的64（8*8）个点阵点。四个相邻的点阵点为一组，实际点阵点阵列组成了16个点阵点组，理想点阵点阵列也对应的分为16个点阵点组。实际点阵点阵列与理想点阵点阵列中，对应的点阵点组进行上述计算，每两个对应的点阵点组计算得到了8个畸变校正系数，用于进行后续的展平操作。
709、根据所述中心点阵点坐标生成展平空白图像；
终端根据中心点阵点坐标生成展平空白图像，即创建一张和原始拍图一样大小的空图像，以中心点阵点坐标的位置为参考点，创建理想的曲面屏展平后的图像区域，即展平空白图像。本实施例中，需要将平面拍摄图像像进行展平操作，使得平面拍摄图像中的曲面屏弧面展平。平面拍摄图像展平前，存在多个点阵点，展平后的图像上同样存在对应的点阵点。本实施例中，首先生成对比点阵点阵列，对比点阵点阵列与实际点阵点坐标阵列具有可对应的点阵点，展平空白图像是以对比点阵点为基础进行展平操作得到的图像，与实际点阵点坐标阵列也具有可对应的点阵点。
710、根据所述畸变校正系数在所述展平空白图像上计算每个像素位置所对应的平面拍摄图像坐标位置；
终端根据畸变校正系数在展平空白图像上计算每个像素位置所对应的平面拍摄图像坐标位置，具体通过点阵点失真坐标映射得到展平坐标位置，公式如下：
此处的(x,y)为展平空白图像上每一个像素点的理想坐标，公式中i与j分别为点阵点的横位置标识与纵位置标识，(u,v)为经过计算后的像素点的展平坐标位置。例如：实际点阵点坐标阵列存在4个相邻的点阵点，对比点阵点坐标阵列也存在对应的4个点阵点。假设4个理想点阵点为（x,y）、（x，,y）、（x,y，）以及（x，,y，），4个对应的实际点阵点为（x0,y0）、（x1,y1）、（x2,y2）以及（x3,y3），而理想展平空白图像根据中心点阵点坐标生成，同样存在理想展平点阵点坐标（X,Y）、（X，,Y）、（X,Y，）和（X，,Y，），这4个理想展平点阵点坐标与对比点阵点坐标阵列以及实际点阵点坐标阵列都存在对应关系。通过（x,y）、（x，,y）、（x,y，）以及（x，,y，）和（x0,y0）、（x1,y1）、（x2,y2）以及（x3,y3）计算出8个畸变校正系数之后，将（X,Y）、（X，,Y）、（X,Y，）和（X，,Y，）作为上述公式中的(x,y)，计算出每一个点阵点对应的(u,v)。
711、将所述平面拍摄图像的灰度信息填充到所述展平空白图像，以生成平面展平图像；
终端将平面拍摄图像的灰度信息填充到展平空白图像上，以生成平面展平图像。当确定了展平空白图像上展平坐标位置之后，需要将平面拍摄图像中每一个像素点的灰度信息进行计算，并且将计算后的灰度信息填充到展平空白图像对应的坐标位置上，以最终生成平面展平图像，该平面展平图像的畸变和形变的现象减少了。使用的公式如下：
其中，I（q,p）为平面拍摄图像在点阵点坐标为（q,p）位置上的灰度信息，而L（q,p）为计算后的灰度信息，用于填充到展平空白图像对应的坐标位置上。其中，p=[u],q=[v],[u]和[v]的意思为取整，公式中i与j分别为点阵点的横位置标识与纵位置标识。
712、将所述棱镜反射图像进行上述同所述平面拍摄图像相同的展平操作，以生成反射展平图像；
终端将棱镜反射图像进行上述同平面拍摄图像相同的展平操作，以生成反射展平图像。
713、确定所述平面展平图像的上边缘拼接锚点组和下边缘拼接锚点组，拼接锚点组为平面拍摄图像的所述像素点阵的点阵点的集合；
714、确定所述上边缘曲面展平图像上的第一曲面拼接锚点组和所述下边缘展平曲面图像上的第二曲面拼接锚点组，所述上边缘拼接锚点组和所述第一曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点，所述下边缘拼接锚点组和所述第二曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点；
715、根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组分别对所述上边缘曲面展平图像和所述下边缘曲面展平图像进行镜像翻转；
716、根据所述上边缘拼接锚点组和所述下边缘拼接锚点组对所述平面展平图像进行裁剪，以生成待拼接平面图像；
717、根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组对翻转后的所述上边缘曲面展平图像和所述下边缘曲面展平图像进行裁剪，以生成待对齐上曲面图像和待对齐下曲面图像；
本实施例中的步骤713至717与前述实施例中步骤103至107类似，此处不再赘述。
718、确定所述上边缘拼接锚点组的上边缘锚点坐标组和所述下边缘拼接锚点组的下边缘锚点坐标组；
请参考图8，终端确定上边缘拼接锚点组的上边缘锚点坐标组和下边缘拼接锚点组的下边缘锚点坐标组。由于待对齐上曲面图像和待对齐下曲面图像的对齐生成方法相同，这里以待对齐上曲面图像为例：
记经过裁剪的平面部分的展平后图像（待拼接平面图像）的下边缘拼接锚点组点集为{A}，包含元素A1、A2、A3、A4等，其x方向的坐标分别为xA1、xA2、xA3、xA4等。记经过裁剪的曲面部分的展平后图像（待对齐上曲面图像）的第二曲面锚点坐标组点集为{B}，和集合{A}中的元素个数相同，且一一对应，其x方向的坐标分别为xB1、xB2、xB3、xB4等。对齐处理的结果是将曲面部分图像在x方向进行拉伸或挤压实现点集{A}和点集{B}的重合。
719、确定所述第一曲面拼接锚点组的第一曲面锚点坐标组和所述第二曲面拼接锚点组的第二曲面锚点坐标组；
终端确定第一曲面拼接锚点组的第一曲面锚点坐标组和第二曲面拼接锚点组的第二曲面锚点坐标组，具体操作通步骤718中所描述。
720、根据所述上边缘锚点坐标组和所述第一曲面锚点坐标组计算上边缘对齐系数；
终端根据上边缘锚点坐标组和第一曲面锚点坐标组计算上边缘对齐系数，对齐系数k0、k1..kn的计算公式如下：
其中，K为对齐系数，
为元素A1到元素A2的距离，
为元素B1到元素B2的距离，待对齐上曲面图像和待对齐下曲面图像的对齐生成方法相同。
721、根据所述下边缘锚点坐标组和所述第二曲面锚点坐标组计算下边缘对齐系数；
终端根据下边缘锚点坐标组和第二曲面锚点坐标组计算下边缘对齐系数，计算方式见步骤720。
722、生成上曲面空白图像和下曲面空白图像；
终端生成上曲面空白图像和下曲面空白图像，上曲面空白图像和下曲面空白图像用于将点阵点填充到上曲面空白图像和下曲面空白图像上，形成新的图像。
723、根据所述上边缘对齐系数对所述上曲面空白图像进行像素数据填充，以生成待拼接上曲面图像；
终端根据上边缘对齐系数对上曲面空白图像进行像素数据填充，以生成待拼接上曲面图像。填充公式如下：
其中，选定曲面空白图像的坐标(x,y)，当坐标(x,y)中，x大于1小于xA1时，将待对齐曲面图像上坐标为((x*xB1)/xA1,y)的灰度值（像素数据）确定为坐标为(x/k0,y)d的灰度值，最后填充到曲面空白图像Iem的(x,y)中，公式中的“：”表示任意的纵坐标y值，填充完成之后的图像即为结果对齐处理后的待拼接上曲面图像。
724、根据所述下边缘对齐系数对所述下曲面空白图像进行像素数据填充，以生成待拼接下曲面图像；
终端根据下边缘对齐系数对下曲面空白图像进行像素数据填充，以生成待拼接下曲面图像，其步骤通步骤723，此处不做赘述。
725、将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像；
本实施例中的步骤725与前述实施例中步骤109类似，此处不再赘述。
726、对所述曲面屏拼接图像进行截取，以生成曲面屏截取图像；
终端对曲面屏拼接图像进行截取，以生成曲面屏截取图像。
通过上述步骤的拼接缝合过程，得到的曲面屏拼接图像会因为棱镜反射的部分和平面拍摄的部分的光学系统损失不同而产生明显的图像灰度差异，因此，还需要进行消除灰度宏观差异，同时保留像素亮度的局部差异。
具体的，本实施例中，在加权缝合后的曲面屏拼接图像上，取列方向中间的一部分作为曲面屏截取图像，包含：棱镜部分（上边缘）、平面部分、棱镜部分（下边缘）。
727、对所述曲面屏截取图像进行灰度形态学膨胀处理，得到曲面屏中间图像；
终端对曲面屏截取图像进行灰度形态学膨胀处理，得到曲面屏中间图像。具体的，使用2Δ×4Δ（y×x）的矩形形态学结构元素，对曲面屏截取图像进行灰度形态学膨胀，得到曲面屏中间图像。
728、获取所述曲面屏中间图像在纵向的灰度分布函数；
终端获取曲面屏中间图像在纵向的灰度分布函数。
具体的，对曲面屏中间图像沿着列方向累加求平均，即每一行求平均，得到在y方向上的灰度分布函数g(y)，g(y)为理论灰度值的预测值的集合。在灰度分布函数里有3个段：棱镜部分（上边缘）、平面部分、棱镜部分（下边缘）。
729、对所述纵向的灰度分布函数进行多项式拟合处理，以生成拟合多项式；
终端对纵向的灰度分布函数g(y)进行多项式拟合处理，以生成拟合多项式。具体的，假设灰度分布函数为g（y），以g（y）中的平面部分进行2阶多项式拟合，生成拟合多项式：
其中，f(y)为灰度实际值，a、b和c为拟合过程中得到的固定实数，拟合多项式用于计算灰度校正系数。
730、通过拟合多项式计算所述曲面屏拼接图像的灰度校正系数；
终端通过拟合多项式计算曲面屏拼接图像的灰度校正系数。请参考图9，具体的，本实施例中，使用拟合多项式对棱镜部分的理论灰度值进行预测，并计算灰度实际值f(y)和灰度预测值g(y)的比值：
其中，
为为灰度校正系数，y1为上曲面与平面拼接线所处的纵坐标，y2表示下曲面与平面拼接线所处的纵坐标，Len(g(y))为下曲面最下方的纵坐标。
731、根据所述灰度校正系数对所述曲面屏拼接图像进行灰度校正，以生成目标曲面屏拼接图像。
终端根据灰度校正系数对所述曲面屏拼接图像进行灰度校正，以生成目标曲面屏拼接图像。
具体的，校正的公式如下：
I(y)为纵坐标y的点阵点灰度计算值，Iout(y)为拼接线所处的纵坐标y的灰度值。
本实施例中，首先获取取样相机通过正面拍摄方式拍摄目标曲面屏生成的平面拍摄图像，再获取取样相机通过棱镜反射拍摄方式拍摄目标曲面屏生成的棱镜反射图像。平面拍摄图像和棱镜反射图像上都具有像素点阵，棱镜反射图像上只有目标曲面屏曲面部分的图像，而平面拍摄图像包括目标曲面屏的曲面部分和平面部分二者的图像。对平面拍摄图像和棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像。在平面展平图像的两个曲面部分各选取一行清晰的点阵点作为上边缘拼接锚点组和下边缘拼接锚点组，再从上边缘曲面展平图像和下边缘曲面展平图像中选取对应行的点阵点分别作为第一曲面拼接锚点组和第二曲面拼接锚点组。由于取像相机通过棱镜反射方式拍摄目标曲面屏的曲面部分，所以需要将上边缘曲面展平图像和下边缘曲面展平图像分别根据第一曲面拼接锚点组和第二曲面拼接锚点组进行镜像翻转。然后根据上边缘拼接锚点组和下边缘拼接锚点组对平面展平图像进行裁剪，生成待拼接平面图像。根据第一曲面拼接锚点组和第二曲面拼接锚点组对上边缘曲面展平图像和下边缘曲面展平图像进行裁剪，生成待对齐上曲面图像和待对齐下曲面图像。根据待拼接平面图像为待对齐上曲面图像和待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像。将待拼接平面图像、待拼接上曲面图像和待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。曲面屏拼接图像将分离的目标曲面屏拍摄图像融合拼接了起来，降低了因为拍摄图像分离导致的检测工作或修复工作的过程中像素位置确定和对齐困难，减少了曲面屏缺陷检测或补偿难度。
其次，通过对曲面屏拼接图像进行消除灰度宏观差异操作，以生成目标曲面屏拼接图像，减少了曲面屏拼接图像的亮度差异，进一步降低了曲面屏缺陷检测或补偿难度。
请参阅图10，本申请实施例提供了一种曲面屏图像的生成装置，包括：
获取单元1001，用于获取平面拍摄图像和棱镜反射图像，所述平面拍摄图像和所述棱镜反射图像分别为取样相机通过正面拍摄方式和棱镜反射拍摄方式拍摄输入展平算法标定图像的目标曲面屏获取到的曲面屏拍摄图像，所述棱镜反射图像包括上边缘曲面图像和下边缘曲面图像，所述展平算法标定图像、平面拍摄图像和所述棱镜反射图像上都具有像素点阵，所述像素点阵中包含至少9（3*3）个点阵点；
展平单元1002，用于对所述平面拍摄图像和所述棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像，所述展平处理用于展平所述平面拍摄图像和所述棱镜反射图像上的像素点阵，所述反射展平图像包括上边缘曲面展平图像和下边缘曲面展平图像；
第一确定单元1003，用于确定所述平面展平图像的上边缘拼接锚点组和下边缘拼接锚点组，拼接锚点组为平面拍摄图像的所述像素点阵的点阵点的集合；
第二确定单元1004，用于确定所述上边缘曲面展平图像上的第一曲面拼接锚点组和所述下边缘展平曲面图像上的第二曲面拼接锚点组，所述上边缘拼接锚点组和所述第一曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点，所述下边缘拼接锚点组和所述第二曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点；
翻转单元1005，用于根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组分别对所述上边缘曲面展平图像和所述下边缘曲面展平图像进行镜像翻转；
第一裁剪单元1006，用于根据所述上边缘拼接锚点组和所述下边缘拼接锚点组对所述平面展平图像进行裁剪，以生成待拼接平面图像；
第二裁剪单元1007，用于根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组对翻转后的所述上边缘曲面展平图像和所述下边缘曲面展平图像进行裁剪，以生成待对齐上曲面图像和待对齐下曲面图像；
对齐单元1008，用于根据所述待拼接平面图像为所述待对齐上曲面图像和所述待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像；
拼接单元1009，用于将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。
请参阅图11，本申请实施例提供了另一种曲面屏图像的生成装置，包括：
构造单元1101，用于构造展平算法标定图像，展平算法标定图像上设置有像素点阵，像素点阵中包含至少9（3*3）个点阵点；
输入单元1102，用于将所述展平算法标定图像输入目标曲面屏；
获取单元1103，用于获取平面拍摄图像和棱镜反射图像，所述平面拍摄图像和所述棱镜反射图像分别为取样相机通过正面拍摄方式和棱镜反射拍摄方式拍摄输入展平算法标定图像的目标曲面屏获取到的曲面屏拍摄图像，所述棱镜反射图像包括上边缘曲面图像和下边缘曲面图像，所述展平算法标定图像、平面拍摄图像和所述棱镜反射图像上都具有像素点阵，所述像素点阵中包含至少9（3*3）个点阵点；
展平单元1104，用于对所述平面拍摄图像和所述棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像，所述展平处理用于展平所述平面拍摄图像和所述棱镜反射图像上的像素点阵，所述反射展平图像包括上边缘曲面展平图像和下边缘曲面展平图像；
可选的，所述展平单元1104，具体为：
确定所述平面拍摄图像的中心点阵点坐标；
根据所述中心点阵点坐标在所述平面拍摄图像为每个点阵点确定对应的包络ROI区域；
根据所述包络ROI区域生成实际点阵点坐标阵列；
根据所述中心点阵点坐标生成对比点阵点坐标阵列，所述实际点阵点坐标阵列上每个点阵点在所述对比点阵点坐标阵列上都存在对应的点阵点；
根据所述实际点阵点坐标阵列和所述对比点阵点坐标阵列计算每个点阵点的畸变校正系数；
根据所述中心点阵点坐标生成展平空白图像；
根据所述畸变校正系数在所述展平空白图像上计算每个像素位置所对应的平面拍摄图像坐标位置；
将所述平面拍摄图像的灰度信息填充到所述展平空白图像，以生成平面展平图像；
将所述棱镜反射图像进行上述同所述平面拍摄图像相同的展平操作，以生成反射展平图像。
第一确定单元1105，用于确定所述平面展平图像的上边缘拼接锚点组和下边缘拼接锚点组，拼接锚点组为平面拍摄图像的所述像素点阵的点阵点的集合；
第二确定单元1106，用于确定所述上边缘曲面展平图像上的第一曲面拼接锚点组和所述下边缘展平曲面图像上的第二曲面拼接锚点组，所述上边缘拼接锚点组和所述第一曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点，所述下边缘拼接锚点组和所述第二曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点；
翻转单元1107，用于根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组分别对所述上边缘曲面展平图像和所述下边缘曲面展平图像进行镜像翻转；
第一裁剪单元1108，用于根据所述上边缘拼接锚点组和所述下边缘拼接锚点组对所述平面展平图像进行裁剪，以生成待拼接平面图像；
第二裁剪单元1109，用于根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组对翻转后的所述上边缘曲面展平图像和所述下边缘曲面展平图像进行裁剪，以生成待对齐上曲面图像和待对齐下曲面图像；
对齐单元1110，用于根据所述待拼接平面图像为所述待对齐上曲面图像和所述待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像；
可选的，所述对齐单元1110，具体为：
确定所述上边缘拼接锚点组的上边缘锚点坐标组和所述下边缘拼接锚点组的下边缘锚点坐标组；
确定所述第一曲面拼接锚点组的第一曲面锚点坐标组和所述第二曲面拼接锚点组的第二曲面锚点坐标组；
根据所述上边缘锚点坐标组和所述第一曲面锚点坐标组计算上边缘对齐系数；
根据所述下边缘锚点坐标组和所述第二曲面锚点坐标组计算下边缘对齐系数；
生成上曲面空白图像和下曲面空白图像；
根据所述上边缘对齐系数对所述上曲面空白图像进行像素数据填充，以生成待拼接上曲面图像；
根据所述下边缘对齐系数对所述下曲面空白图像进行像素数据填充，以生成待拼接下曲面图像。
拼接单元1111，用于将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像；
灰度调整单元1112，用于对所述曲面屏拼接图像进行消除灰度宏观差异操作，以生成目标曲面屏拼接图像。
可选的，所述灰度调整单元，具体为：
对所述曲面屏拼接图像进行截取，以生成曲面屏截取图像；
对所述曲面屏截取图像进行灰度形态学膨胀处理，得到曲面屏中间图像；
获取所述曲面屏中间图像在纵向的灰度分布函数；
对所述纵向的灰度分布函数进行多项式拟合处理，以生成拟合多项式；
通过拟合多项式计算所述曲面屏拼接图像的灰度校正系数；
根据所述灰度校正系数对所述曲面屏拼接图像进行灰度校正，以生成目标曲面屏拼接图像。
请参阅图12，本申请实施例提供了另一种曲面屏图像的生成装置，包括：
处理器1201、输入输出单元1202、存储器1203、总线1204；
处理器1201与输入输出单元1202、存储器1203以及总线1204相连；
处理器1201具体执行如下操作：
获取平面拍摄图像和棱镜反射图像，所述平面拍摄图像和所述棱镜反射图像分别为取样相机通过正面拍摄方式和棱镜反射拍摄方式拍摄输入展平算法的目标曲面屏获取到的曲面屏拍摄图像，所述棱镜反射图像包括上边缘曲面图像和下边缘曲面图像，所述展平算法标定图像、平面拍摄图像和所述棱镜反射图像上都具有像素点阵，所述像素点阵中包含至少9（3*3）个点阵点；
对所述平面拍摄图像和所述棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像，所述展平处理用于展平所述平面拍摄图像和所述棱镜反射图像上的像素点阵，所述反射展平图像包括上边缘曲面展平图像和下边缘曲面展平图像；
确定所述平面展平图像的上边缘拼接锚点组和下边缘拼接锚点组，拼接锚点组为平面拍摄图像的所述像素点阵的点阵点的集合；
确定所述上边缘曲面展平图像上的第一曲面拼接锚点组和所述下边缘展平曲面图像上的第二曲面拼接锚点组，所述上边缘拼接锚点组和所述第一曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点，所述下边缘拼接锚点组和所述第二曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点；
根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组分别对所述上边缘曲面展平图像和所述下边缘曲面展平图像进行镜像翻转；
根据所述上边缘拼接锚点组和所述下边缘拼接锚点组对所述平面展平图像进行裁剪，以生成待拼接平面图像；
根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组对翻转后的所述上边缘曲面展平图像和所述下边缘曲面展平图像进行裁剪，以生成待对齐上曲面图像和待对齐下曲面图像；
根据所述待拼接平面图像为所述待对齐上曲面图像和所述待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像；
将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。
本实施例中，处理器1201的功能与前述图1、图7a、图7b和图7c所示实施例中的步骤对应，此处不做赘述。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（ROM，read-onlymemory）、随机存取存储器（RAM，random access memory）、磁碟或者光盘等各种可以存储程序代码的介质。
Claims (10)
1.一种曲面屏图像的生成方法，其特征在于，包括：
获取平面拍摄图像和棱镜反射图像，所述平面拍摄图像和所述棱镜反射图像分别为取样相机通过正面拍摄方式和棱镜反射拍摄方式拍摄输入展平算法的目标曲面屏获取到的曲面屏拍摄图像，所述棱镜反射图像包括上边缘曲面图像和下边缘曲面图像，所述平面拍摄图像和所述棱镜反射图像上都具有像素点阵，所述像素点阵中包含至少9个点阵点；
对所述平面拍摄图像和所述棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像，所述展平处理用于展平所述平面拍摄图像和所述棱镜反射图像上的像素点阵，所述反射展平图像包括上边缘曲面展平图像和下边缘曲面展平图像；
确定所述平面展平图像的上边缘拼接锚点组和下边缘拼接锚点组，拼接锚点组为平面拍摄图像的所述像素点阵的点阵点的集合；
确定所述上边缘曲面展平图像上的第一曲面拼接锚点组和所述下边缘曲面 展平图像上的第二曲面拼接锚点组，所述上边缘拼接锚点组和所述第一曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点，所述下边缘拼接锚点组和所述第二曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点；
根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组分别对所述上边缘曲面展平图像和所述下边缘曲面展平图像进行镜像翻转；
根据所述上边缘拼接锚点组和所述下边缘拼接锚点组对所述平面展平图像进行裁剪，以生成待拼接平面图像；
根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组对翻转后的所述上边缘曲面展平图像和所述下边缘曲面展平图像进行裁剪，以生成待对齐上曲面图像和待对齐下曲面图像；
根据所述待拼接平面图像为所述待对齐上曲面图像和所述待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像；
将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。
2.根据权利要求1所述的生成方法，其特征在于，在所述将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像之后，所述生成方法还包括：
对所述曲面屏拼接图像进行消除灰度宏观差异操作，以生成目标曲面屏拼接图像。
3.根据权利要求2所述的生成方法，其特征在于，所述对所述曲面屏拼接图像进行消除灰度宏观差异操作，以生成目标曲面屏拼接图像，包括：
对所述曲面屏拼接图像进行截取，以生成曲面屏截取图像；
对所述曲面屏截取图像进行灰度形态学膨胀处理，得到曲面屏中间图像；
获取所述曲面屏中间图像在纵向的灰度分布函数；
对所述纵向的灰度分布函数进行多项式拟合处理，以生成拟合多项式；
通过拟合多项式计算所述曲面屏拼接图像的灰度校正系数；
根据所述灰度校正系数对所述曲面屏拼接图像进行灰度校正，以生成目标曲面屏拼接图像。
4.根据权利要求1至3中任一项所述的生成方法，其特征在于，所述根据所述待拼接平面图像为所述待对齐上曲面图像和所述待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像，包括：
确定所述上边缘拼接锚点组的上边缘锚点坐标组和所述下边缘拼接锚点组的下边缘锚点坐标组；
确定所述第一曲面拼接锚点组的第一曲面锚点坐标组和所述第二曲面拼接锚点组的第二曲面锚点坐标组；
根据所述上边缘锚点坐标组和所述第一曲面锚点坐标组计算上边缘对齐系数；
根据所述下边缘锚点坐标组和所述第二曲面锚点坐标组计算下边缘对齐系数；
生成上曲面空白图像和下曲面空白图像；
根据所述上边缘对齐系数对所述上曲面空白图像进行像素数据填充，以生成待拼接上曲面图像；
根据所述下边缘对齐系数对所述下曲面空白图像进行像素数据填充，以生成待拼接下曲面图像。
5.根据权利要求1至3中任一项所述的生成方法，其特征在于，所述对所述平面拍摄图像和所述棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像，包括：
确定所述平面拍摄图像的中心点阵点坐标；
根据所述中心点阵点坐标在所述平面拍摄图像为每个点阵点确定对应的包络ROI区域；
根据所述包络ROI区域生成实际点阵点坐标阵列；
根据所述中心点阵点坐标生成对比点阵点坐标阵列，所述实际点阵点坐标阵列上每个点阵点在所述对比点阵点坐标阵列上都存在对应的点阵点；
根据所述实际点阵点坐标阵列和所述对比点阵点坐标阵列计算每个点阵点的畸变校正系数；
根据所述中心点阵点坐标生成展平空白图像；
根据所述畸变校正系数在所述展平空白图像上计算每个像素位置所对应的平面拍摄图像坐标位置；
将所述平面拍摄图像的灰度信息填充到所述展平空白图像，以生成平面展平图像；
将所述棱镜反射图像进行上述同所述平面拍摄图像相同的展平操作，以生成反射展平图像。
6.根据权利要求1至3中任一项所述的生成方法，其特征在于，在所述获取平面拍摄图像和棱镜反射图像之前，所述生成方法还包括：
构造展平算法标定图像，展平算法标定图像上设置有像素点阵；
将所述展平算法标定图像输入目标曲面屏。
7.一种曲面屏图像的生成装置，其特征在于，包括：
获取单元，用于获取平面拍摄图像和棱镜反射图像，所述平面拍摄图像和所述棱镜反射图像分别为取样相机通过正面拍摄方式和棱镜反射拍摄方式拍摄输入展平算法的目标曲面屏获取到的曲面屏拍摄图像，所述棱镜反射图像包括上边缘曲面图像和下边缘曲面图像，所述展平算法标定图像、平面拍摄图像和所述棱镜反射图像上都具有像素点阵，所述像素点阵中包含至少9个点阵点；
展平单元，用于对所述平面拍摄图像和所述棱镜反射图像进行展平处理，以生成平面展平图像和反射展平图像，所述展平处理用于展平所述平面拍摄图像和所述棱镜反射图像上的像素点阵，所述反射展平图像包括上边缘曲面展平图像和下边缘曲面展平图像；
第一确定单元，用于确定所述平面展平图像的上边缘拼接锚点组和下边缘拼接锚点组，拼接锚点组为平面拍摄图像的所述像素点阵的点阵点的集合；
第二确定单元，用于确定所述上边缘曲面展平图像上的第一曲面拼接锚点组和所述下边缘曲面 展平图像上的第二曲面拼接锚点组，所述上边缘拼接锚点组和所述第一曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点，所述下边缘拼接锚点组和所述第二曲面拼接锚点组为所述目标曲面屏显示的像素点阵的同一行点阵点；
翻转单元，用于根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组分别对所述上边缘曲面展平图像和所述下边缘曲面展平图像进行镜像翻转；
第一裁剪单元，用于根据所述上边缘拼接锚点组和所述下边缘拼接锚点组对所述平面展平图像进行裁剪，以生成待拼接平面图像；
第二裁剪单元，用于根据所述第一曲面拼接锚点组和所述第二曲面拼接锚点组对翻转后的所述上边缘曲面展平图像和所述下边缘曲面展平图像进行裁剪，以生成待对齐上曲面图像和待对齐下曲面图像；
对齐单元，用于根据所述待拼接平面图像为所述待对齐上曲面图像和所述待对齐下曲面图像进行对齐处理，以生成待拼接上曲面图像和待拼接下曲面图像；
拼接单元，用于将所述待拼接平面图像、所述待拼接上曲面图像和所述待拼接下曲面图像进行加权缝合，以生成曲面屏拼接图像。
8.根据权利要求7所述的生成装置，其特征在于，所述生成装置还包括：
灰度调整单元，用于对所述曲面屏拼接图像进行消除灰度宏观差异操作，以生成目标曲面屏拼接图像。
9.根据权利要求8所述的生成装置，其特征在于，所述灰度调整单元，具体为：
对所述曲面屏拼接图像进行截取，以生成曲面屏截取图像；
对所述曲面屏截取图像进行灰度形态学膨胀处理，得到曲面屏中间图像；
获取所述曲面屏中间图像在纵向的灰度分布函数；
对所述纵向的灰度分布函数进行多项式拟合处理，以生成拟合多项式；
通过拟合多项式计算所述曲面屏拼接图像的灰度校正系数；
根据所述灰度校正系数对所述曲面屏拼接图像进行灰度校正，以生成目标曲面屏拼接图像。
10.根据权利要求7至9中任一项所述的生成装置，其特征在于，所述对齐单元，具体为：
确定所述上边缘拼接锚点组的上边缘锚点坐标组和所述下边缘拼接锚点组的下边缘锚点坐标组；
确定所述第一曲面拼接锚点组的第一曲面锚点坐标组和所述第二曲面拼接锚点组的第二曲面锚点坐标组；
根据所述上边缘锚点坐标组和所述第一曲面锚点坐标组计算上边缘对齐系数；
根据所述下边缘锚点坐标组和所述第二曲面锚点坐标组计算下边缘对齐系数；
生成上曲面空白图像和下曲面空白图像；
根据所述上边缘对齐系数对所述上曲面空白图像进行像素数据填充，以生成待拼接上曲面图像；
根据所述下边缘对齐系数对所述下曲面空白图像进行像素数据填充，以生成待拼接下曲面图像。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110811552.0A CN113269697B (zh) | 2021-07-19 | 2021-07-19 | 一种曲面屏图像的生成方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110811552.0A CN113269697B (zh) | 2021-07-19 | 2021-07-19 | 一种曲面屏图像的生成方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113269697A CN113269697A (zh) | 2021-08-17 |
| CN113269697B true CN113269697B (zh) | 2021-10-08 |
Family
ID=77236753
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110811552.0A Active CN113269697B (zh) | 2021-07-19 | 2021-07-19 | 一种曲面屏图像的生成方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113269697B (zh) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114332078B (zh) * | 2022-03-02 | 2022-06-10 | 山东华硕汽车配件科技有限公司 | 一种汽车发动机金属磨损智能修复控制方法 |
| CN114792288B (zh) * | 2022-06-22 | 2022-09-16 | 湖南大学 | 一种曲面屏图像的灰度校正方法及相关装置 |
| CN115100078B (zh) * | 2022-07-25 | 2022-12-13 | 湖南大学 | 一种曲面屏图像中点阵坐标修正与填补的方法及相关装置 |
| CN116152121B (zh) * | 2023-04-20 | 2023-07-04 | 合肥高维数据技术有限公司 | 基于畸变参数的曲面屏生成方法、矫正方法 |
| CN118411402B (zh) * | 2024-07-02 | 2024-09-06 | 深圳精智达技术股份有限公司 | 一种曲面屏曲面点阵图定位方法、装置、系统和存储介质 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112634173A (zh) * | 2020-12-30 | 2021-04-09 | 凌云光技术股份有限公司 | 一种曲面屏图像校正方法及系统 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006330143A (ja) * | 2005-05-24 | 2006-12-07 | Seiko Epson Corp | マイクロレンズ、空間光変調装置及び画像表示装置 |
| JP4721111B2 (ja) * | 2005-11-24 | 2011-07-13 | 富士ゼロックス株式会社 | 画像処理装置、画像処理システム、画像処理プログラムおよび画像処理方法 |
| JP5778177B2 (ja) * | 2010-12-28 | 2015-09-16 | 公立大学法人公立はこだて未来大学 | 画像撮像装置および画像提示システム |
| CN104036475A (zh) * | 2013-07-22 | 2014-09-10 | 成都智慧星球科技有限公司 | 适应于任意投影机群及投影屏幕的高鲁棒性几何校正方法 |
| CN106896496B (zh) * | 2015-10-30 | 2019-11-08 | 洪维毅 | 场曲型虚像显示系统 |
-
2021
- 2021-07-19 CN CN202110811552.0A patent/CN113269697B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112634173A (zh) * | 2020-12-30 | 2021-04-09 | 凌云光技术股份有限公司 | 一种曲面屏图像校正方法及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113269697A (zh) | 2021-08-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN113269697B (zh) | 一种曲面屏图像的生成方法及装置 | |
| CN110211043B (zh) | 一种用于全景图像拼接的基于网格优化的配准方法 | |
| US7019713B2 (en) | Methods and measurement engine for aligning multi-projector display systems | |
| CN112947885B (zh) | 一种曲面屏展平图像的生成方法及装置 | |
| US20060072852A1 (en) | Deghosting mosaics using multiperspective plane sweep | |
| WO2017122500A1 (ja) | 投影システム、画像処理装置、投影方法およびプログラム | |
| CN111192552B (zh) | 一种多通道led球幕几何校正方法 | |
| US8891899B2 (en) | Methods, systems and apparatuses for pixel value correction using multiple vertical and/or horizontal correction curves | |
| CN109495729B (zh) | 投影画面校正方法和系统 | |
| CN110930301A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
| CN111882530B (zh) | 一种亚像素定位图生成方法、定位方法及装置 | |
| CN111866523B (zh) | 全景视频合成方法、装置、电子设备和计算机存储介质 | |
| CN113516719B (zh) | 一种基于多单应性矩阵的相机标定方法、系统及存储介质 | |
| CN111815517A (zh) | 一种基于球机抓拍图片的自适应全景拼接方法 | |
| CN113989392A (zh) | 拼接摄像机的彩色棋盘格标定方法、装置及摄像机 | |
| CN114792288B (zh) | 一种曲面屏图像的灰度校正方法及相关装置 | |
| JP2006221599A (ja) | マッピング関数生成方法及びその装置並びに複合映像生成方法及びその装置 | |
| CN115100078B (zh) | 一种曲面屏图像中点阵坐标修正与填补的方法及相关装置 | |
| CN108596981A (zh) | 一种图像的鸟瞰视角重投影方法、装置及便携式终端 | |
| CN112237002A (zh) | 图像处理方法和设备 | |
| CN113902644A (zh) | 一种图像处理方法、装置、设备以及存储介质 | |
| CN106023127B (zh) | 一种基于多帧的鱼眼视频校正方法 | |
| Dellaert et al. | Mosaicing a large number of widely dispersed, noisy, and distorted images: A bayesian approach | |
| CN111598940A (zh) | 一种半球摄影中心点位置定位方法 | |
| CN114862934B (zh) | 十亿像素成像的场景深度估计方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |