CN107527369B - 图像校正方法、装置、设备和计算机可读存储介质 - Google Patents
图像校正方法、装置、设备和计算机可读存储介质 Download PDFInfo
- Publication number
- CN107527369B CN107527369B CN201710762911.1A CN201710762911A CN107527369B CN 107527369 B CN107527369 B CN 107527369B CN 201710762911 A CN201710762911 A CN 201710762911A CN 107527369 B CN107527369 B CN 107527369B
- Authority
- CN
- China
- Prior art keywords
- coordinate
- image
- camera
- writing board
- marker
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3185—Geometric adjustment, e.g. keystone or convergence
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Geometry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Controls And Circuits For Display Device (AREA)
- Image Processing (AREA)
- Projection Apparatus (AREA)
Abstract
本发明公开了一种图像校正方法,包括:响应于触发指令,通过摄像机获取显示有标准图像的书写板的目标图像;依据预设算法获取第一坐标,其中第一坐标为所述标识物在所述目标图像中的坐标;根据第二坐标和所述第一坐标,获得所述书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系,其中第二坐标为所述标识物在所述标准图像中的坐标;在确认摄像机获取的图像中包含显示有板书图像的书写板之后,根据所述坐标映射关系,将所述摄像机获取的图像校正为所述板书图像。相应地,本发明还公开了一种图像校正装置、设备和计算机可读存储介质。实施本发明,解决自动拍摄板书图像会有图形畸变影响阅读的问题,实现提高拍摄的图像的可读性的效果。
Description
技术领域
本发明涉及图像处理技术,尤其涉及一种图像校正方法、装置、设备和计算机可读存储介质。
背景技术
在触摸屏终端提供的电子白板上书写板书具有无粉尘、书写不费力和方便擦除等优势,因此电子白板逐渐在教学课堂上普及使用。但其并不能替代传统黑板,因为电子白板不能还原出笔锋等一些细节,可能导致保存的板书观看效果不佳,特别对一些需要还原笔迹细节的课程,如美术、书法课等。而且无法排除辅助教育设备(如三角板等)的干扰,例如使用三角板在黑板进行量测时,触摸屏会误判此三角板是板书内容,并进行显示,导致最终显示的板书多了多余的内容。
而传统的书写板,如黑板和白板,不便于保存老师在书写板上书写的板书内容。如果学生或老师需要记录板书内容,则要对书写板进行拍照。人工进行拍照影响上课质量,但如果设置自动拍照的摄像机进行自动拍照,则采集到的图像会有畸变,不方便阅读。
发明内容
本发明提供一种图像校正方法、装置、设备和计算机可读存储介质,以实现在自动拍摄课堂上的包含板书内容的图像后可还原出书写板显示的真实画面,提高拍摄的图像的可读性。
第一方面,本发明实施例提供了一种图像校正方法,包括:
响应于触发指令,通过摄像机获取显示有标准图像的书写板的目标图像,其中,所述标准图像中包括有多个标识物,且由投影仪投影至所述书写板实现在所述书写板上显示;
依据预设算法获取第一坐标;其中,所述第一坐标为所述标识物在所述目标图像中的坐标;
根据第二坐标和所述第一坐标,获得所述书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系;其中,所述第二坐标为所述标识物在所述标准图像中的坐标;
在确认摄像机获取的图像中包含显示有板书图像的书写板之后,根据所述坐标映射关系,将所述摄像机获取的图像校正为所述板书图像。
第二方面,本发明实施例还提供了一种图像校正装置,包括:
拍摄模块,用于响应于触发指令,通过摄像机获取显示有标准图像的书写板的目标图像;其中,所述标准图像中包括有多个标识物,且由投影仪投影至所述书写板实现在所述书写板上显示;
获取模块,用于依据预设算法获取第一坐标;其中,所述第一坐标为所述标识物在所述目标图像中的坐标;
映射模块,用于根据第二坐标和所述第一坐标,获得所述书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系;其中,所述第二坐标为所述标识物在所述标准图像中的坐标;
校正模块,用于在确认摄像机获取的图像中包含显示有板书图像的书写板之后,根据所述坐标映射关系,将所述摄像机获取的图像校正为所述板书图像。
第三方面,本发明实施例还提供了一种设备,该设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
摄像机,用于拍摄图像;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现上述的图像校正方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述的图像校正方法。
本发明实施例通过投影仪将设有标识物的标准图像投影到书写板,通过摄像机获取书写板的图像,使得可以根据标识物在标准图像中的坐标和在摄像机获取的图像中的坐标,得到书写板显示的图像与摄像机获取的图像之间的坐标映射关系,从而可以在自动拍摄课堂上的包含板书内容的图像后,还原出书写板显示的真实画面。解决自动拍摄板书图像会有图形畸变影响阅读的问题,实现提高拍摄的图像的可读性的效果。
附图说明
图1是本发明实施例一提供的图像校正方法的流程图;
图2a是本发明实施例一中摄像机拍摄的图像示意图;
图2b是本发明实施例一中书写板显示的图像示意图;
图3是本发明实施例二提供的图像校正方法的流程图;
图4是本发明实施例三提供的图像校正装置的结构示意图;
图5是本发明实施例四提供的设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的图像校正方法的流程图,本实施例可适用于对摄像机拍摄的包含板书内容的图像进行畸变校正的情况,该方法可以由图像校正装置来执行,具体包括如下步骤110至140。
步骤110、响应于触发指令,通过摄像机获取显示有标准图像的书写板的目标图像,其中,所述标准图像中包括有多个标识物,且由投影仪投影至所述书写板实现在所述书写板上显示;
其中,通过摄像机获取书写板的目标图像,即通过朝向书写板的摄像机拍摄的图像如图2a所示,由于摄像机朝向书写板,因此能拍摄书写板上所有显示内容,书写板上显示的图像如图2b所示。
步骤120、依据预设算法获取第一坐标;其中,所述第一坐标为所述标识物在所述目标图像中的坐标。
步骤130、根据所述第二坐标和所述第一坐标,获得所述书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系;其中,所述第二坐标为所述标识物在所述标准图像中的坐标。
步骤140、在确认摄像机获取的图像中包含显示有板书图像的书写板之后,根据所述坐标映射关系,将所述摄像机获取的图像校正为所述板书图像。
该图像校正方法的工作原理:
通过投影仪将设有标识物的标准图像投向书写板,通过摄像机拍摄目标图像后,依据图像检测算法可以检测出标识物,读取其坐标。根据标识物在两个图像中的坐标,可以求取两个图像之间的坐标映射关系,利用该关系,可以将后续拍摄的图像,还原为书写板上显示的图像。即在通过所述摄像机拍摄包含板书内容的图像之后,可根据所述摄像机获取的图像和所述坐标映射关系,获得所述书写板显示的板书图像。具体还原的方法是,利用该映射关系找到待还原的图像中的坐标对应的在拍摄的图像上的坐标,取其特征值(如RGB值或灰度值等表征该坐标上的色彩的特征值)作为待还原的图像中该坐标的特征值。
简单地,投影在书写板上的标准图像中坐标为PB(uB,vB,0)的标识物,在拍摄的目标图像中坐标为PI(uI,vI,0),可设PB(uB,vB,0)与PI(uI,vI,0)之间的转换函数为:利用多个标识物的坐标值联立,可以求解出矩阵H的各个元素的值,从而获得该转换函数,在具体实施时,H是3*3的矩阵,并且有一个元素可作为齐次坐标,则至少须有4个标识物,联立8组方程,可求解出矩阵H。此外,还可以用张氏标定法求标准图像与所述目标图像之间的坐标映射参数,即获得摄像机标定的内外参数;还可以用其他更复杂的标定方法。
在具体实施时,可以直接使用该转换函数作为书写板显示的图像与摄像机获取的图像之间的坐标映射关系,对于待还原的书写板显示的图像上的每一坐标,利用该转换函数找到对应在摄像机拍摄的图像中的坐标。
本发明实施例投影仪投影的标准图像可以是棋盘格图像,标识物为棋盘格图像上的格子的顶点。由于棋盘格图像是投影至书写板上的,因此投影比例可以控制,使得可以保证与书写板尺寸比例一致;棋盘格图像不受打印精度等问题影响其黑白格之间的间距,使得标定准确性提高。且只要事先调整好投影仪的角度和位置,就可以随时不需要人工张贴操作就可以使书写板显示标准图像,使得可以在正常使用书写板的情况下求取书写板显示的图像和摄像机拍摄的图像之间的坐标映射关系,即随时可以重新标定,提高及时保存板书图像的可靠性。
投影仪投影的标准图像还可以是设有辨识度高的标识物的任意图像。对于自定义的标识物,需要设定相应的图像检测算法读取标识物的坐标。对于颜色与书写板背景色彩反差较大的标识物,可在特定的颜色模型下,读取各坐标对应的特征值,使用二值化方法提取设定的特征值范围所对应的区域图案作为标识物。也可以采用边缘检测方法并用设定的模型拟合边缘得到标识物坐标,即步骤120包括:在所述目标图像中检测所述标识物的边缘;根据检测到的所述边缘,查找所述标识物中指定角点的坐标,作为所述第一坐标。
在上述技术方案的基础上,本实施例还提供一种优选的方式实现步骤130。
具体地,步骤130根据所述标识物在标准图像中的坐标和所述标识物在目标图像中的坐标,即第二坐标和第一坐标,采用张氏标定法或其他更复杂的算法,可以获得摄像机的内参数和外参数,相当于获得所述书写板显示的图像与所述摄像机拍摄的图像之间的坐标映射参数。根据所述内参数和外参数,可以从摄像机拍摄的包含板书内容的图像,获得书写板显示的板书图像。
进一步地,为了减小误差,可对内参数进行校正。具体地,在根据第一坐标和第二坐标,标定摄像机,获得摄像机的内参数和外参数后,还包括:
由所述第一坐标根据所述内参数和外参数计算得到标识物的理论坐标;
如果所述标识物的理论坐标与所述第二坐标不匹配,则修改所述标识物的理论坐标,使其与第二坐标匹配;
由修改后的所述标识物的理论坐标根据所述外参数计算得到调整坐标;
计算所述调整坐标和所述第一坐标之间的坐标映射参数;
使用所述坐标映射参数替换所述摄像机的内参数。
在上述进一步方案中,摄像机的内参数包括相机主点、焦距和畸变参数等,可用θ表示;摄像机的外参数为目标面板上的图像与由拍摄的图像消除内参数引起的畸变后得到的图像之间的单应性矩阵,可用M表示,则H=θ*M。根据该转换函数可以从第一坐标PI(uI,vI,0)获得标识物的理论坐标P′B。如果该理论坐标P′B和第二坐标不匹配,则将其修改为匹配的坐标PB(即在无误差的情况下由PI根据内参数θ和外参数M计算应得的准确的坐标值),由修改后的理论坐标根据外参数M可得到调整坐标PC=MPB。计算PC和PI之间的坐标映射参数,使用该坐标映射参数替换内参数θ,即可得到降低误差的书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系。
在具体实施时,对理论坐标的修正可以通过人机交互实现,避免由外部环境因素引起的误差。
具体地,所述如果所述标识物的理论坐标与所述第二坐标不匹配,则修改所述标识物的理论坐标,使其与第二坐标匹配,具体包括:
根据摄像机拍摄的图像和摄像机的内参数、外参数,获得所述书写板显示的图像;
通过触摸屏终端显示获得的图像,并在该图像上所述标识物的理论坐标所对应的位置提供拖拽控点;
检测所述拖拽控点是否被用户拖拽至其他坐标所对应的位置;
若是,则判定所述标识物的理论坐标与所述第二坐标不匹配;将所述标识物的理论坐标修改为所述拖拽控点的坐标;
若否,则判定所述标识物的理论坐标与所述第二坐标匹配。
上述具体方案允许用户使用输入设备,例如鼠标或触摸屏,将标识物拖拽到用户认为与标识物在标准图像中的坐标匹配的位置,然后根据该位置修正内参数θ。这种方法使得参数可视化,能够让用户直观地评价当前参数是否足够精准,并实现人工调整。
本实施例的技术方案,通过投影仪将设有标识物的标准图像投影到书写板,通过摄像机获取书写板的图像,使得可以根据标识物在标准图像中的坐标和在摄像机获取的图像中的坐标,得到书写板显示的图像与摄像机获取的图像之间的坐标映射关系,从而可以在自动拍摄课堂上的包含板书内容的图像后,还原出书写板显示的真实画面。解决自动拍摄板书图像会有图形畸变影响阅读的问题,实现提高拍摄的图像的可读性的效果。
实施例二
图3为本发明实施例二提供的图像校正方法的流程图,本实施例可适用于对摄像机拍摄的包含板书内容的图像进行畸变校正的情况,该方法可以由图像校正装置来执行。本实施例与实施例一的区别点在于,实施例一以坐标映射参数或转换函数记录书写板显示的图像与所述摄像机拍摄的图像之间的坐标映射关系,本实施例以列表的方式记录该坐标映射关系。本实施例提供的图像校正方法包括:
步骤310、响应于触发指令,通过摄像机获取显示有标准图像的书写板的目标图像,其中,所述标准图像中包括有多个标识物,且由投影仪投影至所述书写板实现在所述书写板上显示;
步骤320、依据预设算法获取第一坐标;其中,所述第一坐标为所述标识物在所述目标图像中的坐标;
步骤330、计算所述第一坐标与所述第二坐标之间的转换函数;
步骤340、根据所述转换函数,建立所述书写板显示的图像中每一坐标与所述摄像机获取的图像中的坐标之间的映射列表。
上述步骤330和340先计算标识物在标准图像中的坐标和在目标图像中的坐标之间的转换函数,再根据转换函数建立坐标的映射列表。这种方法使得在后续还原书写板显示的板书图像时,可直接查表获得板书图像上各坐标点对应的在拍摄图像上的坐标,读取其特征值作为自身的特征值。在还原图像的时候无需根据转换函数计算,提高处理速度,即在步骤340后,还包括:
步骤350、在确认摄像机获取的图像中包含显示有板书图像的书写板之后,查询所述映射列表,获得所述板书图像的每一坐标所对应的摄像机获取的图像中的坐标;
步骤360、读取查询到的坐标的特征值,作为所述板书图像中对应坐标的特征值。
步骤350和步骤360使得在教学过程中,可以及时地对拍摄的图像进行校正处理,进一步可实时地通过显示终端展示在课堂上。
本实施例的技术方案,通过投影仪将设有标识物的标准图像投影到书写板,通过摄像机获取书写板的图像,使得可以根据标识物在标准图像中的坐标和在摄像机获取的图像中的坐标,得到书写板显示的图像与摄像机获取的图像之间的转换函数,进而获得两张图像之间的映射列表,从而可以在自动拍摄课堂上的包含板书内容的图像后,不需要根据转换函数计算对应的坐标值,只需要查表以及像素插值,即可还原出书写板显示的真实画面。
实施例三
图4为本发明实施例三提供的图像校正装置的结构示意图,该装置包括:
拍摄模块410,用于响应于触发指令,通过摄像机获取显示有标准图像的书写板的目标图像;其中,所述标准图像中包括有多个标识物,且由投影仪投影至所述书写板实现在所述书写板上显示;
获取模块420,用于依据预设算法获取第一坐标;其中,所述第一坐标为所述标识物在所述目标图像中的坐标;
映射模块430,用于根据第二坐标和所述第一坐标,获得所述书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系;其中,所述第二坐标为所述标识物在所述标准图像中的坐标;
校正模块440,用于在确认摄像机获取的图像中包含显示有板书图像的书写板之后,根据所述坐标映射关系,将所述摄像机获取的图像校正为所述板书图像。
作为一种实施方式,映射模块430包括:
计算单元,用于计算所述第一坐标与所述第二坐标之间的转换函数;
建表单元,用于根据所述转换函数,建立所述书写板显示的图像中每一坐标与所述摄像机获取的图像中的坐标之间的映射列表;
则校正模块440包括:
查表单元,用于在确认摄像机获取的图像中包含显示有板书图像的书写板之后,查询所述映射列表,获得所述板书图像的每一坐标所对应的摄像机获取的图像中的坐标;
替换单元,用于读取查询到的坐标的特征值,作为所述书写板显示的板书图像中对应坐标的特征值。
优选地,读取模块420包括:
检测单元,用于在所述目标图像中检测所述标识物的边缘;
查找单元,用于根据检测到的所述边缘,查找所述标识物中指定角点的坐标,作为所述第一坐标。
作为另一种实施方式,所述映射模块430包括标定单元,用于根据所述第一坐标和所述第二坐标,标定摄像机,获得所述摄像机的内参数和外参数。
所述映射模块430还包括:
预测单元,用于由所述第一坐标根据所述内参数和外参数计算得到标识物的理论坐标;
修正单元,用于如果所述标识物的理论坐标与所述第二坐标不匹配,则修改所述标识物的理论坐标,使其与第二坐标匹配;
调整单元,用于由修改后的所述标识物的理论坐标根据所述外参数计算得到调整坐标;
修正参数计算单元,用于计算所述调整坐标和所述第一坐标之间的坐标映射参数;
第二替换单元,用于使用所述坐标映射参数替换所述摄像机的内参数。
进一步地,所述修正单元具体包括:
显示单元,用于根据摄像机拍摄的图像和摄像机的内参数、外参数,获得所述书写板显示的图像;通过触摸屏终端显示获得的图像,并在该图像上所述标识物的理论坐标所对应的位置提供拖拽控点;
检测单元,用于检测所述拖拽控点是否被用户拖拽至其他坐标所对应的位置;
修改单元,用于若是,则判定所述标识物的理论坐标与所述第二坐标不匹配;将所述标识物的理论坐标修改为所述触摸拖拽控点的坐标;
维持单元,用于若否,则判定所述标识物的理论坐标与所述第二坐标匹配。
本发明实施例所提供的图像校正装置可执行本发明任意实施例所提供的图像校正方法,具备执行方法相应的功能模块和有益效果。
实施例四
图5为本发明实施例四提供的一种设备的结构示意图,如图5所示,该设备包括处理器510、存储器520、输入装置530、输出装置540和用于拍摄图像的摄像机550;设备中处理器510的数量可以是一个或多个,图5中以一个处理器510为例;设备中的处理器510、存储器520、输入装置530和输出装置540可以通过总线或其他方式连接,图5中以通过总线连接为例。
存储器520作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的图像校正方法对应的程序指令/模块(例如,图像校正装置中的拍摄模块410、获取模块420、映射模块430和校正模块440)。处理器510通过运行存储在存储器520中的软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述的图像校正方法。
存储器520可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端的使用所创建的数据等。此外,存储器520可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器520可进一步包括相对于处理器510远程设置的存储器,这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置530可用于接收输入的数字或字符信息,以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置540可包括显示屏等显示设备。
实施例五
本发明实施例五还提供一种存储有计算机程序的计算机可读存储介质,所述程序在由计算机处理器执行时用于实现一种图像校正方法,该方法包括:
响应于触发指令,通过摄像机获取显示有标准图像的书写板的目标图像,其中,所述标准图像中包括有多个标识物,且由投影仪投影至所述书写板实现在所述书写板上显示;
依据预设算法获取第一坐标;其中,所述第一坐标为所述标识物在所述目标图像中的坐标;
根据第二坐标和所述第一坐标,获得所述书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系;其中,所述第二坐标为所述标识物在所述标准图像中的坐标;
在确认摄像机获取的图像中包含显示有板书图像的书写板之后,根据所述坐标映射关系,将所述摄像机获取的图像校正为所述板书图像。
当然,本发明实施例所提供的一种存储有计算机程序的计算机可读存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的图像校正方法中的相关操作.
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是,上述图像校正装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种图像校正方法,其特征在于,包括:
响应于触发指令,通过摄像机获取显示有标准图像的书写板的目标图像,其中,所述标准图像中包括有多个标识物,且由投影仪投影至所述书写板实现在所述书写板上显示;
依据预设算法获取第一坐标;其中,所述第一坐标为所述标识物在所述目标图像中的坐标;
根据第二坐标和所述第一坐标,获得所述书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系;其中,所述第二坐标为所述标识物在所述标准图像中的坐标;
在确认摄像机获取的图像中包含显示有板书图像的书写板之后,根据所述坐标映射关系,将所述摄像机获取的图像校正为所述板书图像;
其中,所述根据第二坐标和所述第一坐标,获得所述书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系,包括:获取摄像机的内参数和外参数;根据所述第一坐标、所述内参数和外参数计算所述标识物的理论坐标;若所述理论坐标与所述第二坐标不匹配,则修改所述理论坐标,使修改后的理论坐标与所述第二坐标匹配;根据修改后的所述理论坐标和所述外参数计算调整坐标;计算所述调整坐标和所述第一坐标之间的坐标映射参数;采用所述坐标映射参数替换所述摄像机的内参数,得所述书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系。
2.如权利要求1所述的图像校正方法,其特征在于,所述根据第二坐标和所述第一坐标,获得所述书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系,还包括:
计算所述第一坐标与所述第二坐标之间的转换函数;
根据所述转换函数,建立所述书写板显示的图像中每一坐标与所述摄像机获取的图像中的坐标之间的映射列表;
则所述在确认摄像机获取的图像中包含显示有板书图像的书写板之后,根据所述坐标映射关系,将所述摄像机获取的图像校正为所述板书图像,具体包括:
在确认摄像机获取的图像中包含显示有板书图像的书写板之后,查询所述映射列表,获得所述板书图像的每一坐标所对应的摄像机获取的图像中的坐标;
读取查询到的坐标的特征值,作为所述板书图像中对应坐标的特征值。
3.如权利要求1或2所述的图像校正方法,其特征在于,所述标准图像为棋盘格图像;所述标识物为棋盘格图像上的格子的顶点。
4.如权利要求1或2所述的图像校正方法,其特征在于,所述依据预设算法获取第一坐标,具体包括:
在所述目标图像中检测所述标识物的边缘;
根据检测到的所述边缘,查找所述标识物中指定角点的坐标,作为所述第一坐标。
5.一种图像校正装置,其特征在于,包括:
拍摄模块,用于响应于触发指令,通过摄像机获取显示有标准图像的书写板的目标图像;其中,所述标准图像中包括有多个标识物,且由投影仪投影至所述书写板实现在所述书写板上显示;
获取模块,用于依据预设算法获取第一坐标;其中,所述第一坐标为所述标识物在所述目标图像中的坐标;
映射模块,用于根据第二坐标和所述第一坐标,获得所述书写板显示的图像与所述摄像机获取的图像之间的坐标映射关系;其中,所述第二坐标为所述标识物在所述标准图像中的坐标;
校正模块,用于在确认摄像机获取的图像中包含显示有板书图像的书写板之后,根据所述坐标映射关系,将所述摄像机获取的图像校正为所述板书图像;
其中,所述映射模块包括标定单元、预测单元、修正单元、调整单元、修正参数计算单元和第二替换单元;
所述标定单元,用于根据所述第一坐标和所述第二坐标,标定摄像机,获得所述摄像机的内参数和外参数;
预测单元,用于由所述第一坐标根据所述内参数和外参数计算得到标识物的理论坐标;
修正单元,用于如果所述标识物的理论坐标与所述第二坐标不匹配,则修改所述标识物的理论坐标,使修改后的理论坐标与第二坐标匹配;
所述调整单元,用于由修改后的所述标识物的理论坐标根据所述外参数计算得到调整坐标;
所述修正参数计算单元,用于计算所述调整坐标和所述第一坐标之间的坐标映射参数;
所述第二替换单元,用于使用所述坐标映射参数替换所述摄像机的内参数。
6.如权利要求5所述的图像校正装置,其特征在于,所述映射模块还包括:
计算单元,用于计算所述第一坐标与所述第二坐标之间的转换函数;
建表单元,用于根据所述转换函数,建立所述书写板显示的图像中每一坐标与所述摄像机获取的图像中的坐标之间的映射列表;
则所述校正模块包括:
查表单元,用于在确认摄像机获取的图像中包含显示有板书图像的书写板之后,查询所述映射列表,获得所述板书图像的每一坐标所对应的摄像机获取的图像中的坐标;
替换单元,用于读取查询到的坐标的特征值,作为所述板书图像中对应坐标的特征值。
7.如权利要求5或6所述的图像校正装置,其特征在于,所述标准图像为棋盘格图像;所述标识物为棋盘格图像上的格子的顶点。
8.如权利要求5或6所述的图像校正装置,其特征在于,所述获取模块包括:
检测单元,用于在所述目标图像中检测所述标识物的边缘;
查找单元,用于根据检测到的所述边缘,查找所述标识物中指定角点的坐标,作为所述第一坐标。
9.一种设备,其特征在于,所述设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
摄像机,用于拍摄图像;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-4中任一所述的图像校正方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-4中任一所述的图像校正方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710762911.1A CN107527369B (zh) | 2017-08-30 | 2017-08-30 | 图像校正方法、装置、设备和计算机可读存储介质 |
PCT/CN2017/116732 WO2019041652A1 (zh) | 2017-08-30 | 2017-12-17 | 图像校正方法、装置、设备和计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710762911.1A CN107527369B (zh) | 2017-08-30 | 2017-08-30 | 图像校正方法、装置、设备和计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107527369A CN107527369A (zh) | 2017-12-29 |
CN107527369B true CN107527369B (zh) | 2020-03-10 |
Family
ID=60682814
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710762911.1A Active CN107527369B (zh) | 2017-08-30 | 2017-08-30 | 图像校正方法、装置、设备和计算机可读存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN107527369B (zh) |
WO (1) | WO2019041652A1 (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108632591A (zh) * | 2018-04-04 | 2018-10-09 | 安徽海青智能科技有限公司 | 一种黑板信息再现分享系统 |
CN111161339B (zh) * | 2019-11-18 | 2020-11-27 | 珠海随变科技有限公司 | 一种间距测量方法、装置、设备以及计算机可读介质 |
CN113420581A (zh) * | 2020-10-19 | 2021-09-21 | 杨宏伟 | 书面文档图像的校正方法、装置、电子设备及可读介质 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100091104A1 (en) * | 2006-09-27 | 2010-04-15 | Georgia Tech Research Corporation | Systems and methods for the measurement of surfaces |
CN101673399A (zh) * | 2009-09-29 | 2010-03-17 | 浙江工业大学 | 编码结构光三维视觉系统的标定方法 |
CN102147918B (zh) * | 2010-02-09 | 2015-08-19 | 新奥特(北京)视频技术有限公司 | 基于体育场标志线的摄像机外参数确定方法及系统 |
CN101833644B (zh) * | 2010-06-01 | 2012-06-06 | 福建新大陆电脑股份有限公司 | 一种基于动态模板的校正图形搜索方法 |
WO2014006545A1 (en) * | 2012-07-04 | 2014-01-09 | Creaform Inc. | 3-d scanning and positioning system |
US10008007B2 (en) * | 2012-09-20 | 2018-06-26 | Brown University | Method for generating an array of 3-D points |
CN103400131B (zh) * | 2013-08-16 | 2016-12-28 | 徐宁 | 一种图像识别中的校正装置及其方法 |
CN103942796B (zh) * | 2014-04-23 | 2017-04-12 | 清华大学 | 一种高精度的投影仪‑摄像机标定系统及标定方法 |
CN104361580B (zh) * | 2014-10-22 | 2015-06-24 | 山东大学 | 基于平面幕布的投影图像实时校正方法 |
CN104809739B (zh) * | 2015-05-15 | 2019-03-22 | 南京大学 | 一种超广角镜头相机视频实时校正的方法 |
CN107464266B (zh) * | 2017-08-30 | 2019-09-13 | 广州视源电子科技股份有限公司 | 摄像机标定参数的校正方法、装置、设备和存储介质 |
-
2017
- 2017-08-30 CN CN201710762911.1A patent/CN107527369B/zh active Active
- 2017-12-17 WO PCT/CN2017/116732 patent/WO2019041652A1/zh active Application Filing
Also Published As
Publication number | Publication date |
---|---|
WO2019041652A1 (zh) | 2019-03-07 |
CN107527369A (zh) | 2017-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020199906A1 (zh) | 人脸关键点检测方法、装置、设备及存储介质 | |
CN107464266B (zh) | 摄像机标定参数的校正方法、装置、设备和存储介质 | |
CN102103435B (zh) | 一种交互式电子白板装置及其定位方法 | |
CN101110942B (zh) | 远程指示系统和方法 | |
CN111127422A (zh) | 图像标注方法、装置、系统及主机 | |
CN107527369B (zh) | 图像校正方法、装置、设备和计算机可读存储介质 | |
US20040207600A1 (en) | System and method for transforming an ordinary computer monitor into a touch screen | |
WO2019041651A1 (zh) | 图像校正方法、装置、设备和计算机可读存储介质 | |
CN109740487B (zh) | 点云标注方法、装置、计算机设备和存储介质 | |
US9405385B2 (en) | Interactive projection apparatus and the positioning method of the interactive pen | |
WO2019033657A1 (zh) | 板书显示方法、装置、设备和计算机可读存储介质 | |
US9319666B1 (en) | Detecting control points for camera calibration | |
CN112950528A (zh) | 证件姿态确定方法、模型训练方法、装置、服务器及介质 | |
CN108269288B (zh) | 智能异形投影非接触式交互系统和方法 | |
CN111241974B (zh) | 票据信息获取方法、装置、计算机设备和存储介质 | |
WO2024055531A1 (zh) | 照度计数值识别方法、电子设备及存储介质 | |
US20230353702A1 (en) | Processing device, system and method for board writing display | |
CN110740315A (zh) | 摄像头矫正方法、装置、电子设备及存储介质 | |
CN115797468A (zh) | 一种鱼眼摄像头安装高度的自动校正方法、装置以及设备 | |
CN116053549A (zh) | 电芯定位方法、装置及系统 | |
CN112637587B (zh) | 坏点检测方法及装置 | |
CN111142825B (zh) | 多屏视野的显示方法、系统及电子设备 | |
CN112070695A (zh) | 一种配准矩阵的校正方法和计算机设备 | |
CN111696154A (zh) | 坐标定位方法、装置、设备及存储介质 | |
CN113724141A (zh) | 一种图像校正方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |