CN110148171A - 动态投影方法、系统、计算机设备和存储介质 - Google Patents

动态投影方法、系统、计算机设备和存储介质 Download PDF

Info

Publication number
CN110148171A
CN110148171A CN201910313447.7A CN201910313447A CN110148171A CN 110148171 A CN110148171 A CN 110148171A CN 201910313447 A CN201910313447 A CN 201910313447A CN 110148171 A CN110148171 A CN 110148171A
Authority
CN
China
Prior art keywords
dot matrix
dot
projection
sampling
array data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910313447.7A
Other languages
English (en)
Other versions
CN110148171B (zh
Inventor
邱炜
马子淇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sen Yan Jing Chuang Technology Co Ltd
Original Assignee
Beijing Sen Yan Jing Chuang Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sen Yan Jing Chuang Technology Co Ltd filed Critical Beijing Sen Yan Jing Chuang Technology Co Ltd
Priority to CN201910313447.7A priority Critical patent/CN110148171B/zh
Publication of CN110148171A publication Critical patent/CN110148171A/zh
Application granted granted Critical
Publication of CN110148171B publication Critical patent/CN110148171B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Projection Apparatus (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请涉及一种动态投影方法、系统、计算机设备和存储介质。所述方法包括:在场景中的投影表面建立坐标系,基于坐标系,在投影表面进行点阵填充标定,得到采样点阵,对采样点阵中的采样点进行数据采集,得到第一点阵数据集,基于采样点阵中的采样点确定矩形区域,对矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集,根据第一点阵数据集和第二点阵数据集确定标定数据库,基于标定数据库对待投影图像进行动态投影,从而可以实现任意素材的待投影图像的任意尺寸的动态投影。

Description

动态投影方法、系统、计算机设备和存储介质
技术领域
本申请涉及投影技术领域,特别是涉及一种动态投影方法、系统、计算机设备和存储介质。
背景技术
传统大范围投影效果需要借助多台工程投影机通过图像拼接融合实现,虽然具有全局显示的属性,但成本昂贵且工序复杂。对于一类单个(或少数几个)物体或形象在大范围投影表面中运动的投影显示需求,可以借助动态投影技术实现。
动态投影技术的核心步骤为对投射图像的实时动态透视变换。但是,若采用三维透视数学模型实现该步骤,由于模型与实际情况的偏差,使得投影位置和图像校正精度较差,从而无法实现高精度的动态投影。
发明内容
基于此,有必要针对上述技术问题,提供一种动态投影方法、系统、计算机设备和存储介质。
一种动态投影方法,所述方法包括:
在场景中的投影表面建立坐标系;
基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵;
对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集;
基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集;
根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库;
基于所述标定数据库对待投影图像进行动态投影。
在其中一个实施例中,所述基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵,包括:
基于所述坐标系,通过测量在所述投影表面进行点阵填充标定,得到所述采样点阵;
或者,
基于所述坐标系,采用投影辅助在所述投影表面进行点阵填充标定,得到所述采样点阵。
在其中一个实施例中,所述对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集,包括:
对于所述采样点阵中的每一个采样点,通过计算机控制动态投影设备的指向,将投影机的输出图像的中心对准所述采样点;
在所述计算机上调整预设参考图像的四角的位置,使得所述预设参考图像的对角线交点重合于所述输出图像的中心,并在所述投影表面投射出一个相对所述坐标系无旋转且边长固定的标准正方形;
采用标准优化求解算法,对所述预设参考图像的四角的坐标进行求解,得到当前透视变换矩阵中的六个参数的最优解;
将所述最优解和所述动态投影设备的镜面的两个姿态角构成一个八维向量;
将与所述采样点阵中的所有采样点对应的八维向量确定为所述第一点阵数据集。
在其中一个实施例中,所述基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集,包括:
对所述采样点阵构成的坐标边界进行矩形补全,确定一个容纳所有采样点的最小的矩形包络区域,将所述最小的矩形包络区域确定为所述矩形区域;
对于所述矩形区域内的未实际采样的每一个坐标点,将与所述坐标点最邻近的采样点的点阵数据,替换为所述坐标点的点阵数据;
将所有坐标点的点阵数据确定为所述第二点阵数据集。
在其中一个实施例中,所述根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库,包括:
将所述第一点阵数据集和所述第二点阵数据集进行点阵数据拼合,得到目标点阵数据集;
采用二维曲面差值法,对所述目标点阵数据集进行精细化处理,得到所述标定数据库。
在其中一个实施例中,所述标定数据库中还包括所述标准正方形在所述投影表面上的分辨率;
所述基于所述标定数据库对待投影图像进行动态投影,包括:
加载所述标定数据库;
根据预设投影分辨率,对加载后的标定数据库中的每个八维向量进行比例缩放;
透视变换对所述投影平面内任意给定的位置坐标,利用插值法从经过比例缩放的标定数据库中获得对应位置的八维向量,分别从中构造指定位置坐标处的目标透视变换矩阵,和提取所述动态投影设备的镜面的两个目标姿态角;
利用所述指定位置坐标处的目标透视变换矩阵,对所述待投影图像进行透视变换;
驱动所述动态投影设备的镜面按照所述两个目标姿态角值进行移动;
利用移动后的所述动态投影设备,对进行透视变换后的待投影图像进行动态投影。
在其中一个实施例中,所述方法还包括:
存储透视变换后的待投影图像,并同时生成所述动态投影设备的镜面姿态角序列文件。
一种动态投影系统,所述系统包括:
坐标系建立模块,用于在场景中的投影表面建立坐标系;
采样点阵确定模块,用于基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵;
数据采集模块,用于对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集;
数据替换模块,用于基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集;
数据库确定模块,用于根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库;
投影模块,用于基于所述标定数据库对待投影图像进行动态投影。
一种计算机设备,包括存储器及处理器,所述存储器上存储有可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
在场景中的投影表面建立坐标系;
基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵;
对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集;
基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集;
根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库;
基于所述标定数据库对待投影图像进行动态投影。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
在场景中的投影表面建立坐标系;
基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵;
对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集;
基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集;
根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库;
基于所述标定数据库对待投影图像进行动态投影。
上述动态投影方法、系统、计算机设备和存储介质,在场景中的投影表面建立坐标系,基于坐标系,在投影表面进行点阵填充标定,得到采样点阵,对采样点阵中的采样点进行数据采集,得到第一点阵数据集,基于采样点阵中的采样点确定矩形区域,对矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集,根据第一点阵数据集和第二点阵数据集确定标定数据库,基于标定数据库对待投影图像进行动态投影。其中,对投影表面进行点阵填充标定,得到采样点阵,通过对采样点阵进行数据采集,从而得到精细的动态投影数据库(即上述标定数据库),利用该标定数据库可以精确地在标定的投影表面上实现任意素材的待投影图像的任意尺寸的动态投影。
附图说明
图1为一个实施例中动态投影方法的应用环境图;
图2为一个实施例中动态投影方法的流程示意图;
图3为一个实施例中步骤S203的细化步骤的流程示意图;
图4为一个实施例中步骤S204的细化步骤的流程示意图;
图5为一个实施例中步骤S205的细化步骤的流程示意图;
图6为一个实施例中步骤S206的细化步骤的流程示意图;
图7为一个实施例中动态投影系统的结构框图;
图8为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的动态投影方法,可以应用于如图1所示的应用环境中。其中,包括动态投影设备10、投影机20(桌面和吊装两种安装方式),计算机30,路由器或交换机40,投影表面50(平面,正前方)、60(平面,左前方)、70(曲面,右前方),其中投影表面50、60、70仅做示意,并不仅限于此。
其中,计算机30包含至少一个处理器31和存储器32,该存储器32内存储有动态投影算法,处理器31可以调用并运行存储器32内的动态投影算法,在场景中的投影表面50、60、70建立坐标系,基于坐标系,在投影表面50、60、70进行点阵填充标定,得到采样点阵,对采样点阵中的采样点进行数据采集,得到第一点阵数据集,基于采样点阵中的采样点确定矩形区域,对矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集,根据第一点阵数据集和第二点阵数据集确定标定数据库,基于标定数据库对待投影图像进行动态投影。
在一个实施例中,如图2所示,提供了一种动态投影方法,以该方法应用于图1中的动态投影系统为例进行说明,包括以下步骤:
步骤S201,在场景中的投影表面建立坐标系;
在本发明实施例中,在场景的投影表面先确定二维坐标原点,并建立二维坐标系。其中,坐标系可采用直角坐标系或极坐标系或任意便于使用的二自由度坐标系,或多种坐标系的分块结合。
其中,若场景的投影表面存在不连续或弯曲表面的情况,应保持坐标系在其二维展开或局部平坦邻域上的连续性。例如,长方体内部表面,可将其六面展开并平铺再建立直角坐标系;球体或圆柱体内表面,可以采用极坐标系。
步骤S202,基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵;
在本发明实施例中,在步骤S201所建立的坐标系中,对投影表面进行点阵填充标定,确定一组间距均匀的点阵集合,使其能够覆盖投影表面。其中,点阵之间的间距可以根据实际需求进行设置和调整,点阵之间的间距越小则标定结果越精确。
步骤S203,对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集;
在本发明实施例中,对一个或多个采样点阵中的每一个采样点进行数据采集,会得到与每一个采样点对应的点阵数据,所有采样点的点阵数据组合成第一点阵数据集。
步骤S204,基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集;
在本发明实施例中,因为一些外界因素,例如,对场景存在遮挡,会导致得到的采样点阵是不规整的,从而使得第一点阵数据集是不完整的,则需要对采样点阵进行完善弥补,具体的,基于采样点阵中的采样点确定出一个规整的矩形区域,因该区域大于采样点阵构成的区域,则该矩形区域内肯定存在了未实际采样的点,这里将未实际采样的点成为未实际采样的坐标点,对于采样点阵中的采样点,已经进行数据采集并得到对应的点阵数据,对未实际采样的坐标点,使用已采样点阵中最邻近的采样点的八维向量作为其数据,并将所有的未实际采样的坐标点的点阵数据确定为第二点阵数据集。
步骤S205,根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库;
在本发明实施,标定数据库指包含了第一点阵数据集、第二点阵数据集等,可对待投影图像进行透视变换的数据库。
步骤S206,基于所述标定数据库对待投影图像进行动态投影。
在本发明实施例中,上述动态投影方法,在场景中的投影表面建立坐标系,基于坐标系,在投影表面进行点阵填充标定,得到采样点阵,对采样点阵中的采样点进行数据采集,得到第一点阵数据集,基于采样点阵中的采样点确定矩形区域,对矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集,根据第一点阵数据集和第二点阵数据集确定标定数据库,基于标定数据库对待投影图像进行动态投影。其中,对投影表面进行点阵填充标定,得到采样点阵,通过对采样点阵进行数据采集,从而得到精细的动态投影数据库(即上述标定数据库),利用该标定数据库可以精确地在标定的投影表面上实现任意素材的待投影图像的任意尺寸的动态投影。
可选的,上述步骤S202具体包括:
基于所述坐标系,通过测量在所述投影表面进行点阵填充标定,得到所述采样点阵;
或者,
基于所述坐标系,采用投影辅助在所述投影表面进行点阵填充标定,得到所述采样点阵。
在本发明实施例中,通常情况下会通过测量的方式在坐标系中确定一组间距均匀的点阵集合,使其能够覆盖场景中投影表面,将能够覆盖场景中投影表面点阵集合称之为采样点阵。
其中,对于一些难以在投影表面通过测量来确定点阵的场景,可以采用投影辅助法在投影表面进行点阵填充标定,得到采样点阵。具体的:额外使用一台动态投影设备或一台普通投影设备向场景投射出带有均匀网格特征的图像,经过一次透视变换以匹配投影表面(图像与投影表面匹配)后,则所投射出的无畸变网格可作为参考点阵,供待标定的动态投影设备参考。其中,若辅助投影生成的参考点阵无法一次性完全覆盖投影表面,也可以根据标定的进度依次分块辅助投射。
在一个实施例中,如图3所示,为步骤S203的细化步骤的流程示意图,包括:
步骤S2031,对于所述采样点阵中的每一个采样点,通过计算机控制动态投影设备的指向,将投影机的输出图像的中心对准所述采样点;
步骤S2032,在所述计算机上调整预设参考图像的四角的位置,使得所述预设参考图像的对角线交点重合于所述输出图像的中心,并在所述投影表面投射出一个相对所述坐标系无旋转且边长固定的标准正方形;
在本发明实施例中,标准正方形即为输出图像。
在本发明实施例中,调整至标准正方形的过程可以是手动的,也可以是基于计算机视觉技术辅助的自动化调整。
步骤S2033,采用标准优化求解算法,对所述预设参考图像的四角的坐标进行求解,得到当前透视变换矩阵中的六个参数的最优解;
需要说明的是,预设参考图像和投射出的输出图像不一定要求是正方形的,也可以是任意普通矩形,但正方形可以大大简化数据采集和标定数据库生成的过程。
其中,标准优化求解算法可以是最小二乘法,但不仅限于此。
步骤S2034,将所述最优解和所述动态投影设备的镜面的两个姿态值构成一个八维向量;
步骤S2035,将与所述采样点阵中的所有采样点对应的八维向量确定为所述第一点阵数据集。
在本发明实施例中,对投影表面的单个或多个采样点阵中的某一采样点的数据采集过程为:采用一张宽高相等的预设参考图像作为投射内容,首先通过计算机操纵动态投影设备的指向,将投影机输出图像的中心对准场景中的采样点,然后在计算机上调整预设参考图像的四角,同时满足预设参考图像的对角线交点重合于投影机输出图像中心的约束,使其在投影表面投射出一个相对于坐标系无旋转、边长固定的标准正方形(其中,对于同一场景中的全部采样点,该标准正方形应保持大小一致,但边长可以根据投影表面最大曲率自行确定,一般为弯曲越明显则边长取值越小),最后计算机根据预设参考图像的四角的坐标,采用标准优化求解算法确定当前透视变换矩阵中的六个参数的最优解,将当前透视变换矩阵中的六个参数的最优解和当前动态投影设备的镜面的两个姿态角构成一个八维向量,当得到所有采样点对应的八维向量后,将与采样点阵中的所有采样点对应的八维向量确定为第一点阵数据集。
在一个实施例中,如图4所示,为步骤S204的细化步骤的流程示意图,包括:
步骤S2041,对所述采样点阵构成的坐标边界进行矩形补全,确定一个容纳所有采样点的最小的矩形包络区域,将所述最小的矩形包络区域确定为所述矩形区域;
步骤S2042,对于所述矩形区域内的未实际采样的每一个坐标点,将与所述坐标点最邻近的采样点的点阵数据,替换为所述坐标点的点阵数据;
步骤S2043,将所有坐标点的点阵数据确定为所述第二点阵数据集。
在本发明实施例中,上述步骤S2043描述的内容和步骤S204描述的内容一致,此处不再加以赘述。
在一个实施例中,如图5所示,为步骤S205的细化步骤的流程示意图,包括:
步骤S2051,将所述第一点阵数据集和所述第二点阵数据集进行点阵数据拼合,得到目标点阵数据集;
步骤S2052,采用二维曲面差值法,对所述目标点阵数据集进行精细化处理,得到所述标定数据库。
在本发明实施例中,将第一点阵数据集和第二点阵数据集进行点阵数据拼合,得到目标点阵数据集,然后采用二维曲面插值法对目标点阵数据集进行精细化处理,得到场景中投影区域的标定数据库。其中,标定数据库中的数据形式为八个定义在矩形区域上的二维曲面。
在一个实施例中,如图6所示,为步骤S206的细化步骤的流程示意图,其中,所述标定数据库中还包括所述标准正方形在所述投影表面上的分辨率,则步骤S206具体包括:
步骤S2061,加载所述标定数据库;
步骤S2062,根据预设投影分辨率,对加载后的标定数据库中的每个八维向量进行比例缩放;
在本发明实施例中,标定数据库除了包括第一点阵数据集和第二点阵数据集,还包括场景标定时采用的标准正方形(步骤S2032中描述的标准正方形)在投影表面上的分辨率,分辨率的单位一般取[米/像素],分辨率的值等于标准正方形的投影边长[米]除以标定时采用的预设参考图像的边长像素数。该分辨率可用于计算透视变换时的图形缩放因子,实现可精确指定画面尺寸的动态投影。
步骤S2063,对所述投影平面内任意给定的位置坐标,利用插值法从经过比例缩放的标定数据库中获得对应位置的八维向量,分别从中构造指定位置坐标处的目标透视变换矩阵,和提取所述动态投影设备的镜面的两个目标姿态角;
在本发明实施例中,对于需要投射于投影表面中的指定位置坐标处的待投影图像(视频流或静态图片),其任意一帧的透视变换方式为:查询场景中投影表面的标定数据库,采用双线性插值法分别从八个定义在矩形区域上的二维曲面中获得指定位置坐标处的目标透视变换矩阵和动态投影设备的镜面的两个目标姿态角,其中,两个目标姿态角用于驱动镜面至正确的指向,目标透视变换矩阵用于对当前图像进行透视变换。
步骤S2064,利用所述指定位置坐标处的目标透视变换矩阵,对所述待投影图像进行透视变换;
步骤S2065,驱动所述动态投影设备的镜面按照所述两个目标姿态角进行移动;
步骤S2066,利用移动后的所述动态投影设备,对进行透视变换后的待投影图像进行动态投影。
在本发明实施例中,经透视变换后的图像可以即时投射显示在投影表面。
在一个实施例中,可选的,在步骤S2064之后,还可以存储透视变换后的待投影图像,并同时生成所述动态投影设备的镜面姿态角序列文件。
在本发明实施例中,经透视变换后的图像还可以另存为新的视频流,并同时生成动态投影设备的镜面姿态角序列文件,便于需要多次循环投影播放的场合,这样只需进行一次离线数据处理即可。
可选的,对于包含多台动态投影设备的应用场合,虽然在共用的场景里投射,但由于安装机位的不同,每台动态投影设备都应有其对应的场景数据库(即标定数据库)。在联机投影时可采用单主机多从机的通信架构,由主机通过局域网向各个从机广播当前视频流的时间戳,当从机检测到其播放进度超出预定时间差异后可自行调整,从而实现小延时的多机同步动态投影。
上述动态投影方法,对投影表面进行点阵填充标定,得到采样点阵,通过对采样点阵进行数据采集,从而得到精细的动态投影数据库(即上述标定数据库),利用该标定数据库可以在标定范围内(被标定的投影表面)精确实现任意素材的待投影图像的可缩放实时透视变换,并驱动动态投影设备按照动态投影设备的镜面的两个目标姿态角值,将投影机投射光路反射至准确位置,即时投射显示在投影表面,实现“一次标定,任意投影”的便利,同时还能够实现联机同步投影模式,满足更复杂的投影场景需求。
应该理解的是,虽然图2-6的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-6中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图7所示,提供了一种动态投影系统,包括:坐标系建立模块701、采样点阵确定模块702、数据采集模块703、数据替换模块704、数据库确定模块705和投影模块706,其中:
坐标系建立模块701,用于在场景中的投影表面建立坐标系;
采样点阵确定模块702,用于基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵;
数据采集模块703,用于对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集;
数据替换模块704,用于基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集;
数据库确定模块705,用于根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库;
投影模块706,用于基于所述标定数据库对待投影图像进行动态投影。
在一个实施例中,所述采样点阵确定模块702用于:
基于所述坐标系,通过测量在所述投影表面进行点阵填充标定,得到所述采样点阵;
或者,
基于所述坐标系,采用投影辅助在所述投影表面进行点阵填充标定,得到所述采样点阵。
在一个实施例中,所述数据采集模块703用于:
对于所述采样点阵中的每一个采样点,通过计算机控制动态投影设备的指向,将投影机的输出图像的中心对准所述采样点;
在所述计算机上调整预设参考图像的四角的位置,使得所述预设参考图像的对角线交点重合于所述输出图像的中心,并在所述投影表面投射出一个相对所述坐标系无旋转且边长固定的标准正方形;
采用标准优化求解算法,对所述预设参考图像的四角的坐标进行求解,得到当前透视变换矩阵中的六个参数的最优解;
将所述最优解和所述动态投影设备的镜面的两个姿态角构成一个八维向量;
将与所述采样点阵中的所有采样点对应的八维向量确定为所述第一点阵数据集。
在一个实施例中,所述数据替换模块704用于:
对所述采样点阵构成的坐标边界进行矩形补全,确定一个容纳所有采样点的最小的矩形包络区域,将所述最小的矩形包络区域确定为所述矩形区域;
对于所述矩形区域内的未实际采样的每一个坐标点,将与所述坐标点最邻近的采样点的点阵数据,替换为所述坐标点的点阵数据;
将所有坐标点的点阵数据确定为所述第二点阵数据集。
在一个实施例中,所述数据库确定模块705用于:
将所述第一点阵数据集和所述第二点阵数据集进行点阵数据拼合,得到目标点阵数据集;
采用二维曲面差值法,对所述目标点阵数据集进行精细化处理,得到所述标定数据库。
在一个实施例中,所述投影模块706用于:
加载所述标定数据库;
根据预设投影分辨率,对加载后的标定数据库中的每个八维向量进行比例缩放;
对所述投影平面内任意给定的位置坐标,利用插值法从经过比例缩放的标定数据库中获得对应位置的八维向量,分别从中构造指定位置坐标处的目标透视变换矩阵,和提取所述动态投影设备的镜面的两个目标姿态角;
利用所述指定位置坐标处的目标透视变换矩阵,对所述待投影图像进行透视变换;
驱动所述动态投影设备的镜面按照所述两个目标姿态角进行移动;
利用移动后的所述动态投影设备,对进行透视变换后的待投影图像进行动态投影。
在一个实施例中,所述动态投影系统还包括文件生成模块,用于存储透视变换后的待投影图像,并同时生成所述动态投影设备的镜面姿态角序列文件。
关于动态投影系统的具体限定可以参见上文中对于动态投影方法的限定,在此不再赘述。上述动态投影系统中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图8所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储点阵数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种动态投影方法。
本领域技术人员可以理解,图8中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器及处理器,所述存储器上存储有可在处理器上运行的计算机程序,处理器执行计算机程序时实现以下步骤:
在场景中的投影表面建立坐标系;
基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵;
对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集;
基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集;
根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库;
基于所述标定数据库对待投影图像进行动态投影。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
基于所述坐标系,通过测量在所述投影表面进行点阵填充标定,得到所述采样点阵;
或者,
基于所述坐标系,采用投影辅助在所述投影表面进行点阵填充标定,得到所述采样点阵。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
对于所述采样点阵中的每一个采样点,通过计算机控制动态投影设备的指向,将投影机的输出图像的中心对准所述采样点;
在所述计算机上调整预设参考图像的四角的位置,使得所述预设参考图像的对角线交点重合于所述输出图像的中心,并在所述投影表面投射出一个相对所述坐标系无旋转且边长固定的标准正方形;
采用标准优化求解算法,对所述预设参考图像的四角的坐标进行求解,得到当前透视变换矩阵中的六个参数的最优解;
将所述最优解和所述动态投影设备的镜面的两个姿态角构成一个八维向量;
将与所述采样点阵中的所有采样点对应的八维向量确定为所述第一点阵数据集。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
对所述采样点阵构成的坐标边界进行矩形补全,确定一个容纳所有采样点的最小的矩形包络区域,将所述最小的矩形包络区域确定为所述矩形区域;
对于所述矩形区域内的未实际采样的每一个坐标点,将与所述坐标点最邻近的采样点的点阵数据,替换为所述坐标点的点阵数据;
将所有坐标点的点阵数据确定为所述第二点阵数据集。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
将所述第一点阵数据集和所述第二点阵数据集进行点阵数据拼合,得到目标点阵数据集;
采用二维曲面差值法,对所述目标点阵数据集进行精细化处理,得到所述标定数据库。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
加载所述标定数据库;
根据预设投影分辨率,对加载后的标定数据库中的每个八维向量进行比例缩放;
对所述投影平面内任意给定的位置坐标,利用插值法从经过比例缩放的标定数据库中获得对应位置的八维向量,分别从中构造指定位置坐标处的目标透视变换矩阵,和提取所述动态投影设备的镜面的两个目标姿态角;
利用所述指定位置坐标处的目标透视变换矩阵,对所述待投影图像进行透视变换;
驱动所述动态投影设备的镜面按照所述两个目标姿态角值进行移动;
利用移动后的所述动态投影设备,对进行透视变换后的待投影图像进行动态投影。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
存储透视变换后的待投影图像,并同时生成所述动态投影设备的镜面姿态角序列文件。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
在场景中的投影表面建立坐标系;
基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵;
对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集;
基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集;
根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库;
基于所述标定数据库对待投影图像进行动态投影。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
基于所述坐标系,通过测量在所述投影表面进行点阵填充标定,得到所述采样点阵;
或者,
基于所述坐标系,采用投影辅助在所述投影表面进行点阵填充标定,得到所述采样点阵。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
对于所述采样点阵中的每一个采样点,通过计算机控制动态投影设备的指向,将投影机的输出图像的中心对准所述采样点;
在所述计算机上调整预设参考图像的四角的位置,使得所述预设参考图像的对角线交点重合于所述输出图像的中心,并在所述投影表面投射出一个相对所述坐标系无旋转且边长固定的标准正方形;
采用标准优化求解算法,对所述预设参考图像的四角的坐标进行求解,得到当前透视变换矩阵中的六个参数的最优解;
将所述最优解和所述动态投影设备的镜面的两个姿态角构成一个八维向量;
将与所述采样点阵中的所有采样点对应的八维向量确定为所述第一点阵数据集。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
对所述采样点阵构成的坐标边界进行矩形补全,确定一个容纳所有采样点的最小的矩形包络区域,将所述最小的矩形包络区域确定为所述矩形区域;
对于所述矩形区域内的未实际采样的每一个坐标点,将与所述坐标点最邻近的采样点的点阵数据,替换为所述坐标点的点阵数据;
将所有坐标点的点阵数据确定为所述第二点阵数据集。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
将所述第一点阵数据集和所述第二点阵数据集进行点阵数据拼合,得到目标点阵数据集;
采用二维曲面差值法,对所述目标点阵数据集进行精细化处理,得到所述标定数据库。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
加载所述标定数据库;
根据预设投影分辨率,对加载后的标定数据库中的每个八维向量进行比例缩放;
对所述投影平面内任意给定的位置坐标,利用插值法从经过比例缩放的标定数据库中获得对应位置的八维向量,分别从中构造指定位置坐标处的目标透视变换矩阵,和提取所述动态投影设备的镜面的两个目标姿态角;
利用所述指定位置坐标处的目标透视变换矩阵,对所述待投影图像进行透视变换;
驱动所述动态投影设备的镜面按照所述两个目标姿态角值进行移动;
利用移动后的所述动态投影设备,对进行透视变换后的待投影图像进行动态投影。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
存储透视变换后的待投影图像,并同时生成所述动态投影设备的镜面姿态角序列文件。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种动态投影方法,其特征在于,所述方法包括:
在场景中的投影表面建立坐标系;
基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵;
对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集;
基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集;
根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库;
基于所述标定数据库对待投影图像进行动态投影。
2.根据权利要求1所述的方法,其特征在于,所述基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵,包括:
基于所述坐标系,通过测量在所述投影表面进行点阵填充标定,得到所述采样点阵;
或者,
基于所述坐标系,采用投影辅助在所述投影表面进行点阵填充标定,得到所述采样点阵。
3.根据权利要求1所述的方法,其特征在于,所述对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集,包括:
对于所述采样点阵中的每一个采样点,通过计算机控制动态投影设备的指向,将投影机的输出图像的中心对准所述采样点;
在所述计算机上调整预设参考图像的四角的位置,使得所述预设参考图像的对角线交点重合于所述输出图像的中心,并在所述投影表面投射出一个相对所述坐标系无旋转且边长固定的标准正方形;
采用标准优化求解算法,对所述预设参考图像的四角的坐标进行求解,得到当前透视变换矩阵中的六个参数的最优解;
将所述最优解和所述动态投影设备的镜面的两个姿态角构成一个八维向量;
将与所述采样点阵中的所有采样点对应的八维向量确定为所述第一点阵数据集。
4.根据权利要求3所述的方法,其特征在于,所述基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集,包括:
对所述采样点阵构成的坐标边界进行矩形补全,确定一个容纳所有采样点的最小的矩形包络区域,将所述最小的矩形包络区域确定为所述矩形区域;
对于所述矩形区域内的未实际采样的每一个坐标点,将与所述坐标点最邻近的采样点的点阵数据,替换为所述坐标点的点阵数据;
将所有坐标点的点阵数据确定为所述第二点阵数据集。
5.根据权利要求1所述的方法,其特征在于,所述根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库,包括:
将所述第一点阵数据集和所述第二点阵数据集进行点阵数据拼合,得到目标点阵数据集;
采用二维曲面差值法,对所述目标点阵数据集进行精细化处理,得到所述标定数据库。
6.根据权利要求3所述的方法,其特征在于,所述标定数据库中还包括所述标准正方形在所述投影表面上的分辨率;
所述基于所述标定数据库对待投影图像进行动态投影,包括:
加载所述标定数据库;
根据预设投影分辨率,对加载后的标定数据库中的每个八维向量进行比例缩放;
对所述投影平面内任意给定的位置坐标,利用插值法从经过比例缩放的标定数据库中获得对应位置的八维向量,分别从中构造指定位置坐标处的目标透视变换矩阵,和提取所述动态投影设备的镜面的两个目标姿态角;
利用所述指定位置坐标处的目标透视变换矩阵,对所述待投影图像进行透视变换;
驱动所述动态投影设备的镜面按照所述两个目标姿态角进行移动;
利用移动后的所述动态投影设备,对进行透视变换后的待投影图像进行动态投影。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
存储透视变换后的待投影图像,并同时生成所述动态投影设备的镜面姿态角序列文件。
8.一种动态投影系统,其特征在于,所述系统包括:
坐标系建立模块,用于在场景中的投影表面建立坐标系;
采样点阵确定模块,用于基于所述坐标系,在所述投影表面进行点阵填充标定,得到采样点阵;
数据采集模块,用于对所述采样点阵中的采样点进行数据采集,得到第一点阵数据集;
数据替换模块,用于基于所述采样点阵中的采样点确定矩形区域,对所述矩形区域内的未实际采样的坐标点进行点阵数据替换,得到第二点阵数据集;
数据库确定模块,用于根据所述第一点阵数据集和所述第二点阵数据集确定标定数据库;
投影模块,用于基于所述标定数据库对待投影图像进行动态投影。
9.一种计算机设备,包括存储器及处理器,所述存储器上存储有可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
CN201910313447.7A 2019-04-18 2019-04-18 动态投影方法、系统、计算机设备和存储介质 Active CN110148171B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910313447.7A CN110148171B (zh) 2019-04-18 2019-04-18 动态投影方法、系统、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910313447.7A CN110148171B (zh) 2019-04-18 2019-04-18 动态投影方法、系统、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN110148171A true CN110148171A (zh) 2019-08-20
CN110148171B CN110148171B (zh) 2021-03-23

Family

ID=67589584

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910313447.7A Active CN110148171B (zh) 2019-04-18 2019-04-18 动态投影方法、系统、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN110148171B (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013205407A (ja) * 2012-03-29 2013-10-07 Moire Institute Inc 形状計測装置、形状計測方法及び形状計測装置における校正処理方法
CN104036475A (zh) * 2013-07-22 2014-09-10 成都智慧星球科技有限公司 适应于任意投影机群及投影屏幕的高鲁棒性几何校正方法
CN104657982A (zh) * 2015-01-15 2015-05-27 华中科技大学 一种投影仪标定方法
CN106600647A (zh) * 2016-06-30 2017-04-26 华南理工大学 一种双目视觉多线投影结构光标定方法
CN106780615A (zh) * 2016-11-23 2017-05-31 安徽慧视金瞳科技有限公司 一种基于密集采样的投影标定方法
CN107861326A (zh) * 2017-11-16 2018-03-30 银弗(北京)科技有限公司 一种动态镜像投影系统
JP2018088654A (ja) * 2016-11-30 2018-06-07 株式会社リコー 投影システム、画像処理装置およびプログラム
CN108645353A (zh) * 2018-05-14 2018-10-12 四川川大智胜软件股份有限公司 基于多帧随机二元编码光场的三维数据采集系统及方法
CN108848360A (zh) * 2018-06-21 2018-11-20 Oppo广东移动通信有限公司 智能投影仪、投屏控制方法及相关产品
CN109325912A (zh) * 2018-08-27 2019-02-12 曜科智能科技(上海)有限公司 基于偏振光光场的反光分离方法及标定拼合系统
CN109544654A (zh) * 2018-11-16 2019-03-29 中科丽颖(北京)科技有限公司 一种在动态投影介质进行投影计算的方法
CN208697446U (zh) * 2018-05-08 2019-04-05 深圳市火乐科技发展有限公司 一种智能投影机器人

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013205407A (ja) * 2012-03-29 2013-10-07 Moire Institute Inc 形状計測装置、形状計測方法及び形状計測装置における校正処理方法
CN104036475A (zh) * 2013-07-22 2014-09-10 成都智慧星球科技有限公司 适应于任意投影机群及投影屏幕的高鲁棒性几何校正方法
CN104657982A (zh) * 2015-01-15 2015-05-27 华中科技大学 一种投影仪标定方法
CN106600647A (zh) * 2016-06-30 2017-04-26 华南理工大学 一种双目视觉多线投影结构光标定方法
CN106780615A (zh) * 2016-11-23 2017-05-31 安徽慧视金瞳科技有限公司 一种基于密集采样的投影标定方法
JP2018088654A (ja) * 2016-11-30 2018-06-07 株式会社リコー 投影システム、画像処理装置およびプログラム
CN107861326A (zh) * 2017-11-16 2018-03-30 银弗(北京)科技有限公司 一种动态镜像投影系统
CN208697446U (zh) * 2018-05-08 2019-04-05 深圳市火乐科技发展有限公司 一种智能投影机器人
CN108645353A (zh) * 2018-05-14 2018-10-12 四川川大智胜软件股份有限公司 基于多帧随机二元编码光场的三维数据采集系统及方法
CN108848360A (zh) * 2018-06-21 2018-11-20 Oppo广东移动通信有限公司 智能投影仪、投屏控制方法及相关产品
CN109325912A (zh) * 2018-08-27 2019-02-12 曜科智能科技(上海)有限公司 基于偏振光光场的反光分离方法及标定拼合系统
CN109544654A (zh) * 2018-11-16 2019-03-29 中科丽颖(北京)科技有限公司 一种在动态投影介质进行投影计算的方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
BARRANCO GUTIÉRREZ ALEJANDRO ISRAEL 等: "Digital Camera Calibration Analysis Using Perspective Projection Matrix", 《WSEAS INTERNATIONAL CONFERENCE ON SIGNAL PROCESSING》 *
丁雅斌 等: "基于点阵编码的三维主动视觉标定", 《光子学报》 *
王衡 等: "一种用于结构光测量系统的投影仪标定技术", 《信息技术》 *

Also Published As

Publication number Publication date
CN110148171B (zh) 2021-03-23

Similar Documents

Publication Publication Date Title
CN107564069A (zh) 标定参数的确定方法、装置及计算机可读存储介质
JP2021166075A (ja) 画像の投影方法、装置、デバイス及び記憶媒体
CN106570905B (zh) 一种非合作目标点云初始姿态验证方法
JP2720920B2 (ja) 画像処理システムにおける実写画像とコンピュータグラフィックスの合成方法
CN108961423B (zh) 虚拟信息处理方法、装置、设备及存储介质
CN111062869B (zh) 一种面向曲面幕的多通道校正拼接的方法
CN108489398A (zh) 一种广角场景下激光加单目视觉测量三维坐标的方法
CN110062216A (zh) 实景交互方法、系统、计算机设备和存储介质
US11570418B2 (en) Techniques for generating light field data by combining multiple synthesized viewpoints
US20200090575A1 (en) Data processing systems
CN113593027A (zh) 一种三维航电显控界面装置
CN107833245A (zh) 基于单目视觉特征点匹配的slam方法及系统
CN114429527A (zh) 基于slam的远程操作场景三维重建方法
CN112017242B (zh) 显示方法及装置、设备、存储介质
CN110148171A (zh) 动态投影方法、系统、计算机设备和存储介质
CN105550986B (zh) 一种基于多镜头多传感器的图像映射变换方法和装置
CN116437061A (zh) 演示图像激光投射方法、装置、计算机设备及存储介质
JPH10208074A (ja) 画像生成方法
CN111526297B (zh) 曲面屏图像采集方法、装置及终端设备
US20040155886A1 (en) Image simulation processing method, processing apparatus, and program
CN114299202A (zh) 虚拟场景制作的处理方法及装置、存储介质、终端
WO2014000159A1 (zh) 校正多通道视景投影系统的投影仪的方法及设备
JP2002095008A (ja) 映像処理装置及びその方法並びに記憶媒体
JP3441804B2 (ja) 画像処理装置及び方法
CN108647222B (zh) 一种线路三维漫游热点图标定位方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant