CN111698491B - 一种多投影图像显示方法、装置及电子设备和存储介质 - Google Patents

一种多投影图像显示方法、装置及电子设备和存储介质 Download PDF

Info

Publication number
CN111698491B
CN111698491B CN202010589336.1A CN202010589336A CN111698491B CN 111698491 B CN111698491 B CN 111698491B CN 202010589336 A CN202010589336 A CN 202010589336A CN 111698491 B CN111698491 B CN 111698491B
Authority
CN
China
Prior art keywords
image
screen
point
images
projection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010589336.1A
Other languages
English (en)
Other versions
CN111698491A (zh
Inventor
方云科
苏凯
张生龙
丁威
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Iecho Technology Co ltd
Original Assignee
Hangzhou Iecho Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Iecho Technology Co ltd filed Critical Hangzhou Iecho Technology Co ltd
Priority to CN202010589336.1A priority Critical patent/CN111698491B/zh
Publication of CN111698491A publication Critical patent/CN111698491A/zh
Application granted granted Critical
Publication of CN111698491B publication Critical patent/CN111698491B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/3147Multi-projection systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor

Abstract

本申请公开了一种多投影图像显示方法、装置及一种电子设备和计算机可读存储介质,该方法包括:获取各个投影仪第一帧的待投影图像;加载内存中预存的图像映射矩阵,图像映射矩阵用于保存预先计算的原始图像与扭曲图像之间的屏幕坐标点变换关系;基于图像映射矩阵,通过点查找法并行确定各个待投影图像对应的扭曲后图像,生成拼接后的完整图像,并将完整图像的数据写入内存中;通过预设屏幕对完整图像进行显示。本申请预先计算表征原始图像与扭曲图像之间的屏幕坐标点变换关系的图像映射矩阵并保存,在后续投影过程中,可直接加载并基于图像映射矩阵快速实现多投影图像的拼接融合,将完整图像显示在屏幕上,减少了对于硬件的依赖,降低了实现成本。

Description

一种多投影图像显示方法、装置及电子设备和存储介质
技术领域
本申请涉及图像处理技术领域,更具体地说,涉及一种多投影图像显示方法、装置及一种电子设备和一种计算机可读存储介质。
背景技术
投影机是生活中比较常见的一种设备,不管是在会议室还是阶梯教室中都会利用投影机来投影辅助工作,而这些场所都是投影面积比较小的,如果遇到大型投影面积例如工业生产的话,可能需要两台甚至多台投影机才可实现投影。当多台投影仪同时投射一幅画面时,画面中必然会有重叠之处,需要利用图像扭曲技术对图像分屏处理再拼接,确保屏幕整张无缝,显示效果与一台投影机投射出的完整画面相同。
在传统针对多台投影机进行图像融合拼接时所需的设备包括:屏幕:屏幕的选择至关重要,需要确保屏幕整张无缝,这样才能够确保画面完美性;投影机的选择也是同样重要的,其画面质量直接影响到显示效果,选用进口高流明工程机,能够确保显示效果的稳定性;软边融合拼接处理器:其决定了大屏幕画面显示的内容和速度,处理器的好坏对于信号源的处理速度、画面清晰度、软边融合的质量都有着不可低估的作用;信号处理设备:主要用于进行信号源类型的转换、信号的切换、信号的放大与传输等,对于画面显示非常重要。然而,这种图像拼接方式较多依赖硬件设备,导致成本较高。
因此,如何解决上述问题是本领域技术人员需要重点关注的。
发明内容
本申请的目的在于提供一种多投影图像显示方法、装置及一种电子设备和一种计算机可读存储介质,显著减少了对于硬件的依赖,降低了实现成本。
为实现上述目的,本申请提供了一种多投影图像显示方法,包括:
获取各个投影仪第一帧的待投影图像;
加载内存中预存的图像映射矩阵,所述图像映射矩阵用于保存预先计算的原始图像与扭曲图像之间的屏幕坐标点变换关系;
基于所述图像映射矩阵,通过点查找法并行确定各个待投影图像对应的扭曲后图像,生成拼接后的完整图像,并将所述完整图像的数据写入内存中;
通过预设屏幕对所述完整图像进行显示。
可选的,所述图像映射矩阵的计算过程包括:
采集各个投影仪对应的投影前后图像,并按照预设划分策略分别将投影前后图像划分为预设数量的网格;
根据投影前后图像的各个网格对中两个网格顶点的屏幕坐标对应关系生成单应矩阵,并根据所述单应矩阵计算数据点映射函数;
基于所述数据点映射函数,计算各个网格数据基于当前投影仪的第一屏幕坐标以及基于所述预设屏幕的第二屏幕坐标,得到整个屏幕的图像映射矩阵。
可选的,所述根据所述单应矩阵计算数据点映射函数,包括:
根据所述单应矩阵,利用第一计算公式计算所述数据点映射函数,所述第一计算公式包括:
Figure BDA0002555793970000021
其中,map为所述单应矩阵;xa、ya为投影前网格内的点元素坐标;xb0、yb0为投影后网格内的点元素坐标。
可选的,所述基于所述数据点映射函数,计算各个网格数据基于当前投影仪的第一屏幕坐标以及基于所述预设屏幕的第二屏幕坐标,包括:
针对投影前后图像中的各个网格对,分别计算在预设屏幕坐标下包含两个网格的最小外接矩形;
利用第二计算公式计算各个网格数据基于当前投影仪的第一屏幕坐标,所述第二计算公式包括:xb1=xb0+rx0,yb1=yb0+ry0
其中,rx0、ry0为所述最小外接矩形的左上角屏幕点值;xb1、yb1为所述第一屏幕坐标;
利用第三计算公式计算各个网格数据基于所述预设屏幕的第二屏幕坐标,所述第三计算公式包括:xb=xb1+rx,yb=yb1+ry
其中,rx、ry为当前网格所在投影仪屏幕左上角基于所述预设屏幕的左上角坐标点值;xb、yb为所述第二屏幕坐标。
可选的,在所述通过预设屏幕对所述完整图像进行显示之后,还包括:
在监测到后续帧图像的局部位置发生改变后,结合内存中保存的所述完整图像的数据,确定当前发生改变的目标图像范围;
根据图像变化,对所述目标图像范围进行重新扭曲映射,并在完成后显示新的扭曲图像。
可选的,还包括:
按照预设时间周期定时执行所述基于所述图像映射矩阵,通过点查找法并行确定各个待投影图像对应的扭曲后图像的步骤,以便整个所述预设屏幕根据所述图像映射矩阵进行更新。
可选的,还包括:
加载内存中预先计算的鼠标坐标点映射矩阵,所述鼠标坐标点映射矩阵用于保存鼠标点在所述预设屏幕上的显示位置与图像存储矩阵中的实际坐标位置之间的映射关系;
当监测到用户端移动鼠标点的操作后,根据所述鼠标坐标点映射矩阵确定当前操作对应的鼠标实际位置。
为实现上述目的,本申请提供了一种多投影图像显示装置,包括:
图像获取模块,用于获取各个投影仪第一帧的待投影图像;
矩阵加载模块,用于加载内存中预存的图像映射矩阵,所述图像映射矩阵用于保存预先计算的原始图像与扭曲图像之间的屏幕坐标点变换关系;
图像扭曲模块,用于基于所述图像映射矩阵,通过点查找法并行确定各个待投影图像对应的扭曲后图像,生成拼接后的完整图像,并将所述完整图像的数据写入内存中;
图像显示模块,用于通过预设屏幕对所述完整图像进行显示。
为实现上述目的,本申请提供了一种电子设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现前述公开的任一种多投影图像显示方法的步骤。
为实现上述目的,本申请提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现前述公开的任一种多投影图像显示方法的步骤。
通过以上方案可知,本申请提供的一种多投影图像显示方法,包括:获取各个投影仪第一帧的待投影图像;加载内存中预存的图像映射矩阵,所述图像映射矩阵用于保存预先计算的原始图像与扭曲图像之间的屏幕坐标点变换关系;基于所述图像映射矩阵,通过点查找法并行确定各个待投影图像对应的扭曲后图像,生成拼接后的完整图像,并将所述完整图像的数据写入内存中;通过预设屏幕对所述完整图像进行显示。由上可知,本申请预先计算表征原始图像与扭曲图像之间的屏幕坐标点变换关系的图像映射矩阵并保存,在后续投影过程中,可直接加载内存中的图像映射矩阵,进而能够基于图像映射矩阵快速实现多投影图像的拼接融合,将完整图像显示在屏幕上,显著减少了对于硬件的依赖,降低了实现成本。
本申请还公开了一种多投影图像显示装置及一种电子设备和一种计算机可读存储介质,同样能实现上述技术效果。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性的,并不能限制本申请。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例公开的一种多投影图像显示方法的流程图;
图2为本申请实施例公开的一种具体的图像划分方式示意图;
图3、图4分别为本申请实施例公开的投影前后的原始图像和扭曲图像;
图5为本申请实施例公开的网格对示意图;
图6为本申请实施例公开的扭曲后整体图像示意图;
图7为本申请实施例公开的一种多投影图像显示装置的结构图;
图8为本申请实施例公开的一种电子设备的结构图;
图9为本申请实施例公开的另一种电子设备的结构图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在传统针对多台投影机进行图像融合拼接时所需较多的硬件设备,且对硬件设备要求较高,例如需要画面质量较高的投影机,性能优良的软边融合拼接处理器等。这种图像拼接方式较多地依赖硬件设备,导致成本较高。
因此,本申请实施例公开了一种多投影图像显示方法,显著减少了对于硬件的依赖,降低了实现成本。
参见图1所示,本申请实施例公开的一种多投影图像显示方法包括:
S101:获取各个投影仪第一帧的待投影图像;
本申请实施例中,可以在图像投影开始时,首先获取各个投影仪第一帧的待投影图像。
S102:加载内存中预存的图像映射矩阵,所述图像映射矩阵用于保存预先计算的原始图像与扭曲图像之间的屏幕坐标点变换关系;
本申请实施例中,预先计算表征原始图像与扭曲图像之间的屏幕坐标点变换关系的图像映射矩阵并存储至内存。在获取到待投影图像,需要进行投影计算时,将加载内存中保存的图像映射矩阵用于进行图像扭曲。
在具体实施中,首先需要获取图像基本信息和网格扭曲信息。图像基本信息包括但不限于图像宽度、图像高度、横向投影仪个数、列向投影仪个数、每个投影仪网格列个数、每个投影仪网格行个数和投影仪总个数等。网格扭曲信息包括原始网格坐标信息,即从第一行开始逐行向下,分别以每个小网格左上角为起点,顺时针记录原始网格四个角的屏幕坐标;以及扭曲后网格坐标信息,即从第一行开始逐行向下,分别以每个小网格左上角为起点,顺时针记录扭曲后网格四个角的屏幕坐标。后续可利用上述信息进行分块扭曲。
需要说明的是,图像映射矩阵的计算过程可以具体包括:采集各个投影仪对应的投影前后图像,并按照预设划分策略分别将投影前后图像划分为预设数量的网格。具体地,在划分网格时,可根据屏幕分辨率确定网格的数量,即基于屏幕分辨率调整划分策略。例如,参见图2所示,当投影仪总数量为6个时,可对图像进行六等分,并且将每个投影图像划分为10*10的小网格。
进一步地,根据投影前后图像的各个网格对中两个网格顶点的屏幕坐标对应关系生成单应矩阵,并根据单应矩阵计算数据点映射函数。进而即可基于数据点映射函数,计算各个网格数据基于当前投影仪的第一屏幕坐标以及基于预设屏幕的第二屏幕坐标,得到整个屏幕的图像映射矩阵。
以一种具体的示例来说,图3为一个投影仪对应的投影前的原始图像,图4为该原始图像对应的投影后的扭曲图像。具体地,可以针对图5中投影前后图像中的各个网格对,分别计算在预设屏幕坐标下包含两个网格的最小外接矩形。该外接矩形为一个,其同时包含了a、b两个四边形,并将原始图像a中数据赋值到基于屏幕坐标的最小外接矩形对应位置,其中,最小外接矩形中与a无对应坐标位置的数据赋值为0,生成可以包含图像投影前后的屏幕空间坐标信息和图像信息。
根据a、b四个顶点的屏幕坐标对应关系生成单应矩阵之后,可以根据单应矩阵,利用第一计算公式计算数据点映射函数,第一计算公式可以包括以下公式:
Figure BDA0002555793970000061
其中,map为单应矩阵;xa、ya为投影前网格内的点元素坐标,即图5中a范围内的元素坐标;xb0、yb0为投影后网格内的点元素坐标,即图5中b范围内的元素坐标。需要指出的是,上述坐标的起点都是以自身对应的最小外接矩形的左上角为坐标零点计算的。
进一步地,可以利用第二计算公式计算各个网格数据基于当前投影仪的第一屏幕坐标,第二计算公式包括:xb1=xb0+rx0,yb1=yb0+ry0;其中,rx0、ry0为最小外接矩形的左上角屏幕点值;xb1、yb1为第一屏幕坐标。利用第三计算公式计算各个网格数据基于预设屏幕的第二屏幕坐标,第三计算公式包括:xb=xb1+rx,yb=yb1+ry;其中,rx、ry为当前网格所在投影仪屏幕左上角基于预设屏幕的左上角坐标点值;xb、yb为第二屏幕坐标。
S103:基于所述图像映射矩阵,通过点查找法并行确定各个待投影图像对应的扭曲后图像,生成拼接后的完整图像,并将所述完整图像的数据写入内存中;
可以理解的是,加载图像映射矩阵之后,可基于该映射矩阵进行图像扭曲,通过点查找法并行计算对应的扭曲后图像,并保存完整图像的数据,以便后续进行数据对比。
S104:通过预设屏幕对所述完整图像进行显示。
本步骤中,可对通过预设屏幕显示生成的完整图像,完成多投影图像的拼接融合显示。作为一种优选的实施方式,在监测到后续帧图像的局部位置发生改变后,例如通过鼠标点击移动了图像的某个位置,屏幕上其他位置图像没有改变时,可结合内存中保存的完整图像的数据,确定当前发生改变的目标图像范围;进而可根据图像变化,对目标图像范围进行重新扭曲映射,并在完成后显示新的扭曲图像,无需在每次图像改变时均对整个屏幕图像进行重新计算,避免了资源开销。
进一步地,考虑到一直局部刷新图像,长时间可能会导致的图像失真问题,本申请实施例还可按照预设时间周期定时重新执行步骤S103,以便整个预设屏幕根据图像映射矩阵进行整体的图像更新,保持内存中原始图像和扭曲图像的统一。
通过以上方案可知,本申请提供的一种多投影图像显示方法,包括:获取各个投影仪第一帧的待投影图像;加载内存中预存的图像映射矩阵,所述图像映射矩阵用于保存预先计算的原始图像与扭曲图像之间的屏幕坐标点变换关系;基于所述图像映射矩阵,通过点查找法并行确定各个待投影图像对应的扭曲后图像,生成拼接后的完整图像,并将所述完整图像的数据写入内存中;通过预设屏幕对所述完整图像进行显示。由上可知,本申请预先计算表征原始图像与扭曲图像之间的屏幕坐标点变换关系的图像映射矩阵并保存,在后续投影过程中,可直接加载内存中的图像映射矩阵,进而能够基于图像映射矩阵快速实现多投影图像的拼接融合,将完整图像显示在屏幕上,显著减少了对于硬件的依赖,降低了实现成本。
在上述实施例的基础上,本申请实施例还进一步提供了针对后续用户的鼠标操作的处理过程。具体地,首先加载内存中预先计算的鼠标坐标点映射矩阵,上述鼠标坐标点映射矩阵用于保存鼠标点在预设屏幕上的显示位置与图像存储矩阵中的实际坐标位置之间的映射关系。当监测到用户端移动鼠标点的操作后,根据鼠标坐标点映射矩阵确定当前操作对应的鼠标实际位置。
具体地,上述鼠标坐标点映射矩阵的计算过程可以包括:首先将鼠标坐标点映射矩阵初始化为四个通道全零矩阵。其中,前两个通道代表鼠标点的屏幕显示位置横纵坐标,后两个通道代表鼠标点在图像存储矩阵的实际坐标位置横纵坐标。
如图6所示,针对图6中间白色区域,即采样后区间范围为b1~b6的区域,屏幕显示横纵坐标为图像映射矩阵当前像素位置在原图未扭曲前的屏幕坐标点位置;鼠标点在图像存储矩阵的横纵坐标就是当前像素点所在图像位置,其中,坐标值用(0,0)表示的鼠标点在图像存储矩阵的位置无需改变。
针对图6左边黑色区域,即左边投影仪b1、b4所在屏幕,横向最小值为当前屏白色区域左上角值,横向最大值为当前屏白色区域左下角值,纵向值为0到当前行白色区域最左边位置,则该区域的所有点屏幕显示横纵坐标为当前行左边起第一个白色点的屏幕显示横纵坐标,鼠标点在图像存储矩阵的实际横纵坐标为当前行左边起第一个白色点的像素点所在位置下标值,即该白色点基于整个屏幕图像坐标位置是以整个屏幕左上角为(0,0)点开始的。
针对图6右边黑色区域,即右边投影仪b3、b6所在屏幕,横向最小值为当前屏白色区域右上角值,横向最大值为当前屏白色区域右下角值,纵向值为当前行白色区域最右边位置到屏幕最大宽度,则该区域的所有点屏幕显示横纵坐标为当前行右边起第一个白色点的屏幕显示横纵坐标,鼠标点在图像存储矩阵的实际横纵坐标为当前行右边起第一个白色点的像素点所在位置下标值,即该白色点基于整个屏幕图像坐标位置是以整个屏幕左上角为(0,0)点开始的。
针对图6上边黑色区域,即上边投影仪b1、b2、b3所在屏幕,纵向最小值为当前屏白色区域左上角值,左边第一个屏其值取0;纵向最大值为当前屏白色区域右上角值,右边第一个屏其值取屏幕最大宽度-1,横向值为0到当前列白色区域最上边位置,则该区域的所有点屏幕显示横纵坐标为当前列上边起第一个白色点的屏幕显示横纵坐标,鼠标点在图像存储矩阵的实际横纵坐标为当前列上边起第一个白色点的像素点所在位置下标值,即该白色点基于整个屏幕图像坐标位置是以整个屏幕左上角为(0,0)点开始的。
针对图6下边黑色区域,即投影仪b4、b5、b6所在屏幕,纵向最小值为当前屏白色区域左下角值,左边第一个屏其值取0;纵向最大值为当前屏白色区域右下角值,右边第一个屏其值取屏幕最大宽度-1,横向值为当前列白色区域最下边位置到屏幕高度-1,则该区域的所有点屏幕显示横纵坐标为当前列下边起第一个白色点的屏幕显示横纵坐标,鼠标点在图像存储矩阵的实际横纵坐标为当前列下边起第一个白色点的像素点所在位置下标值,即该白色点基于整个屏幕图像坐标位置是以整个屏幕左上角为(0,0)点开始的。
针对图6中间横向的黑色区域,即每一对屏幕,如b1和b4,b2和b5,b3和b6分别所在屏幕的中间区域。以b2和b5所在屏幕的中间黑色区域为例,纵向最小值为b2左下角与b5白色区域左上角的最大值,左边第一屏时为0,纵向最大值为b2右下角值与b5右上角值的最小值,横向最小值为当前列b2的下边起第一个白色点位置,横向最大值为当前列b5的上边起第一个白色点位置。其中,中间黑色区域横坐标属于b2所在屏幕范围的点,则这些点的屏幕显示横纵坐标为当前列b5上边起第一个白色点的屏幕显示横纵坐标,鼠标点在图像存储矩阵的实际横纵坐标为当前列b5上边起第一个白色点的像素点所在位置下标值,即该白色点基于整个屏幕图像坐标位置是以整个屏幕左上角为(0,0)点开始的;中间黑色区域横坐标属于b5所在屏幕范围的点,则这些点的屏幕显示横纵坐标为当前列b2下边起第一个白色点的屏幕显示横纵坐标,鼠标点在图像存储矩阵的实际横纵坐标为当前列b2下边起第一个白色点的像素点所在位置下标值,即该白色点基于整个屏幕图像坐标位置是以整个屏幕左上角为(0,0)点开始的。
针对图6中间纵向的黑色区域,即每一对屏幕,如b1和b2,b2和b3,b4和b5,b5和b6分别所在屏幕的中间区域。以b1-b2和b4-b5所在屏幕中间黑色区域为例,纵向最小值为当前行未处理点纵向最小值位置,纵向最大值当前行未处理点纵向最大值位置,横向最小值为0,横向最大值屏幕高度-1。其中,中间黑色区域纵坐标属于b1或b4所在屏幕范围的点,屏幕显示横纵坐标为当前行b2或者b5左边起第一个白色点的屏幕显示横纵坐标,鼠标点在图像存储矩阵的实际横纵坐标为当前行b2或者b5左边起第一个白色点的像素点所在位置下标值,即该白色点基于整个屏幕图像坐标位置是以整个屏幕左上角为(0,0)点开始的;中间黑色区域纵坐标属于b2或者b5所在屏幕范围的点,屏幕显示横纵坐标为当前行b1或b4右边起第一个白色点的屏幕显示横纵坐标,鼠标点在图像存储矩阵的实际横纵坐标为当前行b1或b4右边起第一个白色点的像素点所在位置下标值,即该白色点基于整个屏幕图像坐标位置以整个屏幕左上角为(0,0)点开始的。
在用户移动鼠标点时,通过查找鼠标坐标点映射矩阵,可返回鼠标屏幕显示横纵坐标,即鼠标坐标点映射矩阵中的第一二通道值,并且通过判断第三四是否为0自动调用回调函数,改变鼠标点在图像存储矩阵的横纵坐标。
下面对本申请实施例提供的一种多投影图像显示装置进行介绍,下文描述的一种多投影图像显示装置与上文描述的一种多投影图像显示方法可以相互参照。
参见图7所示,本申请实施例提供的一种多投影图像显示装置包括:
图像获取模块201,用于获取各个投影仪第一帧的待投影图像;
矩阵加载模块202,用于加载内存中预存的图像映射矩阵,所述图像映射矩阵用于保存预先计算的原始图像与扭曲图像之间的屏幕坐标点变换关系;
图像扭曲模块203,用于基于所述图像映射矩阵,通过点查找法并行确定各个待投影图像对应的扭曲后图像,生成拼接后的完整图像,并将所述完整图像的数据写入内存中;
图像显示模块204,用于通过预设屏幕对所述完整图像进行显示。
关于上述模块201至204的具体实施过程可参考前述实施例公开的相应内容,在此不再进行赘述。
本申请还提供了一种电子设备,参见图8所示,本申请实施例提供的一种电子设备包括:
存储器100,用于存储计算机程序;
处理器200,用于执行所述计算机程序时可以实现上述实施例所提供的步骤。
具体的,存储器100包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机可读指令,该内存储器为非易失性存储介质中的操作系统和计算机可读指令的运行提供环境。处理器200在一些实施例中可以是一中央处理器(CentralProcessing Unit,CPU)、控制器、微控制器、微处理器或其他数据处理芯片,为电子设备提供计算和控制能力,执行所述存储器100中保存的计算机程序时,可以实现前述任一实施例公开的多投影图像显示方法的步骤。
在上述实施例的基础上,作为优选实施方式,参见图9所示,所述电子设备还包括:
输入接口300,与处理器200相连,用于获取外部导入的计算机程序、参数和指令,经处理器200控制保存至存储器100中。该输入接口300可以与输入装置相连,接收用户手动输入的参数或指令。该输入装置可以是显示屏上覆盖的触摸层,也可以是终端外壳上设置的按键、轨迹球或触控板,也可以是键盘、触控板或鼠标等。
显示单元400,与处理器200相连,用于显示处理器200处理的数据以及用于显示可视化的用户界面。该显示单元400可以为LED显示器、液晶显示器、触控式液晶显示器以及OLED(Organic Light-Emitting Diode,有机发光二极管)触摸器等。
网络端口500,与处理器200相连,用于与外部各终端设备进行通信连接。该通信连接所采用的通信技术可以为有线通信技术或无线通信技术,如移动高清链接技术(MHL)、通用串行总线(USB)、高清多媒体接口(HDMI)、无线保真技术(WiFi)、蓝牙通信技术、低功耗蓝牙通信技术、基于IEEE802.11s的通信技术等。
图9仅示出了具有组件100-500的电子设备,本领域技术人员可以理解的是,图9示出的结构并不构成对电子设备的限定,可以包括比图示更少或者更多的部件,或者组合某些部件,或者不同的部件布置。
本申请还提供了一种计算机可读存储介质,该存储介质可以包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。该存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现前述任一实施例公开的多投影图像显示方法的步骤。
本申请预先计算表征原始图像与扭曲图像之间的屏幕坐标点变换关系的图像映射矩阵并保存,在后续投影过程中,可直接加载内存中的图像映射矩阵,进而能够基于图像映射矩阵快速实现多投影图像的拼接融合,将完整图像显示在屏幕上,显著减少了对于硬件的依赖,降低了实现成本。
说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的系统而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以对本申请进行若干改进和修饰,这些改进和修饰也落入本申请权利要求的保护范围内。
还需要说明的是,在本说明书中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

Claims (9)

1.一种多投影图像显示方法,其特征在于,包括:
获取各个投影仪第一帧的待投影图像;
加载内存中预存的图像映射矩阵,所述图像映射矩阵用于保存预先计算的原始图像与扭曲图像之间的屏幕坐标点变换关系;
基于所述图像映射矩阵,通过点查找法并行确定各个待投影图像对应的扭曲后图像,生成拼接后的完整图像,并将所述完整图像的数据写入内存中;
通过预设屏幕对所述完整图像进行显示,然后在监测到后续帧图像的局部位置发生改变后,结合内存中保存的所述完整图像的数据,确定当前发生改变的目标图像范围;根据图像变化,对所述目标图像范围进行重新扭曲映射,并在完成后显示新的扭曲图像;其中,所述局部位置发生改变的情形包括:屏幕上的部分位置图像被移动、其他位置图像没有改变时的情形。
2.根据权利要求1所述的多投影图像显示方法,其特征在于,所述图像映射矩阵的计算过程包括:
采集各个投影仪对应的投影前后图像,并按照预设划分策略分别将投影前后图像划分为预设数量的网格;
根据投影前后图像的各个网格对中两个网格顶点的屏幕坐标对应关系生成单应矩阵,并根据所述单应矩阵计算数据点映射函数;
基于所述数据点映射函数,计算各个网格数据基于当前投影仪的第一屏幕坐标以及基于所述预设屏幕的第二屏幕坐标,得到整个屏幕的图像映射矩阵。
3.根据权利要求2所述的多投影图像显示方法,其特征在于,所述根据所述单应矩阵计算数据点映射函数,包括:
根据所述单应矩阵,利用第一计算公式计算所述数据点映射函数,所述第一计算公式包括:
Figure FDA0003587659630000011
其中,map为所述单应矩阵;xa、ya为投影前网格内的点元素坐标;xb0、yb0为投影后网格内的点元素坐标。
4.根据权利要求3所述的多投影图像显示方法,其特征在于,所述基于所述数据点映射函数,计算各个网格数据基于当前投影仪的第一屏幕坐标以及基于所述预设屏幕的第二屏幕坐标,包括:
针对投影前后图像中的各个网格对,分别计算在预设屏幕坐标下包含两个网格的最小外接矩形;
利用第二计算公式计算各个网格数据基于当前投影仪的第一屏幕坐标,所述第二计算公式包括:xb1=xb0+rx0,yb1=yb0+ry0
其中,rx0、ry0为所述最小外接矩形的左上角屏幕点值;xb1、yb1为所述第一屏幕坐标;
利用第三计算公式计算各个网格数据基于所述预设屏幕的第二屏幕坐标,所述第三计算公式包括:xb=xb1+rx,yb=yb1+ry
其中,rx、ry为当前网格所在投影仪屏幕左上角基于所述预设屏幕的左上角坐标点值;xb、yb为所述第二屏幕坐标。
5.根据权利要求1所述的多投影图像显示方法,其特征在于,还包括:
按照预设时间周期定时执行所述基于所述图像映射矩阵,通过点查找法并行确定各个待投影图像对应的扭曲后图像的步骤,以便整个所述预设屏幕根据所述图像映射矩阵进行更新。
6.根据权利要求1至5任一项所述的多投影图像显示方法,其特征在于,还包括:
加载内存中预先计算的鼠标坐标点映射矩阵,所述鼠标坐标点映射矩阵用于保存鼠标点在所述预设屏幕上的显示位置与图像存储矩阵中的实际坐标位置之间的映射关系;
当监测到用户端移动鼠标点的操作后,根据所述鼠标坐标点映射矩阵确定当前操作对应的鼠标实际位置。
7.一种多投影图像显示装置,其特征在于,包括:
图像获取模块,用于获取各个投影仪第一帧的待投影图像;
矩阵加载模块,用于加载内存中预存的图像映射矩阵,所述图像映射矩阵用于保存预先计算的原始图像与扭曲图像之间的屏幕坐标点变换关系;
图像扭曲模块,用于基于所述图像映射矩阵,通过点查找法并行确定各个待投影图像对应的扭曲后图像,生成拼接后的完整图像,并将所述完整图像的数据写入内存中;
图像显示模块,用于通过预设屏幕对所述完整图像进行显示;
并且,所述装置还用于在监测到后续帧图像的局部位置发生改变后,结合内存中保存的所述完整图像的数据,确定当前发生改变的目标图像范围;根据图像变化,对所述目标图像范围进行重新扭曲映射,并在完成后显示新的扭曲图像;其中,所述局部位置发生改变的情形包括:屏幕上的部分位置图像被移动、其他位置图像没有改变时的情形。
8.一种电子设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至6任一项所述多投影图像显示方法的步骤。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至6任一项所述多投影图像显示方法的步骤。
CN202010589336.1A 2020-06-24 2020-06-24 一种多投影图像显示方法、装置及电子设备和存储介质 Active CN111698491B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010589336.1A CN111698491B (zh) 2020-06-24 2020-06-24 一种多投影图像显示方法、装置及电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010589336.1A CN111698491B (zh) 2020-06-24 2020-06-24 一种多投影图像显示方法、装置及电子设备和存储介质

Publications (2)

Publication Number Publication Date
CN111698491A CN111698491A (zh) 2020-09-22
CN111698491B true CN111698491B (zh) 2022-10-18

Family

ID=72483986

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010589336.1A Active CN111698491B (zh) 2020-06-24 2020-06-24 一种多投影图像显示方法、装置及电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN111698491B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112734639B (zh) * 2020-12-28 2023-09-12 南京欣威视通信息科技股份有限公司 一种图像显示拼接方法及系统
CN115190280B (zh) * 2022-06-30 2024-02-20 海宁奕斯伟集成电路设计有限公司 确定融合投影图像面积装置及方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5891388B2 (ja) * 2011-03-31 2016-03-23 パナソニックIpマネジメント株式会社 立体視画像の描画を行う画像描画装置、画像描画方法、画像描画プログラム
CN103929604B (zh) * 2014-03-10 2017-03-22 南京大学 一种投影仪阵列拼接显示方法
CN108495102B (zh) * 2018-02-14 2020-02-07 中国科学院自动化研究所 基于Unity拼接融合系统的多投影仪无缝拼接融合方法

Also Published As

Publication number Publication date
CN111698491A (zh) 2020-09-22

Similar Documents

Publication Publication Date Title
US10504400B2 (en) Method and apparatus for performing correction processing on grayscale of a pixel in an image
US10224955B2 (en) Data compression and decompression method of demura table, and mura compensation method
JP5070198B2 (ja) 自動立体視映像ソース画像の縮小サイズのビューマップを作成する方法
CN111698491B (zh) 一种多投影图像显示方法、装置及电子设备和存储介质
US20210224954A1 (en) Image processing method and device, storage medium and computer device
US7460136B2 (en) Efficient scaling of image data in graphics display systems
CN104661011A (zh) 立体图像显示方法及手持终端
US20230316476A1 (en) Image splicing method and apparatus, and electonic device and computer-readable storage medium
CN112037160B (zh) 图像处理方法、装置及设备
CN107861711B (zh) 页面适配方法及装置
WO2011035568A1 (zh) 实现图像层在视频层上半透明效果的方法、装置和机顶盒
WO2019184669A1 (zh) 像素处理方法及装置
CN107391148B (zh) 视图元素保存方法、装置、电子设备及计算机存储介质
CN113641319A (zh) 设备画面布局显示方法、装置、存储介质及设备
CN100437746C (zh) 字符显示设备和字符显示方法
CN110321184B (zh) 场景地图绘制方法及计算机存储介质
CN114049865B (zh) 屏幕刷新方法、装置、计算机可读存储介质及计算机设备
CN112329384A (zh) 一种文字阴影效果实现方法、装置、设备及存储介质
CN113096045A (zh) 一种位图拉伸方法、位图拉伸装置及电子设备
CN113096217A (zh) 图片生成方法、装置、电子设备以及存储介质
US11748121B2 (en) Method, system, device and medium for adaptive configuration of a user interface employing stretching and moving
JPS63155260A (ja) コンピユ−タによる表の編集方法
JP2010009271A (ja) 画像処理装置
CN113538623A (zh) 确定目标图像的方法、装置、电子设备及存储介质
CN117117049A (zh) 晶元修复方法、装置、设备、介质和程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant