CN115086625A - 投影画面的校正方法、装置、系统、校正设备和投影设备 - Google Patents
投影画面的校正方法、装置、系统、校正设备和投影设备 Download PDFInfo
- Publication number
- CN115086625A CN115086625A CN202210512546.XA CN202210512546A CN115086625A CN 115086625 A CN115086625 A CN 115086625A CN 202210512546 A CN202210512546 A CN 202210512546A CN 115086625 A CN115086625 A CN 115086625A
- Authority
- CN
- China
- Prior art keywords
- projection
- picture
- image
- position information
- correction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012937 correction Methods 0.000 title claims abstract description 279
- 238000000034 method Methods 0.000 title claims abstract description 69
- 238000012545 processing Methods 0.000 claims abstract description 23
- 230000009466 transformation Effects 0.000 claims description 31
- 239000011159 matrix material Substances 0.000 claims description 25
- 238000004590 computer program Methods 0.000 claims description 20
- 239000002131 composite material Substances 0.000 claims description 15
- 238000003708 edge detection Methods 0.000 claims description 8
- 230000002194 synthesizing effect Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 239000000284 extract Substances 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Projection Apparatus (AREA)
Abstract
本申请涉及一种投影画面的校正方法、装置、系统、校正设备和投影设备。方法包括：获取移动终端对投影区域进行拍摄得到的第一图像，第一图像中的图像元素包括投影幕布和投影设备向投影区域投射形成的第一投影画面；根据第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；获取各幕布特征在图像坐标系中的第二位置信息；根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息，确定校正指示信息，校正指示信息用于指示投影设备进行校正处理，以使投影设备在投影区域投射形成的目标投影画面与投影幕布的形状尺寸相匹配。采用本方法能够提高投影画面校正的便利性。
Description
技术领域
本申请涉及投影设备技术领域，特别是涉及一种投影画面的校正方法、装置、系统、校正设备和投影设备。
背景技术
随着人们生活水平的提高，投影设备让生活充满科技感，所以得到人们的青睐，随着投影设备的不断推广，不同的投影设备面临着在不同应用场景下实现不同功能的挑战。
在相关技术中，常见的具有幕布对齐功能投影设备均为内置摄像头的投影设备，通过投影设备内置的摄像头拍摄投影画面，则投影设备通过内置的摄像头拍摄的投影画面对投影画面进行自动校正。
然而，只有内置摄像头的投影设备才能进行校正处理，未设置有摄像头的投影设备的投影画面校正只能通过手动操作，费时费力。
发明内容
基于此，有必要针对上述技术问题，提供一种能够提高投影画面校正的便利性的投影画面的校正方法、装置、系统、校正设备和投影设备。
第一方面，本申请提供了一种投影画面的校正方法，包括：
获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影幕布具有多个幕布特征；
根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；
获取各幕布特征在所述图像坐标系中的第二位置信息；
根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息，确定校正指示信息，所述校正指示信息用于指示所述投影设备进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配。
在其中一个实施例中，所述目标位置信息包括目标投影画面在所述投影区域中形成标准投影画面的情况下，目标画面特征在投影区域坐标系中的位置信息，所述根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息，确定校正指示信息，包括：
根据各校正画面特征对应的第一位置信息和各目标画面特征对应的目标位置信息，确定所述图像坐标系与所述投影区域坐标系之间的透视变换矩阵；
根据所述透视变换矩阵以及各幕布特征对应的第二位置信息确定各幕布特征在所述投影区域坐标系中的第三位置信息；
将所述各幕布特征对应的第三位置信息作为所述校正指示信息。
在其中一个实施例中，所述第一投影画面包括棋盘格图案，所述棋盘格图案具有多个角点，所述角点为相邻的多个棋盘之间的共同交点，所述校正画面特征包括所述多个角点和所述第一投影画面的各第一顶点，所述目标画面特征包括目标投影画面的目标顶点，所述根据各校正画面特征对应的第一位置信息和各目标画面特征对应的目标位置信息，确定所述图像坐标系与所述投影区域坐标系之间的透视变换矩阵，包括：
根据各角点对应的第一位置信息确定所述第一投影画面的各第一顶点在所述图像坐标系中的第四位置信息；
根据各第一顶点对应的第四位置信息和各目标顶点对应的目标位置信息进行透视变换，得到所述透视变换矩阵。
在其中一个实施例中，多个角点呈多行多列的规则四边形分布，所述根据各角点对应的第一位置信息确定所述第一投影画面的各第一顶点在所述图像坐标系中的第四位置信息，包括：
根据各角点对应的第一位置信息进行直线拟合，得到每列角点对应的列直线表达式和每行角点对应的行直线表达式；
根据每列角点对应的列直线表达式，确定所述第一投影画面的第一边界的第一直线表达式和第二边界的第二直线表达式；
根据每行角点对应的行直线表达式，确定所述第一投影画面的第三边界的第三直线表达式和第四边界的第四直线表达式；
根据所述第一直线表达式、所述第二直线表达式、所述第三直线表达式和所述第四直线表达式确定各第一顶点对应的第四位置信息。
在其中一个实施例中，所述第一图像至少为两张，所述根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息，包括：
将至少两张所述第一图像合成为一张合成图像；
在所述合成图像中的图像元素包括所述多个校正画面特征的情况下，根据所述合成图像，获取各校正画面特征在所述合成图像中的位置信息，并将校正画面特征在所述合成图像中的位置信息作为所述第一位置信息。
在其中一个实施例中，所述根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息，还包括：
在所述合成图像中的图像元素未包括所述多个校正画面特征的情况下，根据至少两张所述第一图像中的其中一张目标图像，获取各校正画面特征在所述图像坐标系中的第一位置信息，所述目标图像的图像元素包括所述多个校正画面特征。
在其中一个实施例中，所述获取各幕布特征在所述图像坐标系中的第二位置信息，包括：
获取移动终端对所述投影区域进行拍摄得到的第二图像，所述第二图像中的图像元素包括所述投影幕布和投影设备向所述投影区域投射形成的第二投影画面，所述第二投影画面为空白画面；
根据所述第二图像，获取各幕布特征在所述图像坐标系中的第二位置信息。
在其中一个实施例中，所述幕布特征包括所述投影幕布的幕布顶点，所述根据所述第二图像，获取各幕布特征在所述图像坐标系中的第二位置信息，包括：
对所述第二图像进行边缘检测，以获取所述投影幕布的幕布轮廓；
基于所述幕布轮廓确定各幕布顶点对应的第二位置信息。
在其中一个实施例中，所述第一图像和所述第二图像是从移动终端对所述投影区域拍摄的视频中截取的，所述第一投影画面和所述第二投影画面分别完全覆盖所述投影幕布。
第二方面，本申请提供了一种投影画面的校正方法，包括：
控制投影设备向投影区域投射形成第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影区域设置有投影幕布，所述投影幕布具有多个幕布特征；
获取校正指示信息，并根据所述校正指示信息进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配；
其中，所述校正指示信息是通过获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面；根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；获取各幕布特征在所述图像坐标系中的第二位置信息；根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息确定的。
在其中一个实施例中，在所述获取校正指示信息之前，包括：
控制投影设备向投影区域投射形成第二投影画面，以根据移动终端对所述投影区域进行拍摄得到的第二图像获取各幕布特征在所述图像坐标系中的第二位置信息，所述第二图像中的图像元素包括所述投影幕布和所述第二投影画面，所述第二投影画面为空白画面。
第三方面，本申请提供了一种投影画面的校正装置，包括：
图像获取模块，用于获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影幕布具有多个幕布特征；
第一位置信息获取模块，用于根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；
第二位置信息获取模块，用于获取各幕布特征在所述图像坐标系中的第二位置信息；
第一校正模块，用于根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息，确定校正指示信息，所述校正指示信息用于指示所述投影设备进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配。
第四方面，本申请提供了一种投影画面的校正装置，包括：
投影控制模块，用于控制投影设备向投影区域投射形成第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影区域设置有投影幕布，所述投影幕布具有多个幕布特征；
第二校正模块，用于获取校正指示信息，并根据所述校正指示信息进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配；
其中，所述校正指示信息是通过获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面；根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；获取各幕布特征在所述图像坐标系中的第二位置信息；根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息确定的。
第五方面，本申请提供了一种校正设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述的方法的步骤。
第六方面，本申请提供了一种投影设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述的方法的步骤。
第七方面，本申请提供了一种投影系统，包括：
投影设备，用于执行如上述的方法的步骤；
校正设备，用于执行上述的方法的步骤。
上述的投影画面的校正方法、装置、系统、校正设备和投影设备，通过获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影幕布具有多个幕布特征；根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；获取各幕布特征在所述图像坐标系中的第二位置信息；根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息，确定校正指示信息，所述校正指示信息用于指示所述投影设备进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配；由于通过移动终端拍摄得到的图像即可实现投影画面的校正，即使在投影设备中未配置有内置摄像头也可以实现投影画面的校正，实现了提高投影画面校正的便利性。
附图说明
图1为本申请实施例提供的一种投影画面的校正方法的应用环境示意图；
图2为本申请实施例提供的一种投影画面的校正方法的流程示意图；
图3为本申请实施例提供的一种第一投影画面的示意图；
图4为本申请实施例提供的一种第一投影画面覆盖投影幕布的示意图；
图5为本申请实施例提供的另一种投影画面的校正方法的流程示意图；
图6为本申请实施例提供的另一种投影画面的校正方法的流程示意图；
图7为本申请实施例提供的另一种投影画面的校正方法的流程示意图；
图8为本申请实施例提供的一种投影画面的校正装置的结构示意图；
图9为本申请实施例提供的另一种投影画面的校正装置的结构示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
参考图1，图1为本申请实施例提供的一种投影画面的校正方法的应用环境示意图。本申请实施例提供的投影画面的校正方法，可以应用于如图1所示的应用环境中。其中，投影设备106向设置有投影幕布的投影区域投影得到投影画面，则移动终端102对投影区域进行拍摄得到图像，由此，移动终端102拍摄的图像中的图像元素包括投影画面和投影幕布，校正设备104则基于移动终端102拍摄的图像，得到投影设备106的校正指示信息，投影设备106根据校正指示信息可以对待投射的目标投影画面进行调整，从而使得投影设备106在投影区域投射形成的目标投影画面与投影幕布的形状尺寸相适配。
其中，校正设备104可以是服务器。数据存储系统可以存储服务器需要处理的数据。数据存储系统可以集成在服务器上，也可以放在云上或其他网络服务器上。校正设备104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
其中，移动终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑、物联网设备和便携式可穿戴设备等具备视频拍摄能力的终端，物联网设备可为智能音箱、智能空调、智能车载设备等。便携式可穿戴设备可为智能手表、智能手环、头戴设备等。
可选的，可以通过点击移动终端102上的控件，则移动终端102响应于点击控件，开始进行拍摄，其中，可以是进行图像的拍摄；也可以是进行视频的拍摄，例如进行历时3秒的视频拍摄，从而得到视频，则通过视频可以提取出图像。具体的，移动终端102包括摄像头，因此通过该摄像头可以拍摄图像或者视频。
示例性的，可以通过配置一个微信小程序，微信小程序配置有校正设备104的地址，通过点击移动终端102上的微信小程序控件，拍摄得到图像或者视频，在拍摄完成的情况下，将视频或发送至校正设备104的地址，从而将图像或者视频发送至校正设备104进行投影画面的校正。
可以理解的是，可以是移动终端102拍摄图像，并将该拍摄的图像发送至校正设备104；也可以是移动终端102拍摄视频，并在视频中提取出校正设备104所需要的图像后，将图像发送至校正设备104；还可以是移动终端102拍摄视频，并将视频发送至校正设备104，校正设备104则从视频中提取所需要的图像。
需要说明的是，本申请实施例的方法，还可以通过移动终端102或投影设备106来执行，本实施例不作限制。
参考图2，图2为本申请实施例提供的一种投影画面的校正方法的流程示意图。本实施例的方法以应用于图1中的校正设备为例进行说明。在一个实施例中，如图2所示，投影画面的校正方法包括：
步骤210、获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影幕布具有多个幕布特征。
其中，投影区域可以是墙面等可以设置投影幕布的区域。投影幕布用于显示投影设备投影的画面。第一投影画面是用于进行校正处理的投影画面。校正画面特征是指用于确定出投影设备的校正指示信息的画面标识。在本实施例中，由于第一图像是移动终端对投影区域进行拍摄得到，而投影区域设置有投影幕布和形成的第一投影画面，因此该第一图像的图像元素也会包括投影幕布和第一投影画面。幕布特征是指用于确定出校正指示信息的幕布标识。
具体的，在本实施例中，投影设备向设置有投影幕布的投影区域投影形成第一投影画面，用户可以通过移动终端对投影区域进行拍摄，使得拍摄得到的第一图像的图像元素中包括投影幕布和第一投影画面，移动终端将第一图像发送至校正设备。
步骤220、根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息。
其中，第一位置信息是指校正画面特征在图像坐标系中的位置信息。具体的，图像坐标系是以第一图像建立的坐标系，每个校正画面特征在图像坐标系中对应有一个第一位置信息。可选的，第一位置信息可以通过校正画面特征在图像坐标系中的图像坐标进行表示，换句话说，第一位置信息包括校正画面特征在所述图像坐标系中的第一图像坐标。
步骤230、获取各幕布特征在所述图像坐标系中的第二位置信息。
其中，第二位置信息是指幕布特征在图像坐标系中的位置信息，第二位置信息可以根据第一图像获取，也可以根据移动终端102拍摄的其他图像获取。具体的，每个幕布特征在图像坐标系中对应有一个第二位置信息。可选的，第二位置信息可以通过幕布特征在图像坐标系中的图像坐标进行表示，换句话说，第二位置信息包括幕布特征在图像坐标系中的第二图像坐标。
步骤240、根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息，确定校正指示信息。
其中，目标位置信息可以通过目标画面特征对应的目标图像坐标进行表示，换句话说，目标位置信息包括目标画面特征对应的目标图像坐标。校正指示信息用于指示投影设备进行校正处理，以使投影设备在投影区域投射形成的目标投影画面与投影幕布的形状尺寸相匹配。目标投影画面可以是待用户观看的投影画面，例如可以是电影等。目标投影画面与投影幕布的形状尺寸相适配，可以是目标投影画面与投影幕布的形状一致且尺寸一致；也可以是目标投影画面位于投影幕布内，本实施例不作限制。
可选的，投影设备进行校正处理，可以是投影设备根据校正指示信息调节投影设备的投射参数，和/或调节目标投影画面对应的目标原始画面的形状尺寸等，本实施例不作限制。
在本实施例中，根据各校正画面特征对应的第一位置信息和各幕布特征对应的第二位置信息，可以确定第一投影画面与投影幕布之间的相对关系，则根据相对关系以及目标投影画面的各目标画面特征对应的目标位置信息，可以确定校正指示信息。
本实施例的技术方案，由于通过移动终端拍摄得到的图像即可实现投影画面的校正，即使在投影设备中未配置有内置摄像头也可以实现投影画面的校正，实现了提高投影画面校正的便利性。
在示例的一些情形中，用户手持移动终端会产生一定的抖动，因此，进行投影画面的校正确定的校正指示信息可能会存在一定的误差，因此，需要减少因手持移动终端会产生一定的抖动导致的校正指示信息误差。
在一个可能的实施方式中，第一图像至少为两张，步骤220、根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息，包括：
将至少两张所述第一图像合成为一张合成图像；
在所述合成图像中的图像元素包括所述多个校正画面特征的情况下，根据所述合成图像，获取各校正画面特征在所述合成图像中的位置信息，并将校正画面特征在所述合成图像中的位置信息作为所述第一位置信息。
在本实施例中，将至少两张第一图像合成为一张合成图像的方式，可以是将至少两张第一图像进行叠加，也可以是对至少两张第一图像中的第一投影画面进行平滑处理等，使得合成图像中的校正画面特征在合成图像中的位置更准确，由此确定出的校正指示信息也越准确。
本实施例的技术方案，通过将至少两张第一图像合成为一张合成图像，从而根据合成图像，获取各校正画面特征在所述合成图像中的位置信息，并将校正画面特征在所述合成图像中的位置信息作为所述第一位置信息，可以避免因用户手持移动终端会产生抖动，导致的校正指示信息误差，可以提高投影画面的校正准确性。
在一个可能的实施方式中，步骤220、根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息，还包括：
在所述合成图像中的图像元素未包括所述多个校正画面特征的情况下，根据至少两张所述第一图像中的其中一张目标图像，获取各校正画面特征在所述图像坐标系中的第一位置信息，所述目标图像的图像元素包括所述多个校正画面特征。
在本实施例中，若合成图像中的图像元素未包括多个校正画面特征，则说明参与合成的其中一张第一图像存在问题，因此，根据第一图像中的其中一张目标图像，来获取各校正画面特征在图像坐标系中的第一位置信息，可以保证第一位置信息获取的成功率。
以下实施例在上述任一实施例的基础上，对于如何确定校正指示信息进行进一步说明。
在一个可能的实施方式中，所述目标位置信息包括目标投影画面在所述投影区域中形成标准投影画面的情况下，目标画面特征在投影区域坐标系中的位置信息，所述根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息，确定校正指示信息，包括：
根据各校正画面特征对应的第一位置信息和各目标画面特征对应的目标位置信息，确定所述图像坐标系与所述投影区域坐标系之间的透视变换矩阵；
根据所述透视变换矩阵以及各幕布特征对应的第二位置信息确定各幕布特征在所述投影区域坐标系中的第三位置信息；
将所述各幕布特征对应的第三位置信息作为所述校正指示信息。
其中，投影区域坐标系可以是以投影区域的所在平面建立的坐标系。具体的，目标位置信息可以包括标准投影画面中的目标画面特征在投影区域坐标系中的位置信息。可选的，可以通过目标画面特征在投影区域坐标系的图像坐标进行表示，换句话说，目标位置信息包括目标画面特征在投影区域坐标系的目标图像坐标。
透视变换矩阵是指通过透视变换处理得到的换算公式。透视变换就是将图像从一个几何平面投影到另一个几何平面，透视变换保证同一条直线的点还是在同一直线上，但不再保证平行。二维图像经过三维变换映射到另一个二维空间，映射前后的二维空间是不一样的。示例性的，透视变换矩阵如下所示：
其中，第三位置信息可以通过幕布特征在投影区域坐标系中映射的的图像坐标进行表示，换句话说，第三位置信息包括幕布特征在投影区域坐标系中映射的第三图像坐标。可选的，可以将透视变换矩阵与各幕布特征对应的第二位置信息的乘积结果，作为幕布特征对应的第三位置信息。
在本实施例中，将各幕布特征对应的第三位置信息作为校正指示信息，则可以确定在同一坐标系下，目标投影画面与投影幕布之间的相对关系，由此投影设备可以根据校正指示信息进行校正处理。
参考图3，图3为本申请实施例提供的一种第一投影画面的示意图。如图3所示，所述第一投影画面包括棋盘格图案，所述棋盘格图案具有多个角点，所述角点为相邻的多个棋盘之间的共同交点。其中，多个指的是两个以上。如图3所示的第一投影画面中的棋盘格图案包括15列角点，每列角点的数量为8个，共计15*8＝120个角点。
在一个可能的实施方式中，所述校正画面特征包括所述多个角点和所述第一投影画面的各第一顶点，所述目标画面特征包括目标投影画面的目标顶点，所述根据各校正画面特征对应的第一位置信息和各目标画面特征对应的目标位置信息，确定所述图像坐标系与所述投影区域坐标系之间的透视变换矩阵，包括：
根据各角点对应的第一位置信息确定所述第一投影画面的各第一顶点在所述图像坐标系中的第四位置信息；
根据各第一顶点对应的第四位置信息和各目标顶点对应的目标位置信息进行透视变换，得到所述透视变换矩阵。
其中，第一顶点是指第一投影画面的画面顶点。第四位置信息是指第一顶点在图像坐标系中的位置信息。可选的，第四位置信息可以通过第一顶点在图像坐标系中的图像坐标进行表示，换句话说，第四位置信息包括第一顶点在图像坐标系中的第四图像坐标。可选的，目标位置信息可以与目标投影画面的分辨率有关。
在本实施例中，具体的，根据各第一顶点对应的第四位置信息和各目标顶点对应的目标位置信息进行透视变换，可以得到透视变换矩阵。
在一个可能的实施方式中，校正画面特征也可以只包括多个角点。
示例性的，假设目标投影画面的分辨率为1080P，则通过各目标顶点对应的目标位置信息可以包括(0，0)，(1920，0)，(0，1080)，(1920，1080)四对透视变化前后的坐标点，再结合第一投影画面的4个顶点坐标可以计算得到透视变换矩阵。
在一个可能的实施方式中，多个角点呈多行多列的规则四边形分布，所述根据各角点对应的第一位置信息确定所述第一投影画面的各第一顶点在所述图像坐标系中的第四位置信息，包括：
根据各角点对应的第一位置信息进行直线拟合，得到每列角点对应的列直线表达式和每行角点对应的行直线表达式；
根据每列角点对应的列直线表达式，确定所述第一投影画面的第一边界的第一直线表达式和第二边界的第二直线表达式；
根据每行角点对应的行直线表达式，确定所述第一投影画面的第三边界的第三直线表达式和第四边界的第四直线表达式；
根据所述第一直线表达式、所述第二直线表达式、所述第三直线表达式和所述第四直线表达式确定各第一顶点对应的第四位置信息。
其中，规则四边形可以是矩形、菱形等，本实施例不作限制。在本实施例中，根据各角点对应的第一位置信息进行直线拟合，得到每列角点对应的列直线表达式y1＝k1x1+b1，并且得到每行角点对应的行直线表达式y2＝k2x2+b2。
在本实施例中，具体的，根据每个列直线表达式的斜率k1，拟合得到第一边界对应的斜率K1以及拟合得到第二边界对应的斜率K2，同时根据每个列直线表达式的b1，拟合得到第一边界对应的B1以及拟合得到第二边界对应的B2，由此，可以得到第一边界的第一直线表达式Y1＝K1X1+B1和第二边界的第二直线表达式Y2＝K2X2+B2。其中，第一边界和第二边界为第一投影画面相对的两边界，例如，第一边界为左边界，第二边界为右边界。
具体的，根据每个行直线表达式的斜率k2，拟合得到第三边界对应的斜率K3以及拟合得到第四边界对应的斜率K4，同时根据每个列直线表达式的b2，拟合得到第三边界对应的B3以及拟合得到第四边界对应的B4，由此，可以得到第一边界的第一直线表达式Y3＝K3X3+B3和第二边界的第二直线表达式Y4＝K4X4+B4。其中，第三边界和第四边界为第一投影画面另外相对的两边界，例如，第三边界为上边界，第四边界为下边界。
由此，则根据第一直线表达式、第二直线表达式、第三直线表达式和第四直线表达式可以确定交点，从而确定各第一顶点对应的第四位置信息。
本实施例的技术方案，通过各角点对应的第一位置信息进行直线拟合，得到每列角点对应的列直线表达式和每行角点对应的行直线表达式，进而根据每列角点对应的列直线表达式，确定所述第一投影画面的第一边界的第一直线表达式和第二边界的第二直线表达式；根据每行角点对应的行直线表达式，确定所述第一投影画面的第三边界的第三直线表达式和第四边界的第四直线表达式，从而根据所述第一直线表达式、所述第二直线表达式、所述第三直线表达式和所述第四直线表达式确定各第一顶点对应的第四位置信息，由于通过多个角点来确定各第一顶点对应的第四位置信息，可以提高确定各第一顶点对应的第四位置信息的准确性。
需要说明的是，可以根据第一图像，获取各幕布特征在图像坐标系中的第二位置信息。然而，第一图像是对第一投影画面拍摄得到的，第一投影画面包括多个校正画面特征，因此，校正画面特征可能会干扰幕布特征对应的第二位置信息的识别，导致第二位置信息识别的准确率较低，难度较大，因此，需要提高第二位置信息识别的准确性以及降低识别难度。
在一个可能的实施方式中，获取各幕布特征在所述图像坐标系中的第二位置信息，包括：
获取移动终端对所述投影区域进行拍摄得到的第二图像，所述第二图像中的图像元素包括所述投影幕布和投影设备向所述投影区域投射形成的第二投影画面，所述第二投影画面为空白画面；
根据所述第二图像，获取各幕布特征在所述图像坐标系中的第二位置信息。
其中，第二投影画面是指获取第二位置信息的投影画面。在本实施例中，由于第二图像是移动终端对投影区域进行拍摄得到，则投影区域设置有投影幕布和形成的第二投影画面，则第二图像中的图像元素包括投影幕布和第二投影画面。在本实施例中，第二投影画面为空白画面，则第二图像中的干扰减少，因此可以更准确且容易地识别出各幕布特征对应的第二位置信息。一般的，第二投影画面与投影幕布在第二图像中的灰度差一般需要大于灰度差阈值，以便可以准确地区分出投影幕布和第二投影画面。可选的，第二投影画面与所述投影幕布之间的颜色对比度大于预设对比度，从而使得第二投影画面与投影幕布在第二图像中的灰度差一般需要大于灰度差阈值。第二位置信息是指幕布特征在图像坐标系中的位置信息。
可选的，第二位置信息可以通过幕布特征在第二图像中的图像坐标进行表示，换句话说，第二位置信息包括幕布特征在第二图像中的第二图像坐标。具体的，用户在手持移动终端对投影区域拍摄得到图像时，若用户手持较为稳定，且投影设备投射第一投影画面和第二投影画面的投射间隔时间较短的情况下，各幕布特征在第二图像中对应的位置信息基本就等于各幕布特征在图像坐标系中对应的第二位置信息。
本实施例的技术方案，由于第二投影画面为空白画面，则第二图像中的干扰减少，因此可以更准确且容易地识别出各幕布特征对应的第二位置信息。
需要说明的是，投影设备投射第一投影画面和第二投影画面的投射顺序可以根据需要设置，例如先投射第一投影画面再投射第二投影画面；也可以先投射第二投影画面再投射第一投影画面；也可以是第一投影画面和第二投影画面持续间隔投射等，只要能够让移动终端能够捕捉到至少一张第一图像和至少一张第二图像即可，本实施例不作限制。
在一个可能的实施方式中，所述第一图像和所述第二图像是从移动终端对所述投影区域拍摄的视频中截取的，所述第一投影画面和所述第二投影画面分别完全覆盖所述投影幕布。
一般的，第一投影画面对应的第一原始画面，第二投影画面对应的第二原始画面，以及目标投影画面的目标原始画面的画面参数一致，例如第一原始画面、第二原始画面和目标原始画面的分辨率一致。
具体的，投影设备投射第一原始画面以在投影区域形成第一投影画面。同理，投影设备投射第二原始画面以在投影区域形成第二投影画面。同理，投影设备投射目标原始画面以在投影区域形成目标投影画面。
在一个可能的实施方式中，所述幕布特征包括所述投影幕布的幕布顶点，所述根据所述第二图像，获取各幕布特征在所述图像坐标系中的第二位置信息，包括：
对所述第二图像进行边缘检测，以获取所述投影幕布的幕布轮廓；
基于所述幕布轮廓确定各幕布顶点对应的第二位置信息。
其中，可以使用高斯滤波函数对第二图像进行降噪处理，然后对降噪后的第二图像进行边缘检测提取出投影幕布与第二投影画面的边界线，得到第三图像。具体的，由于投影设备投射第一投影画面和第二投影画面的投射间隔时间较短，因此，第一图像中的第一投影画面和第二图像中的第二投影画面的位置、形状和大小等参数相同或者基本相同，利用前述得到的第一投影画面的各第一顶点在图像坐标系中对应的第四位置信息对降噪后的第二图像进行截取，得到第三图像，该第三图像的边界即为第二图像中的第二投影画面的边界。然后使用opencv中的findContours函数找出第三图像中所有的轮廓，再使用opencv中的approxPolyDP函数对轮廓进行多边形逼近，并使用opencv中的isContourConvex函数判断轮廓是否为凸型的，若是，则计算轮廓的面积；遍历所有的轮廓找出轮廓为凸，逼近边的数量为4，并根据轮廓面积确定出投影幕布的轮廓。
需要说明的是，在本实施例中，在第二图像中，第二投影画面覆盖投影幕布，即完整的投影幕布占据第二投影画面的一部分区域，则在处理后得到的第三图像中，轮廓面积最大的轮廓即为幕布的轮廓。
可以理解的是，在一些实施例中，通过第一图像也可以利用边缘检测确定出各幕布特征对应的第二位置信息。
示例性的，第一图像中的第一投影画面包括棋盘格图案，并且棋盘格图案设置在第一投影画面的中央，第一投影画面中除棋盘格外的其它区域为空白。则此时棋盘格位于投影幕布内，而整个第一投影画面覆盖投影幕布，可以通过对第一图像进行边缘检测以确定出各幕布特征对应的第二位置信息。
参考图4，图4为本申请实施例提供的一种第一投影画面覆盖投影幕布的示意图。如图4所示，棋盘格图案设置在第一投影画面的中央，第一投影画面中除棋盘格图案外的其它区域为空白。则此时棋盘格位于投影幕布内，而整个第一投影画面覆盖投影幕布，对第一图像进行边缘检测，选择轮廓面积最大的作为幕布轮廓。
参考图5，图5为本申请实施例提供的另一种投影画面的校正方法的流程示意图。本实施例的方法，以应用于投影设备为例进行说明。如图5所示，投影画面的校正方法包括：
步骤510、控制投影设备向投影区域投射形成第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影区域设置有投影幕布，所述投影幕布具有多个幕布特征。
步骤520、获取校正指示信息，并根据所述校正指示信息进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配。
其中，校正指示信息可以通过上述任一实施例的方式获得。
本实施例的技术方案，由于通过移动终端拍摄得到的图像即可实现投影画面的校正，即使在投影设备中未配置有内置摄像头也可以实现投影画面的校正，实现了提高投影画面校正的便利性。
在一个可能的实施方式中，在所述获取校正指示信息之前，包括：
控制投影设备向投影区域投射形成第二投影画面，以根据移动终端对所述投影区域进行拍摄得到的第二图像获取各幕布特征在图像坐标系中的第二位置信息，所述第二图像中的图像元素包括所述投影幕布和所述第二投影画面，所述第二投影画面为空白画面。
本实施例的技术方案，通过第二投影画面，可以提高获取各幕布特征对应的第二位置信息的准确性以及简易性。
在一个可能的实施方式中，投影设备进行校正处理，可以是投影设备根据校正指示信息调节投影设备的投射参数，和/或调节目标投影画面对应的目标原始画面的形状尺寸等，本实施例不作限制。
参考图6，图6为本申请实施例提供的另一种投影画面的校正方法的流程示意图。本实施例的方法，结合移动终端、投影设备和校正设备进行举例说明。
如图6所示，投影画面的校正方法包括：
步骤610、投影设备向投影区域投射形成第一投影画面。
其中，投影区域设置有投影幕布，所述第一投影画面具有多个校正画面特征，所述投影幕布具有多个幕布特征。
步骤620、移动终端对投影区域进行拍摄得到视频，并将视频发送至校正设备，视频包括第一图像；所述第一图像中的图像元素包括投影幕布和第一投影画面。
步骤630、校正设备接收视频，并提取视频中的第一图像。
步骤640、校正设备根据第一图像确定校正指示信息，并将校正指示信息发送至投影设备。
步骤650、投影设备根据校正信息进行校正处理，以使在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配。
需要说明的是，本实施例中，投影设备可以持续向投影区域投射形成第一投影画面，直至接收到校正指示信息。
本实施例的技术方案，由于通过移动终端拍摄得到的图像即可实现投影画面的校正，即使在投影设备中未配置有内置摄像头也可以实现投影画面的校正，实现了提高投影画面校正的便利性。
参考图7，图7为本申请实施例提供的另一种投影画面的校正方法的流程示意图。本实施例中适用于通过第一投影画面和第二投影画面确定校正指示信息的情况。如图7所示，投影画面的校正方法包括：
步骤710、投影设备向投影区域投射形成第一投影画面，以及控制投影设备向投影区域投射形成第二投影画面。
其中，投影区域设置有投影幕布，所述第一投影画面具有多个校正画面特征，所述投影幕布具有多个幕布特征，所述第二投影画面为空白画面。
步骤720、移动终端对投影区域进行拍摄得到视频，并将视频发送至校正设备，视频包括第一图像和第二图像；所述第一图像中的图像元素包括投影幕布和第一投影画面；所述第二图像中的图像元素包括投影幕布和第二投影画面。
步骤730、校正设备接收视频，并提取视频中的第一图像和第二图像。
步骤740、校正设备根据第一图像和第二图像确定校正指示信息，并将校正指示信息发送至投影设备。
步骤750、投影设备根据校正信息进行校正处理，以使在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配。
需要说明的是，本实施例中，投影设备可以持续向投影区域投射形成交替的第一投影画面和第二投影画面，直至接收到校正指示信息。
本实施例的技术方案，由于通过移动终端拍摄得到的图像即可实现投影画面的校正，即使在投影设备中未配置有内置摄像头也可以实现投影画面的校正，实现了提高投影画面校正的便利性。另外，通过第二图像可以提高校正的准确性和简易性。
应该理解的是，虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思，本申请实施例还提供了一种用于实现上述所涉及的投影画面的校正方法的投影画面的校正装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似，故下面所提供的一个或多个投影画面的校正装置实施例中的具体限定可以参见上文中对于投影画面的校正方法的限定，在此不再赘述。
参考图8，图8为本申请实施例提供的一种投影画面的校正装置的结构示意图。在本实施例中，以应用于图1中的校正设备进行举例说明。如图8所示，提供了一种投影画面的校正装置，包括：图像获取模块810、第一位置信息获取模块820、第二位置信息获取模块830和第一校正模块840，其中：
图像获取模块810，用于获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影幕布具有多个幕布特征；第一位置信息获取模块820，用于根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；第二位置信息获取模块830，用于获取各幕布特征在所述图像坐标系中的第二位置信息；第一校正模块840，用于根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息，确定校正指示信息，所述校正指示信息用于指示所述投影设备进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配。
在一个实施例中，所述目标位置信息包括目标投影画面在所述投影区域中形成标准投影画面的情况下，目标画面特征在投影区域坐标系中的位置信息，第一校正模块840包括：矩阵确定单元，用于根据各校正画面特征对应的第一位置信息和各目标画面特征对应的目标位置信息，确定所述图像坐标系与所述投影区域坐标系之间的透视变换矩阵；第一校正单元，用于根据所述透视变换矩阵以及各幕布特征对应的第二位置信息确定各幕布特征在所述投影区域坐标系中的第三位置信息；将所述各幕布特征对应的第三位置信息作为所述校正指示信息。
在一个实施例中，所述第一投影画面包括棋盘格图案，所述棋盘格图案具有多个角点，所述角点为相邻的多个棋盘之间的共同交点，所述校正画面特征包括所述多个角点和所述第一投影画面的各第一顶点，所述目标画面特征包括目标投影画面的目标顶点，矩阵确定单元包括：位置信息确定子单元，用于根据各角点对应的第一位置信息确定所述第一投影画面的各第一顶点在所述图像坐标系中的第四位置信息；矩阵确定子单元，用于根据各第一顶点对应的第四位置信息和各目标顶点对应的目标位置信息进行透视变换，得到所述透视变换矩阵。
在一个实施例中，多个角点呈多行多列的规则四边形分布，位置信息确定子单元具体用于根据各角点对应的第一位置信息进行直线拟合，得到每列角点对应的列直线表达式和每行角点对应的行直线表达式；根据每列角点对应的列直线表达式，确定所述第一投影画面的第一边界的第一直线表达式和第二边界的第二直线表达式；根据每行角点对应的行直线表达式，确定所述第一投影画面的第三边界的第三直线表达式和第四边界的第四直线表达式；根据所述第一直线表达式、所述第二直线表达式、所述第三直线表达式和所述第四直线表达式确定各第一顶点对应的第四位置信息。
在一个实施例中，所述第一图像至少为两张，第一位置信息获取模块820包括：合成单元，用于将至少两张所述第一图像合成为一张合成图像；第一位置信息获取单元，用于在所述合成图像中的图像元素包括所述多个校正画面特征的情况下，根据所述合成图像，获取各校正画面特征在所述合成图像中的位置信息，并将校正画面特征在所述合成图像中的位置信息作为所述第一位置信息。
在一个实施例中，第一位置信息获取单元还用于在所述合成图像中的图像元素未包括所述多个校正画面特征的情况下，根据至少两张所述第一图像中的其中一张目标图像，获取各校正画面特征在所述图像坐标系中的第一位置信息，所述目标图像的图像元素包括所述多个校正画面特征。
在一个实施例中，第二位置信息获取模块830包括：图像获取单元，用于获取移动终端对所述投影区域进行拍摄得到的第二图像，所述第二图像中的图像元素包括所述投影幕布和投影设备向所述投影区域投射形成的第二投影画面，所述第二投影画面为空白画面；第二位置信息获取单元，用于根据所述第二图像，获取各幕布特征在所述图像坐标系中的第二位置信息。
在一个实施例中，第二位置信息获取单元具体用于对所述第二图像进行边缘检测，以获取所述投影幕布的幕布轮廓；基于所述幕布轮廓确定各幕布顶点对应的第二位置信息。
在一个实施例中，所述第一图像和所述第二图像是从移动终端对所述投影区域拍摄的视频中截取的，所述第一投影画面和所述第二投影画面分别完全覆盖所述投影幕布。
参考图9，图9为本申请实施例提供的另一种投影画面的校正装置的结构示意图。在本实施例中，以应用于图1中的投影设备进行举例说明。如图9所示，投影画面的校正装置包括投影控制模块910和第二校正模块920，其中：
投影控制模块910，用于控制投影设备向投影区域投射形成第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影区域设置有投影幕布，所述投影幕布具有多个幕布特征；
第二校正模块920，用于获取校正指示信息，并根据所述校正指示信息进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配；
其中，所述校正指示信息是通过获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面；根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；获取各幕布特征在所述图像坐标系中的第二位置信息；根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息确定的。
在一个实施例中，投影控制模块910还用于控制投影设备向投影区域投射形成第二投影画面，以根据移动终端对所述投影区域进行拍摄得到的第二图像获取各幕布特征在所述图像坐标系中的第二位置信息，所述第二图像中的图像元素包括所述投影幕布和所述第二投影画面，所述第二投影画面为空白画面。
上述投影画面的校正装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中，提供了一种投影设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中，提供了一种校正设备，包括存储器和处理器，所述存储器存储有计算机程序，该处理器执行计算机程序时实现上述各方法实施例中的步骤。
该校正设备包括通过系统总线连接的处理器、存储器和网络接口。其中，该校正设备的处理器用于提供计算和控制能力。该校正设备的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该校正设备的数据库用于存储视频。该校正设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种投影画面的校正方法。
本领域技术人员可以理解，上述校正设备的描述，并不构成对本申请方案所应用于其上的校正设备的限定，具体的校正设备可以包括更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，还提供了一种投影系统。投影系统包括投影设备和校正设备。其中，投影设备用于执行上述各方法实施例中的步骤。校正设备用于执行上述各方法实施例中的步骤。
在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述各方法实施例中的步骤。
在一个实施例中，提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory，ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory，MRAM)、铁电存储器(Ferroelectric Random Access Memory，FRAM)、相变存储器(Phase Change Memory，PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory，RAM)或外部高速缓冲存储器等。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器(Static Random Access Memory，SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory，DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等，不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等，不限于此。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请的保护范围应以所附权利要求为准。
Claims (16)
1.一种投影画面的校正方法，其特征在于，包括：
获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影幕布具有多个幕布特征；
根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；
获取各幕布特征在所述图像坐标系中的第二位置信息；
根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息，确定校正指示信息，所述校正指示信息用于指示所述投影设备进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配。
2.根据权利要求1所述的方法，其特征在于，所述目标位置信息包括目标投影画面在所述投影区域中形成标准投影画面的情况下，目标画面特征在投影区域坐标系中的位置信息，所述根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息，确定校正指示信息，包括：
根据各校正画面特征对应的第一位置信息和各目标画面特征对应的目标位置信息，确定所述图像坐标系与所述投影区域坐标系之间的透视变换矩阵；
根据所述透视变换矩阵以及各幕布特征对应的第二位置信息确定各幕布特征在所述投影区域坐标系中的第三位置信息；
将所述各幕布特征对应的第三位置信息作为所述校正指示信息。
3.根据权利要求2所述的方法，其特征在于，所述第一投影画面包括棋盘格图案，所述棋盘格图案具有多个角点，所述角点为相邻的多个棋盘之间的共同交点，所述校正画面特征包括所述多个角点和所述第一投影画面的各第一顶点，所述目标画面特征包括目标投影画面的目标顶点，所述根据各校正画面特征对应的第一位置信息和各目标画面特征对应的目标位置信息，确定所述图像坐标系与所述投影区域坐标系之间的透视变换矩阵，包括：
根据各角点对应的第一位置信息确定所述第一投影画面的各第一顶点在所述图像坐标系中的第四位置信息；
根据各第一顶点对应的第四位置信息和各目标顶点对应的目标位置信息进行透视变换，得到所述透视变换矩阵。
4.根据权利要求3所述的方法，其特征在于，多个角点呈多行多列的规则四边形分布，所述根据各角点对应的第一位置信息确定所述第一投影画面的各第一顶点在所述图像坐标系中的第四位置信息，包括：
根据各角点对应的第一位置信息进行直线拟合，得到每列角点对应的列直线表达式和每行角点对应的行直线表达式；
根据每列角点对应的列直线表达式，确定所述第一投影画面的第一边界的第一直线表达式和第二边界的第二直线表达式；
根据每行角点对应的行直线表达式，确定所述第一投影画面的第三边界的第三直线表达式和第四边界的第四直线表达式；
根据所述第一直线表达式、所述第二直线表达式、所述第三直线表达式和所述第四直线表达式确定各第一顶点对应的第四位置信息。
5.根据权利要求1-4任一项所述的方法，其特征在于，所述第一图像至少为两张，所述根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息，包括：
将至少两张所述第一图像合成为一张合成图像；
在所述合成图像中的图像元素包括所述多个校正画面特征的情况下，根据所述合成图像，获取各校正画面特征在所述合成图像中的位置信息，并将校正画面特征在所述合成图像中的位置信息作为所述第一位置信息。
6.根据权利要求5所述的方法，其特征在于，所述根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息，还包括：
在所述合成图像中的图像元素未包括所述多个校正画面特征的情况下，根据至少两张所述第一图像中的其中一张目标图像，获取各校正画面特征在所述图像坐标系中的第一位置信息，所述目标图像的图像元素包括所述多个校正画面特征。
7.根据权利要求1-4任一项所述的方法，其特征在于，所述获取各幕布特征在所述图像坐标系中的第二位置信息，包括：
获取移动终端对所述投影区域进行拍摄得到的第二图像，所述第二图像中的图像元素包括所述投影幕布和投影设备向所述投影区域投射形成的第二投影画面，所述第二投影画面为空白画面；
根据所述第二图像，获取各幕布特征在所述图像坐标系中的第二位置信息。
8.根据权利要求7所述的方法，其特征在于，所述幕布特征包括所述投影幕布的幕布顶点，所述根据所述第二图像，获取各幕布特征在所述图像坐标系中的第二位置信息，包括：
对所述第二图像进行边缘检测，以获取所述投影幕布的幕布轮廓；
基于所述幕布轮廓确定各幕布顶点对应的第二位置信息。
9.根据权利要求7所述的方法，其特征在于，所述第一图像和所述第二图像是从移动终端对所述投影区域拍摄的视频中截取的，所述第一投影画面和所述第二投影画面分别完全覆盖所述投影幕布。
10.一种投影画面的校正方法，其特征在于，包括：
控制投影设备向投影区域投射形成第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影区域设置有投影幕布，所述投影幕布具有多个幕布特征；
获取校正指示信息，并根据所述校正指示信息进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配；
其中，所述校正指示信息是通过获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面；根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；获取各幕布特征在所述图像坐标系中的第二位置信息；根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息确定的。
11.根据权利要求10所述的方法，其特征在于，在所述获取校正指示信息之前，包括：
控制投影设备向投影区域投射形成第二投影画面，以根据移动终端对所述投影区域进行拍摄得到的第二图像获取各幕布特征在所述图像坐标系中的第二位置信息，所述第二图像中的图像元素包括所述投影幕布和所述第二投影画面，所述第二投影画面为空白画面。
12.一种投影画面的校正装置，其特征在于，包括：
图像获取模块，用于获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影幕布具有多个幕布特征；
第一位置信息获取模块，用于根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；
第二位置信息获取模块，用于获取各幕布特征在所述图像坐标系中的第二位置信息；
第一校正模块，用于根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息，确定校正指示信息，所述校正指示信息用于指示所述投影设备进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配。
13.一种投影画面的校正装置，其特征在于，包括：
投影控制模块，用于控制投影设备向投影区域投射形成第一投影画面，所述第一投影画面具有多个校正画面特征，所述投影区域设置有投影幕布，所述投影幕布具有多个幕布特征；
第二校正模块，用于获取校正指示信息，并根据所述校正指示信息进行校正处理，以使所述投影设备在所述投影区域投射形成的目标投影画面与所述投影幕布的形状尺寸相匹配；
其中，所述校正指示信息是通过获取移动终端对投影区域进行拍摄得到的第一图像，所述第一图像中的图像元素包括设置在所述投影区域中的投影幕布和投影设备向所述投影区域投射形成的第一投影画面；根据所述第一图像，获取各校正画面特征在图像坐标系中的第一位置信息；获取各幕布特征在所述图像坐标系中的第二位置信息；根据各校正画面特征对应的第一位置信息、各幕布特征对应的第二位置信息和待投射的目标投影画面的各目标画面特征对应的目标位置信息确定的。
14.一种校正设备，其特征在于，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至9中任一项所述的方法的步骤。
15.一种投影设备，其特征在于，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求10至11中任一项所述的方法的步骤。
16.一种投影系统，其特征在于，包括：
投影设备，用于执行如权利要求10至11中任一项所述的方法的步骤；
校正设备，用于执行权利要求1至9中任一项所述的方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210512546.XA CN115086625B (zh) | 2022-05-12 | 2022-05-12 | 投影画面的校正方法、装置、系统、校正设备和投影设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210512546.XA CN115086625B (zh) | 2022-05-12 | 2022-05-12 | 投影画面的校正方法、装置、系统、校正设备和投影设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN115086625A true CN115086625A (zh) | 2022-09-20 |
| CN115086625B CN115086625B (zh) | 2024-03-15 |
Family
ID=83246680
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210512546.XA Active CN115086625B (zh) | 2022-05-12 | 2022-05-12 | 投影画面的校正方法、装置、系统、校正设备和投影设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115086625B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116095290A (zh) * | 2023-04-11 | 2023-05-09 | 深圳新智联软件有限公司 | 投影自动入框方法、装置及电子设备 |
Citations (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US3423152A (en) * | 1964-10-09 | 1969-01-21 | France Ecrans Sa | Motion picture projector with oppositely positioned light sources |
| CA2378827A1 (en) * | 1999-07-08 | 2000-01-20 | Svyatoslav Ivanovich Arsenich | Projection system |
| CA2246697A1 (en) * | 1998-09-23 | 2000-03-23 | Steve Mann | Reality mediator with viewfinder means |
| JP2002062842A (ja) * | 2000-08-11 | 2002-02-28 | Nec Corp | 投射映像補正システム及びその方法 |
| CN101025656A (zh) * | 2007-01-19 | 2007-08-29 | 清华大学 | 嵌入式屏幕光点定位装置 |
| US20090002510A1 (en) * | 2007-06-28 | 2009-01-01 | Fuji Xerox Co., Ltd. | Image processing device, computer readable recording medium, and image processing method |
| CN101815190A (zh) * | 2010-04-16 | 2010-08-25 | 浙江大学 | 投影显示系统及其特性分析方法 |
| CN101881922A (zh) * | 2010-05-26 | 2010-11-10 | 程亚奇 | 真三维显示系统 |
| JP2013247601A (ja) * | 2012-05-29 | 2013-12-09 | Toyohashi Univ Of Technology | 画像投影装置および画像処理方法 |
| WO2015022999A1 (en) * | 2013-08-13 | 2015-02-19 | Ricoh Company, Limited | Image processing apparatus, image processing system, image processing method, and computer program |
| JP2015219679A (ja) * | 2014-05-16 | 2015-12-07 | 株式会社リコー | 画像処理システム、情報処理装置、プログラム |
| EP3419285A1 (en) * | 2017-06-21 | 2018-12-26 | Coretronic Corporation | Projection system and method for calibrating display image |
| CN110099266A (zh) * | 2019-05-14 | 2019-08-06 | 峰米(北京)科技有限公司 | 投影机画面校正方法、装置及投影机 |
| US20190295277A1 (en) * | 2018-03-26 | 2019-09-26 | Casio Computer Co., Ltd. | Projection control device, marker detection method, and storage medium |
| CN110784690A (zh) * | 2018-07-30 | 2020-02-11 | 中强光电股份有限公司 | 投影系统及投影方法 |
| CN111586384A (zh) * | 2020-05-29 | 2020-08-25 | 燕山大学 | 一种基于贝塞尔曲面的投影图像几何校正方法 |
| CN111988591A (zh) * | 2020-08-26 | 2020-11-24 | 峰米(北京)科技有限公司 | 一种投影画面的平移方法、装置和投影设备 |
| CN112055187A (zh) * | 2020-08-26 | 2020-12-08 | 北京博睿维讯科技有限公司 | 一种投影图像几何校正方法、系统、设备及存储介质 |
| CN112584116A (zh) * | 2021-02-24 | 2021-03-30 | 深圳市火乐科技发展有限公司 | 投影校正方法、装置、存储介质和电子设备 |
| CN112689135A (zh) * | 2021-03-19 | 2021-04-20 | 深圳市火乐科技发展有限公司 | 投影校正方法、装置、存储介质及电子设备 |
| CN112995625A (zh) * | 2021-02-23 | 2021-06-18 | 峰米(北京)科技有限公司 | 用于投影仪的梯形校正方法及装置 |
| CN113286135A (zh) * | 2021-05-25 | 2021-08-20 | 青岛海信激光显示股份有限公司 | 图像校正方法及设备 |
| CN114143519A (zh) * | 2021-11-11 | 2022-03-04 | 深圳市橙子数字科技有限公司 | 投影图像自动匹配幕布区域的方法及装置，投影仪 |
| CN114339172A (zh) * | 2021-12-14 | 2022-04-12 | 青岛信芯微电子科技股份有限公司 | 一种投影校正方法、装置、投影设备、芯片及介质 |
| CN114449249A (zh) * | 2022-01-29 | 2022-05-06 | 深圳市火乐科技发展有限公司 | 图像投影方法、装置、存储介质以及投影设备 |
-
2022
- 2022-05-12 CN CN202210512546.XA patent/CN115086625B/zh active Active
Patent Citations (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US3423152A (en) * | 1964-10-09 | 1969-01-21 | France Ecrans Sa | Motion picture projector with oppositely positioned light sources |
| CA2246697A1 (en) * | 1998-09-23 | 2000-03-23 | Steve Mann | Reality mediator with viewfinder means |
| CA2378827A1 (en) * | 1999-07-08 | 2000-01-20 | Svyatoslav Ivanovich Arsenich | Projection system |
| JP2002062842A (ja) * | 2000-08-11 | 2002-02-28 | Nec Corp | 投射映像補正システム及びその方法 |
| CN101025656A (zh) * | 2007-01-19 | 2007-08-29 | 清华大学 | 嵌入式屏幕光点定位装置 |
| US20090002510A1 (en) * | 2007-06-28 | 2009-01-01 | Fuji Xerox Co., Ltd. | Image processing device, computer readable recording medium, and image processing method |
| CN101815190A (zh) * | 2010-04-16 | 2010-08-25 | 浙江大学 | 投影显示系统及其特性分析方法 |
| CN101881922A (zh) * | 2010-05-26 | 2010-11-10 | 程亚奇 | 真三维显示系统 |
| JP2013247601A (ja) * | 2012-05-29 | 2013-12-09 | Toyohashi Univ Of Technology | 画像投影装置および画像処理方法 |
| WO2015022999A1 (en) * | 2013-08-13 | 2015-02-19 | Ricoh Company, Limited | Image processing apparatus, image processing system, image processing method, and computer program |
| JP2015219679A (ja) * | 2014-05-16 | 2015-12-07 | 株式会社リコー | 画像処理システム、情報処理装置、プログラム |
| EP3419285A1 (en) * | 2017-06-21 | 2018-12-26 | Coretronic Corporation | Projection system and method for calibrating display image |
| US20190295277A1 (en) * | 2018-03-26 | 2019-09-26 | Casio Computer Co., Ltd. | Projection control device, marker detection method, and storage medium |
| CN110784690A (zh) * | 2018-07-30 | 2020-02-11 | 中强光电股份有限公司 | 投影系统及投影方法 |
| CN110099266A (zh) * | 2019-05-14 | 2019-08-06 | 峰米(北京)科技有限公司 | 投影机画面校正方法、装置及投影机 |
| CN111586384A (zh) * | 2020-05-29 | 2020-08-25 | 燕山大学 | 一种基于贝塞尔曲面的投影图像几何校正方法 |
| CN111988591A (zh) * | 2020-08-26 | 2020-11-24 | 峰米(北京)科技有限公司 | 一种投影画面的平移方法、装置和投影设备 |
| CN112055187A (zh) * | 2020-08-26 | 2020-12-08 | 北京博睿维讯科技有限公司 | 一种投影图像几何校正方法、系统、设备及存储介质 |
| CN112995625A (zh) * | 2021-02-23 | 2021-06-18 | 峰米(北京)科技有限公司 | 用于投影仪的梯形校正方法及装置 |
| CN112584116A (zh) * | 2021-02-24 | 2021-03-30 | 深圳市火乐科技发展有限公司 | 投影校正方法、装置、存储介质和电子设备 |
| CN112689135A (zh) * | 2021-03-19 | 2021-04-20 | 深圳市火乐科技发展有限公司 | 投影校正方法、装置、存储介质及电子设备 |
| CN113286135A (zh) * | 2021-05-25 | 2021-08-20 | 青岛海信激光显示股份有限公司 | 图像校正方法及设备 |
| CN114143519A (zh) * | 2021-11-11 | 2022-03-04 | 深圳市橙子数字科技有限公司 | 投影图像自动匹配幕布区域的方法及装置，投影仪 |
| CN114339172A (zh) * | 2021-12-14 | 2022-04-12 | 青岛信芯微电子科技股份有限公司 | 一种投影校正方法、装置、投影设备、芯片及介质 |
| CN114449249A (zh) * | 2022-01-29 | 2022-05-06 | 深圳市火乐科技发展有限公司 | 图像投影方法、装置、存储介质以及投影设备 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116095290A (zh) * | 2023-04-11 | 2023-05-09 | 深圳新智联软件有限公司 | 投影自动入框方法、装置及电子设备 |
| CN116095290B (zh) * | 2023-04-11 | 2024-03-26 | 深圳新智联软件有限公司 | 投影自动入框方法、装置及电子设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN115086625B (zh) | 2024-03-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2021227360A1 (zh) | 一种交互式视频投影方法、装置、设备及存储介质 | |
| CN109697688B (zh) | 一种用于图像处理的方法和装置 | |
| CN109242961B (zh) | 一种脸部建模方法、装置、电子设备和计算机可读介质 | |
| CN111750820B (zh) | 影像定位方法及其系统 | |
| EP3425587A1 (en) | Method and device for generating a panoramic image | |
| US9519968B2 (en) | Calibrating visual sensors using homography operators | |
| CN106846409B (zh) | 鱼眼相机的标定方法及装置 | |
| CN111401266B (zh) | 绘本角点定位的方法、设备、计算机设备和可读存储介质 | |
| US10726580B2 (en) | Method and device for calibration | |
| US20160295108A1 (en) | System and method for panoramic imaging | |
| KR20210066031A (ko) | 개선된 카메라 캘리브레이션 시스템, 타겟 및 프로세스 | |
| US20190385285A1 (en) | Image Processing Method and Device | |
| WO2017203710A1 (ja) | ３次元モデル生成システム、３次元モデル生成方法、及びプログラム | |
| CN113689578B (zh) | 一种人体数据集生成方法及装置 | |
| CN111866523B (zh) | 全景视频合成方法、装置、电子设备和计算机存储介质 | |
| WO2021003807A1 (zh) | 一种图像深度估计方法及装置、电子设备、存储介质 | |
| CN113538587A (zh) | 一种相机坐标变换方法、终端以及存储介质 | |
| WO2021142843A1 (zh) | 图像扫描方法及装置、设备、存储介质 | |
| CN114782646A (zh) | 房屋模型的建模方法、装置、电子设备和可读存储介质 | |
| US20090059018A1 (en) | Navigation assisted mosaic photography | |
| CN115086625B (zh) | 投影画面的校正方法、装置、系统、校正设备和投影设备 | |
| KR20150107580A (ko) | 화상 처리 장치 및 화상 처리 방법 | |
| CN109785444A (zh) | 图像中现实平面的识别方法、装置及移动终端 | |
| Ha et al. | Embedded panoramic mosaic system using auto-shot interface | |
| CN115174878B (zh) | 投影画面校正方法、装置和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |