CN114205571A - 激光电视投影校正方法、装置、设备及存储介质 - Google Patents
激光电视投影校正方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN114205571A CN114205571A CN202210107887.9A CN202210107887A CN114205571A CN 114205571 A CN114205571 A CN 114205571A CN 202210107887 A CN202210107887 A CN 202210107887A CN 114205571 A CN114205571 A CN 114205571A
- Authority
- CN
- China
- Prior art keywords
- laser television
- area
- projection
- correction
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3185—Geometric adjustment, e.g. keystone or convergence
Landscapes
- Physics & Mathematics (AREA)
- Geometry (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Projection Apparatus (AREA)
Abstract
本发明实施例公开了一种激光电视投影校正方法、装置、设备及存储介质。该方法包括:在激光电视移动投影过程中采集连续投影数据;基于所述连续投影数据通过语义分割模型确定屏幕区域和图像区域,并确定所述图像区域和所述屏幕区域的面积比较结果;基于所述面积比较结果和所述连续投影数据进行形状校正和位置校正。本发明实施例能够针对激光电视投影过程中的不同问题进行投影校正,针对画面变形和画面清晰度不足都有良好的校正效果。
Description
技术领域
本发明实施例涉及投影电视技术领域,尤其涉及一种激光电视投影校正方法、装置、设备及存储介质。
背景技术
激光电视在使用时其投影效果会随激光电视相对于投影平面的位置关系变化而有所变化,例如远近关系的变化会导致投影清晰度的改变、偏转角度的变化会导致投影画面的倾斜和变形等,因此激光电视在使用时往往需要进行校正。目前针对激光电视的校正方案中,大多采用基于像素分析清晰度以进行调焦或基于定位点进行梯形校正,还有一些通过TOF等传感器精确计算校正位置进行位置调整,这些校正方案都只能完成一种校正功能,而激光电视在实际使用时投影效果往往受多种因素影响,因此上述方案的实际校正效果不佳。
发明内容
有鉴于此,本发明提供一种激光电视投影校正方法、装置、电子设备及存储介质,能够根据图像区域和屏幕区域的面积比较结果同时进行形状校正和位置校正,能够同时针对投影画面变形和投影清晰度不足进行优化调整,以得到更好的投影效果。
第一方面,本发明提供了一种激光电视投影校正方法,包括:
在激光电视移动投影过程中采集连续投影数据;
基于连续投影数据通过语义分割模型确定屏幕区域和图像区域,并确定图像区域和屏幕区域的面积比较结果;
基于面积比较结果和连续投影数据进行形状校正和位置校正。
可选的,在一些实施例中,连续投影数据包括相匹配的投影图像和移动参数,在激光电视移动投影过程中采集连续投影数据包括:
向移动装置发送校正指令,以使移动装置根据校正指令带动激光电视自初始位置沿预设方向移动,且激光电视在移动过程中向投影平面投影校正图像以生成投影图像;
在激光电视移动过程中连续采集移动装置的移动参数以及对应的投影图像以得到连续投影数据。
可选的,在一些实施例中,面积比较结果包括重合比、面积差和/或面积比,基于面积比较结果进行形状校正和位置校正包括:
当重合比大于等于第一阈值时,控制激光电视停止移动,并根据屏幕区域和图像区域进行形状校正;
控制激光电视继续移动,并根据移动参数和面积差或面积比进行位置校正。
可选的,在一些实施例中,根据屏幕区域和图像区域进行形状校正包括:
在水平方向和垂直方向确定屏幕区域和图像区域之间距离最近的边夹角;
按照预设方向依次判断边夹角是否小于预设的夹角阈值;
若否,则向激光电视发送第一校正信号,以使激光电视根据第一校正信号调整图像区域使得边夹角小于夹角阈值。
可选的,在一些实施例中,确定屏幕区域和图像区域的边夹角之前,还包括:
判断图像区域的底部标识点是否在屏幕区域内;
若否,则生成并发出手动调整提示,以提醒用户手动调整激光电视的位置。
可选的,在一些实施例中,并根据面积差和移动参数进行位置校正包括:
当存在面积差小于等于第二阈值或面积比大于等于第三阈值时,记录当前的移动参数并以当前移动参数确定最佳投影位置;
当不存在面积差小于等于第二阈值或面积比大于等于第三阈值时,根据面积差和移动参数生成面积差变化曲线或根据面积比和移动参数生成面积比变化曲线,并根据面积差变化曲线或面积比变化曲线确定单调性反转点,以单调性反转点对应的移动参数确定最佳投影位置。
可选的,在一些实施例中,根据屏幕区域和图像区域进行形状校正包括:
根据移动参数确定激光电视的当前位置,并根据当前位置确定激光电视在投影平面的理论标识点;
根据投影图像确定激光电视在投影平面的的实际标识点,并根据理论标识点和实际标识点确定角点校正参数;
根据角点校正参数生成第二校正信号并发送至激光电视,以使激光电视根据第二校正信号调整图像区域使得实际标识点与理论标识点重合。
可选的,在一些实施例中,根据面积差和移动参数生成面积差变化曲线或根据面积比和移动参数生成面积比变化曲线之后,还包括:
若面积差变化曲线或面积比变化曲线不具备单调性反转点,则生成并发出手动调整提示,以提醒用户手动调整激光电视的位置。
第二方面,本发明还提供有一种激光电视投影校正装置,包括:
数据采集模块,用于在激光电视移动投影过程中采集连续投影数据;
区域分析模块,用于基于连续投影数据通过语义分割模型确定屏幕区域和图像区域,并确定图像区域和屏幕区域的面积比较结果;
校正模块,用于基于面积比较结果和连续投影数据进行形状校正和位置校正。
第三方面,本发明还提供有一种电子设备,包括:
至少一个处理器;
存储装置,用于存储至少一个程序,
当至少一个程序被至少一个处理器执行,使得至少一个处理器实现如本发明任一实施例提供的激光电视投影校正方法。
第四方面,本发明还提供有一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明任一实施例所提供的激光电视投影校正方法。
本发明实施例在激光电视的移动投影过程中采集连续投影数据,再通过预设的语义分割模型对连续投影数据进行处理得到屏幕区域和图像区域,基于屏幕区域和图像区域进行比较得到面积比较结果,最后以面积比较结果和连续投影数据为基础进行形状校正和位置校正,该方法能够针对激光电视投影过程中的不同问题进行投影校正,针对画面变形和画面清晰度不足都有良好的校正效果。
附图说明
图1为本发明实施例一提供的一种激光电视投影校正方法的流程图;
图2为本发明实施例二提供的另一种激光电视投影校正方法的流程图;
图3为本发明实施例二提供的一种激光电视投影校正方法的子流程图;
图4为本发明实施例二提供的一种激光电视投影校正方法的子流程图;
图5为本发明实施例二提供的一种激光电视投影校正方法的子流程图;
图6为本发明实施例二提供的又一种激光电视投影校正方法的流程图;
图7为本发明实施例二提供的一种激光电视投影校正方法的子流程图;
图8为本发明实施例三提供的一种激光电视投影校正装置的结构示意图;
图9为本发明实施例四提供的一种电子设备的结构示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时处理可以被终止,但是还可以具有未包括在附图中的附加步骤。处理可以对应于方法、函数、规程、子例程、子程序等等。
此外,术语“第一”、“第二”等可在本文中用于描述各种方向、动作、步骤或元件等,但这些方向、动作、步骤或元件不受这些术语限制。这些术语仅用于将第一个方向、动作、步骤或元件与另一个方向、动作、步骤或元件区分。术语“第一”、“第二”等而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中,“多个”、“批量”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
实施例一
本实施例提供了一种激光电视投影校正方法,应用于包括激光电视的投影系统,其中激光电视能够向投影平面(例如幕布、墙壁等)进行投影生成投影图像,并且该系统还包括能够带动激光电视移动的移动设备/装置,例如用于放置/容纳激光电视的激光电视收纳盒,借助激光电视收纳盒能够调整激光电视在投影时的位置,进一步的,在一些情境下该投影系统还包括手机等终端设备。本实施例提供的激光电视投影校正方法能够基于激光电视收纳盒等移动设备/装置实现,还能够通过移动设备/装置和终端设备交互实现,本实施例以移动设备/装置和终端设备交互为例进行说明,如图1所示,该方法包括:
S110、在激光电视移动投影过程中采集连续投影数据。
激光电视在使用时,往往会因为意外碰撞等问题导致位置发生变动,此时其投影画面会随之变化,其投影清晰度、画面位置等都会受到影响,因此需要在使用前对激光电视进行校正。具体的,在本实施例中,在对激光电视的校正过程中涉及对激光电视的投影位置的调整,以在激光电视的移动范围内确定投影效果满足预设要求的投影位置,因此需要对投影位置与投影图像进行分析,以根据投影图像确定投影效果,再确定投影位置与投影效果之间的关系。
本实施例中,在开始激光电视的校正后,激光电视在移动设备/装置的带动下开始移动,并且在移动过程中向投影平面进行投影,连续投影数据即在激光电视移动过程中对激光电视的移动位置和投影效果进行检测得到的相关数据,示例性的,连续投影数据中包括用于记录移动位置的移动参数以及用于分析投影效果的投影图像,其中投影图像为包括激光电视在投影平面上投影显示画面的图像。具体的,在本实施例中,移动参数由移动设备/装置在带动激光电视移动过程中能够计算并发送至终端设备,投影图像由终端设备对投影平面进行图像采集得到。
S120、基于连续投影数据通过语义分割模型确定屏幕区域和图像区域,并确定图像区域和屏幕区域的面积比较结果。
语义分割模型为预先训练好的用于对图像进行分割的模型,主要用于对连续投影数据中的图像上的每个像素标注上对应的类别,根据标注的结果区分出图像中的屏幕区域和图像区域。其中,屏幕区域指的是投影平面中用于供激光电视投影画面的区域,例如以幕布作为投影平面时,屏幕区域通常为整块幕布,以墙体作为投影平面时,屏幕区域通常为墙体上干净、平整的部分区域,图像区域指的是激光电视投影时画面实际占据的区域。应当明确的是,本实施例中采用的语义分割模型能够是FCN、SegNet、PSPNet和DeepLab等模型中的任一一个,此处不作具体限制。
面积比较结果为对屏幕区域和图像区域进行比较分析得到的结果,其比较分析项目包括面积差、面积比以及重合比等项目中的至少一项。可选的,在进行上述比较分析时,本实施例优选的采用相同的比较基准:例如以屏幕区域和图像区域之差与屏幕区域的比值作为面积差,以图像区域与屏幕区域的比值作为面积比,以图像区域和屏幕区域的重叠部分与屏幕区域的比值作为重合比。
具体的,本实施例中终端设备能够调用语义分割模型或预先存储有语义分割模型,以在接收到连续投影数据后,将连续投影数据输入语义分割模型,由语义分割模型对其中的图像进行标定,得到屏幕区域和图像区域,再根据预设的比较方式基于面积对屏幕区域和图像区域进行比较分析得到面积比较结果。
S130、基于面积比较结果和连续投影数据进行形状校正和位置校正。
形状校正主要针对激光电视因投影角度等原因导致投影至投影平面的画面发生的形状扭曲例如矩形画面的纵向梯形变形,以校正画面的形状;位置校正主要针对激光电视因投影距离等原因导致投影至投影平面的画面过大或过小等问题,以校正画面的清晰度,以确定满足用户需求的激光电视投影位置。
具体的,本实施例中能够基于面积比较结果和连续投影数据进行梯形矫正和位置校正两种校正,其中形状校正主要基于连续投影数据中激光电视实际投影的画面,通过对画面的检测识别画面变形并针对性的进行校正,而面积比较结果主要用于判断是否需要开始形状校正:当图像区域相较于屏幕区域小于一定比例时(例如1:3),投影出的画面非常小,形状校正精度不高,当图像区域相较于屏幕区域大于等于一定比例时(例如7:10),才适合开始进行校正;位置校正需要结合面积比较结果和连续投影数据:面积比较结果反映了图像区域和屏幕区域之间的比例关系,实际代表了投影出的画面是否能够铺满投影平面,这实际反映了激光电视是否位于合适的投影位置(根据用户的需求确定,也能够根据预设要求确定),图像区域相较于屏幕区域的比例大于一定比例时(例如98:100)能够判断此时激光电视处于合适的投影位置(满足预设要求或满足用户的需求)。
本实施例提供了一种激光电视投影校正方法,其在激光电视的移动投影过程中采集连续投影数据,再通过预设的语义分割模型对连续投影数据进行处理得到屏幕区域和图像区域,基于屏幕区域和图像区域进行比较得到面积比较结果,最后以面积比较结果和连续投影数据为基础进行形状校正和位置校正,该方法能够针对激光电视投影过程中的不同问题进行投影校正,针对画面变形和画面清晰度不足都有良好的校正效果。
实施例二
本发明实施例在实施例一的基础上对激光电视投影校正方法中的部分内容做了进一步解释和补充,例如采集连续投影数据的过程以及进行形状校正和位置校正的过程,具体包括:
如图2所示,本实施例提供了一种激光电视投影校正方法,在本实施例中,连续投影数据包括相匹配的投影图像和移动参数,该方法包括:
S210、向移动装置发送校正指令,以使移动装置根据校正指令带动激光电视自初始位置沿预设方向移动,且激光电视在移动过程中向投影平面投影校正图像以生成投影图像。
移动装置即用于带动激光电视移动的装置/设备,初始位置和预设方向为预先设置好的用于控制激光电视移动范围的参数,初始位置以激光电视开始校正的位置,预设方向为激光电视的移动方向。校正图像为针对投影校正设置的特殊图像,其中通常包括用于供识别定位的特殊定位点,例如在图像的四个边角设置有定位点的纯色图像,投影图像为激光电视实际投影在投影平面上的画面。
本实施例通过终端设备和移动装置配合实现,校正指令为终端设备根据用户的操作生成并发送至移动装置,移动装置在接收到校正指令后,先带动激光电视移动到初始位置,再从初始位置缓慢沿着预设方向移动(通常以固定移动速度移动),在激光电视自初始位置沿预设方向移动的过程中,激光电视保持向投影平面投射校正图像,并在投影平面形成投影图像。
S220、在激光电视移动过程中连续采集移动装置的移动参数以及对应的投影图像以得到连续投影数据。
移动参数用于记录激光电视在移动过程中的不同位置,连续投影数据用于记录激光电视位于不同位置时对应的投影图像,也即连续投影数据记录了激光电视的投影位置和投影图像的对应关系。
本实施例中,移动参数由移动装置自行记录,并发送至终端设备,而投影图像由终端设备根据用户的操作采集,例如用户使用手机拍摄投影平面上的画面得到投影图像,终端设备能够根据时间戳等方式将接收到的移动参数和采集的投影图像进行关联,最后得到激光电视一次完整移动过程中的移动参数和对应的投影图像,作为该次移动过程中的连续投影数据。
S230、基于连续投影数据通过语义分割模型确定屏幕区域和图像区域,并确定图像区域和屏幕区域的面积比较结果。
S240、基于面积比较结果和连续投影数据进行形状校正和位置校正。
可选的,在一些实施例中,面积比较结果包括重合比、面积差和/或面积比,相应的步骤S240如图3所示,包括步骤S241-242:
S241、当重合比大于等于第一阈值时,控制激光电视停止移动,并根据屏幕区域和图像区域进行形状校正。
重合比表示图像区域和屏幕区域的重叠部分占屏幕区域的比值,第一阈值是一个预先设置好的比值,用于判断重合比是否达到进行校正的要求,当重合比过小时,校正难度大且校正效果差,因此本实施例中当重合比大于等于第一阈值时才会开始进行校正。
S242、控制激光电视继续移动,并根据移动参数和面积差或面积比进行位置校正。
具体的,在本实施例中在确定重合比大于等于第一阈值后,先进行形状校正以将图像区域的形状校正为和标准的画面形状匹配,也即对图像区域的变形进行校正,例如屏幕区域为长方形,但激光电视是斜向朝向投影平面的,此时图像区域是一个梯形,因此需要根据屏幕区域和图像区域修改激光电视的投影参数(例如激光电视的倾斜角度,或者直接对投影出的画面进行调整),以将图像区域校正为与屏幕路区域匹配的长方形。在形状校正完成后,才会进行为了提高投影清晰度的位置校正,以确定投影效果最佳的投影位置,当激光电视位于该投影位置时,图像区域应当能够铺满整个屏幕区域。具体的,本实施例中在进行位置校正时,根据面积差或面积比的变化情况能够分析出激光电视的位置与面积差或面积比的关系,以确定面积差最小伙面积比最大时激光电视的位置,以此作为位置校正的结果。
可选的,在一些实施例中,对形状校正的过程做了进一步解释,图4和图5分别为进行形状校正的两种具体方式。
如图4所示,本实施例中形状校正的步骤S241具体包括步骤S2411-2413:
S2411、在水平方向和垂直方向确定屏幕区域和图像区域之间距离最近的边夹角。
S2412、按照预设方向依次判断边夹角是否小于预设的夹角阈值。
S2413、若否,则向激光电视发送第一校正信号,以使激光电视根据第一校正信号调整图像区域使得边夹角小于夹角阈值。
步骤S2411-2413为利用边夹角进行形状校正的具体过程,在本实施例中,以屏幕区域和图像区域相邻边的边夹角作为是否变形的判断标准:在一些实施例中,激光电视投影出的画面为多边形,例如矩形,当图像区域和屏幕区域均为矩形时,图像区域和屏幕区域各包括水平方向的两条边和垂直方向上的两条边,据此分别确定图像区域和屏幕区域最接近的四组边,并确定每组边内两条边的边夹角,因而会有四个边夹角,当四个边夹角都满足小于预设的夹角阈值(例如0.5°)时,视为图像区域未发生变形,当有任意一个边夹角不满足小于预设夹角阈值时即可确定图像区域发生变形,此时需要进行形状校正。
具体的,本实施例中在形状校正时,终端设备中根据投影图像识别屏幕区域和图像区域的边,并将两个区域中相邻的边分为同一组边得到四组边,以某一组边(能够是任意选择的也能够是预先设置好的)为起始,按照顺时针或逆时针方向依次对每组边进行边夹角判定,当检测出大于夹角阈值的边夹角时,向激光电视发出用于调整信号(即第一校正信号),激光电视根据第一校正信号调整投影参数以将图像区域的对应边进行调整,使得大于夹角阈值的边夹角缩小到小于边夹角阈值,也即使得对应的一组边平行,依次对四组边完成校正后,图像区域和屏幕区域的四组边均保持平行(夹角小于夹角阈值视为平行)。应当理解的是,本实施例中图像区域是根据激光电视投影的画面确定的,其可能是矩形也可能是其他多边形,在对不同形状的画面进行形状校正时其采用的夹角阈值也是不同的,甚至会对不同的边夹角采用不同的夹角阈值,上述形状校正仅为针对矩形画面进行的梯形校正示例,实际能够根据具体需求自行设置相应参数,此处不做具体限制。
在一些替代实施例中,如图5所示,形状校正的步骤S241具体包括步骤S2414-2416:
S2414、根据移动参数确定激光电视的当前位置,并根据当前位置确定激光电视在投影平面的理论标识点;
S2415、根据投影图像确定激光电视在投影平面的的实际标识点,并根据理论标识点和实际标识点确定角点校正参数;
S2416、根据角点校正参数生成第二校正信号并发送至激光电视,以使激光电视根据第二校正信号调整图像区域使得实际标识点与理论标识点重合。
步骤S2414-2416为根据定位点的理论位置和实际位置进行形状校正的具体过程,本实施例中激光电视投影的校正图像中包括四个定位点(也能够设置为三个和五个等,此处不对定位点的数量做限制),实际标识点即投影图像中激光电视实际投影出的定位点所处的位置,理论标识点即激光电视未出现变形等问题时其投影出的定位点在投影图像中的理论位置,其中实际标识点能够根据投影图像对定位点进行识别得到,理论标识点则能够根据激光电视的位置和投影平面的位置确定。本实施例中,终端设备能够根据移动参数确定激光电视的位置,结合预先存储的投影平面位置确定理论标识点,同时根据采集到的投影图像确定实际标识点,当理论标识点和实际标识点重合时,判断图像区域未发生变形,反之若理论标识点与实际标识点不重合,则说明图像区域存在变形问题,此时需要对进行形状校正:确定每个定位点对应的实际标识点和与实际标识点匹配的理论标识点,确定将实际标识点重合至相匹配的理论标识点所需要调整的投影参数,依序确定四个定位点需要调整的投影参数并据此确定完整的角点校正参数,根据完整的角点校正参数生成第二校正信号,将第二校正信号发送至激光电视,激光电视接收到第二校正信号后解析确定角点校正参数,并根据角点校正参数校正投影,使得投影出的图像区域中实际标识点和理论标识点重合。与步骤S2411-2413中以边夹角为校正依据的校正过程不同,步骤S2414-2416实际是以预先设置好的定位点为依据进行校正,可以理解的是,激光电视除了会投影多边形的画面,还可能会投影其他形状的画面,例如圆形甚至一些不规则的形状,而此时难以确定边夹角,因此能够通过S2414-2416实现形状校正,以椭圆形的画面为例,通常定位点设置为五个:包括圆心、长轴的两个端点以及短轴的两个端点。
可选的,在一些实施例中,如图6所示,在步骤S240之前,还包括步骤S250-260:
S250、判断图像区域的底部标识点是否在屏幕区域内。
本实施例中,激光电视通常都是被从离投影平面较远的地方带向离投影平面较近的地方移动,随着激光电视向投影平面的靠近,图像区域也会越来越大,其在投影平面上所占据的区域也会变动,而在实际应用中,随着激光电视的移动图像区域的底部存在超出屏幕区域的情况,因此需要对图像区域是否超出屏幕区域进行检测,本实施例中,在激光电视投影的校正图像中设置有定位点,其中包括两个顶部定位点和两个底部定位点(顶部定位点和底部定位点的数量此处仅为示例不做限制),底部标识点即底部定位点在投影平面上的实际成像位置,当底部标识点不在屏幕区域内,说明图像区域已经超出屏幕区域。
S260、若否,则生成并发出手动调整提示,以提醒用户手动调整激光电视的位置。
当图像区域超出屏幕区域说明此时激光点是的摆放姿态不正确,需要用户手动调整激光电视的位置。具体的,手动调整提示能够是终端设备生成并发出的,也能够是终端设备生成后发送到激光电视收纳盒由激光电视收纳盒发出的。
应当理解的是,步骤S250-260中以底部标识点作为图像区域是否超出屏幕区域是基于实际应用场景作出的设置,当激光电视的应用场景发生变化时,其能够以顶部角点甚至二者结合进行判断,上述内容仅为示例说明在进行校正之前还设置有判断图像区域是否超出屏幕区域的过程,而非限定判断图像区域是否超出屏幕区域的手段。
可选的,在一些实施例中,为位置校正的过程做了进一步解释,如图7所示,步骤S242包括步骤S2421-2422:
S2421、当存在面积差小于等于第二阈值或面积比大于等于第三阈值时,记录当前的移动参数并以当前移动参数确定最佳投影位置。
本实施例中位置校正的目的在于找到能够使得图像区域尽可能的铺满屏幕区域的投影位置,以此作为最佳投影位置,当面积差小于等于第二阈值或面积比大于等于第三阈值时本实施例中能够视为已经满足铺满屏幕区域这一要求,具体的,第二阈值和第三阈值为预先设置好的比值,例如第二阈值能够设置为百分之二,第三阈值能够设置为百分之九十八,此处不做具体限制。
S2422、当不存在面积差小于等于第二阈值或面积比大于等于第三阈值时,根据面积差和移动参数生成面积差变化曲线或根据面积比和移动参数生成面积比变化曲线,并根据面积差变化曲线或面积比变化曲线确定单调性反转点,以单调性反转点对应的移动参数确定最佳投影位置。
当没有检测到满足面积差小于等于第二阈值或面积比大于等于第三阈值的投影位置时,本实施例中也会选择一个面积差尽可能小的投影位置,也即面积比尽可能大的位置,同时考虑到激光电视很可能会因为摆放位置等原因导致存在面积差更小的投影位置但并未移动到的情况,本实施例中以面积差变化曲线的单调性反转点或面积比变化曲线的单调性反转点作为激光电视能够到达的面积差尽可能小的位置,以单调性反转点通过移动参数反推该点的位置作为最佳投影位置。
本实施例中示出的为能够确定单调性反转点的情况下位置校正的过程,再说实际使用时,存在激光电视移动到达最大范围时依然没有单调性反转点的情况,其在步骤S2422之后,还设置有步骤S2423(图未示):
S2423、若面积差变化曲线或面积比变化曲线不具备单调性反转点,则生成并发出手动调整提示,以提醒用户手动调整激光电视的位置。
当步骤S2421没有找到最佳投影位置,而步骤S2422中也没有找到单调性反转点时,说明此事激光电视的摆放位置影响了最佳投影位置的确定,因此需要用户手动调整激光电视的位置,此时终端设备能够自行生成并发出手动调整是,也能够通过激光电视收纳盒发出手动调整以使用户及时调整激光电视的位置。
为了便于理解,以一具体示例说明本实施例提供的激光电视校正方法,本示例中,以手机作为终端设备,以激光电视收纳盒作为移动装置,幕布作为投影平面,激光电视容置于激光电视收纳盒中,手机能够通过蓝牙、网络等方式与激光电视收纳盒建立通信连接,其校正过程包括:激光电视收纳盒开机,检测是否有预设的投影位置(能够是使用过程中自行记录的,也能够是用户自定义的);若有预设的投影位置,则激光电视收纳盒带动激光电视移动至预设的投影位置;若不存在预设的投影位置,则激光电视收纳盒以通知消息(发送至手机)或灯光或语音等方式发出校正提醒;用户发现校正提醒后,通过指定的APP进行校正操作,手机根据用户的校正操作向激光电视收纳盒发出校正指令;激光电视收纳盒接收到校正指令后,带动激光电视移动到初始位置,此时APP调取手机的相机权限以使用户能够使用手机对准幕布采集投影图像;激光电视收纳盒自初始位置开始移动,同时手机自动(也能够由用户手动)对幕布进行拍摄得到投影图像;手机根据投影图像通过语义分割模型确定图像区域和屏幕区域,在图像区域和屏幕区域的重合比达到百分之七十之后,向激光电视收纳盒发送指令使得激光电视收纳盒停止移动;手机根据图像区域和屏幕区域判断图像区域是否在屏幕区域内,若不在则通知用户手动调整激光电视的位置;若在,则手机根据图像区域和屏幕区域进行形状校正的计算,根据计算出的结果生成第一校正信号或第二校正信号,并发送至激光电视(能够直接发送至激光电视或通过激光电视收纳盒中转);激光电视根据接收到的第一校正信号或第二校正信号调整投影参数,使得图像区域和屏幕区域保持对应边平行(每个方向的边夹角都小于0.5°)也即完成形状校正;随后手机向激光电视收纳盒发出移动信号,激光电视收纳盒带动激光电视继续沿预设方向移动向外推出(靠近投影平面),手机同时对屏幕区域和图像区域进行面积差分析或面积比分析;当手机判断图像区域和屏幕区域的面积差小于屏幕区域的百分之二时(也即图像区域占屏幕区域的面积比大于百分之九十八),记录此时激光电视的位置,以此位置进行激光电视投影,完成位置校正,当图像区域和屏幕区域的面积差始终不满足小于屏幕区域的百分之二时,记录面积差最小的位置,将激光电视移动至该位置完成位置校正。
本实施例在前述实施例的基础上,对连续投影数据的采集过程、形状校正的过程以及位置校正的过程做了进一步限定,本实施例能够通过终端设备与移动装置交互实现对移动参数的采集和投影图像的采集,无需在移动装置和激光电视上额外设置传感器;通过基于重合比的判断能够使得在投影出的图像区域在屏幕区域占据足够大时才进行校正,降低校正难度提高校正精度;提供了以边夹角和理论焦点两种方式进行形状校正的方式,保证了投影出的图像区域与屏幕区域形状匹配;通过面积差或面积比进行最佳投影位置的确定,能够使得投影的屏幕区域尽量铺满屏幕区域以优化观看效果;还提供了在因激光电视摆放位置导致难以校正时向用户发出提示的方式,进一步确保能够完成激光电视的校正,提供符合用户期待的投影效果。
实施例三
本发明实施例三提供了一种激光电视投影校正装置,该装置能够应用于各种包括激光电视的投影系统,如图8所示,该装置包括:
数据采集模块310,用于在激光电视移动投影过程中采集连续投影数据;
区域分析模块320,用于基于连续投影数据通过语义分割模型确定屏幕区域和图像区域,并确定图像区域和屏幕区域的面积比较结果;
校正模块330,用于基于面积比较结果和连续投影数据进行形状校正和位置校正。
可选的,在一些实施例中,连续投影数据包括相匹配的投影图像和移动参数,数据采集模块310具体包括校正指令发送单元和数据采集单元:
校正指令发送单元,用于向移动装置发送校正指令,以使移动装置根据校正指令带动激光电视自初始位置沿预设方向移动,且激光电视在移动过程中向投影平面投影校正图像以生成投影图像;
数据采集单元,用于在激光电视移动过程中连续采集移动装置的移动参数以及对应的投影图像以得到连续投影数据。
可选的,在一些实施例中,面积比较结果包括重合比、面积差和/或面积比,校正模块330包括形状校正单元和位置校正单元,其中:
形状校正单元,用于当重合比大于等于第一阈值时,控制激光电视停止移动,并根据屏幕区域和图像区域进行形状校正;
位置校正单元,用于控制激光电视继续移动,并根据移动参数和面积差或面积比进行位置校正。
可选的,在一些实施例中,形状校正单元具体用于:
在水平方向和垂直方向确定屏幕区域和图像区域之间距离最近的边夹角;
按照预设方向依次判断边夹角是否小于预设的夹角阈值;
若否,则向激光电视发送第一校正信号,以使激光电视根据第一校正信号调整图像区域使得边夹角小于夹角阈值。
可选的,在一些实施例中,形状校正单元具体用于:根据移动参数确定激光电视的当前位置,并根据当前位置确定激光电视在投影平面的理论标识点;
根据投影图像确定激光电视在投影平面的的实际标识点,并根据理论标识点和实际标识点确定角点校正参数;
根据角点校正参数生成第二校正信号并发送至激光电视,以使激光电视根据第二校正信号调整图像区域使得实际标识点与理论标识点重合。
可选的,在一些实施例中,校正模块330还用于在根据屏幕区域和图像区域进行形状校正之前:
判断图像区域的底部标识点是否在屏幕区域内;
若否,则生成并发出手动调整提示,以提醒用户手动调整激光电视的位置。
可选的,在一些实施例中,位置校正单元具体用于:当存在面积差小于等于第二阈值或面积比大于等于第三阈值时,记录当前的移动参数并以当前移动参数确定最佳投影位置;
当不存在面积差小于等于第二阈值或面积比大于等于第三阈值时,根据面积差和移动参数生成面积差变化曲线或根据面积比和移动参数生成面积比变化曲线,并根据面积差变化曲线或面积比变化曲线确定单调性反转点,以单调性反转点对应的移动参数确定最佳投影位置。
可选的,在一些实施例中,位置校正单元还用于:
若面积差变化曲线或面积比变化曲线不具备单调性反转点,则生成并发出手动调整提示,以提醒用户手动调整激光电视的位置。
本实施例提供了一种激光电视投影校正装置,在激光电视的移动投影过程中采集连续投影数据,再通过预设的语义分割模型对连续投影数据进行处理得到屏幕区域和图像区域,基于屏幕区域和图像区域进行比较得到面积比较结果,最后以面积比较结果和连续投影数据为基础进行形状校正和位置校正,能够针对激光电视投影过程中的不同问题进行投影校正,针对画面变形和画面清晰度不足都有良好的校正效果。
实施例四
图9为本发明实施例四提供的一种电子设备的结构示意图,如图9所示,该电子设备包括处理器410、存储器420、输入装置430和输出装置440;电子设备中处理器410的数量可以是一个或多个,图9中以一个处理器410为例;电子设备中的处理器410、存储器420、输入装置430和输出装置440可以通过总线或其他方式连接,图9中以通过总线连接为例。
存储器420作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的激光电视投影校正方法对应的程序指令/模块(例如,激光电视投影校正装置中的数据采集模块310、区域分析模块320和校正模块330)。处理器410通过运行存储在存储器420中的软件程序、指令以及模块,从而执行电子设备的各种功能应用以及数据处理,即实现上述的激光电视投影校正方法。
也即:
在激光电视移动投影过程中采集连续投影数据;
基于连续投影数据通过语义分割模型确定屏幕区域和图像区域,并确定图像区域和屏幕区域的面积比较结果;
基于面积比较结果和连续投影数据进行形状校正和位置校正。
存储器420可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端的使用所创建的数据等。此外,存储器420可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器420可进一步包括相对于处理器410远程设置的存储器,这些远程存储器可以通过网络连接至电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置430可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入,可以包括蓝牙按钮和麦克风等。输出装置440可包括指示灯和显示屏等显示设备以及扬声器等音频设备。
实施例五
本发明实施例五还提供一种包含计算机可执行指令的存储介质,计算机可执行指令在由计算机处理器执行时用于执行一种激光电视投影校正方法,该方法包括:
在激光电视移动投影过程中采集连续投影数据;
基于连续投影数据通过语义分割模型确定屏幕区域和图像区域,并确定图像区域和屏幕区域的面积比较结果;
基于面积比较结果和连续投影数据进行形状校正和位置校正。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上的方法操作,还可以执行本发明任意实施例所提供的激光电视投影校正方法中的相关操作。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台电子设备(可以是个人计算机,电子设备,或者网络设备等)执行本发明各个实施例的方法。
值得注意的是,上述装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种激光电视投影校正方法,其特征在于,包括:
在激光电视移动投影过程中采集连续投影数据;
基于所述连续投影数据通过语义分割模型确定屏幕区域和图像区域,并确定所述图像区域和所述屏幕区域的面积比较结果;
基于所述面积比较结果和所述连续投影数据进行形状校正和位置校正。
2.根据权利要求1所述的激光电视投影校正方法,其特征在于,所述连续投影数据包括相匹配的投影图像和移动参数,所述在激光电视移动投影过程中采集连续投影数据包括:
向移动装置发送校正指令,以使所述移动装置根据所述校正指令带动所述激光电视自初始位置沿预设方向移动,且所述激光电视在移动过程中向投影平面投影校正图像以生成所述投影图像;
在所述激光电视移动过程中连续采集所述移动装置的所述移动参数以及对应的所述投影图像以得到所述连续投影数据。
3.根据权利要求2所述的激光电视投影校正方法,其特征在于,所述面积比较结果包括重合比、面积差和/或面积比,所述基于所述面积比较结果进行形状校正和位置校正包括:
当所述重合比大于等于第一阈值时,控制所述激光电视停止移动,并根据所述屏幕区域和所述图像区域进行形状校正;
控制所述激光电视继续移动,并根据所述移动参数和所述面积差或面积比进行位置校正。
4.根据权利要求3所述的激光电视投影校正方法,其特征在于,所述根据所述屏幕区域和所述图像区域进行形状校正包括:
在水平方向和垂直方向确定所述屏幕区域和所述图像区域之间距离最近的边夹角;
按照预设方向依次判断所述边夹角是否小于预设的夹角阈值;
若否,则向所述激光电视发送第一校正信号,以使所述激光电视根据所述第一校正信号调整所述图像区域使得所述边夹角小于所述夹角阈值。
5.根据权利要求3所述的激光电视投影校正方法,其特征在于,所述根据所述屏幕区域和所述图像区域进行形状校正包括:
根据所述移动参数确定所述激光电视的当前位置,并根据所述当前位置确定所述激光电视在所述投影平面的理论标识点;
根据所述投影图像确定所述激光电视在所述投影平面的的实际标识点,并根据所述理论标识点和所述实际标识点确定角点校正参数;
根据所述角点校正参数生成第二校正信号并发送至所述激光电视,以使所述激光电视根据所述第二校正信号调整所述图像区域使得所述实际标识点与所述理论标识点重合。
6.根据权利要求3所述的激光电视投影校正方法,其特征在于,所述根据所述屏幕区域和所述图像区域进行形状校正之前,还包括:
判断所述图像区域的底部标识点是否在所述屏幕区域内;
若否,则生成并发出手动调整提示,以提醒用户手动调整所述激光电视的位置。
7.根据权利要求3所述的激光电视投影校正方法,其特征在于,所述并根据所述面积差和所述移动参数进行位置校正包括:
当存在所述面积差小于等于第二阈值或所述面积比大于等于第三阈值时,记录当前的移动参数并以所述当前移动参数确定最佳投影位置;
当不存在所述面积差小于等于第二阈值或所述面积比大于等于第三阈值时,根据所述面积差和所述移动参数生成面积差变化曲线或根据所述面积比和所述移动参数生成面积比变化曲线,并根据所述面积差变化曲线或面积比变化曲线确定单调性反转点,以所述单调性反转点对应的移动参数确定最佳投影位置。
8.一种激光电视投影校正装置,其特征在于,包括:
数据采集模块,用于在激光电视移动投影过程中采集连续投影数据;
区域分析模块,用于基于所述连续投影数据通过语义分割模型确定屏幕区域和图像区域,并确定所述图像区域和所述屏幕区域的面积比较结果;
校正模块,用于基于所述面积比较结果和所述连续投影数据进行形状校正和位置校正。
9.一种电子设备,其特征在于,包括:
至少一个处理器;
存储装置,用于存储至少一个程序,
当至少一个所述程序被至少一个所述处理器执行,使得至少一个所述处理器实现如权利要求1-7中任一项所述的激光电视投影校正方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一项所述的激光电视投影校正方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210107887.9A CN114205571A (zh) | 2022-01-28 | 2022-01-28 | 激光电视投影校正方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210107887.9A CN114205571A (zh) | 2022-01-28 | 2022-01-28 | 激光电视投影校正方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114205571A true CN114205571A (zh) | 2022-03-18 |
Family
ID=80658893
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210107887.9A Withdrawn CN114205571A (zh) | 2022-01-28 | 2022-01-28 | 激光电视投影校正方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114205571A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115002429A (zh) * | 2022-05-07 | 2022-09-02 | 深圳市和天创科技有限公司 | 一种基于摄像头计算自动校准投影位置的投影仪 |
WO2024036934A1 (zh) * | 2022-08-16 | 2024-02-22 | 北京石头创新科技有限公司 | 投影画面畸形校正结果评估方法、装置、设备及介质 |
-
2022
- 2022-01-28 CN CN202210107887.9A patent/CN114205571A/zh not_active Withdrawn
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115002429A (zh) * | 2022-05-07 | 2022-09-02 | 深圳市和天创科技有限公司 | 一种基于摄像头计算自动校准投影位置的投影仪 |
WO2024036934A1 (zh) * | 2022-08-16 | 2024-02-22 | 北京石头创新科技有限公司 | 投影画面畸形校正结果评估方法、装置、设备及介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114205571A (zh) | 激光电视投影校正方法、装置、设备及存储介质 | |
US10681320B2 (en) | Projection apparatus, method for controlling projection apparatus, and non-transitory storage medium | |
JP5327468B2 (ja) | プロジェクター、プログラム、情報記憶媒体および台形歪み補正方法 | |
EP3934243A1 (en) | Ultra-short-focus alignment method and apparatus for picture and screen, ultra-short-focus projector, and storage medium | |
CN104125395A (zh) | 一种实现自动拍摄的方法及装置 | |
JP2007078821A (ja) | 投影装置、投影方法及びプログラム | |
EP2590018B1 (en) | Projector device, distortion correction method, and distortion correction program | |
WO2022088419A1 (zh) | 投影方法、装置、投影设备及计算机可读存储介质 | |
JP2013070164A (ja) | 撮像装置及び撮像方法 | |
JP6587081B2 (ja) | 画像又はビデオをユーザが取り込むのを支援する方法及びシステム | |
US20220214683A1 (en) | Program for operating vehicle from outside vehicle | |
JP2014531860A (ja) | 立体視画像ペアの条件付き表示のための方法及び装置 | |
WO2016101524A1 (zh) | 纠正被摄物体拍摄倾斜方法、装置及移动终端、存储介质 | |
US11178337B2 (en) | Image capturing apparatus, method of controlling the same, and non-transitory computer readable storage medium for calculating a depth width for an object area based on depth information | |
US20110279738A1 (en) | Control device and projection video display device | |
JP2005151310A (ja) | 投射型画像表示装置の設置調整システム | |
JP2015144344A (ja) | 投影補助装置、投影補助方法、プログラム | |
US8902215B2 (en) | Method and mobile terminal for adjusting focus of a projected image | |
JP5206081B2 (ja) | プロジェクタ、プログラム及び記憶媒体 | |
US11394869B2 (en) | Imaging device with focusing operation based on subject and predetermined region | |
JP2016012889A (ja) | 画像投写システム | |
JP2015062052A (ja) | 撮像装置及び撮像方法 | |
JP4471793B2 (ja) | プロジェクタ | |
US11689702B2 (en) | Information processing apparatus and information processing method | |
JP7114415B2 (ja) | 投影制御装置、投影制御方法、及び、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20220318 |