CN117827019A - 投影控制方法、装置以及投影交互系统 - Google Patents
投影控制方法、装置以及投影交互系统 Download PDFInfo
- Publication number
- CN117827019A CN117827019A CN202211185818.6A CN202211185818A CN117827019A CN 117827019 A CN117827019 A CN 117827019A CN 202211185818 A CN202211185818 A CN 202211185818A CN 117827019 A CN117827019 A CN 117827019A
- Authority
- CN
- China
- Prior art keywords
- projection
- image
- shooting
- remote controller
- position information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000003993 interaction Effects 0.000 title description 16
- 230000003068 static effect Effects 0.000 claims abstract description 17
- 238000013507 mapping Methods 0.000 claims description 33
- 230000006870 function Effects 0.000 claims description 32
- 238000012545 processing Methods 0.000 claims description 11
- 230000008859 change Effects 0.000 claims description 5
- 230000002452 interceptive effect Effects 0.000 claims description 5
- 239000003550 marker Substances 0.000 claims 2
- 230000011664 signaling Effects 0.000 claims 1
- 238000005265 energy consumption Methods 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 12
- 230000001133 acceleration Effects 0.000 description 6
- 239000011159 matrix material Substances 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000004590 computer program Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Abstract
本申请公开了一种投影控制方法、装置以及系统,方法用于投影控制装置,投影控制装置与摄像机、投影仪以及遥控器分别连接,方法包括:接收遥控器发送的闲置信号,闲置信号是遥控器处于静止状态的时长达到预设时长时生成的;根据闲置信号,关闭标识定位功能,并控制摄像机停止采集投影图像对应的拍摄图像,以及控制遥控器停止发射投影标识,标识定位功能用于根据拍摄图像中拍摄标识的位置信息,确定投影标识在投影图像中的位置信息,投影标识用于对投影仪投射的投影图像进行标记,拍摄标识与投影标识相对应。在本申请中,节省了摄像机、投影控制装置以及遥控器的电能消耗,从而降低了资源消耗。
Description
技术领域
本申请涉及图像投影技术领域,更具体地,涉及一种投影控制方法、装置以及投影交互系统。
背景技术
目前,在教学或者会议中,用户借助激光遥控器等标识设备发射的标识对投影仪投影的投影图像进行标记,再由摄像机对标记的投影图像进行拍摄,得到拍摄图像,然后对拍摄图像进行标识检测,得到标识在拍摄图像中的位置信息,进而确定标识在投影图像中的位置信息,并根据针对标识的指令事件以及标识在投影图像中的位置信息,控制投影图像变化。
但是,采用该投影控制方法,资源消耗较高。
发明内容
鉴于上述问题,本申请提出了一种投影控制方法、装置以及投影交互系统,能够降低资源消耗。
第一方面,本申请实施例提供了一种投影控制方法,用于投影控制装置,所述投影控制装置与摄像机、投影仪以及遥控器分别连接,所述方法包括:
接收所述遥控器发送的闲置信号,所述闲置信号是所述遥控器处于静止状态的时长达到预设时长时生成的;
根据所述闲置信号,关闭标识定位功能,并控制所述摄像机停止采集投影图像对应的拍摄图像,以及控制所述遥控器停止发射投影标识,所述标识定位功能用于根据所述拍摄图像中拍摄标识的位置信息,确定所述投影标识在投影图像中的位置信息,所述投影标识用于对所述投影仪投射的投影图像进行标记,所述拍摄标识与所述投影标识相对应。
第二方面,本申请实施例提供了一种投影控制装置,用于投影控制装置,所述投影控制装置与摄像机、投影仪以及遥控器分别连接,所述装置包括:
接收模块,用于接收所述遥控器发送的闲置信号,所述闲置信号是所述遥控器处于静止状态的时长达到预设时长时生成的;
控制模块,用于根据所述闲置信号,关闭标识定位功能,并控制所述摄像机停止采集投影图像对应的拍摄图像,以及控制所述遥控器停止发射投影标识,所述标识定位功能用于根据所述拍摄图像中拍摄标识的位置信息,确定所述投影标识在投影图像中的位置信息,所述投影标识用于对所述投影仪投射的投影图像进行标记,所述拍摄标识与所述投影标识相对应。
第三方面,本申请实施例提供了一种投影控制装置,包括:
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行上述第一方面所述的方法。
第四方面,本申请实施例提供了一种投影交互系统,所述投影交互系统至少包括摄像机、投影仪、遥控器以及投影控制装置,其中,
所述投影仪用于投射投影图像;
所述摄像机用于对所述投影图像进行拍摄操作,得到拍摄图像;
所述遥控器用于发射投影标识;
所述投影控制装置用于执行上述第一方面所述的方法。
本申请实施例提供的一种投影控制方法、装置以及投影交互系统,在本申请中,遥控器处于静止状态的时长达到预设时长时,获得闲置信号,投影控制装置根据闲置信号,关闭标识定位功能,并控制摄像机停止采集拍摄图像,以及控制遥控器停止发射投影标识,节省了摄像机、投影控制装置以及遥控器的电能消耗,从而降低了资源消耗。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了一种适用于本申请实施例的应用环境的投影交互系统的示意图。
图2示出了本申请一个实施例提出的一种投影控制方法流程图。
图3示出了图2中S110之前的一种实施方式的流程图。
图4示出了本申请实施例中一种标定图像的示意图。
图5示出了本申请实施例中又一种标定图像的示意图。
图6示出了图3中S240的一种实施方式的流程图。
图7示出了本申请实施例中预设的卷积核的示意图。
图8示出了本申请一个实施例的提出的一种投影控制装置的框图。
图9示出了本申请又一个实施例提出的一种投影控制装置的框图。
图10示出了本申请实施例的一种计算机可读存储介质的结构框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。根据本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的,不是旨在限制本申请。
参照图1,图1示出了一种适用于本申请实施例的应用环境的投影交互系统的示意图。投影交互系统包括互相通信连接的投影仪101、摄像机102、投影控制装置103和遥控器104。
投影仪101可以任何类型或结构的投影仪,投影仪的分辨率可以是1080p、2K或4K等,投影仪可以放置于固定的位置,投影仪可以将获取到的待投影图像,投射在投影区域106,投影区域106可以设置有白色投影银幕,白色投影银幕显示出被投影的待投影图像,显示的被投影的待投影图像即是本申请中的投影图像。
摄像机102可以是高清摄像机或数码摄像机,摄像机102可以具有变焦功能。摄像机102用于对投影图像进行拍摄,摄像机拍摄的拍摄图像可以至少包括投投影图像,摄像机拍摄的拍摄图像还可以包括投影图像以外的其他内容,其中,摄像机的拍摄区域105(实线框对应的区域)包括投影区域106,且拍摄区域105大于投影区域106。
遥控器103用于发射投影标识107,该投影标识107用于对投影图像进行标记。遥控器发射的投影标识可以是激光或者有色射线。
投影控制装置104用于执行本申请中的投影控制方法的步骤,投影控制装置可以是包括处理器和存储器的任何类型的电子设备,例如电脑和平板等。投影控制装置可以接收投影仪发送的投影图像和摄像机拍摄的拍摄图像,以根据投影图像和拍摄图像,进行投影标识定位操作。投影控制装置104还可以基于交互事件,控制投影图像变化。其中,交互事件可以是指对投影标识指示的位置进行撤回、恢复、编辑、绘制轨迹以及查看属性等事件。
在一些实施方式中,投影仪101通过软件或硬件的功能实现投影控制装置104的部分或全部,也即,投影仪101还可以作为投影控制装置104,执行本申请的投影控制方法的步骤。
参照图2,图2示出了本申请一个实施例提出的一种投影控制方法流程图,方法用于投影控制装置,投影控制装置可以是图1中的104,方法包括:
S110、接收所述遥控器发送的闲置信号,所述闲置信号是所述遥控器处于静止状态的时长达到预设时长时生成的。
遥控器可以通过无线(例如WiFi、蓝牙或红外)或有线的方式与投影控制装置连接。遥控器可以设置有惯性器件单元(IMU),遥控器通过惯性器件单元检测遥控器是否处于静止状态。
在遥控器通过惯性器件单元监测到遥控器处于静止状态时,遥控器启动计时功能开始计时,在遥控器通过惯性器件单元监测到遥控器未处于静止状态时,遥控器关闭计时功能,直到再次监测到遥控器处于静止状态时,遥控器启动计时功能开始计时。当遥控器的计时时长达到预设时长时,确定遥控器处于未被使用的状态,此时,遥控器获得闲置信号。其中,预设时长可以是根据需求设定,例如2分钟或5分钟。
作为一种实施方式,在惯性器件单元监测到加速度信号时,确定遥控器未处于静止状态,在惯性器件单元未监测到加速度信号时,确定遥控器处于静止状态。
S120、根据所述闲置信号,关闭标识定位功能,并控制所述摄像机停止采集投影图像对应的拍摄图像,以及控制所述遥控器停止发射投影标识,所述标识定位功能用于根据所述拍摄图像中拍摄标识的位置信息,确定所述投影标识在投影图像中的位置信息,所述投影标识用于对所述投影仪投射的投影图像进行标记,所述拍摄标识与所述投影标识相对应。
在本申请中,投影仪将获取的图像投射于投影区域,投影区域显示投影图像,用户可以通过遥控器发射投影标识,发射的投影标识用于对投影图像中的内容进行标记。遥控器发射的投影标识可以是任何形状的,例如圆点、方点、光标或手掌型光点等,如图1所示,投影标识为圆点。
投影仪投射出投影图像之后,摄像机对投影区域的投影图像进行拍摄,得到拍摄图像,在拍摄图像中与投影标识对应的标识即为拍摄标识。
开启标识定位功能之后,投影控制装置首先确定所述拍摄图像中拍摄标识的位置信息,然后再根据确定的拍摄标识的位置信息,确定所述遥控器发射的投影标识在投影图像中的位置信息。拍摄标识的位置信息可以是指拍摄标识在拍摄图像对应的相机坐标系下的像素坐标,投影标识在所述投影图像中的位置信息可以是指投影标识在投影图像对应的投影仪坐标系下的像素坐标。
在一些实施方式中,投影仪投射出投影图像之后,摄像机实时对投影区域的投影图像进行拍摄,投影控制装置实时对拍摄图像进行分析。若某一时刻遥控器发射的投影标识对投影图像进行标记,则可以获得投影标识在投影图像中的位置信息,若某一时刻遥控器未发射任何投影标识,则获得投影标识在投影图像中的位置信息为空。
在另一些实施方式中,当遥控器发射投影标识时,遥控器生成触发信号,遥控器将该触发信号发送至投影控制装置,投影控制装置基于该触发信号控制相机获取投影区域的拍摄图像,然后,投影控制装置再获取该拍摄图像,并对该拍摄图像进行分析。在这种实施方式中,摄像机不用时刻进行拍摄,投影控制装置也不用时刻进行拍摄图像的分析,可以有效的降低投影控制装置和摄像机的能耗。
在本申请中,可以在拍摄图像中确定拍摄标识的位置信息,再根据映射参数,将拍摄标识在拍摄图像中的位置信息映射到投影仪坐标系下,得到投影标识在所述投影图像中的位置信息;在另一些实施方式中,也可以根据映射参数,将拍摄图像映射到投影仪坐标系,获得映射后的图像,然后在映射后的图像中确定拍摄标识的位置信息,拍摄标识在映射后的图像中的位置信息即是投影标识在所述投影图像中的位置信息。映射参数可以是指表征拍摄图像与投影图像之间的映射关系的单应性矩阵。
可选地,S120之后,方法可以包括:接收所述遥控器发送的启动信号,所述启动信号是在所述遥控器停止发射投影标识之后,监测到所述遥控器打破静止状态时生成的;根据所述启动信号,开启所述标识定位功能,并控制所述摄像机采集所述拍摄图像,以及控制所述遥控器发射所述投影标识。
可以通过遥控器的惯性器件单元监测加速度信号,当惯性器件单元监测到加速度信号,确定遥控器未处于静止状态,若惯性器件单元未监测到加速度信号,确定遥控器处于静止状态。在所述遥控器停止发射投影标识之后,惯性器件单元监测到加速度信号,确定遥控器打破静止状态,遥控器生成启动信号。
在本实施例中,遥控器处于静止状态的时长达到预设时长时,获得闲置信号,投影控制装置根据闲置信号,关闭标识定位功能,并控制摄像机停止采集投影图像对应的拍摄图像,以及控制遥控器停止发射投影标识,节省了摄像机、投影控制装置以及遥控器的电能消耗,从而降低了资源消耗。同时,控制遥控器停止发射投影标识,从而避免投影标识对用户造成伤害,提高安全性。
进一步的,在关闭标识定位功能,并控制摄像机停止采集投影图像对应的拍摄图像,以及控制遥控器停止发射投影标识之后,若遥控器打破静止状态,生成启动信号,以根据启动信号开启所述标识定位功能,并控制所述摄像机采集投影图像对应的拍摄图像,以及控制所述遥控器发射投影标识,并不需要手动开启所述标识定位功能,也不需要手动控制所述摄像机采集拍摄图像和控制遥控器发射投影标识,提高了控制效率。
参照图3,图3示出了图2中S110之前的一种实施方式的流程图,方法用于投影控制装置,投影控制装置可以是图1中的104,方法包括:
S210、获取标定图像对应的拍摄标定图像,所述标定图像包括投影特征点,所述拍摄标定图像包括与所述投影特征点对应的拍摄特征点,所述标定图像是通过所述投影仪投射的。
投影仪将标定模板投射在投影区域,获得标定图像,摄像机对投射在投影区域的标定图像进行拍摄,获得拍摄标定图像。标定图像中可以设置有多个投影特征点,投影特征点可以是圆心和角点中的一种。
参照图4和图5,图4示出了本申请实施例中一种标定图像的示意图,图5示出了本申请实施例中又一种标定图像的示意图。标定图像可以设置有各种图案,图4中的图案是“棋盘”,图5中的图案是“点阵”。
如图4所示,投影特征点为边缘部分方框的角点(图4中被小圆圈出的点),又如图5所示,投影特征点为边缘的圆的圆心(图5中被小圆圈出的点)。
本申请具体实施时,可根据精度需求设定投影特征点的选取规则,例如图4和图5所示的标定图像,可以每隔一定行数或列数选取4个点作为投影特征点。
可以通过传统的OpenCV算法库,在标定图像中确定出投影特征点,在标定图像对应的拍摄图像中确定出拍摄特征点。
S220、根据所述投影特征点的坐标及所述拍摄特征点的坐标,确定映射参数。
在本申请中,根据拍摄特征点及其对应的投影特征点的像素坐标,通过透视变换或者单应性矩阵算法,来计算映射参数,映射参数可以是单应性矩阵,至少根据四个投影特征点以及对应的四个拍摄特征点获得该映射参数,例如,根据图4和图5涉及的4个投影特征点和4个拍摄特征点可以获得映射参数。在一些实施方式中,还可以设置更多的投影特征点和对应的拍摄特征点,以通过数量较多的投影特征点和对应的拍摄特征点,求解准确率较高的单应性矩阵。
拍摄图像中拍摄特征点的像素坐标可以是指拍摄特征点在以摄像机为基准的相机坐标系的坐标。
映射参数适用于的有效区域可以是投影特征点所包含的区域,例如图4和图5中,四个投影特征点依次连接组成的矩形所包含的区域为映射参数有效区域。若投影标识处于映射参数对有效区域以外的其他区域,则确定的投影标识在投影图像中的位置信息的准确率可能稍低,若投影标识处于映射参数对有效区域内,确定的投影标识在投影图像中的位置信息的准确率较高。因此,为了提高映射参数的准确率和适用范围,投影特征点可以选取的较靠近标定图像的边缘的点。
S230、获取所述拍摄图像。
S240、根据所述映射参数和所述拍摄图像,确定所述投影标识在所述投影图像中的位置信息。
需要说明的是,标定图像是投影仪将标定模板投射在投影区域时,投影区域显示的图像,根据投影仪投射的标定图像以及标定图像对应的拍摄标定图像之间的对应关系确定映射参数,映射参数能够反映投影仪投射的投影图像以及对应的拍摄图像的映射关系。投影标识在所述投影图像中的位置信息可以是指投影标识在投影图像对应的投影仪坐标系下的像素坐标。
可以在拍摄图像中确定拍摄标识的位置信息,再根据映射参数,将拍摄标识在拍摄图像中的位置信息映射到投影仪坐标系下,得到投影标识在所述投影图像中的位置信息;在另一些实施方式中,也可以根据映射参数,将拍摄图像映射到投影仪坐标系,获得映射后的图像,然后在映射后的图像中确定拍摄标识的位置信息,拍摄标识在映射后的图像中的位置信息即是投影标识在所述投影图像中的位置信息。
S250、响应于对应所述投影标识的指令事件。
S260、基于所述指令事件以及所述投影标识在投影图像中的位置信息,控制所述投影图像发生变化。
指令事件可以是指对投影标识所指示的位置发送的指令,指令事件可以是选择、取消选择、绘制轨迹、编辑、删除、撤回、清除、恢复以及查看属性等指令事件。
遥控器可以安装有实体按钮或虚拟按钮,按钮可以是显式的:时刻显示在投影图像上的;也可以是隐式的:通过一定方式,如在激光在特定位置停留一定时间,或者特殊笔势设计从而显示出来的或者不显示在投影图像,且直接激活的。按钮可以包括多个,每个按钮对应一个指令事件。
得到指令事件之后,根据投影标识所指示的位置的位置信息,在投影标识所指示的位置进行相应的操作,以使得投影图像发生变化。例如,指令事件是查看属性,根据指令事件以及投影标识的位置信息,对投影标识所指示的位置进行属性查看。
本实施例中,映射参数是根据标定图像以及标定图像对应的拍摄标定图像的对应关系获得的,映射参数准确地反映了投影图像和拍摄图像之间的关系,通过映射参数和投影图像对应的拍摄图像,确定投影标识在所述投影图像中的位置信息,从而可以准确的定位投影标识所在的位置,进而可以通过投影标识与投影图像进行互动。
参照图6,图6示出了图3中S240的一种实施方式的流程图,方法用于投影控制装置,投影控制装置可以是图1中的104,方法包括:
S310、获取所述拍摄图像中各个像素点的灰度值以及对应所述拍摄图像的预设最大灰度值。
预设最大灰度值可以指投影图像中可能出现的最大灰度值。
作为一种实施方式,可以获取对应预设投影图像的拍摄图像作为预设拍摄图像,所述预设投影图像包括预设灰度值的像素点,所述预设投影图像是通过所述投影仪投射的;确定所述预设拍摄图像的最大灰度值作为所述预设最大灰度值。其中,预设灰度值可以是指投影图像的最大灰度值,例如,灰度值的范围为0-255时,最大灰度值可以是255。预设投影图像中可以包括至少一个预设灰度值的像素点,预设投影图像中的像素点的灰度值也可以均为预设灰度值。
通过摄像机对包括预设灰度值的像素点的预设投影图像进行拍摄,得到预设拍摄图像,然后将预设拍摄图像中灰度值的最大值确定为预设最大灰度值。
S320、根据所述拍摄图像中像素点的灰度值与所述预设最大灰度值的大小关系,确定所述拍摄标识在所述拍摄图像中的位置信息。
获取到预设最大灰度值之后,根据拍摄图像中像素点的灰度值与所述预设最大灰度值的大小关系,确定所述拍摄标识在所述拍摄图像中的位置信息。
可选地,S320包括:将所述拍摄图像中灰度值大于所述预设最大灰度值的像素点的灰度值调整为第一数值,并将所述拍摄图像中灰度值不大于所述预设最大灰度值的像素点的灰度值调整为第二数值,以得到对应所述拍摄图像的调整图像;根据预设的卷积核对所述拍摄图像对应的调整图像进行卷积处理,得到对应所述拍摄图像的卷积结果;根据所述拍摄图像的卷积结果,确定所述拍摄标识在所述拍摄图像中的位置信息。
第一数值可以是指1,第二数值可以是指0,通过将拍摄图像中灰度值大于所述预设最大灰度值的像素点的灰度值调整为第一数值,并将该拍摄图像中灰度值不大于所述预设最大灰度值的像素点的灰度值调整为第二数值,实现对拍摄图像的二值化操作,得到对应所述拍摄图像的调整图像。
预设的卷积核的卷积核尺寸可以是根据投影标识的尺寸确定的,预设的卷积核的尺寸可以是不小于投影标识的直径或最大宽度的,预设的卷积核的步长可以是根据需求设定的,本申请不做限定,例如可以是1。
例如,投影标识为圆形,投影标识的直径为8个像素点,对应的预设的卷积核的参照图7,预设的卷积核为15×15的卷积核,此时,预设的卷积核的步长可以为1。
通过预设的卷积核对拍摄图像对应的调整图像进行处理,得到卷积结果,并根据卷积结果中的各个数值,确定拍摄标识在拍摄图像中的位置信息。
可选地,所述根据所述拍摄图像的卷积结果,确定所述拍摄标识在所述拍摄图像中的位置信息,包括:将所述拍摄图像的卷积结果中大于预设阈值的数值的位置信息,作为对应所述拍摄标识的初始标识位置信息;对所述初始标识位置信息进行合并操作,得到所述拍摄标识在所述拍摄图像中的位置信息。
预设阈值可以是根据需求设定的值,此处不做限定。当数值大于预设阈值时,确定该数值对应的像素点为疑似拍摄标识的像素点,根据拍摄图像的卷积结果中大于预设阈值的数值的位置信息,得到拍摄图像中疑似拍摄标识的像素点的位置信息,作为初始标识位置信息,然后,对于拍摄图像中疑似拍摄标识的像素点的初始标识位置信息进行合并操作,得到所述拍摄标识在所述拍摄图像中的位置信息。
合并操作可以是指合并距离相近的疑似为拍摄标识的像素点,其中距离相近可以是指疑似为拍摄标识的像素点之间相对距离小于预设距离,预设距离基于投影标识的尺寸确定,投影标识尺寸越大,预设距离越大。
S330、根据所述映射参数以及所述拍摄标识在所述拍摄图像中的位置信息,确定所述投影标识在所述投影图像中的位置信息。
作为一种实施方式,可以根据映射参数,将拍摄标识在拍摄图像中的位置信息映射到投影仪坐标系下,得到投影标识在所述投影图像中的位置信息。
在另一些实施方式中,也可以根据映射参数,将拍摄图像映射到投影仪坐标系,获得映射后的图像,然后在映射后的图像中确定拍摄标识的位置信息,拍摄标识在映射后的图像中的位置信息即是投影标识在所述投影图像中的位置信息。
在本实施例中,通过每个所述拍摄图像中像素点的灰度值与投影图像对应的预设最大灰度值的大小关系,得到拍摄标识在拍摄图像的位置信息,确定的位置信息的准确率较高,从而使得获得的投影标识在投影图像中的位置信息的准确率较高,进而提高了交互的准确率。
参照图8,图8示出了本申请一个实施例的提出的一种投影控制装置的框图,用于投影控制装置,所述投影控制装置与摄像机、投影仪以及遥控器分别连接,投影控制装置可以是图1中的104,装置1100包括:
接收模块1110,用于接收所述遥控器发送的闲置信号,所述闲置信号是所述遥控器处于静止状态的时长达到预设时长时生成的;
控制模块1120,用于根据所述闲置信号,关闭标识定位功能,并控制所述摄像机停止采集投影图像对应的拍摄图像,以及控制所述遥控器停止发射投影标识,所述标识定位功能用于根据所述拍摄图像中拍摄标识的位置信息,确定所述投影标识在投影图像中的位置信息,所述投影标识用于对所述投影仪投射的投影图像进行标记,所述拍摄标识与所述投影标识相对应。
可选地,装置1100还包括启动模块,用于接收所述遥控器发送的启动信号,所述启动信号是在所述遥控器停止发射投影标识之后,监测到所述遥控器打破静止状态时生成的;根据所述启动信号,开启所述标识定位功能,并控制所述摄像机采集所述拍摄图像,以及控制所述遥控器发射所述投影标识。
可选地,装置1100还包括互动模块,用于获取标定图像对应的拍摄标定图像,所述标定图像包括投影特征点,所述拍摄标定图像包括与所述投影特征点对应的拍摄特征点,所述标定图像是通过所述投影仪投射的;根据所述投影特征点的坐标及所述拍摄特征点的坐标,确定映射参数;获取所述拍摄图像;根据所述映射参数和所述拍摄图像,确定所述投影标识在所述投影图像中的位置信息;响应于对应所述投影标识的指令事件;基于所述指令事件以及所述投影标识在投影图像中的位置信息,控制所述投影图像发生变化。
可选地,互动模块,还用于获取所述拍摄图像中各个像素点的灰度值以及对应所述拍摄图像的预设最大灰度值;根据所述拍摄图像中像素点的灰度值与所述预设最大灰度值的大小关系,确定所述拍摄标识在所述拍摄图像中的位置信息;根据所述映射参数以及所述拍摄标识在所述拍摄图像中的位置信息,确定所述投影标识在所述投影图像中的位置信息。
可选地,互动模块,还用于获取对应预设投影图像的拍摄图像作为预设拍摄图像,所述预设投影图像包括预设灰度值的像素点,所述预设投影图像是通过所述投影仪投射的;确定所述预设拍摄图像的最大灰度值作为所述预设最大灰度值。
可选地,互动模块,还用于将所述拍摄图像中灰度值大于所述预设最大灰度值的像素点的灰度值调整为第一数值,并将所述拍摄图像中灰度值不大于所述预设最大灰度值的像素点的灰度值调整为第二数值,以得到对应所述拍摄图像的调整图像;根据预设的卷积核对所述拍摄图像对应的调整图像进行卷积处理,得到对应所述拍摄图像的卷积结果;根据所述拍摄图像的卷积结果,确定所述拍摄标识在所述拍摄图像中的位置信息。
可选地,互动模块,还用于将所述拍摄图像的卷积结果中大于预设阈值的数值的位置信息,作为对应所述拍摄标识的初始标识位置信息;对所述初始标识位置信息进行合并操作,得到所述拍摄标识在所述拍摄图像中的位置信息。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述装置和模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,所显示或讨论的模块相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
另外,在本申请各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
参照图9,图9示出了本申请又一个实施例提出的一种投影控制装置的框图。该投影控制装置1200可以包括一个或多个如下部件:处理器1210、存储器1220、以及一个或多个应用程序,其中一个或多个应用程序可以被存储在存储器1220中并被配置为由一个或多个处理器1210执行,一个或多个程序配置用于执行如前述方法实施例所描述的方法。
处理器1210可以包括一个或者多个处理核。处理器1210利用各种接口和线路连接整个投影控制装置1200内的各个部分,通过运行或执行存储在存储器1220内的指令、程序、代码集或指令集,以及调用存储在存储器1220内的数据,执行投影控制装置1200的各种功能和处理数据。可选地,处理器1210可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable Logic Array,PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理器(Central Processing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器1210中,单独通过一块通信芯片进行实现。
存储器1220可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。存储器1220可用于存储指令、程序、代码、代码集或指令集。存储器1220可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储终端1200在使用中所创建的数据(比如电话本、音视频数据、聊天记录数据)等。
请参考图10,图10示出了本申请实施例的一种计算机可读存储介质的结构框图。该计算机可读介质800中存储有程序代码,所述程序代码可被处理器调用执行上述方法实施例中所描述的方法。
计算机可读存储介质800可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地,计算机可读存储介质800包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质800具有执行上述方法中的任何方法步骤的程序代码810的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码810可以例如以适当形式进行压缩。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (10)
1.一种投影控制方法,其特征在于,用于投影控制装置,所述投影控制装置与摄像机、投影仪以及遥控器分别连接,所述方法包括:
接收所述遥控器发送的闲置信号,所述闲置信号是所述遥控器处于静止状态的时长达到预设时长时生成的;
根据所述闲置信号,关闭标识定位功能,并控制所述摄像机停止采集投影图像对应的拍摄图像,以及控制所述遥控器停止发射投影标识,所述标识定位功能用于根据所述拍摄图像中拍摄标识的位置信息,确定所述投影标识在投影图像中的位置信息,所述投影标识用于对所述投影仪投射的投影图像进行标记,所述拍摄标识与所述投影标识相对应。
2.根据权利要求1所述的方法,其特征在于,所述根据所述闲置信号,关闭标识定位功能,并控制所述摄像机停止采集投影图像对应的拍摄图像,以及控制所述遥控器停止发射投影标识之后,所述方法还包括:
接收所述遥控器发送的启动信号,所述启动信号是在所述遥控器停止发射投影标识之后,监测到所述遥控器打破静止状态时生成的;
根据所述启动信号,开启所述标识定位功能,并控制所述摄像机采集所述拍摄图像,以及控制所述遥控器发射所述投影标识。
3.根据权利要求1所述的方法,其特征在于,所述接收所述遥控器发送的闲置信号之前,所述方法还包括:
获取标定图像对应的拍摄标定图像,所述标定图像包括投影特征点,所述拍摄标定图像包括与所述投影特征点对应的拍摄特征点,所述标定图像是通过所述投影仪投射的;
根据所述投影特征点的坐标及所述拍摄特征点的坐标,确定映射参数;
获取所述拍摄图像;
根据所述映射参数和所述拍摄图像,确定所述投影标识在所述投影图像中的位置信息;
响应于对应所述投影标识的指令事件;
基于所述指令事件以及所述投影标识在投影图像中的位置信息,控制所述投影图像发生变化。
4.根据权利要求3所述的方法,其特征在于,所述根据所述映射参数和所述拍摄图像,确定所述投影标识在所述投影图像中的位置信息,包括:
获取所述拍摄图像中各个像素点的灰度值以及对应所述拍摄图像的预设最大灰度值;
根据所述拍摄图像中像素点的灰度值与所述预设最大灰度值的大小关系,确定所述拍摄标识在所述拍摄图像中的位置信息;
根据所述映射参数以及所述拍摄标识在所述拍摄图像中的位置信息,确定所述投影标识在所述投影图像中的位置信息。
5.根据权利要求4所述的方法,其特征在于,所述获取对应所述拍摄图像的预设最大灰度值,包括:
获取对应预设投影图像的拍摄图像作为预设拍摄图像,所述预设投影图像包括预设灰度值的像素点,所述预设投影图像是通过所述投影仪投射的;
确定所述预设拍摄图像的最大灰度值作为所述预设最大灰度值。
6.根据权利要求4所述的方法,其特征在于,所述根据所述拍摄图像中像素点的灰度值与所述预设最大灰度值的大小关系,确定所述拍摄标识在所述拍摄图像中的位置信息,包括:
将所述拍摄图像中灰度值大于所述预设最大灰度值的像素点的灰度值调整为第一数值,并将所述拍摄图像中灰度值不大于所述预设最大灰度值的像素点的灰度值调整为第二数值,以得到对应所述拍摄图像的调整图像;
根据预设的卷积核对所述拍摄图像对应的调整图像进行卷积处理,得到对应所述拍摄图像的卷积结果;
根据所述拍摄图像的卷积结果,确定所述拍摄标识在所述拍摄图像中的位置信息。
7.根据权利要求6所述的方法,其特征在于,所述根据所述拍摄图像的卷积结果,确定所述拍摄标识在所述拍摄图像中的位置信息,包括:
将所述拍摄图像的卷积结果中大于预设阈值的数值的位置信息,作为对应所述拍摄标识的初始标识位置信息;
对所述初始标识位置信息进行合并操作,得到所述拍摄标识在所述拍摄图像中的位置信息。
8.一种投影控制装置,其特征在于,用于投影控制装置,所述投影控制装置与摄像机、投影仪以及遥控器分别连接,所述装置包括:
接收模块,用于接收所述遥控器发送的闲置信号,所述闲置信号是所述遥控器处于静止状态的时长达到预设时长时生成的;
控制模块,用于根据所述闲置信号,关闭标识定位功能,并控制所述摄像机停止采集投影图像对应的拍摄图像,以及控制所述遥控器停止发射投影标识,所述标识定位功能用于根据所述拍摄图像中拍摄标识的位置信息,确定所述投影标识在投影图像中的位置信息,所述投影标识用于对所述投影仪投射的投影图像进行标记,所述拍摄标识与所述投影标识相对应。
9.一种投影控制装置,其特征在于,包括:
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行如权利要求1-7任一项所述的方法。
10.一种投影交互系统,其特征在于,所述投影交互系统至少包括摄像机、投影仪、遥控器以及投影控制装置,其中,
所述投影仪用于投射投影图像;
所述摄像机用于对所述投影图像进行拍摄操作,得到拍摄图像;
所述遥控器用于发射投影标识;
所述投影控制装置用于执行如权利要求1-7任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211185818.6A CN117827019A (zh) | 2022-09-27 | 2022-09-27 | 投影控制方法、装置以及投影交互系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211185818.6A CN117827019A (zh) | 2022-09-27 | 2022-09-27 | 投影控制方法、装置以及投影交互系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117827019A true CN117827019A (zh) | 2024-04-05 |
Family
ID=90506523
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211185818.6A Pending CN117827019A (zh) | 2022-09-27 | 2022-09-27 | 投影控制方法、装置以及投影交互系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117827019A (zh) |
-
2022
- 2022-09-27 CN CN202211185818.6A patent/CN117827019A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108876934B (zh) | 关键点标注方法、装置和系统及存储介质 | |
US20150097865A1 (en) | Method and computing device for providing augmented reality | |
CN111345029B (zh) | 一种目标追踪方法、装置、可移动平台及存储介质 | |
US11113849B2 (en) | Method of controlling virtual content, terminal device and computer readable medium | |
CN102945091B (zh) | 一种基于激光投影定位的人机交互方法与系统 | |
CN108551552B (zh) | 图像处理方法、装置、存储介质及移动终端 | |
KR20090001667A (ko) | 증강 현실 기술을 이용하여 컨텐츠를 구현하기 위한 장치및 방법 | |
CN110489027B (zh) | 手持输入设备及其指示图标的显示位置控制方法和装置 | |
CN113038149A (zh) | 直播视频互动方法、装置以及计算机设备 | |
CN112258589A (zh) | 一种手眼标定的方法及装置 | |
CN110737414A (zh) | 交互显示方法、装置、终端设备及存储介质 | |
CN106201284B (zh) | 用户界面同步系统、方法 | |
US20180158171A1 (en) | Display apparatus and controlling method thereof | |
JP2017130794A (ja) | 情報処理装置、評価用チャート、評価システム、および性能評価方法 | |
JP6991045B2 (ja) | 画像処理装置、画像処理装置の制御方法 | |
CN110826376B (zh) | 标记物识别方法、装置、终端设备及存储介质 | |
CN110737326A (zh) | 虚拟对象的显示方法、装置、终端设备及存储介质 | |
CN117827019A (zh) | 投影控制方法、装置以及投影交互系统 | |
CN111198609A (zh) | 交互显示方法、装置、电子设备及存储介质 | |
CN111913560A (zh) | 虚拟内容的显示方法、装置、系统、终端设备及存储介质 | |
US11228744B2 (en) | Method for controlling projection system, projection system, and control program | |
CN112529770B (zh) | 图像处理方法、装置、电子设备和可读存储介质 | |
US9454247B2 (en) | Interactive writing device and operating method thereof using adaptive color identification mechanism | |
CN110598605B (zh) | 定位方法、装置、终端设备及存储介质 | |
CN117793471A (zh) | 图像控制方法、装置以及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |