CN114721552B - 基于红外与可见光的触控识别方法、装置、设备及介质 - Google Patents

基于红外与可见光的触控识别方法、装置、设备及介质 Download PDF

Info

Publication number
CN114721552B
CN114721552B CN202210559976.7A CN202210559976A CN114721552B CN 114721552 B CN114721552 B CN 114721552B CN 202210559976 A CN202210559976 A CN 202210559976A CN 114721552 B CN114721552 B CN 114721552B
Authority
CN
China
Prior art keywords
infrared
information
light spot
analysis unit
calculation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210559976.7A
Other languages
English (en)
Other versions
CN114721552A (zh
Inventor
冯翀
王宇轩
张梦遥
郭嘉伟
张梓航
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Shenguang Technology Co ltd
Original Assignee
Beijing Shenguang Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Shenguang Technology Co ltd filed Critical Beijing Shenguang Technology Co ltd
Priority to CN202210559976.7A priority Critical patent/CN114721552B/zh
Publication of CN114721552A publication Critical patent/CN114721552A/zh
Application granted granted Critical
Publication of CN114721552B publication Critical patent/CN114721552B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/0418Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G06F3/04186Touch location disambiguation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Abstract

本发明提供一种基于红外与可见光的触控识别方法、装置、设备及介质,应用于投影仪,包括:通过信号发射单元向待投影平面投射红外光,生成第一红外光栅,然后向待投影平面投影操作界面,根据对操作界面的操作,生成第二红外光栅;红外摄像头持续拍摄第二红外光栅,将得到的第一光斑信息传输至计算分析单元,将通过彩色摄像头拍摄待投影平面得到的实景图片信息传输至计算分析单元,计算分析单元根据第一光斑信息和实景图片信息确定对应的调整方式,根据调整方式对投影内容进行更新。本发明提供的方法通过双摄像头的设置,能够准确确定出光斑信息是由用户的触控产生的还是物品产生的,减少误触的情况发生,提高了触控识别的准确率,提升了用户体验。

Description

基于红外与可见光的触控识别方法、装置、设备及介质
技术领域
本发明涉及投影技术领域,尤其涉及一种触控基于红外与可见光的触控识别方法、装置、设备及介质。
背景技术
随着电子装置不断多功能化发展,传统的按键式操作界面或触摸屏式交互界面已渐渐无法满足使用者的需求,因此,交互式技术开始不断蓬勃发展,支持投影触控的投影设备也越来越受到人们的关注。
现有技术中,投影设备主要是基于红外线的深度视觉方法进行触控物体的定位和识别,这种识别方式易受限于环境影响,红外触控识别方法需要当前环境下的红外光处于一个较低的状态,这样才能借助发射的红外线和用户的遮挡来进行触控位置的识别,如果当前环境的红外强度较高,导致红外摄像头无法精确的捕捉到红外光斑,便无法进行触控操作的识别;另外,也容易被其他物品所影响,红外触控是基于红外线被遮挡后产生的光斑来进行用户触控行为判断的,如果不是用户点击导致的红外线遮挡,如手套、书本等常见物品的遮挡,此时的遮挡便会导致系统的误判,无法有效识别用户的触控行为,影响用户体验。
发明内容
本发明提供一种基于红外与可见光的触控识别方法、装置、设备及介质,用以解决现有技术中投影设备易受环境或其他物品的影响造成误判、影响用户体验的技术问题,本发明以实现通过双摄像头的设置能够提高投影的准确性、操作方便,提升用户体验的目的。
第一方面,本发明提供一种基于红外与可见光的触控识别方法,所述方法应用于投影仪,所述投影仪包括信号发射单元、红外摄像头、彩色摄像头以及计算分析单元,包括:
通过所述信号发射单元向待投影平面投射红外光,生成第一红外光栅;根据所述第一红外光栅,向所述待投影平面投影操作界面;
根据用户对所述操作界面的操作,生成第二红外光栅;
通过所述红外摄像头持续拍摄返回的第二红外光栅,以得到第一光斑信息,将所述第一光斑信息传输至所述计算分析单元,通过所述彩色摄像头拍摄所述待投影平面的场景图片,将得到的实景图片信息传输至所述计算分析单元;
通过所述计算分析单元根据所述第一光斑信息和所述实景图片信息确定对应的调整方式,根据所述调整方式对投影内容进行更新。
进一步,根据本发明提供的基于红外与可见光的触控识别方法,所述通过所述信号发射单元向待投影平面投射红外光,生成第一红外光栅,包括:
通过所述信号发射单元将红外光束与所述待投影平面垂直的方式发射出去;
通过所述红外摄像头拍摄所述待投影平面返回的红外光栅,并对所述红外光栅处理,将得到的第二光斑信息传输至所述计算分析单元进行分析;其中,所述第二光斑信息是在生成第一红外光栅之前获取的光斑信息,是不同于所述第一光斑信息的。
根据分析结果调整所述信号发射单元的位置,当各个红外光束到所述待投影平面的距离为预设阈值时,生成第一红外光栅。
进一步,根据本发明提供的基于红外与可见光的触控识别方法,所述通过所述红外摄像头持续拍摄返回的第二红外光栅,将得到的第一光斑信息传输至所述计算分析单元,通过所述彩色摄像头拍摄所述待投影平面的场景图片,将得到的实景图片信息传输至所述计算分析单元,包括:
如果确定对所述操作界面上的目标位置进行按压操作,且所述各个红外光束到所述待投影平面的距离小于所述预设阈值时,通过所述红外摄像头持续拍摄所述目标位置反射回来的第二红外光栅,并对所述第二红外光栅进行处理,得到第一光斑信息,将所述第一光斑信息传输至所述计算分析单元;通过所述彩色摄像头持续拍摄用户在所述待投影平面上进行按压操作的场景图片,将得到的实景图片信息传输至所述计算分析单元。
进一步,根据本发明提供的基于红外与可见光的触控识别方法,所述通过所述计算分析单元根据所述第一光斑信息和所述实景图片信息确定对应的调整方式,根据所述调整方式对投影内容进行更新,包括:
通过所述计算分析单元根据接收到的所述第一光斑信息和所述实景图片信息进行人体识别,确定出所述用户的操作行为;
根据所述用户的操作行为确定对应的调整方式;
根据所述调整方式对所述投影内容进行更新。
进一步,根据本发明提供的基于红外与可见光的触控识别方法,所述通过所述计算分析单元根据接收到的所述第一光斑信息和所述实景图片信息进行人体识别,确定出所述用户的操作行为,包括:
所述计算分析单元将所述第一光斑信息中的多帧光斑大小与所述实景图片信息中的手指按压形状进行比对;
当所述第一光斑信息中的多帧光斑大小与所述实景图片信息中的手指按压形状均相同时,确定所述第一光斑信息对应的操作行为属于预设按压事件,所述计算分析单元对所述实景图片信息进行识别,获取所述用户的关节点信息,将所述关节点信息与预设的关节点阈值信息进行比较,如果所述关节点信息与预设的关节点阈值信息相同,则确定所述用户的操作行为属于用户点击行为;
当所述第一光斑信息中的第一帧光斑大小与所述实景图片信息中的手指按压形状不相同时,确定所述第一光斑信息对应的操作行为不属于预设按压事件,所述计算分析单元重新将下一帧中的光斑大小与所述实景图片信息中的手指按压形状进行比对,
其中,所述第一帧为所述多帧中的任意一帧。
进一步,根据本发明提供的基于红外与可见光的触控识别方法,所述根据所述用户的操作行为确定对应的调整方式,包括:
通过所述计算分析单元根据所述用户的操作行为,得到所述用户的轨迹信息;
根据所述轨迹信息确定对所述投影内容的目标位置进行操作所对应的功能;其中,所述功能由所述用户选择确定;
在所述功能为在所述目标位置对目标事件的调用的情况下,确认所述调整方式为对所述目标事件的调用;
在所述功能为对所述目标位置进行标记添加的情况下,确认所述调整方式为对所述目标位置的标记添加处理。
进一步,根据本发明提供的基于红外与可见光的触控识别方法,所述根据所述调整方式对所述投影内容进行更新,包括:
实时监测所述计算分析单元的分析结果信息,根据确定的调整方式对所述投影内容进行更新处理;
当所述调整方式为标记添加时,直接在所述投影内容对应的目标位置标记添加出相应的内容;
当所述调整方式为对目标事件的调用时,则调用所述目标事件,对所述投影内容进行更新,将更新后的投影内容进行投影显示。
第二方面,本发明还提供一种基于红外与可见光的触控识别装置,所述装置应用于投影仪,所述投影仪包括信号发射单元、红外摄像头、彩色摄像头以及计算分析单元,包括:
投影模块,用于通过所述信号发射单元向待投影平面投射红外光,生成第一红外光栅,根据所述第一红外光栅,向所述待投影平面投影操作界面;
生成模块,用于根据用户对所述操作界面的操作,生成第二红外光栅;
传输模块,用于通过所述红外摄像头持续拍摄返回的第二红外光栅,以得到第一光斑信息,将所述第一光斑信息传输至所述计算分析单元,通过所述彩色摄像头拍摄所述待投影平面的场景图片,将得到的实景图片信息传输至所述计算分析单元;
确定模块,用于通过所述计算分析单元根据所述第一光斑信息和所述实景图片信息确定对应的调整方式,根据所述调整方式对投影内容进行更新。
第三方面,本发明还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述基于红外与可见光的触控识别方法的步骤。
第四方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述基于红外与可见光的触控识别方法的步骤。
本发明提供一种基于红外与可见光的触控识别方法、装置、设备及介质,应用于投影仪,包括:通过信号发射单元向待投影平面投射红外光,生成第一红外光栅,然后向待投影平面投影操作界面,根据对操作界面的操作,生成第二红外光栅;红外摄像头持续拍摄第二红外光栅,将得到的第一光斑信息传输至计算分析单元,将通过彩色摄像头拍摄待投影平面得到的实景图片信息传输至计算分析单元,计算分析单元根据第一光斑信息和实景图片信息确定对应的调整方式,根据调整方式对投影内容进行更新。本发明提供的方法通过双摄像头的设置,能够准确确定出光斑信息是由用户的触控产生的还是物品产生的,减少误触的情况发生,提高了触控识别的准确率,提升了用户体验。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明提供的基于红外与可见光的触控识别方法的流程示意图;
图2是本发明提供的基于红外与可见光的触控识别装置的结构示意图;
图3是本发明提供的电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为本发明提供的基于红外与可见光的触控识别方法的流程示意图,如图1所示,本发明提供的基于红外与可见光的触控识别方法,所述方法应用于投影仪,所述投影仪包括信号发射单元、红外摄像头、彩色摄像头以及计算分析单元,具体包括以下步骤:
步骤101:通过信号发射单元向确定的待投影平面投射红外光,生成第一红外光栅;根据所述第一红外光栅,向所述待投影平面投影操作界面。
在本实施例中,通过信号发射单元向确定的待投影平面投射与该平面平行的红外光,通过调整信号发射单元的位置获取第一红外光栅,在该第一红外光栅的照射下,投影仪向该待投影平面投影出可操作界面,供用户操作处理。其中,本实施例中,信号发射单元优选的是红外激光器,采用红外激光器向待投影平面投射红外光束,具体可以根据用户的实际需要进行选择,在此不作具体限定。
需要说明的是,在投影仪向该待投影平面投影前,需要完成投影仪的初始化处理,进行对焦、梯形校正,画面信号的重合和校准判断,直到投影画面清晰为止,在待投影平面上显示加载中的操作界面。
步骤102:根据用户对所述操作界面进行的操作,生成第二红外光栅。
在本实施例中,用户可以在操作界面上进行任何想要效果所对应的操作,如对该投影内容进行放大、点击选择、缩小或标记添加等操作处理,具体可以根据用户的实际需要进行设置,在此不作具体限定。
需要说明的是,用户的操作行为可以是对目标位置A的点击,或者对目标位置A的放大操作等,详细的处理方式见下述实施例,在此不作详细介绍。
步骤103:通过所述红外摄像头持续拍摄返回的第二红外光栅,以得到第一光斑信息,将所述第一光斑信息传输至所述计算分析单元,通过所述彩色摄像头拍摄所述待投影平面的场景图片,将得到的实景图片信息传输至所述计算分析单元。
在本实施例中,需要双摄像头的设置,其中,红外摄像头拍摄操作处理下返回的第二红外光栅,并对第二红外光栅进行处理,得到第一光斑信息,将从该红外光栅中得到的第一光斑信息传输至计算分析单元,彩色(RGB)摄像头持续拍摄待投影平面上的场景图片,将得到的实景图片信息传输至计算分析单元中。其中,第一光斑信息是指根据目标用户对投影内容进行操作处理后返回的红外光栅中所提取到的光斑信息,光斑是指在目标用户挡住红外光后,反射红外光所产生的红外光斑,第二红外光栅是指待投影平面被用户手指遮挡或者是其他物品遮挡住后所反射回来的红外光栅。
需要说明的是,红外摄像头和RGB摄像头会分别对得到的第一光斑信息以及实景图片信息进行规范化调整,将其转换为计算分析单元可以处理的数据类型,然后计算分析单元对带有时间标记的第一光斑信息和实景图片信息按照时间的顺序进行逐帧打包存储,便于后续计算分析。
步骤104:通过所述计算分析单元根据所述第一光斑信息和所述实景图片信息确定对应的调整方式,根据所述调整方式对投影内容进行更新。
在本实施例中,需要根据RGB摄像头拍摄的实景图片信息对第一光斑信息进行校正处理,确定出对应的调整方式,然后根据得到的准确的调整方式对投影内容进行更新处理,本实施例中,计算分析单元为计算板,计算板根据红外摄像头拍摄的第一光斑信息和RGB摄像头拍摄的实景图片信息确定出用户的实际操作行为,根据实际操作行为确定出对应的调整方式,然后对投影仪进行所投影的内容进行更新,更新的方式可以是对投影内容进行标记添加,还可以是对投影内容进行更换、或者对其中的某一部分内容进行点击等处理,具体可以根据用户的实际需要进行处理,在此不作具体限定。
根据本发明提供的基于红外与可见光的触控识别方法,信号发射单元向确定的待投影平面投射红外光,根据得到的第一红外光栅,向待投影平面投影操作界面,根据用户对操作界面进行的操作,生成第二红外光栅,通过红外摄像头拍摄返回的第二红外光栅,通过彩色摄像头拍摄待投影平面的场景图片,然后将第一光斑信息和实景图片信息传输至计算分析单元;通过计算分析单元根据光斑信息和实景图片信息确定对应的调整方式,对投影仪进行更新。本发明提供的触控识别方法通过双摄像头的设置,能够准确确定出光斑信息是由用户的触控产生的还是物品所产生的影响,降低误触的情况发生,提高了触控识别的准确率,提升了用户体验。
基于上述任一实施例,在一个实施例中,通过信号发射单元向待投影平面投射红外光,生成第一红外光栅,包括:
通过信号发射单元将红外光束与所述待投影平面垂直的方式发射出去;
通过所述红外摄像头拍摄所述待投影平面返回的红外光栅,并对所述红外光栅处理,将得到的第二光斑信息传输至所述计算分析单元进行分析;其中,所述第二光斑信息是在生成第一红外光栅之前获取的光斑信息,是不同于所述第一光斑信息的。
根据分析结果调整所述信号发射单元的位置,当各个红外光束到所述待投影平面的距离为预设阈值时,生成第一红外光栅。
在本实施例中,需要根据信号发射单元所投射的红外光确定出第一红外光栅,本实施例中,信号发射单元为红外激光器,位于设备底端的红外激光器与待投影平面垂直的方式将红外光发射出去,且各个光束距离待投影平面的距离满足预设阈值,得到一种光栅状态,其中,预设阈值优先的设置为1mm,然后红外摄像头拍摄该光栅状态并将得到的第二光斑信息传输至计算分析单元进行分析,用户根据分析结果调整该红外激光器的位置,形成第一红外光栅。需要说明的是,在其他实施例中,还可以以散射方式将红外光束向待投影平面发射出去;预设阈值的大小可以根据用户的实际需要进行设定,在此不作具体限定。
在本实施例中,红外摄像头拍摄该红外光栅状态并进行处理得到第二光斑信息,第二光斑信息是指目标用户还没有在操作界面上进行操作处理所得到的光斑信息,在根据第二光斑信息计算分析单元判断待投影平面为非平面时,则更新确认投影内容为错误状态,提醒目标用户调整信号发射单元的位置,直到确认待投影平面为正常的平面光栅时停止。
根据本发明提供的基于红外与可见光的触控识别方法,通过不断调整信号发射单元的位置来生成第一红外光栅,能够帮助投影仪投影出正式的用户操作界面,提高投影触控识别的准确率。
基于上述任一实施例,在一个实施例中,通过红外摄像头持续拍摄返回的第二红外光栅,将得到的第一光斑信息传输至计算分析单元,通过彩色摄像头拍摄待投影平面的场景图片,将得到的实景图片信息传输至计算分析单元,包括:
如果确定对操作界面上的目标位置进行按压操作,且各个红外光束到所述待投影平面的距离小于所述预设阈值时,通过红外摄像头持续拍摄目标位置反射回来的第二红外光栅,并对第二红外光栅进行处理,得到第一光斑信息,将第一光斑信息传输至计算分析单元;通过彩色摄像头持续拍摄用户在待投影平面上进行按压操作的场景图片,将得到的实景图片信息传输至计算分析单元。
在本实施例中,用户利用手指或其他遮挡物对需要进行交互的目标位置进行按压,当距离小于预设阈值时,便可遮挡住红外光束,当红外光束被遮挡后,遮挡部分便会作为反射面将发射的红外光进行反射,形成所谓的光斑,并且能够被红外摄像头捕获到光斑的位置,得到第一光斑信息,然后红外摄像头将该第一光斑信息传输至计算分析单元中。其中,预设阈值在本实施例中可以设置为1mm,在其他实施例中可以是其他的数值,不作具体限定。
在本实施例中,还需要当用户对操作界面上的目标位置进行按压操作处理时,利用彩色摄像头持续拍摄用户在待投影平面上进行操作处理的场景图片,将得到的实景图片信息传输至计算分析单元,用作后续对第一光斑信息的校正数据。
需要说明的是,红外摄像头需要持续不停的拍摄当前待投影平面的红外光栅分布情况并进行记录,RGB摄像头持续不停的拍摄当前场景的实景图片并进行记录,其中,红外摄像头获取红外光栅的分布情况后,利用多种滤波算法对拍摄图像进行处理,得到红外光线被遮挡部分的位置信息和形状,其中,滤波算法优选的是卡尔曼滤波算法,在其他实施例中还可以是其他的算法,在此不作具体限定。
需要说明的是,红外摄像头和RGB摄像头分别对得到的第一光斑信息、实景图片信息进行规范化调整,具体为文件格式的调整等,将信息转化为计算分析单元可以处理的数据类型,进而利用相连的数据导线分别传输至计算分析单元中进行存储,计算分析单元在接收到带有时间标记的第一光斑信息和实景图片信息后按照时间进行逐帧的打包存储。
根据本发明实施例提供的基于红外与可见光的触控识别方法,在红外摄像头和RGB摄像头的双重应用下,将RGB摄像头得到的实景图片信息作为校正数据,能够准确确定出第一光斑信息是由用户的触控产生的还是由其他物品所产生的,降低误触情况的发生,提高投影触控识别的准确率。
基于上述任一实施例,在一个实施例中,通过计算分析单元根据第一光斑信息和实景图片信息确定对应的调整方式,根据调整方式对投影内容进行更新,包括:
通过计算分析单元根据接收到的第一光斑信息和实景图片信息进行人体识别,确定出用户的操作行为;
根据用户的操作行为确定对应的调整方式;
根据调整方式对投影内容进行更新。
在本实施例中,通过计算分析单元对接收到的第一光斑信息和实景图片信息进行解析处理,利用解析处理后的数据进行人体识别,确定出用户的操作行为,然后根据确定的操作行为确定出对应的调整方式,其中,用户行为的判断是由红外线遮挡所产生的光斑信息以及实景图片信息中的关节点信息所组成的结构进行判断的,但当确认第一光斑信息的位置相同但关节点表达的含义不同时,则对应的用户的操作行为也是不同。具体可以是:只伸出食指按压目标位置A则是点击行为,若张开手掌用食指点击目标位置A则是放大行为,具体可以根据用户的实际需要进行设定,在此不作具体限定。
需要说明的是,本实施例中,关节点除了提供手势的详细信息帮助判断具体操作之外,关节点信息还可以,当投影设备要求只能人来操作投影设备(不能是物体)时,此时如果红外摄像头检测到第一光斑信息,但是根据RGB摄像头拍摄的图片信息并没有发现目标用户的关节点信息,此时系统会判定为是误触,不会将其视作一次有效的点击,进而忽略掉,帮助排除误触的情况。
根据发明实施例提供的基于红外与可见光的触控识别方法,通过计算分析单元根据第一光斑信息和实景图片信息确定出的用户的操作行为进而得到对应的调整方式,然后根据调整方式对投影内容进行更新,能够实现投影触控识别的智能化处理,提高投影触控识别的准确性,减少误触情况的发生,提升用户体验。
基于上述任一实施例,在一个实施例中,通过计算分析单元根据接收到的第一光斑信息和实景图片信息进行人体识别,确定出用户的操作行为,包括:
计算分析单元将第一光斑信息中的多帧光斑大小与实景图片信息中的手指按压形状进行比对;
当第一光斑信息中的多帧光斑大小与实景图片信息中的手指按压形状均相同时,确定第一光斑信息对应的操作行为属于预设按压事件,计算分析单元对实景图片信息进行识别,获取用户的关节点信息,将关节点信息与预设的关节点阈值信息进行比较,如果关节点信息与预设的关节点阈值信息相同,则确定用户的操作行为属于用户点击行为;
当第一光斑信息中的第一帧光斑大小与实景图片信息中的手指按压形状不相同时,确定第一光斑信息对应的操作行为不属于预设按压事件,计算分析单元重新将下一帧中的光斑大小与实景图片信息中的手指按压形状进行比对,其中,第一帧为多帧中的任意一帧。
在本实施例中,计算分析单元会每一帧的读取打包后的第一光斑信息和实景图片信息,对多帧的红外光斑的位置和大小进行判断,将光斑大小与实景图片信息中的手指按压的形状进行对比。若对比分析判断出第一光斑信息对应的操作行为属于目标用户的按压事件,为了确定当前的操作行为是用户主动触发的,计算分析单元对实景图片信息进行识别,从实景图片信息中获取用户的关节点信息,进而根据关节点信息与预设的关节点阈值信息来判断当前场景下此时的关节点分布是否符合按压事件,若符合则将其视为符合“用户点击条件”,属于用户点击行为,将其视为一次真正的点击动作,然后计算分析单元从存储的数据中,获取前几帧的光斑信息以及实景图片信息,若经过判断多帧的情况均符合“用户点击条件“,则将这一系列数据作为下一步分析的源数据。
当第一光斑信息中的第一帧光斑大小与实景图片信息中的手指按压形状不相同时,则确定第一光斑信息对应的操作行为不属于预设按压事件,将其视为一次失败的点击,计算分析单元重新将下一帧中的光斑大小与实景图片信息中的手指按压形状进行比对,回到光斑大小与实景图片信息中的手指按压形状进行比对阶段。
根据本发明实施例提供的基于红外与可见光的触控识别方法,计算分析单元通过将第一光斑信息中的多帧光斑大小与实景图片信息中的手指按压形状进行比对,在相同的情况下通过获取实景图片信息中的关节点信息能够准确确认出是用户的触控操作,提高触控识别判断的准确性。
基于上述任一实施例,在一个实施例中,根据用户的操作行为确定对应的调整方式,包括:
通过计算分析单元根据用户的操作行为,得到用户的轨迹信息;
根据轨迹信息确定对投影内容的目标位置进行操作所所对应的功能;其中,所述功能还能由所述目标用户选择;
在功能为在目标位置对目标事件的调用的情况下,确认调整方式为对目标事件的调用;
在功能为对目标位置进行标记添加的情况下,确认调整方式为对目标位置的标记添加处理。
在本实施例中,计算分析单元利用多帧信息分析出用户具体的手指动作,得到用户的轨迹信息,然后获取投影仪的投影内容,结合用户的轨迹信息对按压位置(目标位置)所涉及的功能进行判断,本实施例中,在根据第一光斑的中心点位置和人体识别中的骨关键点进行点击位置的精准识别后,利用均值的方式计算出第一光斑信息的中心点位置,借助两个中心点的位置进行所处功能的识别处理,具体是:在骨关键点和第一光斑信息的中心点位置确定之后便可得到坐标位置信息,计算分析单元将坐标位置信息和当前投影平面进行结合判断,确定出点击的位置是否有可以交互的信息。本实施例中当确定所涉及的功能为某一目标事件的调用则确认调整方式为对目标事件的调用,记录调用信息,如果是纯粹的标记添加则确定调整方式为标记添加,并记录下标记信息,同时,计算分析单元将用户动作所产生的调用信息或者标记信息传输至投影仪中心。
举例说明,以红外光信息、摄像头帧率为50帧为例,当计算分析单元对当前的反射光位置判断为用户的按压行为时,需要对一个持续时间段内的光斑信息进行判断,假设持续100ms(即5帧)算是一个真正的按压事件,进一步去调用相应的处理方法。当仅检测到某一帧用户为按压行为时,计算分析单元会开始查询操作,首先会获取前一帧用户的操作行为类型,如果为同一位置的按压行为,则计算分析单元会继续获取前一帧的用户的操作行为类型,当遇到非法行为(非同一位置的按压行为或者非按压行为),会进行特殊处理,如跳过这一帧再向前读一帧。
需要说明的是,此时有两种情况:第一种是若再向前的一帧仍为非法行为则本次查询终止,直到当前帧不能算作真正的按压事件,多帧判断结束,此时计算分析单元开始等待下一帧的用户行为并判断;第二种是再向前的一帧是同一位置的按压行为,那么之前遇到的非法行为被标记为错误数据,并当做一个同一位置的按压行为来进行处理。在经过查询和特殊处理之后,如果计算分析单元判断此时已经有连续五帧同一位置的按压行为,则会将其视为真正的按压事件,多帧判断结束。
根据本发明实施例提供的基于红外与可见光的触控识别方法,通过根据用户的轨迹信息以及投影内容对目标位置进行操作所对应的功能进行判断,能够提高触控操作事件确认的准确性,提高触控识别的准确率。
基于上述任一实施例,在一个实施例中,根据调整方式对投影内容进行更新,包括:
实时监测计算分析单元的分析结果信息,根据确定的调整方式对投影内容进行更新处理;
当调整方式为标记添加时,直接在投影内容对应的目标位置标记添加出相应的内容;
当调整方式为对目标事件的调用时,则调用目标事件,对投影内容进行更新,将更新后的投影内容进行投影显示。
在本实施例中,投影仪中心实时获取计算分析单元的分析结果信息,在获取分析结果信息后与计算分析单元中对分析结果信息对应的配置进行对比,得出该分析结果信息的类型,即得到调整方式。如果调整方式为标记添加处理,则直接在投影内容对应的界面上标记添加出相应的内容;如果是调用信息,对目标事件的调用,则利用计算分析单元的存储功能,获取需要更新的待投影界面,并将其进行投影显示。
根据本发明实施例提供的基于红外与可见光的触控识别方法,通过实时获取计算分析单元的分析结果信息,并根据确定的调整方式进行相应的处理,能够提高投影触控识别的准确性,提升用户体验。
图2为本发明提供的一种基于红外与可见光的触控识别装置,如图2所示,本发明提供的基于红外与可见光的触控识别装置,应用于投影仪,所述投影仪包括信号发射单元、红外摄像头、彩色摄像头以及计算分析单元,包括:
投影模块201,用于通过所述信号发射单元向待投影平面投射红外光,生成第一红外光栅,根据所述第一红外光栅,向所述待投影平面投影操作界面;
生成模块202,用于根据用户对所述操作界面的操作,生成第二红外光栅;
传输模块203,用于通过所述红外摄像头持续拍摄返回的第二红外光栅,以得到第一光斑信息,将所述第一光斑信息传输至所述计算分析单元,通过所述彩色摄像头拍摄所述待投影平面的场景图片,将得到的实景图片信息传输至所述计算分析单元;
确定模块204,用于通过所述计算分析单元根据所述第一光斑信息和所述实景图片信息确定对应的调整方式,根据所述调整方式对投影内容进行更新。
根据本发明提供的基于红外与可见光的触控识别装置,通过信号发射单元向确定的待投影平面投射红外光,生成第一红外光栅,根据第一红外光栅向待投影平面投影操作界面,根据用户对操作界面进行的操作,生成第二红外光栅,通过红外摄像头拍摄返回的第二红外光栅,彩色摄像头拍摄待投影平面的场景图片,然后将第一光斑信息和实景图片信息传输至计算分析单元;通过计算分析单元根据光斑信息和实景图片信息确定对应的调整方式,对投影内容进行更新。本发明提供的触控识别装置通过双摄像头的设置,能够准确确定出光斑信息是由目标用户的触控产生的还是物品所产生的影响,降低误触的情况发生,提高了触控识别的准确率,提升了用户体验。
由于本发明实施例所述装置与上述实施例所述方法的原理相同,对于更加详细的解释内容在此不再赘述。
图3为本发明实施例中提供的电子设备实体结构示意图,如图3所示,本发明提供一种电子设备,包括:处理器(processor)301、存储器(memory)302和总线303;
其中,处理器301、存储器302通过总线303完成相互间的通信;
处理器301用于调用存储器302中的程序指令,以执行上述各方法实施例中所提供的方法,所述方法应用于投影仪,所述投影仪包括信号发射单元、红外摄像头、彩色摄像头以及计算分析单元,例如包括:通过所述信号发射单元向待投影平面投射红外光,生成第一红外光栅;根据所述第一红外光栅,向所述待投影平面投影操作界面;根据用户对所述操作界面的操作,生成第二红外光栅;通过所述红外摄像头持续拍摄返回的第二红外光栅,以得到第一光斑信息,将所述第一光斑信息传输至所述计算分析单元,通过所述彩色摄像头拍摄所述待投影平面的场景图片,将得到的实景图片信息传输至所述计算分析单元;通过所述计算分析单元根据所述第一光斑信息和所述实景图片信息确定对应的调整方式,根据所述调整方式对投影内容进行更新。
此外,上述的存储器303中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种计算机程序产品,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,计算机能够执行上述各方法所提供的方法,所述方法应用于投影仪,所述投影仪包括信号发射单元、红外摄像头、彩色摄像头以及计算分析单元,例如包括:通过所述信号发射单元向待投影平面投射红外光,生成第一红外光栅;根据所述第一红外光栅,向所述待投影平面投影操作界面;根据用户对所述操作界面的操作,生成第二红外光栅;通过所述红外摄像头持续拍摄返回的第二红外光栅,以得到第一光斑信息,将所述第一光斑信息传输至所述计算分析单元,通过所述彩色摄像头拍摄所述待投影平面的场景图片,将得到的实景图片信息传输至所述计算分析单元;通过所述计算分析单元根据所述第一光斑信息和所述实景图片信息确定对应的调整方式,根据所述调整方式对投影内容进行更新。
又一方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各提供的方法,所述方法应用于投影仪,所述投影仪包括信号发射单元、红外摄像头、彩色摄像头以及计算分析单元,例如包括:通过所述信号发射单元向待投影平面投射红外光,生成第一红外光栅;根据所述第一红外光栅,向所述待投影平面投影操作界面;根据用户对所述操作界面的操作,生成第二红外光栅;通过所述红外摄像头持续拍摄返回的第二红外光栅,以得到第一光斑信息,将所述第一光斑信息传输至所述计算分析单元,通过所述彩色摄像头拍摄所述待投影平面的场景图片,将得到的实景图片信息传输至所述计算分析单元;通过所述计算分析单元根据所述第一光斑信息和所述实景图片信息确定对应的调整方式,根据所述调整方式对投影内容进行更新。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (9)

1.一种基于红外与可见光的触控识别方法,所述方法应用于投影仪,所述投影仪包括信号发射单元、红外摄像头、彩色摄像头以及计算分析单元,其特征在于,包括:
通过所述信号发射单元向待投影平面投射红外光,生成第一红外光栅;根据所述第一红外光栅,向所述待投影平面投影操作界面;
根据用户对所述操作界面的操作,生成第二红外光栅;
通过所述红外摄像头持续拍摄返回的第二红外光栅,以得到第一光斑信息,将所述第一光斑信息传输至所述计算分析单元,通过所述彩色摄像头拍摄所述待投影平面的场景图片,将得到的实景图片信息传输至所述计算分析单元;
通过所述计算分析单元根据所述第一光斑信息和所述实景图片信息确定对应的调整方式,根据所述调整方式对投影内容进行更新;
其中,通过所述计算分析单元根据接收到的所述第一光斑信息和所述实景图片信息进行人体识别,确定出所述用户的操作行为,包括:
所述计算分析单元将所述第一光斑信息中的多帧光斑大小与所述实景图片信息中的手指按压形状进行比对;
当所述第一光斑信息中的多帧光斑大小与所述实景图片信息中的手指按压形状均相同时,确定所述第一光斑信息对应的操作行为属于预设按压事件,所述计算分析单元对所述实景图片信息进行识别,获取所述用户的关节点信息,将所述关节点信息与预设的关节点阈值信息进行比较,如果所述关节点信息与预设的关节点阈值信息相同,则确定所述用户的操作行为属于用户点击行为;
当所述第一光斑信息中的第一帧光斑大小与所述实景图片信息中的手指按压形状不相同时,确定所述第一光斑信息对应的操作行为不属于预设按压事件,所述计算分析单元重新将下一帧中的光斑大小与所述实景图片信息中的手指按压形状进行比对,
其中,所述第一帧为所述多帧中的任意一帧。
2.根据权利要求1所述的基于红外与可见光的触控识别方法,其特征在于,所述通过所述信号发射单元向待投影平面投射红外光,生成第一红外光栅,包括:
通过所述信号发射单元将红外光束与所述待投影平面垂直的方式发射出去;
通过所述红外摄像头拍摄所述待投影平面返回的红外光栅,并对所述红外光栅处理,将得到的第二光斑信息传输至所述计算分析单元进行分析;其中,所述第二光斑信息是在生成第一红外光栅之前获取的光斑信息,是不同于所述第一光斑信息的;
根据分析结果调整所述信号发射单元的位置,当各个红外光束到所述待投影平面的距离为预设阈值时,生成第一红外光栅。
3.根据权利要求2所述的基于红外与可见光的触控识别方法,其特征在于,所述通过所述红外摄像头持续拍摄返回的第二红外光栅,将得到的第一光斑信息传输至所述计算分析单元,通过所述彩色摄像头拍摄所述待投影平面的场景图片,将得到的实景图片信息传输至所述计算分析单元,包括:
如果确定对所述操作界面上的目标位置进行按压操作,且所述各个红外光束到所述待投影平面的距离小于所述预设阈值时,通过所述红外摄像头持续拍摄所述目标位置反射回来的第二红外光栅,并对所述第二红外光栅进行处理,得到第一光斑信息,将所述第一光斑信息传输至所述计算分析单元;通过所述彩色摄像头持续拍摄用户在所述待投影平面上进行按压操作的场景图片,将得到的实景图片信息传输至所述计算分析单元。
4.根据权利要求1所述的基于红外与可见光的触控识别方法,其特征在于,所述通过所述计算分析单元根据所述第一光斑信息和所述实景图片信息确定对应的调整方式,根据所述调整方式对投影内容进行更新,包括:
通过所述计算分析单元根据接收到的所述第一光斑信息和所述实景图片信息进行人体识别,确定出所述用户的操作行为;
根据所述用户的操作行为确定对应的调整方式;
根据所述调整方式对所述投影内容进行更新。
5.根据权利要求1所述的基于红外与可见光的触控识别方法,其特征在于,所述根据所述用户的操作行为确定对应的调整方式,包括:
通过所述计算分析单元根据所述用户的操作行为,得到所述用户的轨迹信息;
根据所述轨迹信息确定对所述投影内容的目标位置进行操作所对应的功能;其中,所述功能由所述用户选择确定;
在所述功能为在所述目标位置对目标事件的调用的情况下,确认所述调整方式为对所述目标事件的调用;
在所述功能为对所述目标位置进行标记添加的情况下,确认所述调整方式为对所述目标位置的标记添加处理。
6.根据权利要求4所述的基于红外与可见光的触控识别方法,其特征在于,所述根据所述调整方式对所述投影内容进行更新,包括:
实时监测所述计算分析单元的分析结果信息,根据确定的调整方式对所述投影内容进行更新处理;
当所述调整方式为标记添加时,直接在所述投影内容对应的目标位置标记添加出相应的内容;
当所述调整方式为对目标事件的调用时,则调用所述目标事件,对所述投影内容进行更新,将更新后的投影内容进行投影显示。
7.一种基于红外与可见光的触控识别装置,应用于投影仪,所述投影仪包括信号发射单元、红外摄像头、彩色摄像头以及计算分析单元,其特征在于,包括:
投影模块,用于通过所述信号发射单元向待投影平面投射红外光,生成第一红外光栅,根据所述第一红外光栅,向所述待投影平面投影操作界面;
生成模块,用于根据用户对所述操作界面的操作,生成第二红外光栅;
传输模块,用于通过所述红外摄像头持续拍摄返回的第二红外光栅,以得到第一光斑信息,将所述第一光斑信息传输至所述计算分析单元,通过所述彩色摄像头拍摄所述待投影平面的场景图片,将得到的实景图片信息传输至所述计算分析单元;
确定模块,用于通过所述计算分析单元根据所述第一光斑信息和所述实景图片信息确定对应的调整方式,根据所述调整方式对投影内容进行更新;
其中,所述确定模块还用于:
所述计算分析单元将所述第一光斑信息中的多帧光斑大小与所述实景图片信息中的手指按压形状进行比对;
当所述第一光斑信息中的多帧光斑大小与所述实景图片信息中的手指按压形状均相同时,确定所述第一光斑信息对应的操作行为属于预设按压事件,所述计算分析单元对所述实景图片信息进行识别,获取所述用户的关节点信息,将所述关节点信息与预设的关节点阈值信息进行比较,如果所述关节点信息与预设的关节点阈值信息相同,则确定所述用户的操作行为属于用户点击行为;
当所述第一光斑信息中的第一帧光斑大小与所述实景图片信息中的手指按压形状不相同时,确定所述第一光斑信息对应的操作行为不属于预设按压事件,所述计算分析单元重新将下一帧中的光斑大小与所述实景图片信息中的手指按压形状进行比对,
其中,所述第一帧为所述多帧中的任意一帧。
8.一种电子设备,其特征在于,包括:处理器、存储器和总线,其中,
所述处理器和所述存储器通过所述总线完成相互间的通信;
所述存储器存储有可被所述处理器执行的程序指令,所述处理器调用所述程序指令能够执行如权利要求1至6中任一项所述基于红外与可见光的触控识别方法的步骤。
9.一种非暂态计算机可读存储介质,其特征在于,所述非暂态计算机可读存储介质存储计算机指令,所述计算机指令使所述计算机执行如权利要求1至6中任一项所述基于红外与可见光的触控识别方法的步骤。
CN202210559976.7A 2022-05-23 2022-05-23 基于红外与可见光的触控识别方法、装置、设备及介质 Active CN114721552B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210559976.7A CN114721552B (zh) 2022-05-23 2022-05-23 基于红外与可见光的触控识别方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210559976.7A CN114721552B (zh) 2022-05-23 2022-05-23 基于红外与可见光的触控识别方法、装置、设备及介质

Publications (2)

Publication Number Publication Date
CN114721552A CN114721552A (zh) 2022-07-08
CN114721552B true CN114721552B (zh) 2022-08-23

Family

ID=82230686

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210559976.7A Active CN114721552B (zh) 2022-05-23 2022-05-23 基于红外与可见光的触控识别方法、装置、设备及介质

Country Status (1)

Country Link
CN (1) CN114721552B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111083453A (zh) * 2018-10-18 2020-04-28 中兴通讯股份有限公司 一种投影装置、方法及计算机可读存储介质
CN111258411A (zh) * 2020-05-06 2020-06-09 北京深光科技有限公司 一种用户交互方法及设备
CN112822468A (zh) * 2020-12-31 2021-05-18 成都极米科技股份有限公司 一种投影控制方法、装置、投影设备及激光控制器
CN113920342A (zh) * 2021-09-08 2022-01-11 杭州易现先进科技有限公司 一种交互式投影仪多屏联动的方法、系统、装置和介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150186039A1 (en) * 2012-08-27 2015-07-02 Citizen Holdings Co., Ltd. Information input device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111083453A (zh) * 2018-10-18 2020-04-28 中兴通讯股份有限公司 一种投影装置、方法及计算机可读存储介质
CN111258411A (zh) * 2020-05-06 2020-06-09 北京深光科技有限公司 一种用户交互方法及设备
CN112822468A (zh) * 2020-12-31 2021-05-18 成都极米科技股份有限公司 一种投影控制方法、装置、投影设备及激光控制器
CN113920342A (zh) * 2021-09-08 2022-01-11 杭州易现先进科技有限公司 一种交互式投影仪多屏联动的方法、系统、装置和介质

Also Published As

Publication number Publication date
CN114721552A (zh) 2022-07-08

Similar Documents

Publication Publication Date Title
US20200012854A1 (en) Processing method for augmented reality scene, terminal device, system, and computer storage medium
CN111258411B (zh) 一种用户交互方法及设备
US20220254067A1 (en) Optical information detection method, device and equipment
KR20150032661A (ko) 눈 추적을 이용한 사용자 입력 처리
CN104035555A (zh) 系统、信息处理装置和信息处理方法
CN114138121B (zh) 用户手势识别方法、装置、系统、存储介质及计算设备
US20200241697A1 (en) Position detecting method, position detecting device, and interactive projector
CN112287869A (zh) 一种图像数据检测方法及装置
US20230177509A1 (en) Recognition method and device, security system, and storage medium
CN112291473B (zh) 对焦方法、装置及电子设备
CN107808109B (zh) 一种二维码图像识别方法及移动终端
US20200241695A1 (en) Position detecting method, position detecting device, and interactive projector
CN113711229B (zh) 电子设备的控制方法、电子设备和计算机可读存储介质
CN114721552B (zh) 基于红外与可见光的触控识别方法、装置、设备及介质
CN111258410B (zh) 一种人机交互设备
CN112558818B (zh) 一种基于投影的远程直播的互动方法及系统
US20190147280A1 (en) Image processing method and electronic apparatus for foreground image extraction
CN111291749B (zh) 手势识别方法、装置及机器人
CN112153300A (zh) 多目摄像头曝光方法、装置、设备及介质
US10365770B2 (en) Information processing apparatus, method for controlling the same, and storage medium
US11727664B2 (en) Systems and methods for determining an adaptive region of interest (ROI) for image metrics calculations
CN114756129A (zh) Ar设备操作的执行方法及装置、存储介质、ar眼镜
CN114339162A (zh) 一种智能寻物系统及其应用方法
CN211827195U (zh) 一种交互设备
CN107122083B (zh) 投影面的触控检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant