CN114245093B - 基于红外和热感的投影操作方法、电子设备及存储介质 - Google Patents

基于红外和热感的投影操作方法、电子设备及存储介质 Download PDF

Info

Publication number
CN114245093B
CN114245093B CN202210174490.1A CN202210174490A CN114245093B CN 114245093 B CN114245093 B CN 114245093B CN 202210174490 A CN202210174490 A CN 202210174490A CN 114245093 B CN114245093 B CN 114245093B
Authority
CN
China
Prior art keywords
information
trigger
projection
determining
profile
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210174490.1A
Other languages
English (en)
Other versions
CN114245093A (zh
Inventor
冯翀
王宇轩
张梦遥
张梓航
郭嘉伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Shenguang Technology Co ltd
Original Assignee
Beijing Shenguang Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Shenguang Technology Co ltd filed Critical Beijing Shenguang Technology Co ltd
Priority to CN202210174490.1A priority Critical patent/CN114245093B/zh
Publication of CN114245093A publication Critical patent/CN114245093A/zh
Application granted granted Critical
Publication of CN114245093B publication Critical patent/CN114245093B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • H04N9/3185Geometric adjustment, e.g. keystone or convergence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Geometry (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及智能投影技术领域,提供一种基于红外和热感的投影操作方法、电子设备及存储介质,该方法包括:获取红外激光在投影平面上形成的光栅区域内的红外光信息,以及获取红外激光的发射信息;获取光栅区域上方的热感信息,根据红外光信息和热感信息确定触发物为活体时,根据红外光信息和发射信息确定光栅区域内的触发信息;根据触发信息和投影区域确定对投影装置的操作信息。本发明提供的基于红外和热感的投影操作方法、装置、电子设备及存储介质,能够实现对投影装置的操作转化,完成对投影装置的触控操作,实现智能化操作。

Description

基于红外和热感的投影操作方法、电子设备及存储介质
技术领域
本发明涉及智能投影技术领域,尤其涉及一种基于红外和热感的投影方法、装置、电子设备及存储介质。
背景技术
现有的投影装置大多是基于投影装置设备上的按钮进行投影内容的操控,或是在触摸显示屏上进行投影内容的操控,无法实现实现投影装置的智能化操控。
发明内容
针对现有技术存在的问题,本发明提供一种基于红外和热感的投影操作方法、电子设备及存储介质。
第一方面,本发明提供一种基于红外和热感的投影操作方法,其中:
获取红外激光在投影平面上形成的光栅区域内的红外光信息,以及获取红外激光的发射信息;其中,所述光栅区域与投影装置在所述投影平面投射的投影区域相重叠;
获取所述光栅区域上方的热感信息,根据所述红外光信息和所述热感信息确定所述红外光信息和所述热感信息是否对应于同一触发物,且所述触发物是否为活体;
在确定所述触发物为活体时,根据所述红外光信息和所述发射信息确定所述光栅区域内的触发信息;
根据所述触发信息和所述投影区域确定对所述投影装置的操作信息。
在一个实施例中,所述方法还包括:在未获取到所述红外光信息,且仅能获取到所述热感信息时,根据所述热感信息确定对所述投影装置的操作信息。
在一个实施例中,所述方法还包括:获取所述光栅区域上方的深度图像信息;
相应地,在确定所述触发物为活体时,根据所述红外光信息、所述深度图像信息和所述发射信息确定所述光栅区域内的触发信息。
在一个实施例中,所述根据所述红外光信息和所述发射信息确定所述光栅区域内的触发信息,包括:
根据所述红外光信息确定反射轮廓和非反射轮廓;
根据所述反射轮廓和所述发射信息确定第一触发轮廓;
根据所述第一触发轮廓和所述非反射轮廓确定触发轮廓;
基于预设时间段内确定的触发轮廓,确定所述触发信息。
在一个实施例中,所述根据所述触发信息和所述投影区域确定对所述投影装置的操作信息,包括:
根据所述触发信息确定触发位置和触发行为;
基于所述光栅区域与所述投影区域的位置转换关系,确定所述触发位置在所述投影区域内的转换位置;
根据所述转换位置和所述触发行为确定对所述投影装置的操作信息。
在一个实施例中,所述根据所述热感信息确定对所述投影装置的操作信息,包括:
根据所述热感信息确定对应于所述触发物的图形信息和/或触发行为;
根据所述图形信息和/或触发行为确定对所述投影装置的操作信息。
在一个实施例中,所述根据所述红外光信息、所述深度图像信息和所述发射信息确定所述光栅区域内的触发信息,包括:
根据所述红外光信息和所述深度图像信息确定反射轮廓和非反射轮廓;
根据所述反射轮廓和所述发射信息确定第一触发轮廓;
根据所述第一触发轮廓和所述非反射轮廓确定触发轮廓;
基于预设时间段内确定的触发轮廓,确定所述触发信息。
第二方面,本发明提供一种基于红外和热感的投影操作装置,包括:
获取模块,用于获取红外激光在投影平面上形成的光栅区域内的红外光信息,以及获取红外激光的发射信息;其中,所述光栅区域与投影装置在所述投影平面投射的投影区域相重叠;
判断模块,用于获取所述光栅区域上方的热感信息,根据所述红外光信息和所述热感信息确定所述红外光信息和所述热感信息是否对应于同一触发物,且所述触发物是否为活体;
分析模块,用于在确定所述触发物为活体时,根据所述红外光信息和所述发射信息确定所述光栅区域内的触发信息;
识别模块,用于根据所述触发信息和所述投影区域确定对所述投影装置的操作信息。
第三方面,本发明提供一种电子设备,包括存储器和存储有计算机程序的存储器,所述处理器执行所述程序时实现第一方面所述基于红外和热感的投影操作方法的步骤。
第四方面,本发明提供一种处理器可读存储介质,所述处理器可读存储介质存储有计算机程序,所述计算机程序用于使所述处理器执行第一方面所述基于红外和热感的投影操作方法的步骤。
本发明提供的基于红外和热感的投影操作方法、电子设备及存储介质,通过红外激光在投影平面上投影区域叠加形成光栅区域,采集光栅区域内的红外光信息和红外激光的发射信息,并在根据热感信息确定用户操作时,基于红外光信息和发射信息确定光栅区域内的触发信息,实现对投影装置的操作转化,完成对投影装置的触控操作,实现智能化操作。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明提供的基于红外和热感的投影操作方法的流程示意图;
图2是本发明提供的投影场景示意图;
图3是本发明提供的基于红外和热感的投影操作装置的结构示意图;
图4是本发明提供的电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
下面结合图1-图4描述本发明的基于红外和热感的投影操作方法、装置、电子设备及存储介质。
图1示出了本发明一种基于红外和热感的投影操作方法的流程示意图,参见图1,该方法包括:
11、获取红外激光在投影平面上形成的光栅区域内的红外光信息,以及获取红外激光的发射信息;其中,光栅区域与投影装置在投影平面投射的投影区域相重叠;
12、获取光栅区域上方的热感信息,根据红外光信息和热感信息确定红外光信息和热感信息是否对应于同一触发物,且触发物是否为活体;
13、在确定触发物为活体时,根据红外光信息和发射信息确定光栅区域内的触发信息;
14、根据触发信息和投影区域确定对投影装置的操作信息。
针对步骤11~步骤14,需要说明的是,在本发明中,该投影操作方法适用于投影装置,该投影装置可以在预设的投影平面上投射出投影区域,该投影区域为在投影平面上显示的内容界面。投影平面可以为桌面、墙面、天花板等。
该投影装置上安装有红外激光器,该红外激光器在投影装置合理的放置场景(如放置在桌面上)可在投影平面(如桌面)上形成红外光栅区域。相应地,在光栅区域和投影区域相重叠的情况下,投影区域是投射在桌面上。另外,光栅区域大于投影区域,便于用户在投影区域上进行触控操作。
在本发明中,形成光栅区域的红外光束设置距离投影平面的高度可为1mm。由于光栅区域与投影区域的重叠,用户对投影区域进行触控,需采用触发物(如手指、铅笔、操作棒等)实现。当触发物在投影平面上触发,其势必会挡住部分红外光束,使得光栅区域内的光栅状态发生变化。此时,设置在投影装置上的红外摄像头可以实时捕捉到这种变化,即红外摄像头可以采集到光栅区域内的红外光信息。由于触发物阻挡部分红外光束,触发物会使得其后方不再有红外光束。再者,由于触发物的阻挡,红外摄像头也不能采集到触发物背后的红外光束。故红外摄像头采集到的红外光信息包含有触发物的轮廓。红外摄像头采集到红外光信息后,将红外光信息发送给投影装置上的处理器。
由于任何一个触发物与投影平面产生接触,都可能对投影装置的操作产生作用。在本发明中,需要用户使用手指对投影装置进行远程操控。为此,在根据红外光信息和发射信息确定光栅区域内的触发信息之前,需要判断触发物为活体,即用户需使用手指触碰投影平面对投影装置完成操作才行。故还需获取光栅区域上方的热感信息,并根据红外光信息和热感信息确定红外光信息和热感信息是否对应于同一触发物,且触发物是否为活体。
对此,需要说明的是,在本发明中,可能存在如下情况:
用户用笔触碰投影平面,再用手在热感摄像头采集到手的热感信息(需要说明的是,手不触碰投影平面);此时,若热感信息仅仅是判断是否为活体,在具有活体信息的情况下,采用非活体的触发物均可以对投影装置进行操控。
用户使用具有较高温度的触发物触碰投影平面,此时,外光信息和热感信息确定红外光信息和热感信息对应于同一触发物,但触发物非活体,同样能够对投影装置进行操控。
故在本发明中,可以先根据红外光信息和热感信息确定红外光信息和热感信息是否对应于同一触发物。即:是否因为同一触发物对当前场景的影响,导致红外光信息和热感信息所拟合的具体轮廓相似度满足预设的条件。当满足预设的条件,则表明红外光信息和热感信息确定红外光信息和热感信息对应于同一触发物。
当红外光信息和热感信息确定红外光信息和热感信息对应于同一触发物后,相应地,再去根据热感信息去与人体的正常体温范围进行比对,从而判断触发物是否为活体。通过对触发物的活体检测,保证只有用户可以控制,防止误操作的风险。
在本发明中,当触发物为活体时,由于触发物的阻挡,红外摄像头也不能采集到触发物背后的红外光束。而该方法旨在获取到触发物与投影平面产生实际接触的区域,为此,仅仅基于红外光信息不能较准确的分析拟合出触发物与投影平面产生实际接触的区域。需要同时借助红外激光的发射信息。该发射信息包含红外激光光束发射的间距等。处理器可以预先配置好红外激光器的发射信息。
在本发明中,处理器能够根据红外光信息和发射信息确定光栅区域内的触发信息。该触发信息用于确定用户在投影平面上的触发位置及触发行为。该触发位置可以限定用户在投影的内容界面上的固定点或轨迹点。该触发行为可以限定用户在投影的内容界面上是单击、双击或滑动等行为。
在本发明中,根据触发信息和投影区域确定对投影装置的操作信息。该操作信息可体现在对投影的内容界面上的按钮点击,内容标注等。此时,投影装置根据操作信息可以实现对内容界面的更新。
本发明提供的基于红外和热感的投影操作方法,通过红外激光在投影平面上投影区域叠加形成光栅区域,采集光栅区域内的红外光信息和红外激光的发射信息,并在根据热感信息确定用户操作时,基于红外光信息和发射信息确定光栅区域内的触发信息,实现对投影装置的操作转化,完成对投影装置的触控操作,实现智能化操作。
在上述方法的进一步方法中,当投影装置进行桌面投影时,其红外摄像头故障无法采集红外光信息;或是投影装置进行墙面投影或天花板投影时,其可能无需进行红外光信息的采集。为此,要想实现对投影装置的智能操控,仅需要根据热感信息去确定对投影装置的操作信息。在这个过程中,可根据热感信息确定用户做出的手势及动作行为,然后根据手势和动作行为确定对投影装置的操作信息。
本发明进一步的方法,在无法获取到红外光信息时,仅根据热感信息实现对投影装置的操控,实现对多投影场景的智能操控。
在上述方法的进一步方法中,由于红外激光产生的光束是间隔发送,其光束被阻挡反射后,对触发物的轮廓采集产生一定的影响。为此,为了更清晰的确定光栅区域内的触发信息。采用深度摄像头采集光栅区域上方的深度图像信息,在本发明中,采集到的深度图像信息和红外光信息对应于同一触发物。
在本发明中,处理器能够根据红外光信息、深度图像信息和发射信息确定光栅区域内的触发信息。该触发信息用于确定用户在投影平面上的触发位置及触发行为。该触发位置可以限定用户在投影的内容界面上的固定点或轨迹点。该触发行为可以限定用户在投影的内容界面上是单击、双击或滑动等行为。
在本发明中,根据触发信息和投影区域确定对投影装置的操作信息。该操作信息可体现在对投影的内容界面上的按钮点击,内容标注等。此时,投影装置根据操作信息可以实现对内容界面的更新。
本发明进一步的方法,通过根据红外光信息、深度图像信息和发射信息确定光栅区域内的触发信息,能够使触发信息的确定更为精确,提高对投影装置的精确操控。
在上述方法的进一步方法中,主要是对根据红外光信息和发射信息确定光栅区域内的触发信息的处理过程进行解释说明,具体如下:
根据红外光信息确定反射轮廓和非反射轮廓;
根据反射轮廓和发射信息确定第一触发轮廓;
根据第一触发轮廓和非反射轮廓确定触发轮廓;
基于预设时间段内确定的触发轮廓,确定触发信息。
对此,需要说明的是,在本发明中,触发物阻挡红外激光光束后,光束会在触发物出发生发射,导致出现光斑。此时红外摄像头采集到的红外光信息包括光斑形成的轮廓,以及红外激光光束与触发物的边缘结合的轮廓。如图2中的a、b1和b2所指向的轮廓线。
根据反射轮廓和发射信息确定第一触发轮廓,第一触发轮廓包括反射轮廓和拟合得到的轮廓。如图2中的a与c1所指向的轮廓线的组合。
根据第一触发轮廓和非反射轮廓确定触发轮廓,触发轮廓包括第一触发轮廓、部分的非反射轮廓和拟合得到轮廓。如图2中的a、c1、c2和b1所指向的轮廓线的组合。
在本发明中,每采集到的一帧红外光图像和热感图像均能够分析得到对应的触发轮廓。在一定时间段内,多个触发轮廓进行分析处理,可以得到触发信息。分析处理的过程可以包括是否单击,是否双击,是否存在移动轨迹等。
本发明的触发轮廓实际是上预测触发物与投影平面的有效接触区域,便于后续对区域位置、区域移动轨迹的判断。
本发明进一步的方法,结合红外光信息和发射信息确定触发物与投影平面的有效接触区域,便于对触发信息的精确分析。
在上述方法的进一步方法中,主要是对根据触发信息和投影区域确定对投影装置的操作信息的处理过程进行解释说明,具体如下:
根据触发信息确定触发位置和触发行为;
基于光栅区域与投影区域的位置转换关系,确定触发位置在投影区域内的转换位置;
根据转换位置和触发行为确定对投影装置的操作信息。
对此,需要说明的是,在本发明中,由于触发信息是一段时间内的触发轮廓的集合,为此,可以对触发轮廓进行位置确定,即确定触发轮廓的中心在光栅区域上的位置坐标。然后分析多个触发轮廓之间的运动轨迹,基于运动轨迹分析出是单击、双击或移动等。
在本发明中,预先会配置光栅区域与投影区域的位置转换关系。基于该位置转换关系可以将触发轮廓的中心在光栅区域上的位置坐标转换成触发轮廓的中心在投影区域内的转换位置坐标。
然后基于触发行为和转换位置可以确定投影装置的操作,进而去更新投影的内容界面。
本发明进一步的方法,基于位置转换关系将触发轮廓在光栅区域的位置转换到投影区域上的位置,实现对投影装置的操作确定。
在上述方法的进一步方法中,主要是对根据热感信息确定对投影装置的操作信息的处理过程的解释说明,具体如下:
根据热感信息确定对应于触发物的图形信息和/或触发行为;
根据图形信息和/或触发行为确定对投影装置的操作信息。
对此,需要说明的是,在本发明中,基于采集到的热感信息可以分析出对应于触发物的图形信息,在这里,图形信息可以是手势,例如OK的手势,比耶的手势等,总之,就是会预先配置一定图形信息对应的操作信息,基于识别出的图形信息与预存的图形信息进行匹配,得到对应的操作信息。或是以手指上下滑动,此时可以识别出触发行为,根据触发行为可以确定对投影装置的操作信息。例如上滑,则投影装置投影的内容界面的文字会向上移动。
本发明进一步的方法,通过对用户手势所摆出的图形及行动轨迹,对投影装置进行对应的操作。
在上述方法的进一步方法中,主要是对根据红外光信息、深度图像信息和发射信息确定光栅区域内的触发信息的处理过程进行解释说明,具体如下:
根据红外光信息和深度图像信息确定反射轮廓和非反射轮廓;
根据反射轮廓和发射信息确定第一触发轮廓;
根据第一触发轮廓和非反射轮廓确定触发轮廓;
基于预设时间段内确定的触发轮廓,确定触发信息。
对此,需要说明的是,在本发明中,主要是结合红外光信息和深度图像信息共同确定出更为精确的反射轮廓和非反射轮廓,便于对后续各种轮廓的确认。基于上述对各轮廓的确认,在此不再对上述确认过程进行解释说明。
本发明进一步的方法,结合红外光信息和发射信息确定触发物与投影平面的有效接触区域,便于对触发信息的精确分析。
下面对本发明提供的适用于投影装置的操作装置进行描述,下文描述的适用于投影装置的操作装置与上文描述的适用于投影装置的操作方法可相互对应参照。
图3示出了本发明提供的一种适用于投影装置的操作装置的结构示意图,参见图3,该装置包括获取模块31、判断模块32、分析模块33和识别模块34,其中
获取模块31,用于获取红外激光在投影平面上形成的光栅区域内的红外光信息,以及获取红外激光的发射信息;其中,光栅区域与投影装置在投影平面投射的投影区域相重叠;
判断模块32,用于获取光栅区域上方的热感信息,根据红外光信息和热感信息确定红外光信息和热感信息是否对应于同一触发物,且触发物是否为活体;
分析模块33,用于在确定触发物为活体时,根据红外光信息和发射信息确定光栅区域内的触发信息;
识别模块34,用于根据触发信息和投影区域确定对投影装置的操作信息。
在上述装置的进一步装置中,该分析模块还用于:在未获取到红外光信息,且仅能获取到热感信息时,根据热感信息确定对投影装置的操作信息。
在上述装置的进一步装置中,该获取模块还用于:获取光栅区域上方的深度图像信息;
相应地,该分析模块还用于:在确定所述触发物为活体时,根据红外光信息、深度图像信息和发射信息确定光栅区域内的触发信息。
在上述装置的进一步装置中,该分析模块具体用于:
根据所述红外光信息确定反射轮廓和非反射轮廓;
根据所述反射轮廓和所述发射信息确定第一触发轮廓;
根据所述第一触发轮廓和所述非反射轮廓确定触发轮廓;
基于预设时间段内确定的触发轮廓,确定所述触发信息。
在上述装置的进一步装置中,该识别模块具体用于:
根据触发信息确定触发位置和触发行为;
基于光栅区域与投影区域的位置转换关系,确定触发位置在投影区域内的转换位置;
根据转换位置和触发行为确定对投影装置的操作信息。
在上述装置的进一步装置中,该分析模块具体用于:
根据热感信息确定对应于触发物的图形信息和/或触发行为;
根据图形信息和/或触发行为确定对投影装置的操作信息。
在上述装置的进一步装置中,该分析模块具体用于:
根据红外光信息和深度图像信息确定反射轮廓和非反射轮廓;
根据反射轮廓和发射信息确定第一触发轮廓;
根据第一触发轮廓和非反射轮廓确定触发轮廓;
基于预设时间段内确定的触发轮廓,确定触发信息。
由于本发明实施例所述装置与上述实施例所述方法的原理相同,对于更加详细的解释内容在此不再赘述。
需要说明的是,本发明实施例中可以通过硬件处理器(hardware processor)来实现相关功能模。
本发明提供的基于红外和热感的投影操作装置,通过红外激光在投影平面上投影区域叠加形成光栅区域,采集光栅区域内的红外光信息和红外激光的发射信息,并在根据热感信息确定用户操作时,基于红外光信息和发射信息确定光栅区域内的触发信息,实现对投影装置的操作转化,完成对投影装置的触控操作,实现智能化操作。
图4示例了一种电子设备的实体结构示意图,如图4所示,该电子设备可以包括:处理器(processor)41、通信接口(Communication Interface)42、存储器(memory)43和通信总线44,其中,处理器41,通信接口42,存储器43通过通信总线44完成相互间的通信。处理器41可以调用存储器43中的计算机程序,以执行基于红外和热感的投影操作方法的步骤,例如包括:获取红外激光在投影平面上形成的光栅区域内的红外光信息,以及获取红外激光的发射信息;其中,光栅区域与投影装置在投影平面投射的投影区域相重叠;获取光栅区域上方的热感信息,根据红外光信息和热感信息确定红外光信息和热感信息是否对应于同一触发物,且触发物是否为活体;在确定触发物为活体时,根据红外光信息和发射信息确定光栅区域内的触发信息;根据触发信息和投影区域确定对投影装置的操作信息。
此外,上述的存储器43中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种计算机程序产品,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,计算机能够执行上述各方法所提供的基于红外和热感的投影操作方法,该方法包括:获取红外激光在投影平面上形成的光栅区域内的红外光信息,以及获取红外激光的发射信息;其中,光栅区域与投影装置在投影平面投射的投影区域相重叠;获取光栅区域上方的热感信息,根据红外光信息和热感信息确定红外光信息和热感信息是否对应于同一触发物,且触发物是否为活体;在确定触发物为活体时,根据红外光信息和发射信息确定光栅区域内的触发信息;根据触发信息和投影区域确定对投影装置的操作信息。
另一方面,本申请实施例还提供一种处理器可读存储介质,所述处理器可读存储介质存储有计算机程序,所述计算机程序用于使所述处理器执行上述各实施例提供的基于红外和热感的投影操作方法,例如包括:获取红外激光在投影平面上形成的光栅区域内的红外光信息,以及获取红外激光的发射信息;其中,光栅区域与投影装置在投影平面投射的投影区域相重叠;获取光栅区域上方的热感信息,根据红外光信息和热感信息确定红外光信息和热感信息是否对应于同一触发物,且触发物是否为活体;在确定触发物为活体时,根据红外光信息和发射信息确定光栅区域内的触发信息;根据触发信息和投影区域确定对投影装置的操作信息。
所述处理器可读存储介质可以是处理器能够存取的任何可用介质或数据存储设备,包括但不限于磁性存储器(例如软盘、硬盘、磁带、磁光盘(MO)等)、光学存储器(例如CD、DVD、BD、HVD等)、以及半导体存储器(例如ROM、EPROM、EEPROM、非易失性存储器(NANDFLASH)、固态硬盘(SSD))等。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (9)

1.一种基于红外和热感的投影操作方法,其特征在于,包括:
获取红外激光在投影平面上形成的光栅区域内的红外光信息,以及获取红外激光的发射信息;其中,所述光栅区域与投影装置在所述投影平面投射的投影区域相重叠;
获取所述光栅区域上方的热感信息,根据所述红外光信息和所述热感信息确定所述红外光信息和所述热感信息是否对应于同一触发物,且所述触发物是否为活体;
在确定所述触发物为活体时,根据所述红外光信息和所述发射信息确定所述光栅区域内的触发信息;
根据所述触发信息和所述投影区域确定对所述投影装置的操作信息;
其中,所述根据所述红外光信息和所述发射信息确定所述光栅区域内的触发信息,包括:
根据所述红外光信息确定反射轮廓和非反射轮廓;
根据所述反射轮廓和所述发射信息确定第一触发轮廓;
根据所述第一触发轮廓和所述非反射轮廓确定触发轮廓;触发轮廓包括第一触发轮廓、部分的非反射轮廓和拟合得到轮廓;
基于预设时间段内确定的触发轮廓,确定所述触发信息。
2.根据权利要求1所述的基于红外和热感的投影操作方法,其特征在于,所述方法还包括:在未获取到所述红外光信息,且仅能获取到所述热感信息时,根据所述热感信息确定对所述投影装置的操作信息。
3.根据权利要求1所述的基于红外和热感的投影操作方法,其特征在于,所述方法还包括:获取所述光栅区域上方的深度图像信息;
相应地,在确定所述触发物为活体时,根据所述红外光信息、所述深度图像信息和所述发射信息确定所述光栅区域内的触发信息。
4.根据权利要求1所述的基于红外和热感的投影操作方法,其特征在于,所述根据所述触发信息和所述投影区域确定对所述投影装置的操作信息,包括:
根据所述触发信息确定触发位置和触发行为;
基于所述光栅区域与所述投影区域的位置转换关系,确定所述触发位置在所述投影区域内的转换位置;
根据所述转换位置和所述触发行为确定对所述投影装置的操作信息。
5.根据权利要求2所述的基于红外和热感的投影操作方法,其特征在于,所述根据所述热感信息确定对所述投影装置的操作信息,包括:
根据所述热感信息确定对应于所述触发物的图形信息和/或触发行为;
根据所述图形信息和/或触发行为确定对所述投影装置的操作信息。
6.根据权利要求3所述的基于红外和热感的投影操作方法,其特征在于,所述根据所述红外光信息、所述深度图像信息和所述发射信息确定所述光栅区域内的触发信息,包括:
根据所述红外光信息和所述深度图像信息确定反射轮廓和非反射轮廓;
根据所述反射轮廓和所述发射信息确定第一触发轮廓;
根据所述第一触发轮廓和所述非反射轮廓确定触发轮廓;
基于预设时间段内确定的触发轮廓,确定所述触发信息。
7.一种基于红外和热感的投影操作装置,其特征在于,包括:
获取模块,用于获取红外激光在投影平面上形成的光栅区域内的红外光信息,以及获取红外激光的发射信息;其中,所述光栅区域与投影装置在所述投影平面投射的投影区域相重叠;
判断模块,用于获取所述光栅区域上方的热感信息,根据所述红外光信息和所述热感信息确定所述红外光信息和所述热感信息是否对应于同一触发物,且所述触发物是否为活体;
分析模块,用于在确定所述触发物为活体时,根据所述红外光信息和所述发射信息确定所述光栅区域内的触发信息;
识别模块,用于根据所述触发信息和所述投影区域确定对所述投影装置的操作信息;
所述分析模块具体用于:
根据所述红外光信息确定反射轮廓和非反射轮廓;
根据所述反射轮廓和所述发射信息确定第一触发轮廓;
根据所述第一触发轮廓和所述非反射轮廓确定触发轮廓;触发轮廓包括第一触发轮廓、部分的非反射轮廓和拟合得到轮廓;
基于预设时间段内确定的触发轮廓,确定所述触发信息。
8.一种电子设备,包括处理器和存储有计算机程序的存储器,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6任一项所述基于红外和热感的投影操作方法的步骤。
9.一种处理器可读存储介质,其特征在于,所述处理器可读存储介质存储有计算机程序,所述计算机程序用于使所述处理器执行权利要求1至6任一项所述基于红外和热感的投影操作方法的步骤。
CN202210174490.1A 2022-02-25 2022-02-25 基于红外和热感的投影操作方法、电子设备及存储介质 Active CN114245093B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210174490.1A CN114245093B (zh) 2022-02-25 2022-02-25 基于红外和热感的投影操作方法、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210174490.1A CN114245093B (zh) 2022-02-25 2022-02-25 基于红外和热感的投影操作方法、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN114245093A CN114245093A (zh) 2022-03-25
CN114245093B true CN114245093B (zh) 2022-05-24

Family

ID=80748164

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210174490.1A Active CN114245093B (zh) 2022-02-25 2022-02-25 基于红外和热感的投影操作方法、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN114245093B (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111401243A (zh) * 2018-02-23 2020-07-10 深圳市汇顶科技股份有限公司 光学传感器模块及其电子设备

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102012740B (zh) * 2010-11-15 2015-10-21 中国科学院深圳先进技术研究院 人机交互方法及系统
US10126820B1 (en) * 2012-11-29 2018-11-13 Amazon Technologies, Inc. Open and closed hand detection
CN104536575A (zh) * 2015-01-04 2015-04-22 苏州易乐展示系统工程有限公司 一种基于3d传感的大屏互动系统实现方法
CN104656902A (zh) * 2015-02-26 2015-05-27 华南理工大学 基于Android的视觉处理人机交互投影方法及系统
CN108491070B (zh) * 2018-03-02 2021-08-17 歌尔股份有限公司 基于桌面投影的交互设备及交互方法
JP7294350B2 (ja) * 2018-11-01 2023-06-20 ソニーグループ株式会社 情報処理装置、情報処理方法、およびプログラム
CN109656372B (zh) * 2018-12-28 2024-06-18 河南宏昌科技有限公司 基于红外不可见结构光的人机交互装置及其操作方法
US11852963B2 (en) * 2020-04-24 2023-12-26 Kohler Co. Systems and methods for controlling a plumbing fixture, smart mirror, and the like using projected images
CN111258411B (zh) * 2020-05-06 2020-08-14 北京深光科技有限公司 一种用户交互方法及设备
CN113721769A (zh) * 2021-08-31 2021-11-30 歌尔科技有限公司 一种投影干扰检测方法、装置、设备及存储介质

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111401243A (zh) * 2018-02-23 2020-07-10 深圳市汇顶科技股份有限公司 光学传感器模块及其电子设备

Also Published As

Publication number Publication date
CN114245093A (zh) 2022-03-25

Similar Documents

Publication Publication Date Title
US20210026516A1 (en) Dynamic user interactions for display control and measuring degree of completeness of user gestures
EP2891950B1 (en) Human-to-computer natural three-dimensional hand gesture based navigation method
US8515128B1 (en) Hover detection
US9459694B2 (en) Cursor movement device
JP5991041B2 (ja) 仮想タッチスクリーンシステム及び双方向モード自動切換方法
KR102347248B1 (ko) 터치 제스쳐 인식 방법 및 장치
RU2608462C2 (ru) Обработка пользовательской входной информации с отслеживанием глаз
JPWO2012147960A1 (ja) 情報処理装置、情報処理方法及びプログラム
US20150169134A1 (en) Methods circuits apparatuses systems and associated computer executable code for providing projection based human machine interfaces
EP3379482A1 (en) Information processing device calculating statistical information
WO2022002151A1 (zh) 一种移动目标行为分析的实现方法、装置及电子设备
CN106557209B (zh) 红外触摸屏触控信号的处理方法、装置及终端设备
KR101071864B1 (ko) 터치 및 터치 제스처 인식 시스템
CN114245093B (zh) 基于红外和热感的投影操作方法、电子设备及存储介质
CN115793893B (zh) 触摸书写笔迹生成方法、装置、电子设备及存储介质
CN108921129B (zh) 图像处理方法、系统、介质和电子设备
CN102799344B (zh) 虚拟触摸屏系统以及方法
JP6402611B2 (ja) 入力制御方法、入力制御プログラム、及び情報処理装置
JP5790257B2 (ja) 文字入力装置,文字入力プログラムおよび文字入力方法
KR20160099267A (ko) 3차원 애니메이션 컨텐츠 저작 장치 및 그 방법
KR20140140482A (ko) 오브젝트의 움직임을 이용하여 사용자 입력을 처리하는 장치 및 방법
CN107526482B (zh) 控制屏幕显示内容移动/切换的触控的系统
KR20190049349A (ko) 프로젝션 영상에서 사용자의 터치를 인식하는 방법 및 이러한 방법을 수행하는 장치
CN115658544B (zh) 一种基于模拟点击的测试方法
CN115877989A (zh) 触控识别方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant