CN112015286B - 用于交互投影的方法、装置和投影系统 - Google Patents

用于交互投影的方法、装置和投影系统 Download PDF

Info

Publication number
CN112015286B
CN112015286B CN202010757614.XA CN202010757614A CN112015286B CN 112015286 B CN112015286 B CN 112015286B CN 202010757614 A CN202010757614 A CN 202010757614A CN 112015286 B CN112015286 B CN 112015286B
Authority
CN
China
Prior art keywords
laser pen
image data
continuous image
obtaining
state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010757614.XA
Other languages
English (en)
Other versions
CN112015286A (zh
Inventor
王守峰
王建强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Haier Technology Co Ltd
Original Assignee
Qingdao Haier Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Haier Technology Co Ltd filed Critical Qingdao Haier Technology Co Ltd
Priority to CN202010757614.XA priority Critical patent/CN112015286B/zh
Publication of CN112015286A publication Critical patent/CN112015286A/zh
Application granted granted Critical
Publication of CN112015286B publication Critical patent/CN112015286B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G06F3/0386Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry for light pen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本申请涉及投影设备技术领域,公开一种用于交互投影的方法。该用于交互投影的方法包括:在确定满足预设条件的情况下,获得激光笔的切换动作,获得投影区域的第一连续图像数据,识别第一连续图像数据中的特定标识,获得识别结果,匹配出与切换动作和识别结果相对应的控制操作。采用该用于交互投影的方法可降低多项控制操作的交互投影技术的应用成本。本申请还公开一种用于交互投影的装置和投影系统。

Description

用于交互投影的方法、装置和投影系统
技术领域
本申请涉及投影设备技术领域,例如涉及一种用于交互投影的方法、装置和投影系统。
背景技术
目前,投影仪的应用场景越来越普及,可用于会议展示、教师教学、家用影院等。为了使用户具有更好的使用体验,对投影仪进行改进,使得投影仪可与用户进行交互。
在公告号为CN209199060U的中国专利中,公开了一种交互式投影仪,该交互式投影仪包括投影机和触控笔,投影机用于在平面上投射出投影面,投影机上设置用于捕捉红外光信号的红外摄像头,触控笔上设置有红外发光器件,红外发光器件用于朝向投影面发出红外光信号,并经红外摄像头捕捉而显示在投影面上,该交互式投影仪可实现点击或划线功能,产生互动效果。可见,该专利提供了一种交互式投影仪的硬件结构。
在公开号为CN105657304A的中国专利中,公开了一种控制投影显示的方法,该控制投影显示的方法具体为:智能投影仪在投影面的设定区域实时采集激光笔运动轨迹的图像,智能投影仪对所采集的激光笔运动轨迹的图像进行识别处理,智能投影仪将识别处理结果与预置的各项控制操作对应的图像数据分别进行匹配,若匹配成功,则智能投影仪按照匹配成功的控制操作进行处理。该控制投影仪显示的方法方面演讲者流程的通过激光笔凸显终点以及操作智能投影仪,从而为投影仪的操作带来很大的便利性、智能性。
在实现本公开实施例的过程中,发现相关技术中至少存在如下问题:
控制操作的数量越多,移动轨迹的种类越多,需要图像识别技术具有更高的精度,图像识别过程需要更大的计算量,需要更高性能的硬件支持,这导致多项控制操作的交互投影技术的应用成本较高。
发明内容
为了对披露的实施例的一些方面有基本的理解,下面给出了简单的概括。所述概括不是泛泛评述,也不是要确定关键/重要组成元素或描绘这些实施例的保护范围,而是作为后面的详细说明的序言。
本公开实施例提供了一种用于交互投影的方法、装置和投影系统,以解决多项控制操作的交互投影技术的应用成本较高的技术问题。
在一些实施例中,用于交互投影的方法,包括:在确定满足预设条件的情况下,获得激光笔的切换动作;获得投影区域的第一连续图像数据;识别所述第一连续图像数据中的特定标识,获得识别结果;匹配出与所述切换动作和所述识别结果相对应的控制操作。
可选地,获得激光笔的切换动作,包括:在检测到所述激光笔由触发状态切换至非触发状态的情况下,记录所述激光笔在非触发状态的第一持续时长;在所述第一持续时长小于或等于第一设定时长的情况下,检测到所述激光笔由非触发状态切换至触发状态,记为一个切换操作;其中,所述切换动作包括一个或多个切换操作。
可选地,获得激光笔的切换动作,还包括:在所述切换动作包括两个或多个切换操作的情况下,记录每两个切换操作间的时间间隔。
可选地,识别所述第一连续图像数据中的特定标识,获得识别结果,包括:识别所述第一连续图像数据中多张连续图像中的特定标识;获得所述特定标识的移动轨迹、移动方向和位置中的一个或多个。
可选地,确定满足预设条件,包括:在确定所述激光笔处于工作状态的情况下,获得所述投影区域的第二连续图像数据;识别所述第二连续图像数据中的特定标识,获得特定标识的移动速度;在所述移动速度小于或等于设定速度的情况下,确定满足预设条件。
可选地,识别所述第二连续图像数据中的特定标识,获得特定标识的移动速度,包括:识别所述第二连续图像数据中每张图像中特定标识的位置,计算获得特定标识的移动距离;读取所述第二连续图像数据中每张图像的拍摄时刻,计算获得特定标识的移动时间;计算所述移动距离和所述移动时间的商,获得特定标识的移动速度。
可选地,确定所述激光笔处于工作状态,包括:在检测到所述激光笔由触发状态切换至非触发状态的情况下,记录所述激光笔在非触发状态的第二持续时长;在所述第二持续时长小于或等于第二设定时长的情况下,检测到所述激光笔由非触发状态切换至触发状态,确定所述激光笔处于工作状态。
在一些实施例中,用于交互投影的装置包括第一获得模块、第二获得模块、第一识别模块和匹配模块,其中,所述第一获得模块被配置为在确定满足预设条件的情况下,获得激光笔的切换动作;所述第二获得模块被配置为获得投影区域的第一连续图像数据;所述第一识别模块被配置为识别所述第一连续图像数据中的特定标识,获得识别结果;所述匹配模块被配置为匹配出与所述切换动作和所述识别结果相对应的控制操作。
可选地,所述第一获得模块包括第一记录单元和第二记录单元,其中,第一记录单元被配置为在检测到所述激光笔由触发状态切换至非触发状态的情况下,记录所述激光笔在非触发状态的第一持续时长;第二记录单元被配置为在所述第一持续时长小于或等于第一设定时长的情况下,检测到所述激光笔由非触发状态切换至触发状态,记为一个切换操作,其中,所述切换动作包括一个或多个切换操作。
可选地,所述第一获得模块还包括第三记录单元,其中,所述第三记录单元被配置为在所述切换动作包括两个或多个切换操作的情况下,记录每两个切换操作间的时间间隔。
可选地,所述第一识别模块包括第一识别单元和第一获得单元,其中,所述第一识别单元被配置为识别所述第一连续图像数据中多张连续图像中的特定标识;所述第一获得单元被配置为获得所述特定标识的移动轨迹、移动方向和位置中的一个或多个。
可选地,用于交互投影的装置还包括第三获得模块、第二识别模块和第一确定模块;其中,所述第三获得模块被配置为在确定所述激光笔处于工作状态的情况下,获得所述投影区域的第二连续图像数据;所述第二识别模块被配置为识别所述第二连续图像数据中的特定标识,获得特定标识的移动速度;所述第一确定模块被配置为在所述移动速度小于或等于设定速度的情况下,确定满足预设条件。
可选地,所述第二识别模块包括第二识别单元、第二获得单元和第三获得单元,其中,所述第二识别单元被配置为识别所述第二连续图像数据中每张图像中特定标识的位置,计算获得特定标识的移动距离;所述第二获得单元被配置为读取所述第二连续图像数据中每张图像的拍摄时刻,计算获得特定标识的移动时间;第三获得单元被配置为计算所述移动距离和所述移动时间的商,获得特定标识的移动速度。
可选地,用于交互投影的装置还包括第二确定模块,所述第二确定模块被配置为确定所述激光笔处于工作状态。
可选地,所述第二确定模块包括第四记录单元和确定单元,其中,第四记录单元被配置为在检测到所述激光笔由触发状态切换至非触发状态的情况下,记录所述激光笔在非触发状态的第二持续时长;所述确定单元被配置为在所述第二持续时长小于或等于第二设定时长的情况下,检测到所述激光笔由非触发状态切换至触发状态,确定所述激光笔处于工作状态。
在一些实施例中,用于交互投影的装置包括处理器和存储有程序指令的存储器,所述处理器被配置为在执行所述程序指令时,执行前述实施例提供的用于交互投影的方法。
在一些实施例中,投影系统包括前述实施例提供的用于交互投影的装置。
本公开实施例提供的用于交互投影的方法、装置和投影系统,可以实现以下技术效果:
相比于仅依赖图像识别结果匹配控制操作,结合激光笔的切换动作和投影区域的图像识别结果匹配控制操作,在图像识别精度不变的情况下,可容纳更多数量的控制操作,降低了多项控制操作的交互投影技术对图像识别精度的依赖性,无需更高性能的硬件支持,降低了多项控制操作的交互投影技术的应用成本。
以上的总体描述和下文中的描述仅是示例性和解释性的,不用于限制本申请。
附图说明
一个或一个以上实施例通过与之对应的附图进行示例性说明,这些示例性说明和附图并不构成对实施例的限定,附图中具有相同参考数字标号的元件示为类似的元件,并且其中:
图1是本公开实施提供的一种投影系统的示意图;
图2是本公开实施例提供的一种用于交互投影的方法的示意图;
图3是本公开实施例提供的一种用于获得识别结果的示意图;
图4是本公开实施例提供的一种确定满足预设条件的示意图;
图5是本公开实施例提供的一种获得特定标识的移动速度的示意图;
图6是本公开实施例提供的一种用于交互投影的方法的示意图;
图7是本公开实施例提供的一种用于交互投影的装置的示意图;
图8是本公开实施例提供的一种用于交互投影的装置的示意图。
具体实施方式
为了能够更加详尽地了解本公开实施例的特点与技术内容,下面结合附图对本公开实施例的实现进行详细阐述,所附附图仅供参考说明之用,并非用来限定本公开实施例。在以下的技术描述中,为方便解释起见,通过多个细节以提供对所披露实施例的充分理解。然而,在没有这些细节的情况下,一个或一个以上实施例仍然可以实施。在其它情况下,为简化附图,熟知的结构和装置可以简化展示。
本公开实施例的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开实施例的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含。
除非另有说明,术语“多个”表示两个或两个以上。
图1是本公开实施提供的一种投影系统的示意图。结合图1所示,该投影系统包括投影仪11和激光笔12。投影仪11可在墙面或幕布13上投影成像,投影仪上设置有摄像装置14,用于捕捉投影区域15的图像数据。激光笔12上设置有触发装置和激光发射装置,在触发装置被触发时,激光发射装置发射激光。
激光笔与控制器通信连接,在激光笔的触发装置被触发时,激光笔向控制器发送触发信号;在激光笔的触发装置恢复原状时,激光笔向控制器发送非触发信号。例如,以高电平表示触发信号,以低电平表示非触发信号:在触发装置被触发时,激光笔向控制器发送高电平信号;在触发装置恢复原状时,激光笔向控制器发送低电平信号。这样,控制器即可实时获得激光笔的状态。
其中,上述控制器可以是投影仪的控制器,可以是独立于投影仪的外置控制器,还可以是一台服务器。
图2是本公开实施例提供的一种用于交互投影的方法的示意图。结合图2所示,用于交互投影的方法包括:
S201、在确定满足预设条件的情况下,获得激光笔的切换动作。
其中,切换动作包括激光笔由触发状态切换至非触发状态,和,激光笔由非触发状态切换至触发状态。在本公开实施例中,术语“触发状态”,指的是激光笔正在发射激光;术语“非触发状态”指的是激光笔未发射激光。
控制器接收激光笔发送的信号,即可获得激光笔的状态,其中,激光笔的状态包括触发状态和非触发状态。例如,以高电平表示触发信号,以低电平表示非触发信号,在控制器接收到高电平时,表示控制器获得的激光笔的状态为触发状态;在控制器接收到低电平时,表示控制器获得的激光笔的状态为非触发状态。
在控制器接收到激光笔的信号由触发信号切换为非触发信号,再由非触发信号切换为触发信号的情况下,说明控制器获得了激光笔的切换动作。
可选地,获得激光笔的切换动作,包括:在检测到激光笔由触发状态切换至非触发状态的情况下,记录激光笔在非触发状态的第一持续时长,在第一持续时长小于或等于第一设定时长的情况下,检测到激光笔由非触发状态切换至触发状态,记为一个切换操作,其中,切换动作包括一个或多个切换操作;在第一持续时长大于或等于第一设定时长的情况下,结束流程,重新执行本方法。
在一些具体应用中,记录激光笔由触发状态切换为非触发状态的时刻,记为第一时刻,此时激光笔处于非触发状态,在激光笔由非触发状态切换至触发状态之前,记录当前时刻并计算当前时刻与第一时刻的差值,即可获得第一持续时长。
可选地,第一设定时长为0.1s~1.5s。例如,第一设定时长为0.1s、0.2s、0.3s、0.5s、1s或1.5s。
在实际应用中,在切换动作中包括一个切换操作时,记为单击动作;在切换动作包括两个切换操作时,记为双击动作。
可选地,获得激光笔的切换动作,还包括:在切换动作包括两个或多个切换操作的情况下,记录每两个切换操作间的时间间隔。不同的时间间隔,对应着不同的切换动作,进一步增加了切换动作的数量,在图像识别的精度不变的情况下,即,在识别结果的种类不变的情况下,进一步地提高了交互投影技术中控制操作的数量。
在实际应用中,在切换动作包括两个切换操作的情况下,第一切换动作中两个切换操作的时间间隔为第一时长,第二切换动作中两个切换操作的时间间隔为第二时长,并且,第一时长和第二时长不相同,则第一切换动作和第二切换动作为两个不同的切换动作。
在本公开实施例中,获得激光笔的切换动作的步骤具有两个作用:一方面为匹配控制操作做准备;另一方面,是获得投影区域的第一连续图像数据的先决条件,即,只有在获得了切换动作的基础上,再获得并识别投影区域的第一连续图像数据,避免获得并识别无效的图像数据,降低控制器中的负载。其中,无效的图像数据指的是不包括特定标识的图像数据。
可选地,在切换动作包括两个或多个切换操作的情况下,获得激光笔的切换动作,还包括:在获得一个切换操作后,在特定时长内未获得另一个切换操作,以已获得的切换操作,或,切换操作和每两个切换操作之间的时间间隔,作为切换动作。
例如,在获得切换动作的过程中,已经获得了两个切换操作,该两个切换操作间的时间间隔为第一时间间隔,在获得第二个切换操作后,持续特定时长内未获得第三个切换操作,则以该两个切换操作和第一时间间隔作为切换动作。
在未获得激光笔的切换动作的情况下,重复执行:在确定满足预设条件的情况下,获得激光笔的切换动作。即,在重复获得激光笔的切换动作的过程中,若不满足预设条件,则不再重复获得激光笔的切换动作。
S202、获得投影区域的第一连续图像数据。
通过投影仪上的摄像装置获得投影区域的第一连续图像数据。在本用于交互投影的方法由投影仪的控制器执行的情况下,摄像装置将第一连续图像数据传输至投影仪的控制器;在本用于交互投影的方法由独立于投影仪的外置控制器执行的情况下,摄像装置将第一连续图像数据发送至外置控制器;在本用于交互投影的方法由服务器执行的情况下,摄像装置将第一连续图像数据发送至服务器。
可选地,获得投影区域的第一连续图像数据,包括:获得多张连续图像和每张图像的拍摄时间。
S203、识别第一连续图像数据中的特定标识,获得识别结果。
其中,特定标识为激光笔处于触发状态时标记的。例如,激光笔在被触发后,发射红色激光,则特定标识为红点标记;激光笔在被触发后,发射绿色激光,则特定标识为绿点标记。
利用图像识别技术识别第一连续图像数据中的特定标识,包括对第一连续图像数据进行变换处理、增强处理、滤波处理、二值化处理、特征抽取处理、特征分类处理等,进而获得特定标识的识别结果。
识别结果为第一连续图像数据中特定标识的位置以及位置变化情况。第一连续图像数据中包括多张连续图像,特定标识的位置指的是特定标识在每张图像中的位置;在多张连续图像中,每张图像中特定标识的位置不同,按照多张图像的顺序,依次连接每张图像中特定标识的位置,即可获得特定标识的位置变化情况下,其中,特定标识的位置变化情况包括特定标识的移动轨迹和移动方向中的一个或多个。
S204、匹配出与切换动作和识别结果相对应的控制操作。
其中,控制操作包括但不限于:划线操作、确认操作、缩放操作、前进操作、后退操作、返回主菜单操作和关机操作。
相比于仅依赖图像识别结果匹配控制操作,结合激光笔的切换动作和投影区域的图像识别结果匹配控制操作,在图像识别精度不变的情况下,可容纳更多数量的控制操作,降低了多项控制操作的交互投影技术对图像识别精度的依赖性,无需更高性能的硬件支持,降低了多项控制操作的交互投影技术的应用成本。
另外,在现有交互投影技术中,往往通过图像识别技术识别出控制操作,为了不遗漏地获得全部控制操作,需要实时获得并识别图像数据,这提高了控制器的负载。在本技术方案中,无需实时获得并实时图像数据,降低了控制器的负载,降低了对控制器硬件性能的要求。
本公开实施例中提供的用于交互投影的方法,可由投影仪的控制器执行,也可由独立于投影仪的外置控制器执行,还可以有一台服务器执行。在投影仪的控制器匹配出控制操作后,由投影仪的控制器执行控制操作;在外置控制器或服务器匹配出控制操作后,外置控制器或服务器将控制操作发送至投影仪的控制器,由投影仪执行控制操作。
图3是本公开实施例提供的一种用于获得识别结果的示意图。结合图3所示,识别第一连续图像数据中的特定标识,获得识别结果,包括:
S301、识别第一连续图像数据中多张连续图像中的特定标识。
这里的连续图像,指的是按照时间顺序依次排列的多张图像,例如,一张图像的拍摄时刻越晚,则该一张图像的顺序越靠后。
S302、获得特定标识的移动轨迹、移动方向和位置中的一个或多个。
每识别一张图像中的特定标识,即可获得特定标识在该一张图像中的位置。依次识别多张连续图像中的特定标识,可获得多个连续的特定标识的位置,多个连续的特定标识的位置可组成移动轨迹;按照时间的先后顺序连接多个连续的特定标识,可获得特定标识的移动方向。
通过上述步骤即可获得识别结果,便于进一步地结合切换动作与识别结果,匹配出控制操作。
在一些实际应用中,单击动作+特定标识的位置对应缩小操作,双击动作+特定标识的位置对应:放大操作,单击动作+特定标识的移动轨迹+特定标识横向移动对应:划线操作,双击动作+特定标识的移动轨迹+特定标识横向移动对应:擦除划线操作,单击动作+向上移动对应:显示上一项内容(后退操作),单击动作+向下移动对应:显示下一项内容(前进操作),双击动作+向上移动对应:返回主菜单操作,双击动作+向下移动对应:显示最后的内容。
在一些实际应用中,在控制操作为划线操作的情况下,实时获得特定标识的移动轨迹,并将该移动轨迹发送至投影仪,投影仪实时向投影区域投射该移动轨迹。
图4是本公开实施例提供的一种确定满足预设条件的示意图。结合图4所示,确定满足预设条件,包括:
S401、在确定激光笔处于工作状态的情况下,获得投影区域的第二连续图像数据。
激光笔处于工作状态,表示用户此时正在使用该激光笔,例如,用户按住激光笔的触发装置,使触发装置处于触发状态,激光笔向控制器发送触发信号(例如高电平),控制器接收到该触发信号,即可确定激光笔处于工作状态;或者,用户在单击或双击激光笔的触发装置,触发装置在触发状态和非触发状态反复切换,激光笔向控制器发送反复切换的信号(例如反复切换高低电平信号),控制器在检测到激光笔由触发状态切换至非触发状态的情况下,记录激光笔在非触发状态的第二持续时长,在第二持续时长小于或等于第二设定时长的情况下,检测到激光笔由非触发状态切换至触发状态,确定激光笔处于工作状态;在第二持续时长大于第二设定时长的情况下,确定激光笔处于非工作状态。
通过摄像装置获得第二连续图像数据。本用于交互投影的方法由投影仪的控制器执行的情况下,摄像装置将第二连续图像数据传输至投影仪的控制器;在本用于交互投影的方法由独立于投影仪的外置控制器执行的情况下,摄像装置将第二连续图像数据发送至外置控制器;在本用于交互投影的方法由服务器执行的情况下,摄像装置将第二连续图像数据发送至服务器。
可选地,获得投影区域的第二连续图像数据,包括:获得多张连续图像和每张图像的拍摄时间。
在本公开实施例中,激光笔处于工作状态,说明用户正在使用激光笔。在确定激光笔处于工作状态的情况下,再获得投影区域的第二连续图像数据,可确保只有在用户使用激光笔的情况下,再获得投影区域的第二连续图像数据,无需实时获得并识别投影区域的第二连续图像数据,降低了控制器的负载,降低了本用于交互投影的方法对控制器硬件性能的要求,降低了本用于交互投影的方法的应用成本。
S402、识别第二连续图像数据中的特定标识,获得特定标识的移动速度。
利用图像识别技术识别第二连续图像数据中的特定标识,包括对第二连续图像数据进行变换处理、增强处理、滤波处理、二值化处理、特征抽取处理、特征分类处理等,进而获得特定标识的位置,再结合每张图像的拍摄时间,或者特定标识的移动速度。
S403、在移动速度小于或等于设定速度的情况下,确定满足预设条件。
在实际应用中,特定标识的移动速度大于设定速度,表明此时用户在寻找投影图像上的目标;特定标识的移动速度小于或等于设定速度,表明此时用户已经在投影图像上寻找到需要目标,之后需要对目标进行相关操作,例如划线操作、确认操作、缩放操作等。通过上述步骤确定满足预设条件,之后再结合切换动作和第一连续图像数据的识别结果匹配控制操作,可更智能化,更符合用户需求,使用户具有较佳的使用体验。
图5是本公开实施例提供的一种获得特定标识的移动速度的示意图。结合图5所示,识别第二连续图像数据中的特定标识,获得特定标识的移动速度,包括:
S501、识别每张图像中特定标识的位置,计算获得特定标识的移动距离。
例如,识别第一图像中的特定标识的位置,记为第一位置;再识别第二图像中的特定标识的位置,记为第二位置;计算第一位置和第二位置的距离,获得移动距离。
其中,第一图像和第二图像可以是拍摄时刻上相邻的两张图像,还可以是拍摄时刻上不相邻的两张图像。例如,第二连续图像数据中包括图像1、图像2、图像3、图像4和图像5,按拍摄时间由先至后的排序为:图像1、图像2、图像3、图像4和图像5,则图像1和图像2、图像2和图像3、图像3和图像4、图像4和图像5分别为拍摄时刻上相邻的两张图像;图像1和图像3、图像1和图像4、图像1和图像5、图像2和图像4、图像2和图像5、图像3和图像5分别为拍摄时刻上不相邻的两张图像。
可选地,识别拍摄时刻最晚的两张图像中特定标识的位置,计算获得特定标识的移动距离。以便于计算出特定标识的实时速度。
例如,第一图像和第二图像是最后拍摄时刻最晚的两张图像。在第二连续图像数据中包括图像1、图像2、图像3、图像4和图像5,按拍摄时间由先至后的排序为:图像1、图像2、图像3、图像4和图像5的情况下,第一图像为图像4,第二图像为图像5。
S502、读取每张图像的拍摄时刻,计算获得特定标识的移动时间。
例如,读取第一图像的拍摄时刻,记为第二时刻;读取第二图像的拍摄时刻,记为第三时刻,那么,特定标识由第一图像中的第一位置移动至第二图像中的第二位置,对应的移动时间为第三时刻与第二时刻的差值。
可选地,读取拍摄时刻最晚的两张图像的拍摄时刻,计算获得特定标识的移动时间。以便于计算出特定标识的实时速度。
例如,在第二连续图像数据中包括图像1、图像2、图像3、图像4和图像5,按拍摄时间由先至后的排序为:图像1、图像2、图像3、图像4和图像5的情况下,读取图像4和图像5的拍摄时刻,计算图像5的拍摄时刻与图像4的拍摄时刻的差值,获得特定标识的移动时间。
S503、计算移动距离和移动时间的商,获得特定标识的移动速度。
通过上述步骤获得的特定标识的移动速度,可以是特定标识的实时速度,也可以是特定标识的平均速度:在第一图像和第二图像是拍摄时刻上相邻的两张图像的情况下,获得的特定标识的移动速度是实时速度;在第一图像和第二图像是拍摄时刻上不相邻的两张图像的情况下,获得的特定标识的移动速度是平均速度。
通过上述步骤即可获得特定标识的移动速度,便于后续判断特定标识的移动速度是否小于或等于移动速度,从而判断出是否满足预设条件。
图6是本公开实施例提供的一种用于交互投影的方法的示意图。结合图6所示,该用于交互投影的方法包括:
S601、判断激光笔是否处于工作状态:若是,执行S602;否则重复执行S601;
S602、获得投影区域的第二连续图像数据。
S603、识别第二连续图像数据中的特定标识,获得特定标识的移动速度。
S604、判断移动速度是否小于或等于设定速度:若是,执行S605;否则重复执行S601;
S605、获得激光笔的切换动作;
S606、判断是否成功获得激光笔的切换动作:若是,执行S607;否则执行S601。
其中,成功获得激光笔的切换动作,指的是已经获得一个或多个切换操作。
S607、获得投影区域的第一连续图像数据;
S608、识别第一连续图像数据中的特定标识,获得识别结果;
S609、匹配出与切换动作和识别结果相对应的控制操作。
图7是本公开实施例提供的一种用于交互投影的装置的示意图。结合图7所示,用于交互投影的装置包括第一获得模块71、第二获得模块72、第一识别模块73和匹配模块74,其中,第一获得模块71被配置为在确定满足预设条件的情况下,获得激光笔的切换动作;第二获得模块72被配置为获得投影区域的第一连续图像数据;第一识别模块73被配置为识别第一连续图像数据中的特定标识,获得识别结果;匹配模块74被配置为匹配出与切换动作和识别结果相对应的控制操作。
可选地,第一获得模块包括第一记录单元和第二记录单元,其中,第一记录单元被配置为在检测到激光笔由触发状态切换至非触发状态的情况下,记录激光笔在非触发状态的第一持续时长;第二记录单元被配置为在第一持续时长小于或等于第一设定时长的情况下,检测到激光笔由非触发状态切换至触发状态,记为一个切换操作,切换动作包括一个或多个切换操作。
可选地,第一获得模块还包括第三记录单元,其中,第三记录单元被配置为在切换动作包括两个或多个切换操作的情况下,记录每两个切换操作间的时间间隔。
可选地,第一识别模块包括第一识别单元和第一获得单元,其中,第一识别单元被配置为识别第一连续图像数据中多张连续图像中的特定标识;第一获得单元被配置为获得特定标识的移动轨迹、移动方向和位置中的一个或多个。
可选地,用于交互投影的装置还包括第三获得模块、第二识别模块和第一确定模块;其中,第三获得模块被配置为在确定激光笔处于工作状态的情况下,获得投影区域的第二连续图像数据;第二识别模块被配置为识别第二连续图像数据中的特定标识,获得特定标识的移动速度;第一确定模块被配置为在移动速度小于或等于设定速度的情况下,确定满足预设条件。
可选地,第二识别模块包括第二识别单元、第二获得单元和第三获得单元,其中,第二识别单元被配置为识别第二连续图像数据中每张图像中特定标识的位置,计算获得特定标识的移动距离;第二获得单元被配置为读取第二连续图像数据中每张图像的拍摄时刻,计算获得特定标识的移动时间;第三获得单元被配置为计算移动距离和移动时间的商,获得特定标识的移动速度。
可选地,用于交互投影的装置还包括第二确定模块,第二确定模块被配置为确定激光笔处于工作状态。
可选地,第二确定模块包括第四记录单元和确定单元,其中,第四记录单元被配置为在检测到激光笔由触发状态切换至非触发状态的情况下,记录激光笔在非触发状态的第二持续时长;确定单元被配置为在第二持续时长小于或等于第二设定时长的情况下,检测到激光笔由非触发状态切换至触发状态,确定激光笔处于工作状态。
在一些实施例中,用于交互投影的装置包括处理器和存储有程序指令的存储器,处理器被配置为在执行程序指令时,执行前述实施例提供的用于交互投影的方法。
图8是本公开实施例提供的一种用于交互投影的装置的示意图。结合图8所示,用于交互投影的装置包括:
处理器(processor)81和存储器(memory)82,还可以包括通信接口(Communication Interface)83和总线84。其中,处理器81、通信接口83、存储器82可以通过总线84完成相互间的通信。通信接口83可以用于信息传输。处理器81可以调用存储器82中的逻辑指令,以执行前述实施例提供的用于交互投影的方法。
此外,上述的存储器82中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。
存储器82作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序,如本公开实施例中的方法对应的程序指令/模块。处理器81通过运行存储在存储器82中的软件程序、指令以及模块,从而执行功能应用以及数据处理,即实现上述方法实施例中的方法。
存储器82可包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端设备的使用所创建的数据等。此外,存储器82可以包括高速随机存取存储器,还可以包括非易失性存储器。
本公开实施例提供了一种投影系统,包含前述实施例提供的用于交互投影的装置。
本公开实施例提供了一种计算机可读存储介质,存储有计算机可执行指令,计算机可执行指令设置为执行前述实施例提供的用于交互投影的方法。
本公开实施例提供了一种计算机程序产品,计算机程序产品包括存储在计算机可读存储介质上的计算机程序,计算机程序包括程序指令,当程序指令被计算机执行时,使计算机执行前述实施例提供的用于交互投影的方法。
上述的计算机可读存储介质可以是暂态计算机可读存储介质,也可以是非暂态计算机可读存储介质。
本公开实施例的技术方案可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括一个或一个以上指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开实施例中方法的全部或部分步骤。而前述的存储介质可以是非暂态存储介质,包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机读取存储器(Random Access Memory,RAM)、磁碟或者光盘等多种可以存储程序代码的介质,也可以是暂态存储介质。
以上描述和附图充分地示出了本公开的实施例,以使本领域的技术人员能够实践它们。其他实施例可以包括结构的、逻辑的、电气的、过程的以及其他的改变。实施例仅代表可能的变化。除非明确要求,否则单独的部件和功能是可选的,并且操作的顺序可以变化。一些实施例的部分和特征可以被包括在或替换其他实施例的部分和特征。而且,本申请中使用的用词仅用于描述实施例并且不用于限制权利要求。如在实施例以及权利要求的描述中使用的,除非上下文清楚地表明,否则单数形式的“一个”(a)、“一个”(an)和“所述”(the)旨在同样包括复数形式。另外,当用于本申请中时,术语“包括”(comprise)及其变型“包括”(comprises)和/或包括(comprising)等指陈述的特征、整体、步骤、操作、元素,和/或组件的存在,但不排除一个或一个以上其它特征、整体、步骤、操作、元素、组件和/或这些的分组的存在或添加。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法或者设备中还存在另外的相同要素。本文中,每个实施例重点说明的可以是与其他实施例的不同之处,各个实施例之间相同相似部分可以互相参见。对于实施例公开的方法、产品等而言,如果其与实施例公开的方法部分相对应,那么相关之处可以参见方法部分的描述。
本领域技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,可以取决于技术方案的特定应用和设计约束条件。技术人员可以对每个特定的应用来使用不同方法以实现所描述的功能,但是这种实现不应认为超出本公开实施例的范围。技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本文所披露的实施例中,所揭露的方法、产品(包括但不限于装置、设备等),可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,单元的划分,可以仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例。另外,在本公开实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
附图中的流程图和框图显示了根据本公开实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,模块、程序段或代码的一部分包含一个或一个以上用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这可以依所涉及的功能而定。框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。

Claims (8)

1.一种用于交互投影的方法,其特征在于,包括:
在确定激光笔处于工作状态的情况下,获得投影区域的第二连续图像数据;
识别第二连续图像数据中的特定标识,获得特定标识的移动速度;其中,特定标识为所述激光笔处于触发状态时在投影区域形成的点标记;
在所述移动速度小于或等于设定速度的情况下,确定满足预设条件;
在确定满足预设条件的情况下,获得激光笔的切换动作;在检测到所述激光笔由触发状态切换至非触发状态的情况下,记录所述激光笔在非触发状态的第一持续时长;在所述第一持续时长小于或等于第一设定时长的情况下,检测到所述激光笔由非触发状态切换至触发状态,记为一个切换操作;其中,所述切换动作包括一个或多个切换操作;
获得投影区域的第一连续图像数据;
识别所述第一连续图像数据中的特定标识,获得识别结果;
匹配出与所述切换动作和所述识别结果相对应的控制操作。
2.根据权利要求1所述的方法,其特征在于,获得激光笔的切换动作,还包括:
在所述切换动作包括两个或多个切换操作的情况下,记录每两个切换操作间的时间间隔。
3.根据权利要求1所述的方法,其特征在于,识别所述第一连续图像数据中的特定标识,获得识别结果,包括:
识别所述第一连续图像数据中多张连续图像中的特定标识;
获得所述特定标识的移动轨迹、移动方向和位置中的一个或多个。
4.根据权利要求1所述的方法,其特征在于,识别所述第二连续图像数据中的特定标识,获得特定标识的移动速度,包括:
识别所述第二连续图像数据中每张图像中特定标识的位置,计算获得特定标识的移动距离;
读取所述第二连续图像数据中每张图像的拍摄时刻,计算获得特定标识的移动时间;
计算所述移动距离和所述移动时间的商,获得特定标识的移动速度。
5.根据权利要求1所述的方法,其特征在于,确定所述激光笔处于工作状态,包括:
在检测到所述激光笔由触发状态切换至非触发状态的情况下,记录所述激光笔在非触发状态的第二持续时长;
在所述第二持续时长小于或等于第二设定时长的情况下,检测到所述激光笔由非触发状态切换至触发状态,确定所述激光笔处于工作状态。
6.一种用于交互投影的装置,其特征在于,包括:
第三获得模块,被配置为在确定激光笔处于工作状态的情况下,获得投影区域的第二连续图像数据;
第二识别模块,被配置为识别第二连续图像数据中的特定标识,获得特定标识的移动速度;其中,特定标识为所述激光笔处于触发状态时在投影区域形成的点标记;
第一确定模块,被配置为在所述移动速度小于或等于设定速度的情况下,确定满足预设条件;
第一获得模块,被配置为在确定满足预设条件的情况下,获得激光笔的切换动作;
第二获得模块,被配置为获得投影区域的第一连续图像数据;
第一识别模块,被配置为识别所述第一连续图像数据中的特定标识,获得识别结果;
匹配模块,被配置为匹配出与所述切换动作和所述识别结果相对应的控制操作;
所述第一获得模块包括第一记录单元和第二记录单元;所述第一记录单元被配置为在检测到所述激光笔由触发状态切换至非触发状态的情况下,记录所述激光笔在非触发状态的第一持续时长;所述第二记录单元被配置为在所述第一持续时长小于或等于第一设定时长的情况下,检测到所述激光笔由非触发状态切换至触发状态,记为一个切换操作;所述切换动作包括一个或多个切换操作。
7.一种用于交互投影的装置,包括处理器和存储有程序指令的存储器,其特征在于,所述处理器被配置为在执行所述程序指令时,执行如权利要求1至5任一项所述的用于交互投影的方法。
8.一种投影系统,其特征在于,包括如权利要求6或7所述的用于交互投影的装置。
CN202010757614.XA 2020-07-31 2020-07-31 用于交互投影的方法、装置和投影系统 Active CN112015286B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010757614.XA CN112015286B (zh) 2020-07-31 2020-07-31 用于交互投影的方法、装置和投影系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010757614.XA CN112015286B (zh) 2020-07-31 2020-07-31 用于交互投影的方法、装置和投影系统

Publications (2)

Publication Number Publication Date
CN112015286A CN112015286A (zh) 2020-12-01
CN112015286B true CN112015286B (zh) 2023-06-09

Family

ID=73498774

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010757614.XA Active CN112015286B (zh) 2020-07-31 2020-07-31 用于交互投影的方法、装置和投影系统

Country Status (1)

Country Link
CN (1) CN112015286B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015013937A1 (zh) * 2013-07-31 2015-02-05 神画科技(深圳)有限公司 一种带互动功能的显示系统
CN104615283A (zh) * 2015-01-30 2015-05-13 大连理工大学 一种激光笔交互方法
CN204537102U (zh) * 2015-05-04 2015-08-05 湖北世安科技有限公司 触控式光电一体化智能教学系统
CN106031163A (zh) * 2014-11-12 2016-10-12 中兴通讯股份有限公司 一种控制投影显示的方法及装置
CN108089732A (zh) * 2017-12-18 2018-05-29 上海青橙实业有限公司 演示用电容笔及投影手机
CN109782962A (zh) * 2018-12-11 2019-05-21 中国科学院深圳先进技术研究院 一种投影交互方法、装置、系统及终端设备
CN110297556A (zh) * 2019-07-02 2019-10-01 沈阳理工大学 一种基于图像识别技术的电子投影画板系统及其处理方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201349029A (zh) * 2012-05-21 2013-12-01 Everest Display Inc 具光點辨識之互動投影系統以及控制方法
US20170357336A1 (en) * 2016-06-08 2017-12-14 Evan McNeil Remote computer mouse by camera and laser pointer

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015013937A1 (zh) * 2013-07-31 2015-02-05 神画科技(深圳)有限公司 一种带互动功能的显示系统
CN106031163A (zh) * 2014-11-12 2016-10-12 中兴通讯股份有限公司 一种控制投影显示的方法及装置
CN104615283A (zh) * 2015-01-30 2015-05-13 大连理工大学 一种激光笔交互方法
CN204537102U (zh) * 2015-05-04 2015-08-05 湖北世安科技有限公司 触控式光电一体化智能教学系统
CN108089732A (zh) * 2017-12-18 2018-05-29 上海青橙实业有限公司 演示用电容笔及投影手机
CN109782962A (zh) * 2018-12-11 2019-05-21 中国科学院深圳先进技术研究院 一种投影交互方法、装置、系统及终端设备
CN110297556A (zh) * 2019-07-02 2019-10-01 沈阳理工大学 一种基于图像识别技术的电子投影画板系统及其处理方法

Also Published As

Publication number Publication date
CN112015286A (zh) 2020-12-01

Similar Documents

Publication Publication Date Title
US9911231B2 (en) Method and computing device for providing augmented reality
US10223595B2 (en) Methods, devices and computer programs for tracking targets using independent tracking modules associated with cameras
CA3061084C (en) Alias capture to support searching for an object-of-interest
CN109727275B (zh) 目标检测方法、装置、系统和计算机可读存储介质
TWI466065B (zh) 偵測裝置及偵測方法
US20210329175A1 (en) Image processing system, image processing method, and program
CN111954055B (zh) 视频特效的展示方法、装置、电子设备及存储介质
US11087137B2 (en) Methods and systems for identification and augmentation of video content
KR20140137893A (ko) 객체 추적 방법 및 장치
CN106407977B (zh) 目标内容的定位搜索的方法和装置
CN103197774A (zh) 一种为发射光源的运动轨迹映射其应用轨迹的方法与系统
CN103955494A (zh) 目标对象的搜索方法、装置及终端
CN111611871B (zh) 图像识别方法、装置、计算机设备和计算机可读存储介质
JP4939292B2 (ja) 認証処理の機能を備えた装置及びその制御方法、プログラム、及び記録媒体
CN112015286B (zh) 用于交互投影的方法、装置和投影系统
CN103201706A (zh) 虚拟鼠标的驱动方法
CN115565241A (zh) 手势识别对象确定方法及装置
JP2009521758A (ja) モーションキャプチャにおけるグループトラッキング
KR102226372B1 (ko) 다수 카메라와 라이다 센서 융합을 통한 객체 추적 시스템 및 방법
JP6659095B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP2002042139A (ja) 映像認識方法および映像表示装置
CN103995638A (zh) 数据处理设备、数据处理系统以及数据处理方法
CN116309721A (zh) 基于多目标跟踪的视频折返识别方法、装置、设备及介质
CN112287846B (zh) 目标人物跟随方法、装置、可移动机器人及可读存储介质
CN115022549A (zh) 拍摄构图方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant