CN116954352A - 一种投影手势的识别方法、智能交互系统及可读存储介质 - Google Patents
一种投影手势的识别方法、智能交互系统及可读存储介质 Download PDFInfo
- Publication number
- CN116954352A CN116954352A CN202210420465.7A CN202210420465A CN116954352A CN 116954352 A CN116954352 A CN 116954352A CN 202210420465 A CN202210420465 A CN 202210420465A CN 116954352 A CN116954352 A CN 116954352A
- Authority
- CN
- China
- Prior art keywords
- projection
- gesture
- page
- projected
- difference information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 56
- 230000003993 interaction Effects 0.000 title abstract description 15
- 230000008859 change Effects 0.000 claims description 13
- 230000033001 locomotion Effects 0.000 claims description 13
- 230000002452 interceptive effect Effects 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 2
- 230000000875 corresponding effect Effects 0.000 description 41
- 238000010586 diagram Methods 0.000 description 17
- 230000001276 controlling effect Effects 0.000 description 11
- 230000008569 process Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 230000018109 developmental process Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000005192 partition Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/107—Static hand or arm
- G06V40/11—Hand-related biometrics; Hand pose recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请公开了一种投影手势的识别方法及智能交互系统、计算机可读存储介质,该方法应用于智能交互系统,所述智能交互系统包括投影设备、图像获取设备和虚拟设备,该识别方法包括:控制所述投影设备调制预设图像并投射形成投影画面;控制所述图像获取设备采集至少两张投影画面;基于所述至少两张投影画面计算所述投影页面的第一差异信息;基于所述第一差异信息识别所述投影手势,得到投影手势对应的操作指令。本申请的投影手势的识别方法能够通过特定的手势识别出对应的操作指令,进而实现简单有效的投影手势识别。
Description
技术领域
本申请涉及人机交互技术领域,更具体地说,涉及一种投影手势的识别方法及、智能交互系统及计算机技术领域。
背景技术
随着科学技术的不断发展和信息技术市场的进一步扩张,投影行业的应用场景也越来越广泛。投影设备可以将任意的平面变成显示平面或者操作平面这一特性,在提供了便利性的同时带来了一定的未来科技感,广受消费者的青睐。伴随着智能手机等各种智能设备的发展,人们对投影设备的人机交互性提出了更高的要求,这也是未来投影仪重要的发展方向之一。
目前,针对投影的人机交互方式主要有触控识别和手势识别两种。这两种交互方式通常需要依赖特殊的传感器或复杂的图像处理算法,导致了投影设备造价昂贵且计算量大。
发明内容
有鉴于此,本申请的目的是提供一种投影手势的识别方法,能够通过特定的手势识别出投影手势对应的操作指令,进而实现简单有效的投影手势识别。
为解决上述技术问题,本申请提供的第一个技术方案为:提供一种投影手势的识别方法,应用于投影交互系统,所述投影交互系统包括投影设备、图像获取设备和虚拟设备,所述识别方法包括:
控制所述投影设备调制预设图像并投射形成投影画面;
控制所述图像获取设备采集至少两张投影画面;
基于所述至少两张投影画面计算投影页面的第一差异信息;
基于所述第一差异信息识别所述投影手势,得到投影手势对应的操作指令。
其中,所述控制所述图像获取设备采集至少两张投影画面的步骤包括:
控制所述图像获取设备从所述投影页面采集第一投影画面和第二投影画面;
所述基于所述至少两张投影画面得到所述投影页面的第一差异信息的步骤包括:
将所述第一投影画面和所述第二投影画面进行比较,以得到所述投影页面的第一差异信息。
所述基于所述第一差异信息识别所述投影手势,得到投影手势对应的操作指令的步骤包括:
基于所述第一差异信息获取所述投影手势对应的操作信息;
基于所述操作信息识别所述投影手势,得到投影手势对应的操作指令。
其中,所述投影页面具有显示内容或/和页面的边框,所述基于所述至少两张投影画面得到所述投影页面的第一差异信息的步骤包括:
将所述第一投影画面的边框和所述第二投影画面的边框进行比较,以获得所述投影页面的形变中心;
基于所述投影页面的形变中心得到所述投影页面的第一差异信息。
其中,所述基于所述第一差异信息获取所述投影手势对应的操作信息的步骤包括:
基于所述投影页面的第一差异信息获取所述投影手势的移动路线;
基于所述投影手势的移动路线获取所述投影手势对应的操作信息。
其中,所述投影页面设有特定的操作页面,所述基于所述至少两张投影画面得到所述投影页面的第一差异的步骤包括:
将所述第一投影画面的特定的操作页面和所述第二投影画面中的特定的操作页面的画面进行比较,得到所述投影页面的第一差异信息。
其中,所述基于所述第一差异信息获取所述投影手势对应的操作信息,包括:
基于所述投影页面的第一差异信息获取所述投影手势轮廓信息;
基于所述投影手势的轮廓信息获取所述投影手势对应的操作信息。
其中,所述投影页面设有按键区域,所述基于所述至少两张投影画面得到所述投影页面的第一差异信息的步骤包括:
将所述第一投影画面中的按键区域的面积和所述第二投影画面中的按键区域的面积进行比较,得到所述投影页面的按键区域的面积变化信息;
基于所述投影页面的按键区域的面积变化信息得到所述投影页面的第一差异信息。
其中,,所述基于所述第一差异信息获取所述投影手势对应的操作信息的步骤包括:
基于所述投影页面的第一差异信息获取所述投影手势在所述投影页面的位置信息;
基于所述投影手势在所述投影页面的位置信息获取所述投影手势对应的操作信息。
为解决上述技术问题,本申请提供的第二个技术方案为:提供一种智能交互系统,所述智能交互系统包括投影设备、图像获取设备和虚拟装置,其中,
所述虚拟装置用于控制所述投影设备投影预先设置的投影页面,控制所述图像获取设备从所述投影页面采集至少两张投影画面;
所述虚拟装置基于所述至少两张投影画面得到所述投影页面的第一差异信息;
所述虚拟装置基于所述第一差异信息获取所述投影手势对应的操作信息;
所述虚拟装置基于所述操作信息识别所述投影手势,得到投影手势对应的操作指令。
为解决上述技术问题,本申请提供的第三个技术方案为:提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一项所述的投影手势的识别方法。
本申请的有益效果是:区别于现有技术的情况,本申请提供一种投影手势的识别方法,能够通过特定的手势识别出对应的操作指令,无需采用复杂的图形处理算法,同时,本申请提供的投影手势识别方法通过采用摄像头进行前后拍摄,无需设置额外投影结构光等复杂装置,实现了简单有效的投影手势识别。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。其中:
图1是本申请提供的投影手势的识别方法第一实施例的流程示意图;
图2是本申请提供的投影交互系统示意图;
图3是本申请提供的投影手势的识别方法第二实施例的流程示意图;
图4是本申请提供的投影手势的识别方法第一工作界面示意图;
图5是本申请提供的投影手势的识别方法第二工作界面示意图;
图6是本申请提供的投影手势的识别方法第三实施例的流程示意图;
图7是本申请提供的投影手势的识别方法第三工作界面示意图;
图8是本申请提供的投影手势的识别方法第四工作界面示意图;
图9是本申请提供的投影手势的识别方法第四实施例的流程示意图;
图10是本申请提供的投影手势的识别方法第五工作界面示意图;
图11是本申请提供的投影手势的识别方法第六工作界面示意图;
图12是本申请提供的投影交互系统的结构示意图;
图13是本申请提供的计算机可读存储介质的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
目前在一些智能表面的应用上,对投影手势的要求并不高,往往仅需要识别几个特定投影手势就足以操控智能表面系统,且无需在智慧表面的操作页面做较多的变动。有鉴于此,本申请的核心是提供一种投影手势的识别方法,能够通过特定的手势识别出对应的操作指令,进而实现简单有效的投影手势识别。
下面结合附图和实施例对本申请进行详细的说明。
请参见图1,图1是本申请提供一种投影手势的识别方法第一实施例的流程示意图。其中,本申请实施例所述的投影手势的识别方法应用于一种智能交互系统,该智能交互系统包括投影设备、图像获取设备和虚拟设备。如图1所示,本申请实施例的投影手势的识别方法的具体步骤如下:
步骤S11:控制投影设备调制预设图像并投射形成投影画面。
步骤S12:控制图像设备采集至少两张投影画面。
如图2所示,图2是本申请提供的智能交互系统示意图。在本申请实施例中,投影设备用于投影带有特定特征的投影画面;图像获取设备用于在投影过程中实时捕获投影画面上方的图像;虚拟装置用于控制投影设备和图像获取设备,具体的,虚拟装置可控制投影设备调制预设图像并投射形成投影画面。,同时虚拟装置还可以控制图像设备获取至少两张投影画面。
需要说明的是,上述投影设备包括但不限于激光投影机、LED投影机、CRT投影机、LCD投影机、DLP投影机、LCOS投影机、传统光源投影机和其它类型的具备投影功能的设备等,此处不作限定;虚拟装置可以为控制器,控制器的具体类型可以为无线遥控设备(如:红外遥控设备、蓝牙遥控设备等)、控制台、网关和其它类型的具备控制功能的设备,此处不作限定,其中虚拟装置可设置在计算机设备中,也可设置在投影机的内部;图像获取设备可设置于投影设备的近处或远处,此处不作限定。进一步的,图像获取设备具体可包括但不限于相机、摄像头、成像仪、扫描仪和其它类型的具备图像获取功能的设备,此处不作限定。
进一步的,本申请对于上述特定特征的投影画面不做限定,例如可以为固定的分区页面边框或整体页面边框、特定的按钮、特定的操作页面等,具体请见后续详述。图像获取设备在投影页面中采集至少两张投影画面,例如可以为两张投影画面,也可以为三张及三张以上投影画面,本申请以图像获取设备在投影页面中采集两张投影画面为例进行说明。
需要说明的是,投影页面指的是投影视图在承载光线的屏幕、墙面或者其它物体所在的操作界面上,如图2所示。
当用户进行投影操作时,可通过投影手势与投影设备的投影页面进行交互,以实现控制投影仪。此时,虚拟装置可控制图像获取设备从投影页面采集第一投影画面和第二投影画面。
可以理解的,第一投影画面可以为用户与投影仪进行交互前的投影页面,也可以为用户通过投影手势与投影设备进行交互时的投影页面;第二投影画面为用户通过投影手势与投影仪进行交互时的投影页面。需要说明的是,第一投影画面在第二投影画面之前产生。
在本申请实施例中,虚拟设备可控制投影设备投影预先设置的投影页面,进而在用户与投影设备的投影页面进行交互操作时,控制图像获取设备从投影页面采集至少两张投影画面。
步骤S13:基于至少两张投影画面得到投影页面的第一差异信息。
在本申请实施例中,当用户与投影设备的投影页面进行交互时,虚拟设备可基于图像获取设备从投影页面中采集的至少两张投影画面得到投影页面的第一差异信息。其中,投影页面的第一差异信息包括但不限于第一投影页面与第二投影页面的形状差异、灰度差异、亮度差异、面积差异或位置差异等,此处不加以限定。
为了更加精确地得到投影页面的第一差异信息,可将图像获取设备采集到的第一投影画面和第二投影画面进行比较,以得到投影页面的第一差异信息。具体的,可以采用将第二投影画面与第一投影画面直接作差的方式,以得到投影页面的第一差异信息。
步骤S13:基于第一差异信息获取投影手势对应的操作信息。
在本申请实施例中,虚拟装置获取到投影页面的第一差异特征后,可基于第一差异信息获取投影手势对应的操作信息。其中,操作信息为虚拟装置获取到的投影手势动作信息,包括但不限于上划、下划、左划、右划、点击等投影手势动作信息,例如若虚拟装置检测到第一差异信息为从下到上的连接关系,则可获取该投影手势对应的操作信息为上划;若虚拟装置检测到第一差异信息为从上到下的连接关系,则可获取该投影手势对应的操作信息为下划;若虚拟装置检测到第一差异信息为从左到右的连接关系,则可获取该投影手势对应的操作信息为右划;若虚拟装置检测到第一差异信息为从大到小或从下到大的差异,则可获取该投影手势对应的操作信息为点击。
在上述实施例的基础上,当投影设备预先设置的投影页面的特定特征为显示内容或/和页面的边框时,虚拟装置可进行如下操作:
步骤S121:将第一投影画面的边框和第二投影画面的边框进行比较,以获得投影页面的形变中心。
如图3、图4、图5所示,图3是本申请提供的投影手势的识别方法第二实施例的流程示意图;图4是本申请提供的投影手势的识别方法第一工作界面示意图;图5是本申请提供的投影手势的识别方法第二工作界面示意图。在本申请实施例中,当投影设备预先设置的投影页面的特定特征为显示内容或/和页面的边框时,虚拟装置可将图像获取设备采集到的第一投影画面的边框第二投影画面的边框进行比较,以获得投影页面的形变中心。
具体的,当用户在与投影仪的投影页面进行交互操作时,用户手部的挥动会引起投影页面固定分区的边框发生形变,虚拟装置可将图像获取设备采集到的第一投影画面的边框和第二投影画面的边框进行比较,通过分析第一投影画面和第二投影画面的形变边框的位置关系,获取到投影页面每一帧的形变边框,也即形变中心。
步骤S122:基于投影页面的形变中心得到投影页面的第一差异信息。
在本申请实施例中,虚拟装置可基于投影页面的形变中心获取到投影页面的第一差异信息。可以理解的,第一差异信息由每一帧的形变边框,也即形变中心构成。
步骤S123:基于投影页面的第一差异信息获取投影手势的移动路线。
在本申请实施例中,虚拟装置可基于投影页面的第一差异信息获取投影手势的移动路线。具体的,虚拟装置可将投影页面的第一差异信息作为投影手势的手部坐标,并通过将每一帧的手部坐标连接起来,进而获取投影手势的移动路线。
步骤S124:基于投影手势的移动路线获取投影手势对应的操作信息。
在本申请实施例中,虚拟装置在获取到投影手势的移动路线后,可基于该移动路线进而获得投影手势的运动轨迹,并通过投影手势的运动的轨迹判断该投影手势对应的操作信息。
需要说明的是,本申请对于投影手势的移动路线不做限定,只要能够引起投影页面的形变即可。
在其它实施例中,如图6、图7、图8所示,图6是本申请提供的投影手势的识别方法第三实施例的流程示意图;图7是本申请提供的投影手势的识别方法第三工作界面示意图;图8是本申请提供的投影手势的识别方法第四工作界面示意图。当投影设备预先设置的投影页面的特征信息为特定的操作页面时,虚拟装置可进行如下操作:
步骤S131:将第一投影画面的特定的操作页面和第二投影画面中的特定的操作页面的画面进行比较,得到投影页面的第一差异信息。
在本申请实施例中,投影设备预设的投影页面的特征信息可以为特定的操作页面。需要说明的是,该特定的操作页面可以为特定的手势识别区域等能够识别用户手势的页面,本申请实施例以特定的手势识别区域进行说明。
当操作页面设置有特定的手势识别区域时,虚拟装置仅需要第一投影画面的手势识别区域和第二投影画面的手势识别区域的差异即可,无需计算操作月面的全部差异,减少了计算的数据量和误差,进而能够精确的得到投影页面的形变特征。
步骤S132:基于投影页面的第一差异信息获取投影手势轮廓信息。
在虚拟装置得到投影页面的形变特征后,可进一步的基于投影页面的形变特征获取投影手势轮廓信息。具体的,虚拟装置可基于投影页面的形变特征,将每一帧图像中的手部轮廓单独分割出来进行投影手势的识别。
优选的,将手势识别区域的页面设置为单色页面,可增加虚拟装置对投影手势轮廓的分割的准确性。
步骤S133:基于投影手势的轮廓信息获取投影手势对应的操作信息。
在本申请实施例中,虚拟装置在获取投影手势轮廓信息后,可基于投影手势的轮廓信息获取投影手势的操作信息,也即虚拟装置可基于特定的手势轮廓进行识别,进而得到该特定的手势轮廓对应的操作信息。
需要说明的是,虚拟装置也可基于图像获取设备拍摄到的特定的手势识别区域的第一投影画面的边框和第二投影画面的边框进行比较,以获得投影手势对应的操作信息,具体请参阅步骤S121至步骤S124,这里不加以赘述。
在本申请实施例中,当投影设备预设的投影页面的特征信息为手势识别区域时,用户在与投影仪进行交互的过程中,只需要在特定的手势区域内通过简单的手势即可实现控制投影仪,无需依赖特殊的传感器或复杂的图像处理算法,实现了简单有效的投影手势识别。
在其它实施例中,如图9、图10、图11所示,图9是本申请提供的投影手势的识别方法第四实施例的流程示意图;图10是本申请提供的投影手势的识别方法第五工作界面示意图;图11是本申请提供的投影手势的识别方法第六工作界面示意图。当投影仪预先设置的投影页面设有按键区域时,控制器可进行如下操作:
步骤141:将第一投影画面中的按键区域的面积和第二投影画面中的按键区域的面积进行比较,得到投影页面的按键区域的面积变化信息。
在本申请实施例中,投影设备预设的投影页面的特征信息可以为按键区域。当用户通过投影手势与投影仪的投影页面进行交互操作时,虚拟装置可将图像获取设备采集到的第一投影画面中的按键区域的面积和第二投影画面中的按键区域的面积进行比较,以得到投影页面的按键区域的面积变化信息。
需要说明的是,上述按键区域为虚拟按键区,也即按键图标区,并非具有真实按键。
可以理解的,当用户的投影手势进入按键区域时,会造成按键区域的形变。具体的,当用户的手指在点击时,其具体的动作为指尖从上往下点击,则该投影手势的对应的按键区域的面积为从大至小。因此,控制器能够得到投影页面的按键区域的面积变化信息。
步骤142:基于投影页面的按键区域的面积变化信息得到投影页面的第一差异信息。
在本申请实施例中,投影页面的按键区域的面积变化信息对应投影页面的第一差异信息,因此,虚拟装置可基于投影页面的按键区域的面积变化信息得到投影页面的第一差异信息。
可选的,投影页面的第一差异信息可以包括投影页面的形变区域的面积、按键形变率。
可选的,投影页面的形变区域的面积数值可以通过像素值超过形变阈值的像素个数来表示;其中,按键形变率则可以用按键形变个数及按键区域像素点个数的比值来表示。
步骤143:基于投影页面的第一差异信息获取投影手势在投影页面的位置信息。
在本申请实施例中,虚拟装置可基于投影页面的第一差异信息获取投影手势在投影页面的位置信息。具体的,当虚拟装置检测到按键区域发生形变,且形变区域的面积逐渐变小或按键形变区域面积占总按键面积比例减小时,则虚拟装置则可判断用户的手指触控了相应的按键,也即虚拟装置可获取投影手势在投影页面的位置信息。
步骤144:基于投影手势在投影页面的位置信息获取投影手势对应的操作信息。
在本申请实施例中,当虚拟装置获取到投影手势在投影页面的位置信息后,可进一步基于该位置信息获取到投影手势对应的操作信息。可以理解的,当虚拟装置判断到用户的手指触控到相应的按键时,可进一步得到该用户点击确认了某个特定的按键,也即虚拟装置获取到用户投影手势对应的操作信息。
步骤S14:基于操作信息识别投影手势,得到投影手势对应的操作指令。
在上述实施例的基础上,虚拟装置可基于操作信息识别投影手势,进而得到投影手势对应的操作指令。其中,该操作指令包括但不限于向上移动指令、向下移动指令、向左移动指令、向右移动指令、确认指令。
在本申请实施例中,当投影设备预设的投影页面的特征信息为按键区域时,用户在与投影仪进行交互的过程中,只需要在按键区域内点击相应的虚拟图标即可实现控制投影仪,无需依赖特殊的传感器或复杂的图像处理算法,实现了简单有效的投影手势识别。
本申请的投影手势的识别方法,能够在用户通过投影手势与投影仪的投影页面进行交互的过程中,虚拟装置能够通过投影页面的第一差异信息识别出投影手势对应的操作指令,进而实现简单有效的投影手势识别。
可以理解的,用户可以在系统上预先定义好不同手势对应的具体操作,当执行上述步骤后,若识别到该手势,虚拟装置自动执行相应的动作。这种动作可以是投影画面的改变,也可以是音量之类的改变等,如果是投影画面要执行左移、右移或者一下帧等,虚拟装置就控制投影设备的空间光调制器上加载变动后的图像,如果是音量等其他方面的变动,就控制喇叭或者其他硬件执行相应操作即可。
以上实施例,仅是对本申请的其中一种常见案例而已,并非对本申请的技术范围做任何限制,故凡是依据本申请方案的实质对以上内容所做的任何细微修改、等同变化或者修饰,均仍属于本申请技术方案的范围内。
在一应用场景中,如图12所示,图12是本申请提供的智能交互系统的结构示意图。智能交互系统100包括投影设备、图像获取设备20和虚拟装置30,虚拟装置30分别与投影设备10和图像获取设备20连接,其中,虚拟装置30用于控制投影设备10投影预先设置的投影页面,控制图像获取设备20从投影页面采集至少两张投影画面;虚拟装置30基于至少两张投影画面得到投影页面的第一差异信息;虚拟装置30基于第一差异信息获取投影手势对应的操作信息;虚拟装置30基于操作信息识别投影手势,得到对应的操作指令。
在本申请所提供的几个实施例中,应该理解到,所揭露的方法和装置,可以通过其它的方式实现。例如,以上所描述的装置实施方式仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施方式方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,系统服务器,或者网络设备等)或处理器(processor)执行本申请各个实施方式方法的全部或部分步骤。
请参阅图13,图13是本申请提供的计算机可读存储介质的结构示意图。本申请的存储介质存储有能够实现上述所有投影手势的识别方法的程序文件51,其中,该程序文件51可以以软件产品的形式存储在上述存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施方式方法的全部或部分步骤。而前述的存储装置包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质,或者是计算机、服务器、手机、平板等投影手势的识别装置。
以上仅为本申请的实施方式,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。
Claims (10)
1.一种投影手势的识别方法,应用于投影交互系统,所述投影交互系统包括投影设备、图像获取设备和虚拟设备,其特征在于,所述识别方法包括:
控制所述投影设备调制预设图像并投射形成投影画面;
控制所述图像获取设备采集至少两张投影画面;
基于所述至少两张投影画面计算投影页面的第一差异信息;
基于所述第一差异信息识别所述投影手势,得到所述投影手势对应的操作指令。
2.根据权利要求1所述的投影手势的识别方法,其特征在于,
所述控制所述图像获取设备采集至少两张投影画面的步骤包括:
控制所述图像获取设备从所述投影页面采集第一投影画面和第二投影画面;
所述基于所述至少两张投影画面得到所述投影页面的第一差异信息的步骤包括:
将所述第一投影画面和所述第二投影画面进行比较,以得到所述投影页面的第一差异信息。
所述基于所述第一差异信息识别所述投影手势,得到所述投影手势对应的操作指令的步骤包括:
基于所述第一差异信息获取所述投影手势对应的操作信息;
基于所述操作信息识别所述投影手势,得到所述投影手势对应的操作指令。
3.根据权利要求2所述的投影手势的识别方法,其特征在于,所述投影页面具有显示内容或/和页面的边框,所述基于所述至少两张投影画面得到所述投影页面的第一差异信息的步骤包括:
将所述第一投影画面的边框和所述第二投影画面的边框进行比较,以获得所述投影页面的形变中心;
基于所述投影页面的形变中心得到所述投影页面的第一差异信息。
4.根据权利要求3所述的投影手势的识别方法,其特征在于,所述基于所述第一差异信息获取所述投影手势对应的操作信息的步骤包括:
基于所述投影页面的第一差异信息获取所述投影手势的移动路线;
基于所述投影手势的移动路线获取所述投影手势对应的操作信息。
5.根据权利要求2所述的投影手势的识别方法,其特征在于,所述投影页面设有特定的操作页面,所述基于所述至少两张投影画面得到所述投影页面的第一差异信息的步骤包括:
将所述第一投影画面中的特定的操作页面和所述第二投影画面中的特定的操作页面的画面进行比较,得到所述投影页面的第一差异信息。
6.根据权利要求5所述的投影手势的识别方法,其特征在于,所述基于所述第一差异信息获取所述投影手势对应的操作信息,包括:
基于所述投影页面的第一差异信息获取所述投影手势轮廓信息;
基于所述投影手势的轮廓信息获取所述投影手势对应的操作信息。
7.根据权利要求2所述的投影手势的识别方法,其特征在于,所述投影页面设有按键区域,所述基于所述至少两张投影画面得到所述投影页面的第一差异信息的步骤包括:
将所述第一投影画面中的按键区域的面积和所述第二投影画面中的按键区域的面积进行比较,得到所述投影页面的按键区域的面积变化信息;
基于所述投影页面的按键区域的面积变化信息得到所述投影页面的第一差异信息。
8.根据权利要求7所述的投影手势的识别方法,其特征在于,所述基于所述第一差异信息获取所述投影手势对应的操作信息的步骤包括:
基于所述投影页面的第一差异信息获取所述投影手势在所述投影页面的位置信息;
基于所述投影手势在所述投影页面的位置信息获取所述投影手势对应的操作信息。
9.一种智能交互系统,其特征在于,所述智能交互系统包括投影设备、图像获取设备和虚拟装置,其中,
所述虚拟装置用于控制所述投影设备投影预先设置的投影页面,控制所述图像获取设备从所述投影页面采集至少两张投影画面;
所述虚拟装置基于所述至少两张投影画面得到所述投影页面的第一差异信息;
所述虚拟装置基于所述第一差异信息获取所述投影手势对应的操作信息;
所述虚拟装置基于所述操作信息识别所述投影手势,得到所述投影手势对应的操作指令。
10.一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至8任一项所述的投影手势的识别方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210420465.7A CN116954352A (zh) | 2022-04-20 | 2022-04-20 | 一种投影手势的识别方法、智能交互系统及可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210420465.7A CN116954352A (zh) | 2022-04-20 | 2022-04-20 | 一种投影手势的识别方法、智能交互系统及可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116954352A true CN116954352A (zh) | 2023-10-27 |
Family
ID=88447923
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210420465.7A Pending CN116954352A (zh) | 2022-04-20 | 2022-04-20 | 一种投影手势的识别方法、智能交互系统及可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116954352A (zh) |
-
2022
- 2022-04-20 CN CN202210420465.7A patent/CN116954352A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7477236B2 (en) | Remote control of on-screen interactions | |
EP3769509B1 (en) | Multi-endpoint mixed-reality meetings | |
US9619105B1 (en) | Systems and methods for gesture based interaction with viewpoint dependent user interfaces | |
US20140300542A1 (en) | Portable device and method for providing non-contact interface | |
JP5201096B2 (ja) | 対話操作装置 | |
US20130135199A1 (en) | System and method for user interaction with projected content | |
CN107407959B (zh) | 基于姿势的三维图像的操纵 | |
CN109101172B (zh) | 多屏联动系统及其互动显示方法 | |
US20130044054A1 (en) | Method and apparatus for providing bare-hand interaction | |
WO2021097600A1 (zh) | 一种隔空交互方法、装置和设备 | |
JP7378354B2 (ja) | ライブ動画ストリームからの指の押下の検出 | |
US20150304615A1 (en) | Projection control apparatus and projection control method | |
JP2014211858A (ja) | ジェスチャに基づくユーザ・インターフェイスを提供するシステム、方法及びプログラム | |
US20200304713A1 (en) | Intelligent Video Presentation System | |
JP2012238293A (ja) | 入力装置 | |
Liang et al. | Turn any display into a touch screen using infrared optical technique | |
WO2011096571A1 (ja) | 入力装置 | |
US9489077B2 (en) | Optical touch panel system, optical sensing module, and operation method thereof | |
WO2019100547A1 (zh) | 投影控制方法、装置、投影交互系统及存储介质 | |
CN116954352A (zh) | 一种投影手势的识别方法、智能交互系统及可读存储介质 | |
CN116301551A (zh) | 触控识别方法、触控识别装置、电子设备及介质 | |
JP6699406B2 (ja) | 情報処理装置、プログラム、位置情報作成方法、情報処理システム | |
Zhang | Vision-based interaction with fingers and papers | |
JP2018055257A (ja) | 情報処理装置、およびその制御方法ならびにプログラム | |
KR20160031968A (ko) | 전방 프로젝션 환경에서 그림자를 제거하기 위한 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |