CN113568502A - 一种交互方法、装置、设备及存储介质 - Google Patents
一种交互方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN113568502A CN113568502A CN202110806821.4A CN202110806821A CN113568502A CN 113568502 A CN113568502 A CN 113568502A CN 202110806821 A CN202110806821 A CN 202110806821A CN 113568502 A CN113568502 A CN 113568502A
- Authority
- CN
- China
- Prior art keywords
- gesture
- distance
- preset
- camera module
- condition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 55
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000002452 interceptive effect Effects 0.000 claims abstract description 69
- 230000004044 response Effects 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 8
- 238000002604 ultrasonography Methods 0.000 claims 1
- 239000000725 suspension Substances 0.000 abstract description 7
- 238000005299 abrasion Methods 0.000 abstract description 6
- 230000008569 process Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 5
- 238000007667 floating Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 1
- 230000005802 health problem Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明实施例公开了一种交互方法、装置、设备及存储介质。该方法包括获取摄像模组捕获到的手势,以及距离探测器探测到的手势与交互设备的触控屏之间的距离;在距离满足预设条件、且手势与预设手势匹配的情况下,响应于手势,执行与手势对应的操作。上述方案利用摄像模组以及距离探测器可以实现对交互设备的悬浮控制,即用户无需采用对交互设备的接触触控操作,即可实现与交互设备的交互,因而减轻了触控载体的磨损。
Description
技术领域
本发明涉及智能交互技术领域,尤其涉及一种交互方法、装置、设备及存储介质。
背景技术
交互设备作为计算机、网络、视频以及音频等技术的集成者,因其交互便捷、功能多样等特点,被广泛应用于各个场景。
在交互设备应用中,目前的人机交互方式基本都是依赖于接触触控实现,也就是需要触控载体与交互设备的触控面板接触。这种方式容易造成触控载体磨损。
发明内容
本发明实施例提供一种交互方法、装置、设备及存储介质,可以减轻触控载体的磨损。
第一方面,本发明实施例提供了一种交互方法,应用于交互设备,交互设备包括摄像模组和距离探测器,所述方法包括:
获取摄像模组捕获到的手势,以及距离探测器探测到的手势与交互设备的触控屏之间的距离;
在距离满足预设条件、且手势与预设手势匹配的情况下,响应于手势,执行与手势对应的操作。
第二方面,本发明实施例提供了一种交互装置,设置于交互设备,交互设备包括摄像模组和距离探测器,所述装置包括:
信息获取模块,用于获取摄像模组捕获到的手势,以及距离探测器探测到的手势与交互设备的触控屏之间的距离;
响应模块,用于在距离满足预设条件、且手势与预设手势匹配的情况下,响应于手势,执行与手势对应的操作。
第三方面,本发明实施例提供了一种交互设备,包括:
触控屏;
摄像模组,用于捕获用户的手势;
距离探测器,用于探测手势与触控屏之间的距离;
处理器;
存储器,用于存储计算机程序指令;
当计算机程序指令被处理器执行时,实现如第一方面所述的方法。
第四方面,本发明实施例提供了一种计算机可读存储介质,其上存储有计算机程序指令,当计算机程序指令被处理器执行时,实现如第一方面所述的方法。
本发明实施例提供的交互方法、装置、设备及存储介质,在摄像模组捕获到的手势与预设手势匹配,以及距离探测器探测到的该手势与触控屏之间的距离满足预设条件的情况下,响应于该手势,执行与该手势对应的操作。如此,本发明实施例利用摄像模组以及距离探测器可以实现对交互设备的悬浮控制,即用户无需采用对交互设备的接触触控操作,即可实现与交互设备的交互,因而减轻了触控载体的磨损。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种交互场景的示意图;
图2为本发明实施例提供的一种交互设备的主视图;
图3为本发明实施例提供的一种交互方法的流程图;
图4为本发明实施例提供的另一种交互方法的流程图;
图5为本发明实施例提供的一种交互设备响应手势的过程示意图;
图6为本发明实施例提供的另一种交互设备响应手势的过程示意图;
图7为本发明实施例提供的另一种交互设备响应手势的过程示意图;
图8为本发明实施例提供的另一种交互设备响应手势的过程示意图;
图9为本发明实施例提供的一种交互装置的结构图;
图10为本发明实施例提供的一种交互设备的结构图。
具体实施方式
下面将详细描述本发明的各个方面的特征和示例性实施例,为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细描述。应理解,此处所描述的具体实施例仅被配置为解释本发明,并不被配置为限定本发明。对于本领域技术人员来说,本发明可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本发明的示例来提供对本发明更好的理解。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
在交互设备的应用中,可以通过触控载体与交互设备进行交互,但也因此容易造成触控载体的磨损。
为了减轻触控载体的磨损,本发明实施例提供一种交互方法。该方法可以应用于如图1所示的场景中,该场景以触控载体为人手为例。
该场景中可以包括交互设备10和用户,用户的手部与交互设备10存在一定的距离。图1中的交互设备10为侧视图,其主视图可以参考图2。
交互设备10可以是能够与用户交互的智能设备,例如可以是交互式电子白板或交互智能平板等。
交互设备10中可以包括但不限于摄像模组101、距离探测器102、触控屏103(参见图2)和处理器(未示出)。
摄像模组101可以是能够捕获用户手势的装置,例如可以是摄像头。距离探测器102可以是能够探测用户手势与触控屏103之间距离的装置,例如可以是超声波探测器、红外线探测器或激光探测器等。处理器可以基于摄像模组101捕获到的手势以及距离探测器102探测到的手势与触控屏103之间的距离,执行对应的操作,实现悬浮控制。触控屏103可以显示处理器的执行结果。
由此,可以避免用户的手部与触控屏103直接接触,减轻了手部的磨损,同时也在一定程度上避免了卫生问题,提升了用户的体验。
基于上述场景,下面结合具体的实施例对本发明实施例提供的交互方法进行说明,该方法可以由图1所示的交互设备10执行。
图3为本发明实施例提供的一种交互方法的流程图。
如图3所示,该交互方法可以包括如下步骤:
S310、获取摄像模组捕获到的手势,以及距离探测器探测到的手势与交互设备的触控屏之间的距离。
S320、在距离满足预设条件、且手势与预设手势匹配的情况下,响应于手势,执行与手势对应的操作。
由此,在摄像模组捕获到的手势与预设手势匹配,以及距离探测器探测到的该手势与触控屏之间的距离满足预设条件的情况下,响应于该手势,执行与该手势对应的操作。如此,本发明实施例利用摄像模组以及距离探测器可以实现对交互设备的悬浮控制,即用户无需采用对交互设备的接触触控操作,即可实现与交互设备的交互,因而减轻了触控载体的磨损。
下面对上述步骤进行详细说明,具体如下所示:
在S310中,参考图1,摄像模组101用于捕获用户的手势,该手势可以是手指、手掌或拳头等,该手势可以来自一个用户,也可以来自多个用户。通过图像识别的方式可以确定手势的来源以及具体形式。
在一个实施例中,为了节省成本,摄像模组101可以采用一个传统的摄像头;为了扩大拍摄范围,及时捕获用户的手势,摄像模组101也可以采用多个传统的摄像头;当然还可以采用能够同时兼顾成本和拍摄范围的摄像头。
摄像模组101的安装位置也可以根据实际需要选择,在一个实施例中,摄像模组101可以嵌入交互设备10的外边框内,从而节省交互设备10的占用空间。
在一个实施例中,摄像模组101也可以设置于外边框的外侧,方便旋转摄像模组101的拍摄角度。
距离探测器102用于探测手势与触控屏103之间的距离,其安装位置也可以根据实际需要选择。例如,如图2所示,距离探测器102可以设置于交互设备10的上边框,方便探测手势与触控屏103之间的距离。在这种情况下,如图2所示,摄像模组101可以设置于距离探测器102的上面。
当然,摄像模组101和距离探测器102还可以设置在交互设备10中除图2所示位置之外的位置。
在一个实施例中,距离探测器102可以向外发射信号,发射信号遇到障碍物后返回,距离探测器102可以基于接收信号确定障碍物是否为人体,并在确定障碍物为人体之后,可以基于发射信号的发射时间以及接收信号的接收时间,确定手势与触控屏103之间的距离。
在S320中,预设条件可以是交互设备10能够响应该手势时,该手势与触控屏103之间的距离需要满足的条件。
在一个实施例中,该预设条件可以是距离小于设定阈值,即捕获到的手势与触控屏103之间的距离不能过大,由此可以避免因距离过大,造成操作不便的情况,而且可以降低对手势的干扰。
在一个实施例中,该预设条件可以是距离大于设定阈值,即捕获到的手势与触控屏103之间的距离不能过小,由此可以避免因距离过小,导致摄像模组101捕捉远端的动作较差的情况。
在一个实施例中,该预设条件可以是距离介于预设区间,即捕获到的手势与触控屏103之间的距离既不能过大,也不能过小,从而既可以避免因距离过大,造成操作不便的情况,也可以避免因距离过小,导致摄像模组101捕捉远端的动作较差的情况。
预设手势可以是预先设定的能够控制交互设备10的手势,本发明实施例对预设手势不做具体限定。不同的预设手势对应不同的操作,预设手势与操作之间的关系可以预先设定。
摄像模组101捕获到的手势与预设手势匹配可以是摄像模组101捕获到的手势与预设手势相同,或者摄像模组101捕获到的手势与预设手势的相似度大于预设相似度。
由此,在确定距离满足预设条件,摄像模组捕获到的手势与预设手势匹配的情况下,交互设备可以执行与该手势对应的操作,实现对交互设备的悬浮控制,即无需采用对交互设备的接触触控操作,即可实现与交互设备的交互,减轻了手部的磨损,同时也减少了卫生问题。
实际应用中,摄像模组101捕获到的手势可能有一个,也可能有多个。在摄像模组101捕获到的手势只有一个的情况下,可以直接基于该手势,结合距离探测器102捕获到的距离,确定是否响应该手势。
在摄像模组101捕获到的手势有多个的情况下,在一个实施例中,可以获取与触控屏103距离最近的手势。
即在摄像模组101捕获到多个手势的情况下,可以以距离触控屏103最近的手势,作为触控载体,控制交互设备10。
例如图1所示的场景中存在多个用户,多个用户位于不同的队列,假定每个用户均有对应的手势,选取距离触控屏103最近的手势,即前排用户的手势,由此可以避免其他手势遮挡该手势,提高了后续手势识别结果的准确性。
在一个实施例中,还可以根据手势对应的用户信息确定对应用户的身份信息;获取与预先设置的参考身份信息匹配的身份信息对应的手势。
即在手势有多个的情况下,可以对各手势对应的用户进行校验,以确定其是否具备控制交互设备10的权限,由此可以保障交互安全。
用户信息可以是唯一标识用户身份的信息,例如可以包括脸部特征、身份证号、手机号等。参考身份信息可以是预先设置的具备控制交互设备10权限的用户的身份信息,即只有身份信息与参考身份信息匹配的用户才可以控制交互设备10。
应当理解,手势的形式是有限的,因此,在某些场景下,可能仍需要触控载体与触控屏103接触以实现对交互设备10的控制。基于此,在一个实施例中,如图4所示,本发明实施例提供的交互方法可以包括如下步骤:
S410、获取摄像模组捕获到的手势,以及距离探测器探测到的手势与交互设备的触控屏之间的距离。
S420、在距离满足预设条件、且手势与预设手势匹配的情况下,根据距离和手势,生成与距离和手势对应的控制指令。
S430、响应于控制指令,执行与控制指令对应的操作。
S440、是否监测到对触控屏的预设触摸操作,若是,则执行S450,否则返回执行S410。
S450、控制交互设备由当前的交互方式切换至触摸触控方式。
其中,S410的过程与图3中S310的过程相同,具体请参见S310的描述,为简洁描述,此处不再赘述。
下面对图4中的其他步骤进行详细说明,具体如下所示:
在S420中,可以预先设置不同距离和手势与对应控制指令之间的关联关系,在确定摄像模组101捕获到的手势与预设手势匹配,且该手势与触控屏103之间的距离满足预设条件的情况下,可以查找预先存储的关联关系,确定与该距离和手势对应的控制指令,简单方便。
在S430中,控制指令与手势对应的操作匹配,执行该控制指令,即可执行与该手势对应的操作,无需手部与触控屏接触,减轻了手部的磨损,而且减少了卫生问题。
在S440中,本发明实施例提供的交互设备10既可以支持接触触控,也可以支持悬浮触控,从而可以满足不同用户在不同场景下的需求。
接触触控,即通过与触控屏103接触的方式,控制交互设备10。例如在监测到对触控屏103的预设触摸操作时,可以确定用户希望通过接触触控的方式控制交互设备10,预设触摸操作的类型可以根据实际需要设定。
在S450中,假定交互设备10当前处于悬浮触控模式,在监测到对触控屏103的预设触摸操作时,可以控制交互设备10由悬浮触控模式切换至触摸触控方式,也即接触触控方式。
如果未监测到对触控屏103的预设触摸操作,可以继续保持悬浮触控的模式,并返回执行S410。
由此,在监测到对触控屏的预设触摸操作的情况下,可以通过与触控屏接触的方式控制交互设备,满足用户的接触触控需求;在未监测到对触控屏的预设触摸操作的情况下,可以采用悬浮触控的方式,避免手部与触控屏直接接触,从而减轻手部的磨损。
在一个实施例中,本发明实施例提供的摄像模组101可以采用广角摄像头,广角摄像头的数量可以是一个,由此既可以扩大拍摄范围,又可以降低成本。
在一个实施例中,距离探测器102可以包括超声波探测器、红外线探测器或激光探测器,测距原理可以参见上述实施例,为简洁描述,此处不再赘述。
本发明实施例利用超声波探测器、红外线探测器或激光探测器探测手势与触控屏103之间的距离,并将距离和手势结合,在距离和手势均符合对应条件的情况下,交互设备才进行响应,提高了响应结果的准确性。
以手势为手掌为例,在一个实施例中,S320可以包括:
在距离位于预设区间,且手势为第一手势的情况下,响应于第一手势,执行擦除显示内容的操作;
在距离位于预设区间,且手势为第二手势的情况下,响应于第二手势,执行调整显示内容字号的操作、调整音量的操作或调整显示页面的操作。
预设区间的大小可以根据实际需要设定,例如可以设置为1-50cm。
第一手势和第二手势可以根据实际需要设定,例如第一手势可以是单掌,第二手势可以是双掌。
以第一手势为单掌,第二手势为双掌为例。这里的单掌可以来自一个用户,也可以来自多个用户,当单掌来自多个用户时,对应的操作与来自一个用户对应的操作相同。
以单掌来自一个用户为例,如图5所示,根据本发明实施例的方案,在捕获到的手势为单掌,且该手势与触控屏103的距离位于预设区间的情况下,可以擦除触控屏103上的显示内容。
与单掌类似,这里的双掌可以来自一个用户,也可以来自多个用户,为了降低误判,本发明实施例以来自一个用户的双掌为例。
如图6所示,在捕获到的手势为双掌,该手势与触控屏103的距离位于预设区间,且双掌按照图6所示的方向移动的情况下,可以执行调整显示内容字号的操作。
例如图6所示的双掌向外扩张移动,可以执行放大显示内容的操作。当然,如果双掌由外向内移动,还可以执行缩小显示内容的操作。
如图7所示,在捕获到的手势为双掌,该手势与触控屏103的距离位于预设区间,且双掌按照图7所示的方向移动的情况下,可以执行调整音量的操作。
例如图7所示的双掌沿竖直方向向外移动,可以执行调大音量的操作。当然,如果双掌沿竖直方向由外向内移动,还可以执行调小音量的操作。
如图8所示,在捕获到的手势为双掌,该手势与触控屏103的距离位于预设区间,且双掌同步移动的情况下,可以执行调整显示页面的操作,例如可以执行翻页、返回、截屏等操作。
图8以执行翻页的操作为例,例如响应该手势之前,触控屏上显示的是第一页,响应该手势之后,执行翻页操作,此时触控屏上显示的是第二页。
本发明实施例并不限于上述操作,还可以是其他操作,具体操作与预先设置的手势与操作的关联关系有关,实际应用时也可以根据需要调整手势和操作的关联关系。
由此,基于摄像模组捕获到的手势控制交互设备,无需手部与触控屏接触,实现了悬浮触控,尤其是在手势为手掌的情况下,可以大大减轻手部的磨损。
基于相同的发明构思,本发明实施例还提供了一种交互装置,该装置可以设置于图1所示的交互设备10中。下面结合图9对本发明实施例提供的交互装置进行详细说明。
图9为本发明实施例提供的一种交互装置的结构图。
如图9所示,该交互装置可以包括:
信息获取模块90,用于获取摄像模组捕获到的手势,以及距离探测器探测到的手势与交互设备的触控屏之间的距离;
响应模块91,用于在距离满足预设条件、且手势与预设手势匹配的情况下,响应于手势,执行与手势对应的操作。
下面对上述的交互装置进行详细说明,具体如下:
在一个实施例中,响应模块91,具体用于:
根据距离和手势,生成与距离和手势对应的控制指令;
响应于控制指令,执行与控制指令对应的操作。
在一个实施例中,信息获取模块90,具体用于:
在摄像模组捕获到的手势为多个的情况下,获取与触控屏距离最近的手势。
在一个实施例中,信息获取模块90,具体用于:
在摄像模组捕获到的手势为多个的情况下,根据手势对应的用户信息确定对应用户的身份信息;
获取与预先设置的参考身份信息匹配的身份信息对应的手势。
在一个实施例中,该装置还可以包括:
控制模块,用于在监测到对触控屏的预设触摸操作的情况下,控制交互设备由当前的交互方式切换至触摸触控方式。
在一个实施例中,响应模块91,具体用于:
在距离位于预设区间,且手势为第一手势的情况下,响应于第一手势,执行擦除显示内容的操作;
在距离位于预设区间,且手势为第二手势的情况下,响应于第二手势,执行调整显示内容字号的操作、调整音量的操作或调整显示页面的操作。
在一个实施例中,摄像模组包括广角摄像头,距离探测器包括超声波探测器、红外线探测器或激光探测器。
由此,在摄像模组捕获到的手势与预设手势匹配,以及距离探测器探测到的该手势与触控屏之间的距离满足预设条件的情况下,响应于该手势,执行与该手势对应的操作。如此,本发明实施例利用摄像模组以及距离探测器可以实现对交互设备的悬浮控制,即用户无需采用对交互设备的接触触控操作,即可实现与交互设备的交互,因而减轻了触控载体的磨损。
图9所示装置中的各个模块具有实现图3-图4中各个步骤的功能并能达到相应的技术效果,为简洁描述,此处不再赘述。
基于相同的发明构思,本发明实施例还提供了一种交互设备,下面结合图10对本发明实施例提供的交互设备进行详细说明。
如图10所示,该交互设备可以包括触控屏1000、捕获用户手势的摄像模组1001、用于探测手势与触控屏1000之间距离的距离探测器1002、处理器1003以及用于存储计算机程序指令的存储器1004。
处理器1003可以包括中央处理器(Central Processing Unit,CPU),或者特定集成电路(Application Specific Integrated Circuit,ASIC),或者可以被配置成实施本发明实施例的一个或多个集成电路。
存储器1004可以包括用于数据或指令的大容量存储器。举例来说而非限制,存储器1004可包括硬盘驱动器(Hard Disk Drive,HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(Universal Serial Bus,USB)驱动器或者两个或更多个以上这些的组合。在一个实例中,存储器1004可以包括可移除或不可移除(或固定)的介质,或者存储器1004是非易失性固态存储器。在一个实例中,存储器1004可以是只读存储器(Read OnlyMemory,ROM)。在一个实例中,该ROM可以是掩模编程的ROM、可编程ROM(PROM)、可擦除PROM(EPROM)、电可擦除PROM(EEPROM)、电可改写ROM(EAROM)或闪存或者两个或更多个以上这些的组合。
处理器1003通过读取并执行存储器1004中存储的计算机程序指令,以实现图3-图4所示实施例中的方法,并达到图3-图4所示实施例执行其方法达到的相应技术效果,为简洁描述,在此不再赘述。
在一个示例中,该交互设备还可包括通信接口1005和总线1006。其中,如图10所示,触控屏1000、摄像模组1001、距离探测器1002、处理器1003、存储器1004、通信接口1005通过总线1006连接并完成相互间的通信。
通信接口1005,主要用于实现本发明实施例中各模块、装置和/或设备之间的通信。
总线1006包括硬件、软件或两者,将交互设备的各部件彼此耦接在一起。举例来说而非限制,总线可包括加速图形端(Accelerated Graphics Port,AGP)或其他图形总线、增强工业标准架构(Extended Industry Standard Architecture,EISA)总线、前端总线(Front Side Bus,FSB)、超传输(Hyper Transport,HT)互连、工业标准架构(IndustryStandard Architecture,ISA)总线、无限带宽互连、低引脚数(LPC)总线、存储器总线、微信道架构(MCA)总线、外围组件互连(PCI)总线、PCI-Express(PCI-X)总线、串行高级技术附件(SATA)总线、视频电子标准协会局部(VLB)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线1006可包括一个或多个总线。尽管本发明实施例描述和示出了特定的总线,但本发明考虑任何合适的总线或互连。
该交互设备可以基于摄像模组捕获到的手势,以及距离探测器探测到的手势与触控屏之间的距离执行本发明实施例中的数据传输方法,从而实现结合图3-图4描述的交互方法以及图9描述的交互装置。
以上所述,仅为本发明的具体实施方式,所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的系统、模块和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。应理解,本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。
Claims (10)
1.一种交互方法,其特征在于,应用于交互设备,所述交互设备包括摄像模组和距离探测器,所述方法包括:
获取所述摄像模组捕获到的手势,以及所述距离探测器探测到的所述手势与所述交互设备的触控屏之间的距离;
在所述距离满足预设条件、且所述手势与预设手势匹配的情况下,响应于所述手势,执行与所述手势对应的操作。
2.根据权利要求1所述的方法,其特征在于,所述响应于所述手势,执行与所述手势对应的操作,包括:
根据所述距离和手势,生成与所述距离和手势对应的控制指令;
响应于所述控制指令,执行与所述控制指令对应的操作。
3.根据权利要求1所述的方法,其特征在于,所述获取所述摄像模组捕获到的手势,包括:
在所述摄像模组捕获到的手势为多个的情况下,获取与所述触控屏距离最近的手势。
4.根据权利要求1所述的方法,其特征在于,所述获取所述摄像模组捕获到的手势,包括:
在所述摄像模组捕获到的手势为多个的情况下,根据所述手势对应的用户信息确定对应用户的身份信息;
获取与预先设置的参考身份信息匹配的身份信息对应的手势。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
在监测到对所述触控屏的预设触摸操作的情况下,控制所述交互设备由当前的交互方式切换至触摸触控方式。
6.根据权利要求1-4任一项所述的方法,其特征在于,所述在所述距离满足预设条件、且所述手势与预设手势匹配的情况下,响应于所述手势,执行与所述手势对应的操作,包括:
在所述距离位于预设区间,且所述手势为第一手势的情况下,响应于所述第一手势,执行擦除显示内容的操作;
在所述距离位于预设区间,且所述手势为第二手势的情况下,响应于所述第二手势,执行调整显示内容字号的操作、调整音量的操作或调整显示页面的操作。
7.根据权利要求1-4任一项所述的方法,其特征在于,所述摄像模组包括广角摄像头,所述距离探测器包括超声波探测器、红外线探测器或激光探测器。
8.一种交互装置,其特征在于,设置于交互设备,所述交互设备包括摄像模组和距离探测器,所述装置包括:
信息获取模块,用于获取所述摄像模组捕获到的手势,以及所述距离探测器探测到的所述手势与所述交互设备的触控屏之间的距离;
响应模块,用于在所述距离满足预设条件、且所述手势与预设手势匹配的情况下,响应于所述手势,执行与所述手势对应的操作。
9.一种交互设备,其特征在于,包括:
触控屏;
摄像模组,用于捕获用户的手势;
距离探测器,用于探测所述手势与所述触控屏之间的距离;
处理器;
存储器,用于存储计算机程序指令;
当所述计算机程序指令被所述处理器执行时,实现如权利要求1-7中任一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序指令,其特征在于,当所述计算机程序指令被处理器执行时,实现如权利要求1-7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110806821.4A CN113568502A (zh) | 2021-07-16 | 2021-07-16 | 一种交互方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110806821.4A CN113568502A (zh) | 2021-07-16 | 2021-07-16 | 一种交互方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113568502A true CN113568502A (zh) | 2021-10-29 |
Family
ID=78165182
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110806821.4A Pending CN113568502A (zh) | 2021-07-16 | 2021-07-16 | 一种交互方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113568502A (zh) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201535853U (zh) * | 2009-04-01 | 2010-07-28 | 黄振强 | 交互式沙盘系统 |
US20110157029A1 (en) * | 2009-12-31 | 2011-06-30 | Google Inc. | Touch sensor and touchscreen user input combination |
CN103324431A (zh) * | 2012-03-22 | 2013-09-25 | 义明科技股份有限公司 | 电子装置以及电子装置的控制方法 |
CN104834412A (zh) * | 2015-05-13 | 2015-08-12 | 深圳市蓝晨科技有限公司 | 一种基于非接触式的手势识别的触摸终端 |
CN106896907A (zh) * | 2015-12-21 | 2017-06-27 | 东莞酷派软件技术有限公司 | 一种根据用户手势操作终端的方法及装置 |
CN109101180A (zh) * | 2018-08-10 | 2018-12-28 | 珠海格力电器股份有限公司 | 一种屏幕电子设备交互方法及其交互系统和电子设备 |
CN110688914A (zh) * | 2019-09-09 | 2020-01-14 | 苏州臻迪智能科技有限公司 | 一种手势识别的方法、智能设备、存储介质和电子设备 |
CN111273838A (zh) * | 2018-12-19 | 2020-06-12 | 深圳市鸿合创新信息技术有限责任公司 | 触摸显示装置中悬浮工具栏的移动方法及触摸显示装置 |
CN111291671A (zh) * | 2020-01-23 | 2020-06-16 | 深圳市大拿科技有限公司 | 手势控制方法及相关设备 |
WO2021035646A1 (zh) * | 2019-08-29 | 2021-03-04 | 深圳市大疆创新科技有限公司 | 可穿戴设备及其控制方法、识别手势的方法和控制系统 |
-
2021
- 2021-07-16 CN CN202110806821.4A patent/CN113568502A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201535853U (zh) * | 2009-04-01 | 2010-07-28 | 黄振强 | 交互式沙盘系统 |
US20110157029A1 (en) * | 2009-12-31 | 2011-06-30 | Google Inc. | Touch sensor and touchscreen user input combination |
CN103324431A (zh) * | 2012-03-22 | 2013-09-25 | 义明科技股份有限公司 | 电子装置以及电子装置的控制方法 |
CN104834412A (zh) * | 2015-05-13 | 2015-08-12 | 深圳市蓝晨科技有限公司 | 一种基于非接触式的手势识别的触摸终端 |
CN106896907A (zh) * | 2015-12-21 | 2017-06-27 | 东莞酷派软件技术有限公司 | 一种根据用户手势操作终端的方法及装置 |
CN109101180A (zh) * | 2018-08-10 | 2018-12-28 | 珠海格力电器股份有限公司 | 一种屏幕电子设备交互方法及其交互系统和电子设备 |
CN111273838A (zh) * | 2018-12-19 | 2020-06-12 | 深圳市鸿合创新信息技术有限责任公司 | 触摸显示装置中悬浮工具栏的移动方法及触摸显示装置 |
WO2021035646A1 (zh) * | 2019-08-29 | 2021-03-04 | 深圳市大疆创新科技有限公司 | 可穿戴设备及其控制方法、识别手势的方法和控制系统 |
CN110688914A (zh) * | 2019-09-09 | 2020-01-14 | 苏州臻迪智能科技有限公司 | 一种手势识别的方法、智能设备、存储介质和电子设备 |
CN111291671A (zh) * | 2020-01-23 | 2020-06-16 | 深圳市大拿科技有限公司 | 手势控制方法及相关设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102230630B1 (ko) | 빠른 제스처 재접속 | |
CN106951871B (zh) | 操作体的运动轨迹识别方法、装置和电子设备 | |
CN105488464B (zh) | 指纹识别方法及装置 | |
EP2651117B1 (en) | Camera apparatus and control method thereof | |
US20130211843A1 (en) | Engagement-dependent gesture recognition | |
US8897490B2 (en) | Vision-based user interface and related method | |
US20140071171A1 (en) | Pinch-and-zoom, zoom-and-pinch gesture control | |
US10191554B2 (en) | Display apparatus and controlling method thereof | |
US20130307775A1 (en) | Gesture recognition | |
WO2013000381A1 (zh) | 控制移动终端状态的方法及移动终端 | |
US20150077381A1 (en) | Method and apparatus for controlling display of region in mobile device | |
US10969827B2 (en) | Electronic device and method for controlling user interface therein | |
KR102187236B1 (ko) | 프리뷰 방법 및 이를 구현하는 전자 장치 | |
WO2021197487A1 (zh) | 一种鼠标控制终端屏幕的方法、装置、鼠标及存储介质 | |
CN105867822B (zh) | 一种信息处理方法及电子设备 | |
CN106569716B (zh) | 单手操控方法及操控系统 | |
WO2020047742A1 (zh) | 手写板、手写板装置及书写控制方法 | |
EP3246805B1 (en) | Gesture operation response method and device | |
CN112256126A (zh) | 用于识别手势的方法、电子电路、电子设备和介质 | |
CN113568502A (zh) | 一种交互方法、装置、设备及存储介质 | |
CN114610155A (zh) | 手势控制方法、装置、显示终端及存储介质 | |
CN116363744A (zh) | 手势识别方法及装置、计算机可读存储介质 | |
CN109725722B (zh) | 有屏设备的手势控制方法和装置 | |
CN111373732A (zh) | 信息处理装置、信息处理方法和信息处理系统 | |
Nakamura et al. | Distinction system of left and right hands placed on a keyboard of laptop computers |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |