CN111639603B - 利用手部动作的功能触发方法、系统、终端及存储介质 - Google Patents

利用手部动作的功能触发方法、系统、终端及存储介质 Download PDF

Info

Publication number
CN111639603B
CN111639603B CN202010482227.XA CN202010482227A CN111639603B CN 111639603 B CN111639603 B CN 111639603B CN 202010482227 A CN202010482227 A CN 202010482227A CN 111639603 B CN111639603 B CN 111639603B
Authority
CN
China
Prior art keywords
hand
preset
actions
user
subareas
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010482227.XA
Other languages
English (en)
Other versions
CN111639603A (zh
Inventor
顾一新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Zhengyang Sensor Technology Co ltd
Original Assignee
Guangdong Zhengyang Sensor Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Zhengyang Sensor Technology Co ltd filed Critical Guangdong Zhengyang Sensor Technology Co ltd
Priority to CN202010482227.XA priority Critical patent/CN111639603B/zh
Publication of CN111639603A publication Critical patent/CN111639603A/zh
Application granted granted Critical
Publication of CN111639603B publication Critical patent/CN111639603B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107—Static hand or arm
    • G06V40/113—Recognition of static hand signs

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开一种利用手部动作的功能触发方法、系统、终端及存储介质。其中方法包括：获取用户手部动作；将所述用户手部动作与预设手部动作进行匹配，其中针对手部动作划分多个子区域，所述子区域是以人体的特征位置为基准进行区域划分所形成，每一所述预设手部动作包括至少在两个所述子区域中的出现行为，所述预设手部动作与功能模块之间预设有对应关系；当所述用户手部动作与所述预设手部动作匹配成功时，触发与该预设手部动作对应的所述功能模块。本发明能够更加容易和准确地辨别用户手部动作，降低了误判的可能性，有利于功能触发的可靠执行。

Description

利用手部动作的功能触发方法、系统、终端及存储介质
技术领域
本发明涉及电子装置的功能触发技术领域，尤其涉及一种利用手部动作的功能触发方法、系统、终端及存储介质。
背景技术
随着消费者对于汽车安全性、便利性的要求越来越高，人机互动将从过往由旋钮、触控等方式，发展至更多元与直觉的控制方法，像是语音或是手势等。
而以手势的人机互动方式，以技术可分为以下三种：基于二维图像的手势识别方法、基于三维图像的手势识别方法以及基于电磁感应的手势识别方法。
基于二维图像的手势识别方法是直接从图像中提取相应的特征进行识别，容易受视角或是光线等因素影响，手势的辨识率较低。
三维手势建模包括结构光、TOF(光飞时间)、双目摄像头(多角度成像)等几种方式，利用计算手与装置间的距离，结合2D图像的相关资讯，来实现手势的识别，但测量的距离较短，而所使用的摄像头成本也较高。
基于电磁感应的手势识别方法需搭配电磁感应设备，利用人手接近时对电磁场产生扰动，透过电磁场变化来进行后续的手势辨识，但电磁容易受到金属物干扰，如手表、饰品...等。
而在手势辨识目前最大的难题是手势指令必须精准的符合定义系统标准手势要求，因此手势指令的正确率的提升势必遇到瓶颈，另外每个人的手势难免有些许不同，不是每个人都可以做出完全符合定义好的标准手势，从而存在误判和辨别困难的情况，不利于相应功能的可靠执行。
发明内容
本发明的目的在于提供一种利用手部动作的功能触发方法、系统、终端及存储介质，能够更加容易和准确地辨别用户手部动作，降低了误判的可能性，有利于功能触发的可靠执行。
为了实现上述目的，本发明提供了一种利用手部动作的功能触发方法，包括：
获取用户手部动作；
将所述用户手部动作与预设手部动作进行匹配，其中针对手部动作划分多个子区域，所述子区域是以人体的特征位置为基准进行区域划分所形成，每一所述预设手部动作包括至少在两个所述子区域中的出现行为，所述预设手部动作与功能模块之间预设有对应关系；
当所述用户手部动作与所述预设手部动作匹配成功时，触发与该预设手部动作对应的所述功能模块。
较佳地，所述预设手部动作具有预设手势，所述预设手部动作的数量为多个，不同的所述预设手部动作具有不同的所述出现行为。
较佳地，所述子区域的数量为四个，四个所述子区域呈象限式分布，以人体的左右分界线和一用于上下分界的所述特征位置进行区域划分形成。
较佳地，四个所述子区域以人脸的中线为左右分界线和以嘴唇为上下分界线进行区域划分形成。
较佳地，每一所述预设手部动作是手部在所有所述子区域中的至少两个的顺序出现行为。
较佳地，所述预设手部动作中手部在上一所述子区域与下一所述子区域出现的时间间隔在预设时长内。
为了实现上述目的，本发明还提供了一种利用手部动作的功能触发系统，包括：
获取模块，用于获取用户手部动作；
匹配模块，用于将所述用户手部动作与预设手部动作进行匹配，其中针对手部动作划分多个子区域，所述子区域是以人体的特征位置为基准进行区域划分所形成，每一所述预设手部动作包括至少在两个所述子区域中的出现行为，所述预设手部动作与功能模块之间预设有对应关系；
触发模块，用于当所述用户手部动作与所述预设手部动作匹配成功时，触发与该预设手部动作对应的所述功能模块。
为了实现上述目的，本发明还提供了一种终端，包括：
一个或多个处理器；
一个或多个存储器，用于存储一个或多个程序，当一个或多个所述程序被所述处理器执行，使得所述处理器实现如上所述的利用手部动作的功能触发方法。
为了实现上述目的，本发明还提供了一种计算机可读存储介质，其上存储有程序，所述程序被处理器执行时实现如上所述的利用手部动作的功能触发方法。
与现有技术相比，本发明预先以人体的特征位置为划分基准划分出多个子区域，并以手部在至少两个子区域中的出现行为来设定预设手部动作，以及在预设手部动作与功能模块之间建立有对应关系，从而在用户需要触发某一功能模块时，可以通过手部在子区域之间进行相应的移动来作为触发条件，当用户的手部在子区域间的出现行为与该功能模块对应的预设手部动作相符时，即符合该功能模块的触发条件。本发明跳脱了通过既定的手势辨别来进行功能触发的思路，而是利用辨别用户手部在不同划分区域的出现来作为触发条件，相对于对传统手势的辨别更加容易和准确，降低了误判的可能性，有利于本发明的可靠执行。而且，以人体的特征位置进行区域划分，用户在进行手部移动时，有明确的标准，不会容易出错，进一步保证了本发明的可靠执行。
附图说明
图1是本发明实施例人体的示意图。
图2是本发明实施例各子区域的示意图。
图3是本发明实施例利用手部动作的功能触发方法的流程图。
图4是本发明实施例利用手部动作的功能触发系统的示意框图。
图5是本发明实施例终端的示意框图。
具体实施方式
为详细说明本发明的内容、构造特征、所实现目的及效果，以下结合实施方式并配合附图详予说明。
实施例一
请参阅图1至图3，本发明公开了一种利用手部动作的功能触发方法，包括：
101、获取用户手部动作。
102、将用户手部动作与预设手部动作进行匹配，其中针对手部动作划分多个子区域，子区域是以人体的特征位置为基准进行区域划分所形成，每一预设手部动作包括至少在两个子区域中的出现行为，预设手部动作与功能模块之间预设有对应关系。
可以理解的是，以人体的特征位置为基准划分形成的多个子区域可以有相应的边界范围，也可以没有边界范围。
另外，这里的“预设手部动作”可以由用户自行设置，以建立专属的预设手部动作，从而便于用户准确的进行手部动作；与预设手部动作对应的功能模块也可以由用户自行设定。
需要注意的是，这里的“预设手部动作”中的“手部”可以指的是用户的完整手部，也可以不是用户的完整手部。
103、当用户手部动作与预设手部动作匹配成功时，触发与该预设手部动作对应的功能模块。
比如，可以直接触发音乐播放软件，进而进行音乐播放行为；或者是直接触发使屏幕关闭或打开的功能模块，等等。
本发明预先以人体的特征位置为划分基准划分出多个子区域，并以手部H在至少两个子区域中的出现行为来设定预设手部动作，以及在预设手部动作与功能模块之间建立有对应关系，从而在用户需要触发某一功能模块时，可以通过手部H在子区域之间进行相应的移动来作为触发条件，当用户的手部H在子区域间的出现行为与该功能模块对应的预设手部动作相符时，即符合该功能模块的触发条件。本发明跳脱了通过既定的手势辨别来进行功能触发的思路，而是利用辨别用户手部H在不同划分区域的出现来作为触发条件，相对于对传统手势的辨别更加容易和准确，降低了误判的可能性，有利于本发明的可靠执行。而且，以人体的特征位置进行区域划分，用户在进行手部H移动时，有明确的标准，不会容易出错，进一步保证了本发明的可靠执行。另外，本发明可以不使用三维图像，在此基础上，可以解决相应的测量距离较短，成本高的问题。此外，本发明也能够避免受到金属物的干扰。
通常而言，预设手部动作的数量为多个，不同的预设手部动作具有不同的出现行为。当用户手部动作与不同的预设手部动作匹配到时，可以触发不同的功能模块。
作为优选的实施方式，子区域的数量为四个，四个子区域A、B、C、D呈象限式分布，以人体的左右分界线和一用于上下分界的特征位置进行区域划分形成。通过该设置，既能够有足够的待选择子区域，又方便利用人体的显著的特征位置进行明确的区域划分，同时也能够避免由于子区域过多而导致的用户记不清需要做什么手部动作来触发想要触发的功能模块等可行性低的问题。
在本发明的具体示例中，以人脸的中线为左右分界线，以嘴唇M为上下分界线，划分成四个子区域。当然，并不限于该划分方式。这里“人脸的中线”非严格意义上的中线，在实际定义时，可以以鼻子或两眼中间位置等作为依据，在此不作限制。
在其他的实施方式中，子区域的总数也可以是其他数量，比如两个、三个，相应的，划分方式也可以有多种。比如，当子区域的数量为三个时，可以以颚部J为上下分界线，颚部J以上区域以人脸的中线进行左右划分形成两个子区域，颚部J以下区域为另一子区域；或者可以以其他的划分方式进行划分。
作为优选的实施方式，每一预设手部动作是手部H在所有子区域中的至少两个的顺序出现行为。
这里的“顺序出现行为”指的是预设手部动作对应的出现行为除了包含有手部H出现在对应的至少两个子区域中的信息外，还包含手部H在对应的至少两个子区域中的移动顺序。
通过该设置，便于在有限的子区域中设置多个不同且不易造成误判的预设手部动作。
下面以图2所示的四个子区域A、B、C、D的示例为例，来描述预设手部动作的设置。比如，可以以手部H的A→B→D的顺序出现行为来设定第一个预设手部动作，以手部H的A→C→D的顺序出现行为来设定第二个预设手部动作，以手部H的D→C→A的顺序出现行为来设定第三个预设手部动作，以手部H的D→B的顺序出现行为来设定第四个预设手部动作，等等。
当然，以手部H在至少两个子区域中的顺序出现行为来设置预设手部动作只是本发明的优先实施方式而言，本发明并不以此为限。比如，在其他实施方式中，也可以只是以手部H出现在相应子区域的行为来设置，而无关乎顺序；也可以是两种或以上设置原则共同使用来设置不同的预设手部动作。
应该注意的是，在预设手部动作的组成上，需尽量避免过于简单和过于复杂的出现行为为宜，做到既能极大程度避免误判，又能够避免用户记错或记不清需要做的手部动作，从而有利于本发明利用手部动作的功能触发方法的可靠执行。
作为优选的实施方式，预设手部动作具有预设手势。也就是说，预设手部动作是以预设手势为前提来设置的，在用户需要触发相应的功能模块时，用户所作出的手部动作不仅要符合预设手部动作的在至少两个子区域中的出现行为，而且还要符合预设手部动作的预设手势。
通过该设置，可以以特征显著(容易识别)且用户在常态下基本不会做出的手势作为预设手势，从而能够进一步保障误判用户手部动作的行为不会发生。
当然，预设手部动作具有预设手势只是本发明的一具体实施方式而已，在另一些实施方式中，预设手部动作可以无关乎手势。
作为优选的实施方式，预设手部动作中手部在上一子区域与下一子区域出现的时间间隔在预设时长内。
实施例二
请参阅图4，本发明还提供了一种利用手部动作的功能触发系统，包括：
201、获取模块，用于获取用户手部动作；
202、匹配模块，用于将用户手部动作与预设手部动作进行匹配，其中针对手部动作划分多个子区域，子区域是以人体的特征位置为基准进行区域划分所形成，每一预设手部动作包括至少在两个子区域中的出现行为，预设手部动作与功能模块之间预设有对应关系；
203、触发模块，用于当用户手部动作与预设手部动作匹配成功时，触发与该预设手部动作对应的功能模块。
本发明预先以人体的特征位置为划分基准划分出多个子区域，并以手部在至少两个子区域中的出现行为来设定预设手部动作，以及在预设手部动作与功能模块之间建立有对应关系，从而在用户需要触发某一功能模块时，可以通过手部H在子区域之间进行相应的移动来作为触发条件，当用户的手部H在子区域间的出现行为与该功能模块对应的预设手部动作相符时，即符合该功能模块的触发条件。本发明跳脱了通过既定的手势辨别来进行功能触发的思路，而是利用辨别用户手部H在不同划分区域的出现来作为触发条件，相对于对传统手势的辨别更加容易和准确，降低了误判的可能性，有利于本发明的可靠执行。而且，以人体的特征位置进行区域划分，用户在进行手部H移动时，有明确的标准，不会容易出错，进一步保证了本发明的可靠执行。另外，本发明可以不使用三维图像，在此基础上，可以解决相应的测量距离较短，成本高的问题。此外，本发明也能够避免受到金属物的干扰。
实施例三
请参阅图5，本发明公开了一种终端，包括：
一个或多个处理器30；
一个或多个存储器40，用于存储一个或多个程序，当一个或多个程序被处理器30执行，使得处理器30实现如实施例一所述的利用手部动作的功能触发方法。
通常而言，终端是通过摄像装置50来获取包含用户手部动作的影像，然后在从该影像中提取得到用户手部动作。优选的，为了保证各种环境下对用户手部动作的获取效果，摄像装置50可以采用红外摄像装置，但不作限制。
实施例四
本发明公开了一种计算机可读存储介质，其上存储有程序，程序被处理器30执行时实现如实施例一所述的利用手部动作的功能触发方法。
以上所揭露的仅为本发明的较佳实例而已，其作用是方便本领域的技术人员理解并据以实施，当然不能以此来限定本发明之权利范围，因此依本发明申请专利范围所作的等同变化，仍属于本发明所涵盖的范围。本发明可以应用于汽车内的人机交互等各种适合的应用场景。

Claims (10)

1.一种利用手部动作的功能触发方法，其特征在于，包括：
获取用户手部动作；
将所述用户手部动作与预设手部动作进行匹配，其中针对手部动作划分多个子区域，所述子区域是以人体的特征位置为基准进行区域划分所形成，每一所述预设手部动作包括至少在两个所述子区域中的出现行为，所述预设手部动作与功能模块之间预设有对应关系；
当所述用户手部动作与所述预设手部动作匹配成功时，触发与该预设手部动作对应的所述功能模块。
2.如权利要求1所述的利用手部动作的功能触发方法，其特征在于，所述预设手部动作具有预设手势，所述预设手部动作的数量为多个，不同的所述预设手部动作具有不同的所述出现行为。
3.如权利要求1所述的利用手部动作的功能触发方法，其特征在于，所述子区域的数量为四个，四个所述子区域呈象限式分布，以人体的左右分界线和一用于上下分界的所述特征位置进行区域划分形成。
4.如权利要求3所述的利用手部动作的功能触发方法，其特征在于，四个所述子区域以人脸的中线为左右分界线和以嘴唇为上下分界线进行区域划分形成。
5.如权利要求1所述的利用手部动作的功能触发方法，其特征在于，
每一所述预设手部动作是手部在所有所述子区域中的至少两个的顺序出现行为。
6.如权利要求1所述的利用手部动作的功能触发方法，其特征在于，所述预设手部动作中手部在上一所述子区域与下一所述子区域出现的时间间隔在预设时长内。
7.一种利用手部动作的功能触发系统，其特征在于，包括：
获取模块，用于获取用户手部动作；
匹配模块，用于将所述用户手部动作与预设手部动作进行匹配，其中针对手部动作划分多个子区域，所述子区域是以人体的特征位置为基准进行区域划分所形成，每一所述预设手部动作包括至少在两个所述子区域中的出现行为，所述预设手部动作与功能模块之间预设有对应关系；
触发模块，用于当所述用户手部动作与所述预设手部动作匹配成功时，触发与该预设手部动作对应的所述功能模块。
8.一种终端，其特征在于，包括：
一个或多个处理器；
一个或多个存储器，用于存储一个或多个程序，当一个或多个所述程序被所述处理器执行，使得所述处理器实现如权利要求1至6任一项所述的利用手部动作的功能触发方法。
9.如权利要求8所述的终端，其特征在于，还包括红外摄像装置，所述红外摄像装置用于获取包含所述用户手部动作的影像，所述用户手部动作由该影像中提取得到。
10.一种计算机可读存储介质，其上存储有程序，其特征在于，所述程序被处理器执行时实现如权利要求1至6任一项所述的利用手部动作的功能触发方法。
CN202010482227.XA 2020-05-29 2020-05-29 利用手部动作的功能触发方法、系统、终端及存储介质 Active CN111639603B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010482227.XA CN111639603B (zh) 2020-05-29 2020-05-29 利用手部动作的功能触发方法、系统、终端及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010482227.XA CN111639603B (zh) 2020-05-29 2020-05-29 利用手部动作的功能触发方法、系统、终端及存储介质

Publications (2)

Publication Number Publication Date
CN111639603A CN111639603A (zh) 2020-09-08
CN111639603B true CN111639603B (zh) 2023-12-15

Family

ID=72331042

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010482227.XA Active CN111639603B (zh) 2020-05-29 2020-05-29 利用手部动作的功能触发方法、系统、终端及存储介质

Country Status (1)

Country Link
CN (1) CN111639603B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112956985B (zh) * 2021-02-24 2022-05-13 佛山市顺德区美的洗涤电器制造有限公司 用于洗碗机的控制方法、处理器及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107831995A (zh) * 2017-09-28 2018-03-23 努比亚技术有限公司 一种终端操作控制方法、终端及计算机可读存储介质
CN109948511A (zh) * 2019-03-14 2019-06-28 广东美的白色家电技术创新中心有限公司 手势识别方法及装置
CN109991859A (zh) * 2017-12-29 2019-07-09 青岛有屋科技有限公司 一种手势指令控制方法及智能家居控制系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107831995A (zh) * 2017-09-28 2018-03-23 努比亚技术有限公司 一种终端操作控制方法、终端及计算机可读存储介质
CN109991859A (zh) * 2017-12-29 2019-07-09 青岛有屋科技有限公司 一种手势指令控制方法及智能家居控制系统
CN109948511A (zh) * 2019-03-14 2019-06-28 广东美的白色家电技术创新中心有限公司 手势识别方法及装置

Also Published As

Publication number Publication date
CN111639603A (zh) 2020-09-08

Similar Documents

Publication Publication Date Title
US11307666B2 (en) Systems and methods of direct pointing detection for interaction with a digital device
CN105518575B (zh) 与自然用户界面的双手交互
US8933882B2 (en) User centric interface for interaction with visual display that recognizes user intentions
KR101809636B1 (ko) 컴퓨터 장치의 원격 제어
EP2907004B1 (en) Touchless input for a user interface
CN103809733B (zh) 人机交互系统和方法
US8373654B2 (en) Image based motion gesture recognition method and system thereof
US20150248167A1 (en) Controlling a computing-based device using gestures
US20140317576A1 (en) Method and system for responding to user's selection gesture of object displayed in three dimensions
CN105528082A (zh) 三维空间及手势识别追踪交互方法、装置和系统
US11249556B1 (en) Single-handed microgesture inputs
JP6524589B2 (ja) クリック動作検出装置，方法およびプログラム
WO2014194148A2 (en) Systems and methods involving gesture based user interaction, user interface and/or other features
CN106909219B (zh) 基于三维空间的交互控制方法和装置、智能终端
CN111639603B (zh) 利用手部动作的功能触发方法、系统、终端及存储介质
Haubner et al. Recognition of dynamic hand gestures with time-of-flight cameras
Cong Research on fingertip positioning and human-computer interaction technology based on stereo vision
Celentano et al. Gestures, shapes and multitouch interaction
Mogol et al. Real-time 3D hand posture reconstruction using stereo vision
JPH03224027A (ja) コンピュータ・システムとコンピュータ・システムに対する入力データを求める方法
Prasad et al. iCrux: an artificially intelligent virtual screen technology

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Room 101, No. 1, East Ring 3rd Street, Jitiagang, Huangjiang Town, Dongguan City, Guangdong Province, 523000

Applicant after: Guangdong Zhengyang Sensor Technology Co.,Ltd.

Address before: 523000 Jitigang Village, Huangjiang Town, Dongguan City, Guangdong Province

Applicant before: DONGGUAN ZHENGYANG ELECTRONIC MECHANICAL Co.,Ltd.

GR01 Patent grant
GR01 Patent grant