CN115914701A - 功能选择方法、装置、电子设备及存储介质 - Google Patents

功能选择方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN115914701A
CN115914701A CN202110921416.7A CN202110921416A CN115914701A CN 115914701 A CN115914701 A CN 115914701A CN 202110921416 A CN202110921416 A CN 202110921416A CN 115914701 A CN115914701 A CN 115914701A
Authority
CN
China
Prior art keywords
target
function
interface
determining
target function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110921416.7A
Other languages
English (en)
Inventor
翟润熙
张月婷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TCL Technology Group Co Ltd
Original Assignee
TCL Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TCL Technology Group Co Ltd filed Critical TCL Technology Group Co Ltd
Priority to CN202110921416.7A priority Critical patent/CN115914701A/zh
Publication of CN115914701A publication Critical patent/CN115914701A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例公开了一种功能选择方法、装置、电子设备及存储介质。其中,方法包括:响应于界面显示指令,确定目标功能界面,然后获取目标人体部位的位置信息,再根据位置信息在目标功能界面中确定目标功能区域,最后执行目标功能区域对应的目标功能操作。通过对目标人体部位的识别,能够快速确定出对应的目标功能操作并执行对应的目标功能操作,提高了用户对电子设备的操控效率。

Description

功能选择方法、装置、电子设备及存储介质
技术领域
本申请涉及终端控制领域,具体涉及一种功能选择方法、装置、电子设备及存储介质。
背景技术
随着显示技术的不断发展,类似电视这样的显示产品已经广泛出现在人们的生活中。针对电视的操控,往往是采用具有实体按键的遥控器来对电视进行操控,从而实现对应的功能。
但是,由于实体按键的数量有限,且操作逻辑单一,在实现一些功能的时候较为复杂,并且需要较长的操作时间和操作步骤。
发明内容
本申请实施例提供一种功能选择方法、装置、电子设备及存储介质。该功能选择方法能够提升用户对电子设备的操控效率。
第一方面,本申请实施例提供了一种功能选择方法,包括:
响应于界面显示指令,确定目标功能界面;
获取目标人体部位的位置信息;
根据所述位置信息,在所述目标功能界面中确定目标功能区域;
执行所述目标功能区域对应的目标功能操作。
第二方面,本申请实施例提供了一种手势控制装置,包括:
第一确定模块,用于响应于界面显示指令,确定目标功能界面;
获取模块,用于获取目标人体部位的位置信息;
第二确定模块,用于根据所述位置信息,在所述目标功能界面中确定目标功能区域;
执行模块,用于执行所述目标功能区域对应的目标功能操作。
第三方面,本申请实施例提供了一种电子设备,该电子设备存储有可执行程序代码的存储器、与所述存储器耦合的处理器,所述处理器调用所述存储器中存储的所述可执行程序代码,执行本申请实施例提供的功能选择方法中的步骤。
第四方面,本申请实施例提供了一种计算机可读存储介质,所述存储介质存储有多条指令,所述指令适于处理器进行加载,以执行本申请实施例提供的功能选择方法中的步骤。
本申请实施例中,电子设备响应于界面显示指令,确定目标功能界面,然后获取目标人体部位的位置信息,再根据位置信息在目标功能界面中确定目标功能区域,最后执行目标功能区域对应的目标功能操作。通过对目标人体部位的识别,能够快速确定出对应的目标功能操作并执行对应的目标功能操作,提高了用户对电子设备的操控效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的功能选择的场景示意图。
图2是本申请实施例提供的功能选择方法的第一流程示意图。
图3是本申请实施例提供的功能选择方法的第二流程示意图。
图4是本申请实施例提供的确定目标功能界面的第一流程示意图。
图5是本申请实施例提供的目标功能界面的第一示意图。
图6是本申请实施例提供的确定目标功能界面的第二流程示意图。
图7是本申请实施例提供的目标功能界面的第二示意图。
图8是本申请实施例提供的目标功能界面的第三示意图。
图9是本申请实施例提供的确定目标功能区域的流程示意图。
图10是本申请实施例提供的目标功能界面的第四示意图。
图11是本申请实施例提供的目标功能界面的第五示意图。
图12是本申请实施例提供的目标功能界面的第六示意图。
图13是本申请实施例提供的功能选择装置的结构示意图。
图14是本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在现有技术中,用户往往是通过触摸实体按键、触摸电容传感器等方式来实现对电子设备的操控。通过实体按键的操控方式,在按键较少的情况下,通过实体按键来逐步控制电子设备,操控步骤繁琐导致操控效率低下。通过触摸电容传感器来实现触控操作,在电子设备的触控界面过大时,不利于用户的触控操作,导致用户对电子设备的操控效率低下。
为了解决该技术问题,本申请实施例提供了一种功能选择方法、装置、电子设备及存储介质。该功能选择方法能够提高用户对电子设备的操控效率。
请参阅图1,图1是本申请实施例提供的功能选择的场景示意图。
其中,电子设备上设置有摄像头、深度传感器等器件,电子设备可以捕获用户肢体,然后根据肢体生成界面显示指令。比如,用户肢体可以是用户手部,电子设备可以捕获用户手部,通过识别用户手部来生成界面显示指令。
电子设备上还可以设置有麦克风等声音捕获器件,电子设备可以对用户的唤醒语音进行捕获,然后对用户的唤醒语音进行识别,比如识别出用户唤醒语音中的关键词,从而根据关键词确定生成界面显示指令。
当电子设备根据用户肢体或者用户的唤醒语音生成界面显示指令之后,会响应界面指示指令,并根据界面显示指令确定目标功能界面。例如,电子设备可以根据界面显示指令确定当前页面中对应的功能选项,然后根据功能选项确定出对应的目标功能界面。
然后电子设备会获取目标人体部位的位置信息,比如用户手部在移动的过程中,可以获取每个时间点用户手部在空间中的移动位置。再根据位置信息在目标界面中确定目标功能区域。其中,目标人体部位还可以是用户的其他肢体部位,比如头部、手臂等肢体部位。
比如,目标功能界面是一个圆形的轮盘界面,在目标功能界面中包含了多个功能区域,每个功能区域都对应一个功能选项。电子设备可以根据目标人体部位的位置信息,确定出在电子设备内显示页面上的目标位置,目标位置处于哪一个功能区域,就确定该功能区域为目标功能区域,并将目标功能区域的功能选项确定为目标功能操作。
最后,电子设备会执行目标功能区域对应的目标功能操作。例如,调节音量、调节亮度、打开应用等功能操作。从而实现用户快速的选择到对应功能,从而实现对电子设备的功能操作,提高了用户控制电子设备的操控效率。
需要说明的是,电子设备可以包括智能电视、电脑、智能手机等电子设备。
请参阅图2,图2是本申请实施例提供的功能选择方法的第一流程示意图。该功能选择方法可以包括以下步骤:
110、响应于界面显示指令,确定目标功能界面。
在一些实施方式中,在电子设备响应于界面显示指令,确定目标功能界面之前,电子设备获取用户的唤醒语音,根据唤醒语音生成界面显示指令。比如,电子设备可以对唤醒语音中的关键词进行识别,然后根据关键词生成对应的界面显示指令。
其中,界面显示指令是用于触发电子设备确定目标功能界面的指令。界面显示指令可以是包含了指示电子设备生成预设的目标功能界面的指令。比如,当电子设备响应界面显示指令之后,可以直接根据界面显示指令确定并生成一个布局完整的目标功能界面,在该功能界面里,每个功能图标的位置都是预先设置好的。
界面显示指令还可以是包含了页面信息的指令,比如页面信息包含页面类型和页面内容,然后电子设备可以根据页面信息确定对应的功能选项,然后根据选项对当前页面进行划分,从而确定目标功能界面。
需要说明的是,目标功能界面中包含了多个功能区域,每一功能区域对应一功能选项,当触发功能区域中对应的功能选项时,会触发对应电子设备执行该功能选项对应的功能操作。目标界面中还包含了多个缓冲区域,缓冲区域不对应任何功能选项,缓冲区域为目标人体部位移动时的缓冲地带。
电子设备可以直接根据关键词对应的界面显示指令来确定出一个具体的目标功能界面,比如关键词为“打开菜单”,电子设备在响应关键词对应的界面指令后,直接生成的“菜单”界面。
在一些实施方式中,在电子设备响应于界面显示指令,确定目标功能界面之前,电子设备可以识别用户肢体,根据用户肢体生成界面显示指令。比如,可以对用户手部进行识别,从而确定出用户手部对应的目标唤醒手势,然后根据预设的唤醒手势与界面显示指令的对应关系,确定目标唤醒手势对应的界面显示指令。
电子设备可以直接响应目标唤醒手势对应的界面显示指令,然后根据该界面显示指令确定目标唤醒手势对应的目标功能界面。比如,电子设备根据界面显示指令确定当前页面的页面信息,然后确定页面信息对应的功能选项,最后根据功能选项在当前页面中确定目标功能界面。
也就是说,电子设备根据目标唤醒手势对应的界面显示指令,确定需要生成目标功能界面,但是该目标功能界面是根据实际的当前页面情况来确定的。
在一些实施方式中,在电子设备响应于界面显示指令,确定目标功能界面之前,电子可以直接对用户手部进行识别,且在第预设时长内根据用户手部识别到预设唤醒手势,则根据预设唤醒手势生成界面显示指令。在电子设备识别用户手部的过程中,如果在第一预设时长内没有根据用户的手部识别出预设唤醒手势,那么就停止根据用户手部生成界面指令。
需要说明的是,每一个界面指令可以对应一个预设唤醒手势,当电子设备识别出预设唤醒手势时,可以直接根据预设唤醒手势确定出对应的界面显示指令。电子设备可以根据该预设唤醒手势对应的界面指令,直接确定出一个目标功能界面,该目标功能界面是预设好的,该目标功能界面中的界面布局是已经确定好的。
例如,预设唤醒手势为用手掌五指张开,那么,此时可以确定手掌五指张开对应的界面显示指令,且该界面显示指令对应一个具体的目标功能界面,在该目标功能界面内,有多个功能选项分别对应的功能区域,比如功能选项有音量加、音量减、快进、快退等功能选项,每一功能选项在目标功能界面内都有一个对应的功能区域。
需要说明的是,目标功能界面可以是多种界面形式。比如,目标功能界面可以是矩形排列布局的功能界面、或者圆形排列布局的功能界面。目标功能界面还可以是当前显示页面的布局,比如在用户观看影视应用里面查看多个视频时,多个视频会有对应的视频图片分布在当前页面上,就可以按照当前页面视频图片的分布来确定目标功能界面。
120、获取目标人体部位的位置信息。
在一些实施方式中,目标人体部位可以是用户手部,电子设备可以通过摄像头、景深传感器、激光传感器等传感器实时检测目标人体部位的位置信息。比如,目标人体部位在空间中移动,通过摄像头检测用户手部每一个移动位置,并确定该移动位置对应的时间点,每个移动位置及每个移动位置对应的时间点构成用户手部的位置信息。也就是说,位置信息包括目标人体部位的移动方向、移动距离、移动速度等运动信息。
电子设备可以利用目标人体部位的位置信息确定出目标人体部位的运动信息,比如运动信息中的移动速度、移动距离和移动方向等。具体的,电子设备可以获取目标人体部位的初始移动位置和停止移动位置,以及获取初始移动位置对应的时间点、停止移动位置对应的时间点,就能够确定出目标人体部位的移动速度、移动距离和移动方向。
例如,通过初始移动位置和停止移动位置分别对应的坐标,就能够求取目标人体部位的移动方向和移动距离,通过初始移动位置对应的时间点和停止移动位置对应的时间点之间的时间间隔,通过移动距离和时间间隔就能够确定出目标人体部位的移动速度。
在一些实施方式中,电子设备可以判断在第三预设时长内是否获取到目标人体部位,若在第三预设时长内未获取到目标人体部位,则返回至默认显示界面,默认显示界面可以是当前页面,默认显示界面也可以是桌面等其他界面。若在第三预设时长内获取到目标人体部位,则获取目标人体部位的位置信息。
130、根据位置信息,在目标功能界面中确定目标功能区域。
在一些实施方式中,电子设备可以根据目标人体部位的位置信息确定目标人体部位的运动信息,然后根据目标人体部位的运动信息确定出目标人体部位在目标功能界面中对应的目标位置,最后根据目标位置确定出目标功能界面中的目标功能区域。
其中,目标功能区域为目标位置再目标功能界面中所处的功能区域,目标功能区域对应有一个功能选项,当目标位置处于该目标功能区域时,则确定该功能选项为待执行的功能选项。
在一些实施方式中,电子设备可以从运动信息中确定出目标人体部位的移动方向和移动距离,然后根据第二预设映射关系确定目标人体部位的移动距离在目标功能界面中的映射移动距离。其中第二预设映射关系是目标人体部位在空间中的移动距离和目标人体部位在目标界面中的移动距离之间的映射关系。也就是说,目标人体部位在空间中的移动距离,根据第二预设映射关系,就能够确定出在目标功能界面中对应的映射移动距离。
其中,电子设备可以通过确定电子设备与目标人体部位之间的空间距离,然后根据空间距离确定出第二预设映射关系。
比如,电子设备可以通过景深摄像头、红外传感器、深度传感器等器件来确定出电子设备和目标人体部位之间的空间距离。当空间距离在第一距离范围内时,第一距离范围为目标人体部位比较靠近电子设备的距离,比如第一距离范围为0~1m的距离范围。如果目标人体部位在第一距离范围内,目标人体部位离电子设备较近,电子设备的摄像头检测目标人体部位的范围较小,目标人体部位在空间移动距离可以直接转化为映射移动距离,比如目标人体部位在空间的移动距离为20cm,那么直接确定映射移动距离为20cm。
当空间距离在第二距离范围内时,第二距离范围为目标人体部位离电子设备较远的距离范围,比如第二距离范围为1~3m。如果目标人体部位在第二距离范围内,目标人体部位离电子设备较远,电子设备的摄像头检测目标人体部位的范围较大,目标人体部位在空间移动距离可以乘以距离系数转化为映射移动距离,比如距离系数为0.7,目标人体部位在空间的移动距离为20cm,那么根据距离系数确定映射移动距离为14cm。
在实际应用中,可以通过上述方式来确定出目标人体部位在空间中的移动距离和目标人体部位在目标界面中的移动距离之间的第二预设映射关系。需要说明的是,在实际应用中,具体的第二预设映射关系还可以根据实际需求来设置。
在一些实施方式中,电子设备可以确定目标人体部位的目标尺寸,然后根据目标尺寸和移动距离确定移动距离在目标功能界面中的映射移动距离。具体地,电子设备可以确定移动距离和目标尺寸的比值,根据比值和映射移动距离的第三预设映射关系,确定移动距离在目标功能界面中的映射移动距离。
例如,目标人体部位是用户手部,目标尺寸为用户手部的手掌宽度,然后确定移动距离和手掌宽度之间的比值,再通过比值和映射移动距离的第三预设映射关系,就能够得到目标人体部位在目标功能界面中的映射移动距离。比如,手掌宽度为5cm,移动距离为20cm,那么移动距离和手掌宽度之间的比值为4,根据第三预设映射关系,确定比值4对应的映射移动距离为18cm,那么就确定目标人体部位在目标功能界面中对应的映射移动距离为18cm。
在一些实施方式中,电子设备可以直接将目标人体部位在空间中的移动方向确定为目标人体部位在目标功能界面中对应的映射移动方向。即空间中目标人体部位朝着某一方向移动,那么目标界面中目标人体部位对应的焦点也朝着该方向移动。
电子设备将目标人体部位的移动方向确定为目标功能界面中的映射移动方向。在确定好目标人体部位在目标功能界面中对应的映射移动距离和映射移动方向之后,就能够确定出目标界面中的目标位置。
比如,电子设备可以在目标功能界面中确定出目标界面中心,然后以目标界面中心为起点,根据映射移动距离和映射移动方向在目标功能界面中确定出目标位置。其中,目标界面中心可以是目标功能界面的中点,目标界面中心也可以是电子设备当前显示页面的中点。
在一些实施方式中,目标功能界面包括多个功能区域和多个缓冲区域,其中功能区域是用于触发功能选项对应的功能操作的区域,缓冲区域是防止用户误触发执行功能操作的区域。比如每一个功能选项都对应一个功能区域和缓冲区域,当目标人体部位在移动时,在目标功能界面中目标人体部位对应的目标位置也会发生改变,当目标位置位于缓冲区域时,则不会选定任何功能操作,也不会触发任何功能操作;当目标位置位于功能区域时,则会选取目标功能区域对应的功能选项为目标功能操作。
当电子设备在确定好目标位置之后,如果确定目标位置处于任一功能区域,则将该功能区域确定为目标功能区域。
140、执行目标功能区域对应的目标功能操作。
当电子设备确定出目标功能区域之后,可以将目标功能区域对应的功能选项确定为目标功能操作,然后电子设备执行该目标功能操作,从而实现对应的功能。比如,节音量、调节亮度、打开应用等功能操作。
其中,目标功能区域对应一功能选项,当目标位置处于目标功能区域时,确定该功能选项为待执行功能选项,当电子设备执行该待执行功能选项时,则执行该功能选项对应的目标功能操作。
在一些实施方式中,在电子设备执行目标功能区域对应的目标功能操作之前。电子设备还可以识别用户手部对应的选择手势,比如,通过识别用户手部的关键点,根据关键点确定用户手部对应的选择手势。然后电子设备根据选择手势执行目标功能区域对应的目标功能操作。
在电子设备根据选择手势执行目标功能区域对应的目标功能操作之前,电子设备还可以判断在第二预设时长内是否识别出选择手势,若在第二预设时长内识别出选择手势,则根据选择手势执行目标功能区域对应的目标功能操作。若在第二预设时长内未识别出选择手势,则返回至默认显示界面。其中,默认显示界面可以是当前页面。
本申请实施例中,电子设备响应于界面显示指令,确定目标功能界面,然后获取目标人体部位的位置信息,再根据位置信息在目标功能界面中确定目标功能区域,最后执行目标功能区域对应的目标功能操作。通过对目标人体部位的识别,能够快速确定出对应的目标功能操作并执行对应的目标功能操作,提高了用户对电子设备的操控效率。
请继续参阅图3,图3是本申请实施例提供的功能选择方法的第二流程示意图。该功能选择方法可以包括以下步骤:
210、识别用户手部对应的目标唤醒手势,确定目标唤醒手势对应的界面显示指令。
在一些实施方式中,电子设备可以对用户肢体进行识别,比如对用户手部进行识别,从而确定出用户手部对应的目标唤醒手势。比如,人的手部上分布着多个关键点,电子设备可以识别用户手部的关键点,然后根据各个关键点之间的位置关系确定出用户手部对应的目标唤醒手势。
其中,电子设备可以采用media pipe算法,比如电子设备获取用户手部图像,将手部图像输入到手势状态机(gesture sate machine)中,然后选择对应的动作发生器(action generator),然后对手势进行分析,从而得到对应的分析数据并输出,以确定用户手部对应的手势。
电子设备根据预设的唤醒手势与界面显示指令的对应关系,确定目标唤醒手势对应的界面显示指令。比如,电子设备可以在手势数据库中存储多个唤醒手势以及每一个唤醒手势对应的界面显示指令。当确定出目标唤醒手势后,通过手势数据库,确定出目标唤醒手势对应的界面显示指令。
需要说明的是,目标唤醒手势对应的界面显示指令可以是包含具体目标功能界面布局的指令。比如,当确定好界面指令之后,可以直接根据界面指令确定具体的目标功能界面布局,然后直接生成一个目标功能界面,该目标功能界面中包含了多个功能区域,每一功能区域都对应一种功能操作。
目标唤醒手势对应的界面显示指令还可以是不包含具体目标功能界面布局的指令。比如,电子设备在确定好界面指令之后,还需要根据电子设备显示的当前页面来生成当前页面对应的界面布局的目标功能界面。
220、根据界面显示指令确定当前页面的页面信息。
在一些实施方式中,界面显示指令中不包含具体的界面布局时,此时,电子设备可以根据界面显示指令确定当前页面的页面信息。页面信息包括当前页面的页面类型,当前页面的页面内容等。
比如,页面类型包括桌面、媒体播放页面、屏保页面等等。页面内容包括当前页面所显示的内容,比如视频详情页内容、视频对应的图片、UI图标内容等等。
230、确定页面信息对应的功能选项。
在一些实施方式中,电子设备可以根据页面信息确定当前页面对应的功能选项。比如,当前页面的页面类型为桌面,则确定页面信息对应的功能选项有“菜单、音量加、音量减、设置、亮度加、亮度减、语音助手”等功能选项。
又比如,当前页面的页面内容包括视频对应的图片,比如视频A对应的图片A,视频B对应的图片B,视频C对应的图片C,这些图片是可以点击操作的,当点击图片后则进入视频播放界面,此时当前页面中有图片A、图片B、图片C三个可点击图片,那么就确定页面信息对应的功能选项有三个。
需要说明的是,在电子设备的实际应用场景中,页面类型和页面内容是多变的,电子设备在确定页面信息对应的功能选项时,可以根据页面类型和/或页面内容来确定出当前页面的功能选项。
240、根据功能选项在当前页面中确定目标功能界面。
在一些实施方式中,功能选项可以是当前页面中的图片,比如某一视频的图片,然后根据每一个功能选项对应的图片来对当前页面进行划分,从而得到目标功能界面。
具体的,请一并参阅图4,图4是本申请实施例提供的确定目标功能界面的第一流程示意图。
在一些实施方式中,电子设备根据功能选项在当前页面中确定目标功能界面具体可以通过以下步骤进行:
310、确定每一功能选项对应的功能图标。
电子设备在确定多个功能选项之后,可以确定多个功能选项中每个功能选项对应的功能图标。比如,多个功能选项对应的功能图标是多个视频对应图片,比如视频A对应的功能图标就是图片A。
需要说明的是,功能图标是可以点击的图片,在点击功能图标时,会产生功能图标对应的指令,电子设备根据该指令执行对应的功能操作,比如打开该功能图标对应的应用。
320、确定每一功能图标在当前页面所处的位置。
在一些实施方式中,电子设备可以确定每一个功能图标在当前页面中的坐标,然后根据每个功能图标的坐标确定出功能图标在当前页面中所处的位置。
请一并参阅图5,图5是本申请实施例提供的目标功能界面的第一示意图。
如图5所示,在当前页面S1中,有功能图标A、功能图标B、功能图标C。然后电子设备可以确定功能图标A、功能图标B、功能图标C在当前页面中分别对应的坐标,就可以确定出每个功能图标在当前页面中所处的位置。
330、根据每一功能图标在当前页面所处的位置对当前页面进行划分,以确定目标功能界面。
在一些实施方式中,电子设备可以根据每一功能图标在当前页面的位置确定多个功能图标在当前页面中对应的目标中心。然后确定每一功能图标的图标中心。最后根据图标中心以及目标中心对当前页面进行划分,以确定目标功能界面。
具体地,电子设备可以根据每相邻的两个功能图标分别对应的图标中心及目标中心确定每相邻的两个功能图标对应的角平分线,然后根据角平分线在当前页面中划分每一功能选项对应的角度范围,最后根据每一功能选项对应的角度范围对当前页面进行划分,以确定目标功能界面。
其中,目标中心可以是当前页面的页面中心,目标中心还可以是多个功能图标对应的几何中心。
在一些实施方式中,“根据每相邻的两个功能图标分别对应的图标中心及目标中心确定每相邻的两个功能图标对应的角平分线”可以通过以下方式进行:
电子设备先确定每相邻的两个图标中心与目标中心形成的目标角度,然后根据目标角度确定每相邻的两个功能图标对应的角平分线。
比如,如图5所示,功能图标A、功能图标B为相邻的两个功能图标,电子设备可以先确定出功能图标A的图标中心和功能图标B的图标中心。然后将功能图标A的图标中心和目标中心O相连,将功能图标A的图标中心和目标中心O相连,那么功能图标A的图标中心与功能图标B的图标中心相对于目标中心O就会形成目标角度。然后根据该目标角度确定功能图标A与功能图标B对应的角平分线。
同理,通过该方式,还可以确定出功能图标A与功能图标C对应的角平分线,功能图标B与功能图标C对应的角平分线。
那么,根据功能图标A与功能图标B对应的角平分线,以及功能图标A与功能图标C对应的角平分线就能够确定出功能图标A对应的角度范围,从而确定出功能图标A对应的功能选项的角度范围。
同理,可以通过该方式确定出功能图标B对应的功能选项的角度范围,功能图标C对应的功能选项的角度范围。
最后,电子设备根据每一功能选项对应的角度范围对当前页面进行划分,以确定目标功能界面。比如,通过功能图标A对应的功能选项的角度范围确定出功能图标A功能区域S2,通过功能图标C对应的功能选项的角度范围确定出功能图标B功能区域S3,通过功能图标C对应的功能选项的角度范围分别确定出功能图标C功能区域S4。
在一些实施方式中,功能选项是已经确定好的功能选项,比如音量加、音量减、快进、快退等功能选项,但是,在当前页面中,每一个功能选项并没有确定好对应的功能区域,需要根据功能选型对应的目标参数来对当前页面进行划分,从而确定出功能选项对应的目标功能界面。
具体的,请一并参阅图6,图6是本申请实施例提供的确定目标功能界面的第二流程示意图。
在一些实施方式中,电子设备根据功能选项在当前页面中确定目标功能界面具体可以通过以下步骤进行:
410、确定功能选项对应的目标参数。
功能选项对应的目标参数包括功能选项的数量、功能选项的等级、功能选项的类型等。其中,功能选项为根据页面信息确定好的功能选项,比如音量加、音量减、快进、快退等功能选项,功能选项在当前页面中并没有划分对应的功能区域,由于每一功能选项可以都有对应的目标参数,可以根据功能选项对应的目标参数来对当前页面进行划分,从而确定出目标功能界面。
比如,功能选项的等级可以是根据用户使用该功能选项的频率决定的,当用户越是频繁使用该功能选项时,那么该功能选项对应的等级就越高,当用户较少使用该功能选项时,那么该功能选项对应的等级就越低。
功能选项的类型可以是根据每个功能选项被使用的次数来确定的,比如从数据库中确定出每个功能选项被使用的次数,根据每个功能选项被使用的次数确定每个功能选项的类型。例如,“音量加、音量减、上一节目、下一节目”等功能选项使用次数较多,则这些功能选项的类型为高频使用类型。“菜单、桌面”等功能选项使用次数居中,则这些功能选项的类型为中频使用类型。“图像设置、声音设置”等功能选项使用次数较少,则这些功能选项的类型为低频使用类型。
需要说明的是,还可以通过其他方式来确定每一个功能选项的等级和类型,以上只是例举,不能对本申请构成限定。
420、根据目标参数在当前页面中确定目标功能界面。
在一些实施方式中,电子设备可以根据功能选项的数量,将当前页面划分为多个功能区域,以确定目标功能界面,其中每一功能区域对应一功能选项,然后在当前页面中显示目标功能界面。
具体的,电子设备可以根据功能选项的数量确定出对应的目标布局类型,然后根据目标布局类型将当前页面划分为多个功能区域,以确定目标功能界面。
比如,电子设备可以确定功能选项的数量对应的数量范围,然后根据数量范围和布局类型的第一预设映射关系,最后在预设布局类型中确定目标布局类型,布局类型包括矩形排列布局或者圆形排列布局。然后根据目标布局类型将当前页面划分为多个功能区域,以确定目标功能界面。
例如,功能选项的数量对应4~8的数量范围,可以采用矩形排列布局。功能选项的数量对应9~15的数量范围,可以采用圆形排列布局。
需要说明的是,在实际使用场景中,可以设置多个数量范围,每一个数量范围可以对应一种布局类型,从而形成数量范围和布局类型的第一预设映射关系。
在一些实施方式中,若目标布局类型为矩形排列布局,电子设备根据功能选项的数量确定矩形排列布局的每一侧边对应的目标功能选项数量,然后根据目标功能选项数量及矩形排列布局将当前页面划分为多个功能区域,以确定目标功能界面。
请一并参阅图7,图7是本申请实施例提供的目标功能界面的第二示意图。
比如,在确定功能选项的数量为8的时候,可以确定矩形布局的每一个侧边对应的目标功能选项数量为3,即矩形的上侧边、下侧边、左侧边、右侧边分别对应的功能选项数量均为3。
如图7所示,上侧边对应功能选项H、A、B,左侧边对应功能选项H、G、F,下侧边对应功能选项D、E、F,右侧边对应功能选项B、C、D。
在一些实施方式中,若目标布局类型为圆形排列布局,电子设备根据功能选项的数量确定圆形排列布局的半径,然后根据半径及圆形排列布局将当前页面划分为多个功能区域,以确定目标功能界面。
请一并参阅图8,图8是本申请实施例提供的目标功能界面的第三示意图。
比如,在功能选项数量较少的情况下,每个功能图标之间会有较大的空间,因此,可以将每个功能图标靠近圆形排列布局的中心M,也就是说,每个功能图标距离圆形排列布局的中心M的距离较小,那么整个圆形排列布局的目标功能界面中,圆形排列布局的中心M相对于每个功能图标的半径就相对较小。
又比如,在功能选项数量较多的情况下,如图8所示,如果每个功能选型对应的功能图标相对于圆形排列布局的中心M的距离较近,那么各个功能图标之间的距离就会较近,用户在实际选择功能图标的时候,由于各个功能图标之间的距离较近,会导致用户误选择其他的功能图标。
考虑到该问题,可以在功能选项数量较多的情况下,设置每个功能选型对应的功能图标相对于圆形排列布局的中心M的距离较远,那么整个圆形排列布局的目标功能界面中,圆形排列布局的中心M相对于每个功能图标的半径就相对较大,这样每个功能图标之间的距离就远,用户在实际选择功能图标的时候,由于各个功能图标之间的距离较远,用户就不容易误选择其他的功能图标。
在一些实施方式中,电子设备还可以确定功能选项的等级和/或类型,然后根据功能选项的等级和/或类型在所述当前页面中划分每一功能选项对应的角度范围,最后根据每一功能选项对应的角度范围将当前页面划分为多个功能区域,以确定目标功能界面。
比如,用户在使用不同的功能时,等级越高的功能选项对应的角度范围越大,等级越低的功能选项对应的角度范围越小。高频使用类型的功能选项对应的角度范围越大,低频使用类型的功能选项对应的角度范围越小。
又比如,电子设备可以先根据功能选项的多个类型,然后确定每一类型功能选项对应的最大角度范围和最小角度范围,然后再确定一功能选项的等级,然后根据该功能选项的等级,在该功能选项对应的类型的最大角度范围至最小角度范围内调整该功能选项的角度范围。
例如,功能选项A对应的类型为类型A,类型A对应的可调整角度范围为40度~60度,那么根据功能选项A对应的等级,在40度~60度范围内调整出功能选项A对应的角度范围。
在一些实施方式中,电子设备可以根据功能选项的数量确定出对应的目标布局类型,然后再根据功能选项的等级和/或类型确定每一功能选项在当前页面中的角度范围,最后根据每一功能选项对应的角度范围和目标布局类型确定目标功能界面。
请继续参阅图3,250、获取目标人体部位的位置信息。
在一些实施方式中,电子设备可以获取目标人体部位的位置信息,比如通过摄像头来捕获目标人体部位,然后确定出目标人体部位在空间中在不同时间点所述的位置。
260、根据位置信息在目标功能界面中确定目标功能区域。
请一并参阅图9,图9是本申请实施例提供的确定目标功能区域的流程示意图。电子设备根据位置信息在目标功能界面中确定目标功能区域可以通过如下方式执行:
510、根据位置信息确定目标人体部位的运动信息。
电子设备可以利用目标人体部位的位置信息确定出目标人体部位的运动信息,比如运动信息中的移动速度、移动距离和移动方向等。具体的,电子设备可以获取目标人体部位的初始移动位置和停止移动位置,以及获取初始移动位置对应的时间点、停止移动位置对应的时间点,就能够确定出目标人体部位的移动速度、移动距离和移动方向。
例如,通过初始移动位置和停止移动位置分别对应的坐标,就能够求取目标人体部位的移动方向和移动距离,通过初始移动位置对应的时间点和停止移动位置对应的时间点之间的时间间隔,通过移动距离和时间间隔就能够确定出目标人体部位的移动速度。
520、根据运动信息确定目标功能界面中的目标位置。
在一些实施方式中,电子设备可以从运动信息中确定出目标人体部位的移动方向和移动距离,然后根据第二预设映射关系确定目标人体部位的移动距离在目标功能界面中的映射移动距离。其中第二预设映射关系是目标人体部位在空间中的移动距离和目标人体部位在目标界面中的移动距离之间的映射关系。也就是说,目标人体部位在空间中的移动距离,根据第二预设映射关系,就能够确定出在目标功能界面中对应的映射移动距离。
其中,电子设备可以通过确定电子设备与目标人体部位之间的空间距离,然后根据空间距离确定出第二预设映射关系。
比如,电子设备可以通过景深摄像头、红外传感器、深度传感器等器件来确定出电子设备和目标人体部位之间的空间距离。当空间距离在第一距离范围内时,第一距离范围为目标人体部位比较靠近电子设备的距离,比如第一距离范围为0~1m的距离范围。如果目标人体部位在第一距离范围内,目标人体部位离电子设备较近,电子设备的摄像头检测目标人体部位的范围较小,目标人体部位在空间移动距离可以直接转化为映射移动距离,比如目标人体部位在空间的移动距离为20cm,那么直接确定映射移动距离为20cm。
当空间距离在第二距离范围内时,第二距离范围为目标人体部位离电子设备较远的距离范围,比如第二距离范围为1~3m。如果目标人体部位在第二距离范围内,目标人体部位离电子设备较远,电子设备的摄像头检测目标人体部位的范围较大,目标人体部位在空间移动距离可以乘以距离系数转化为映射移动距离,比如距离系数为0.7,目标人体部位在空间的移动距离为20cm,那么根据距离系数确定映射移动距离为14cm。
在实际应用中,可以通过上述方式来确定出目标人体部位在空间中的移动距离和目标人体部位在目标界面中的移动距离之间的第二预设映射关系。需要说明的是,在实际应用中,具体的第二预设映射关系还可以根据实际需求来设置。
在一些实施方式中,电子设备可以确定目标人体部位的目标尺寸,然后根据目标尺寸和移动距离确定移动距离在目标功能界面中的映射移动距离。具体地,电子设备可以确定移动距离和目标尺寸的比值,根据比值和映射移动距离的第三预设映射关系,确定移动距离在目标功能界面中的映射移动距离。
例如,目标人体部位是用户手部,目标尺寸为用户手部的手掌宽度,然后确定移动距离和手掌宽度之间的比值,再通过比值和映射移动距离的第三预设映射关系,就能够得到目标人体部位在目标功能界面中的映射移动距离。比如,手掌宽度为5cm,移动距离为20cm,那么移动距离和手掌宽度之间的比值为4,根据第三预设映射关系,确定比值4对应的映射移动距离为18cm,那么就确定目标人体部位在目标功能界面中对应的映射移动距离为18cm。
在一些实施方式中,电子设备可以直接将目标人体部位在空间中的移动方向确定为目标人体部位在目标功能界面中对应的映射移动方向。即空间中目标人体部位朝着某一方向移动,那么目标界面中目标人体部位对应的焦点也朝着该方向移动。
电子设备将目标人体部位的移动方向确定为目标功能界面中的映射移动方向。在确定好目标人体部位在目标功能界面中对应的映射移动距离和映射移动方向之后,就能够确定出目标界面中的目标位置。
比如,电子设备可以在目标功能界面中确定出目标界面中心,然后以目标界面中心为起点,根据映射移动距离和映射移动方向在目标功能界面中确定出目标位置。
530、根据目标位置在目标功能界面中确定出目标功能区域。
在一些实施方式中,目标功能界面包括多个功能区域和多个缓冲区域,其中功能区域是用于触发功能选项对应的功能操作的区域,缓冲区域是防止用户误触发执行功能操作的区域。比如每一个功能选项都对应一个功能区域和缓冲区域,当目标人体部位在移动时,在目标功能界面中目标人体部位对应的目标位置也会发生改变,当目标位置位于缓冲区域时,则不会选定任何功能操作,也不会触发任何功能操作;当目标位置位于功能区域时,则会选取目标功能区域对应的功能选项为目标功能操作。
当电子设备在确定好目标位置之后,如果确定目标位置处于任一功能区域,则将该功能区域确定为目标功能区域。
如图6所示,功能选项H对应有功能区域X1和缓冲区域X2,如果目标位置处于功能区域X1中,那么电子设备直接确定功能区域X1为目标功能区域,同时确定功能选项H为需要执行的目标功能操作。
如果目标位置处于缓冲区域X2中,则电子设备重新确定目标位置,或者返回至默认显示界面,或者电子设备不执行任何操作。
在一些实施方式中,由于不同的功能选项的等级不同,比如高等级的功能选项用户往往希望更容易触发,低等级的功能选项用户往往希望避免误触发。此时可以对高等级的功能选项对应的功能区域设置大一些,对高等级的缓冲区域设置小一些。可以对低等级的功能选项对应的功能区域设置小一些,对低等级的缓冲区域设置大一些。
在一些实施方式中,在电子设备确定好目标功能区域之后,会突出显示目标功能区域对应的功能图标,比如扩大功能图标、或者让功能图标循环变大变小来产生呼吸效果、或者在功能图标上设置高亮区域等等。
在一些实施方式中,在确定目标功能界面之后,将目标功能界面的目标界面中心确定为默认焦点,然后根据位置信息确定目标人体部位的初始位置,并将初始位置与默认焦点对应,并显示默认焦点对应的功能图标。
比如,如图10所示,图10是本申请实施例提供的目标功能界面的第四示意图。当识别出用户手部的目标唤醒手势之后,将初次识别到目标人体部位的位置确定为初始位置,然后将初始位置与默认焦点对应,并显示默认焦点对应的功能图标,即功能选项J对应的功能图标。
在一些实施方式中,在确定出目标位置之后,目标位置可能处于目标界面中心,目标界面中心也对应有功能选项,此时电子设备会显示该功能选项对应的功能图标,
如图9所示,当标位置处于目标界面中心,则扩大功能选项J对应的功能图标。
在一些实施方式中,当目标人体部位发生改变时,目标位置也会发生改变,比如,如图11所示,图11是本申请实施例提供的目标功能界面的第五示意图。比如目标位置从功能选项J对应的功能区域移动到功能选项H对应的功能区域。在此过程中,当目标位置离开功能选项J对应的功能区域,功能选项J对应的功能图标变回默认的样式,当目标位置处于功能选项H对应的功能区域,则目标位置对应的焦点在功能选项H对应的功能区域,功能选项H对应的功能图标变大,从而提醒用户正在选择的功能选项为功能选项H。
请继续参阅图3,270、识别用户手部对应的选择手势。
在一些实施方式中,在电子设备执行目标功能区域对应的目标功能操作之前。电子设备还可以识别用户手部对应的选择手势,比如,通过识别用户手部的关键点,根据关键点确定用户手部对应的选择手势。然后电子设备根据选择手势执行目标功能区域对应的目标功能操作。
在电子设备根据选择手势执行目标功能区域对应的目标功能操作之前,电子设备还可以判断在第二预设时长内是否识别出选择手势,若在第二预设时长内识别出选择手势,则根据选择手势执行目标功能区域对应的目标功能操作。若在第二预设时长内未识别出选择手势,则返回至默认显示界面。其中,默认显示界面可以是当前页面。
280、根据选择手势执行目标功能区域对应的目标功能操作。
在一些实施方式中,当电子设备识别出选择手势之后,则确认点击目标功能区域对应功能图标,然后执行功能选项对应的目标功能操作。从而实现用户通过肢体来进行功能选择,提高了用户对电子设备的操控效率。
在本申请实施例中,电子设备通过识别用户手部对应的目标唤醒手势,确定目标唤醒手势对应的界面显示指令,然后根据界面显示指令确定当前页面的页面信息,确定页面信息对应的功能选项,再根据功能选项在当前页面中确定目标功能界面,最后获取目标人体部位的位置信息,根据位置信息在目标功能界面中确定目标功能区域,识别用户手部对应的选择手势,根据选择手势执行目标功能区域对应的目标功能操作。
用户无需通过繁杂的按键操作,只需要通过手部实现对应的手势,就能够控制电子设备实现多种功能,提高了用户控制电子设备的效率。
请参阅图12,图12是本申请实施例提供的目标功能界面的第六示意图。
当电子设备识别到用户手部时,以用户手部初始位置确定原点并建立平面坐标系,然后识别用户的手势动作。当识别到唤醒手势时,生成如图11所示的功能组合,再对用户的手势动作进行识别,如果根据手势动作识别出用户的选择手势,且选择手势在“语音”功能所对应的功能区域,则打开语音助手。如果用户手部的停止位置在“音量减”功能区域,且识别出选择手势,则执行“音量减”功能操作。
需要说明的是,通过上述功能选择方法,能够使用户以较短的时间以及较短的步骤迅速确定想要执行的功能操作,并根据用户手势快速执行待执行的功能操作,从而提高用户对电子设备的操控效率。
请参阅图13,图13是本申请实施例提供的功能选择装置的结构示意图。功能选择装置600包括:第一确定模块610、获取模块620、第二确定模块630、执行模块640。
第一确定模块610,用于响应于界面显示指令,确定目标功能界面。
在一些实施方式中,第一确定模块610还用于根据所述界面显示指令确定当前页面的页面信息;确定所述页面信息对应的功能选项;根据所述功能选项在所述当前页面中确定所述目标功能界面。
在一些实施方式中,第一确定模块610还用于确定每一所述功能选项对应的功能图标;确定每一所述功能图标在所述当前页面所处的位置;根据每一所述功能图标在所述当前页面所处的位置对所述当前页面进行划分,以确定所述目标功能界面。
在一些实施方式中,第一确定模块610还用于确定所述功能选项对应的目标参数;根据所述目标参数在所述当前页面中确定所述目标功能界面。
在一些实施方式中,第一确定模块610还用于根据所述功能选项的数量,将所述当前页面划分为多个功能区域,以确定所述目标功能界面,每一所述功能区域对应一功能选项;在所述当前页面中显示所述目标功能界面。
在一些实施方式中,第一确定模块610还用于确定所述功能选项的等级和/或类型;根据所述功能选项的等级和/或类型在所述当前页面中划分每一所述功能选项对应的角度范围;根据每一所述功能选项对应的角度范围将所述当前页面划分为多个功能区域,以确定所述目标功能界面。
获取模块620,用于获取目标人体部位的位置信息。
第二确定模块630,用于根据所述位置信息,在所述目标功能界面中确定目标功能区域。
在一些实施方式中,第二确定模块630还用于根据所述位置信息确定所述目标人体部位的运动信息;根据所述运动信息确定所述目标功能界面中的目标位置;根据所述目标位置在所述目标功能界面中确定出所述目标功能区域。
在一些实施方式中,第二确定模块630还用于根据第二预设映射关系确定所述目标人体部位的移动距离在所述目标功能界面中的映射移动距离;将所述目标人体部位的移动方向确定为所述目标功能界面中的映射移动方向;根据所述映射移动距离和映射移动方向在所述目标功能界面中确定出所述目标位置。
在一些实施方式中,第二确定模块630还用于确定所述目标人体部位的目标尺寸;根据所述目标尺寸和所述移动距离确定所述移动距离在所述目标功能界面中的映射移动距离;将所述目标人体部位的移动方向确定为所述目标功能界面中的映射移动方向;根据所述映射移动距离和映射移动方向在所述目标功能界面中确定出所述目标位置。
执行模块640,用于执行所述目标功能区域对应的目标功能操作。
本申请实施例中,电子设备响应于界面显示指令,确定目标功能界面,然后获取目标人体部位的位置信息,再根据位置信息在目标功能界面中确定目标功能区域,最后执行目标功能区域对应的目标功能操作。通过对目标人体部位的识别,能够快速确定出对应的目标功能操作并执行对应的目标功能操作,提高了用户对电子设备的操控效率。
相应的,本申请实施例还提供一种电子设备,请参阅图14,图14是本申请实施例提供的电子设备的结构示意图。
电子设备700包括:显示单元701、输入单元702、存储器703、中央处理器704、电源705和传感器706等部件。本领域技术人员可以理解,图中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
显示单元701可用于显示由用户输入的信息或提供给用户的信息以及电子设备的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元701可包括显示面板,可选的,可以采用液晶显示器(LCD,Liquid CrystalDisplay)、有机发光二极管(OLED,Organic Light-Emitting Diode)等形式来配置显示面板。进一步的,触敏表面可覆盖显示面板,当触敏表面检测到在其上或附近的触摸操作后,传送给中央处理器704以确定触摸事件的类型,随后中央处理器704根据触摸事件的类型在显示面板上提供相应的视觉输出。虽然在图14中,触敏表面与显示面板是作为两个独立的部件来实现输入和输入功能,但是在某些实施例中,可以将触敏表面与显示面板集成而实现输入和输出功能。
输入单元702可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地,在一个具体的实施例中,输入单元702可包括触敏表面以及其他输入设备。触敏表面,也称为触摸显示屏或者触控板,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面上或在触敏表面附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触敏表面可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给中央处理器704,并能接收中央处理器704发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面。除了触敏表面,输入单元702还可以包括其他输入设备。具体地,其他输入设备可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
存储器703可用于存储软件程序以及模块,中央处理器704通过运行存储在存储器703的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器703可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据电子设备的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器703可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器703还可以包括存储器控制器,以提供中央处理器704和输入单元702对存储器703的访问。
电子设备还包括给各个部件供电的电源705(比如电池),优选的,电源可以通过电源管理系统与中央处理器704逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源705还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
电子设备还可包括至少一种传感器706,比如光传感器、压力传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板的亮度,接近传感器可在电子设备移动到耳边时,关闭显示面板和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于电子设备还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
尽管图14未示出,电子设备还可以包括摄像头、蓝牙模块等,在此不再赘述。具体在本实施例中,电子设备中的中央处理器704会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器703中,并由中央处理器704来运行存储在存储器703中的应用程序,从而实现各种功能:
响应于界面显示指令,确定目标功能界面;
获取目标人体部位的位置信息;
根据所述位置信息,在所述目标功能界面中确定目标功能区域;
执行所述目标功能区域对应的目标功能操作。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例提供一种计算机可读存储介质,其中存储有多条指令,该指令能够被处理器进行加载,以执行本申请实施例所提供的任一种功能选择方法中的步骤。例如,该指令可以执行如下步骤:
响应于界面显示指令,确定目标功能界面;
获取目标人体部位的位置信息;
根据所述位置信息,在所述目标功能界面中确定目标功能区域;
执行所述目标功能区域对应的目标功能操作。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的指令,可以执行本申请实施例所提供的任一种功能选择方法中的步骤,因此,可以实现本申请实施例所提供的任一种功能选择方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本申请实施例所提供的一种功能选择方法、装置、电子设备及存储介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (31)

1.一种功能选择方法,其特征在于,包括:
响应于界面显示指令,确定目标功能界面;
获取目标人体部位的位置信息;
根据所述位置信息,在所述目标功能界面中确定目标功能区域;
执行所述目标功能区域对应的目标功能操作。
2.根据权利要求1所述的功能选择方法,其特征在于,在响应于界面显示指令,显示目标功能界面之前,所述方法还包括:
识别用户肢体,根据所述用户肢体生成所述界面显示指令;
或者,获取用户的唤醒语音,根据所述唤醒语音生成所述界面显示指令。
3.根据权利要求2所述的功能选择方法,其特征在于,所述用户肢体包括用户手部,所述识别用户肢体,根据所述用户肢体生成所述界面显示指令,包括:
若识别到用户手部,且在第一预设时长内根据所述用户手部识别到预设唤醒手势,则根据所述预设唤醒手势生成所述界面显示指令。
4.根据权利要求2所述的功能选择方法,其特征在于,所述用户肢体包括用户手部,所述响应于界面显示指令,显示目标功能界面,包括:
识别所述用户手部对应的目标唤醒手势;
根据预设的唤醒手势与界面显示指令的对应关系,确定所述目标唤醒手势对应的界面显示指令;
根据所述界面显示指令确定所述目标唤醒手势对应的目标功能界面。
5.根据权利要求2所述的功能选择方法,其特征在于,所述响应于界面显示指令,确定目标功能界面,包括:
根据所述界面显示指令确定当前页面的页面信息;
确定所述页面信息对应的功能选项;
根据所述功能选项在所述当前页面中确定所述目标功能界面。
6.根据权利要求5所述的功能选择方法,其特征在于,所述根据所述功能选项在所述当前页面中确定所述目标功能界面,包括:
确定每一所述功能选项对应的功能图标;
确定每一所述功能图标在所述当前页面所处的位置;
根据每一所述功能图标在所述当前页面所处的位置对所述当前页面进行划分,以确定所述目标功能界面。
7.根据权利要求6所述的功能选择方法,其特征在于,所述根据每一所述功能图标在所述当前页面所处的位置对所述当前页面进行划分,以确定所述目标功能界面,包括:
根据每一所述功能图标在所述当前页面的位置确定多个功能图标在所述当前页面中对应的目标中心;
确定每一所述功能图标的图标中心;
根据所述图标中心以及所述目标中心对所述当前页面进行划分,以确定所述目标功能界面。
8.根据权利要求7所述的功能选择方法,其特征在于,所述根据所述图标中心以及所述目标中心对所述当前页面进行划分,以确定所述目标功能界面,包括:
根据每相邻的两个所述功能图标分别对应的图标中心及所述目标中心确定每相邻的两个所述功能图标对应的角平分线;
根据所述角平分线在所述当前页面中划分每一所述功能选项对应的角度范围;
根据每一所述功能选项对应的角度范围对所述当前页面进行划分,以确定所述目标功能界面。
9.根据权利要求8所述的功能选择方法,其特征在于,所述根据每相邻的两个所述功能图标分别对应的图标中心及所述目标中心确定每相邻的两个所述功能图标对应的角平分线,包括:
确定每相邻的两个所述图标中心与所述目标中心形成的目标角度;
根据所述目标角度确定每相邻的两个所述功能图标对应的角平分线。
10.根据权利要求5所述的功能选择方法,其特征在于,所述根据所述功能选项在所述当前页面中确定所述目标功能界面,包括:
确定所述功能选项对应的目标参数;
根据所述目标参数在所述当前页面中确定所述目标功能界面。
11.根据权利要求10所述的功能选择方法,其特征在于,所述目标参数包括所述功能选项的数量,所述根据所述目标参数在所述当前页面中确定所述目标功能界面,包括:
根据所述功能选项的数量,将所述当前页面划分为多个功能区域,以确定所述目标功能界面,每一所述功能区域对应一功能选项;
在所述当前页面中显示所述目标功能界面。
12.根据权利要求11所述的功能选择方法,其特征在于,所述根据所述功能选项的数量,将所述当前页面划分为多个功能区域,以确定所述目标功能界面,包括:
根据所述功能选项的数量确定出对应的目标布局类型;
根据所述目标布局类型将所述当前页面划分为多个功能区域,以确定所述目标功能界面。
13.根据权利要求12所述的功能选择方法,其特征在于,所述根据所述功能选项的数量确定出对应的目标布局类型,包括:
确定所述功能选项的数量对应的数量范围;
根据所述数量范围和布局类型的第一预设映射关系,在所述预设布局类型中确定所述目标布局类型,所述布局类型包括矩形排列布局或者圆形排列布局。
14.根据权利要求13所述的功能选择方法,其特征在于,所述根据所述目标布局类型将所述当前页面划分为多个功能区域,以确定所述目标功能界面,包括:
若所述目标布局类型为矩形排列布局,则根据所述功能选项的数量确定所述矩形排列布局的每一侧边对应的目标功能选项数量;
根据所述目标功能选项数量及所述矩形排列布局将所述当前页面划分为多个功能区域,以确定所述目标功能界面。
15.根据权利要求13所述的功能选择方法,其特征在于,所述根据所述目标布局类型将所述当前页面划分为多个功能区域,以确定所述目标功能界面,包括:
若所述目标布局类型为圆形排列布局,则根据所述功能选项的数量确定所述圆形排列布局的半径;
根据所述半径及所述圆形排列布局将所述当前页面划分为多个功能区域,以确定所述目标功能界面。
16.根据权利要求10所述的功能选择方法,其特征在于,所述目标参数包括每一所述功能选项的角度范围,所述根据所述目标参数在所述当前页面中确定所述目标功能界面,包括:
确定所述功能选项的等级和/或类型;
根据所述功能选项的等级和/或类型在所述当前页面中划分每一所述功能选项对应的角度范围;
根据每一所述功能选项对应的角度范围将所述当前页面划分为多个功能区域,以确定所述目标功能界面。
17.根据权利要求1所述的功能选择方法,其特征在于,所述根据所述位置信息,在所述目标功能界面中确定目标功能区域,包括:
根据所述位置信息确定所述目标人体部位的运动信息;
根据所述运动信息确定所述目标功能界面中的目标位置;
根据所述目标位置在所述目标功能界面中确定出所述目标功能区域。
18.根据权利要求17所述的功能选择方法,其特征在于,所述运动信息包括所述目标人体部位的移动距离和移动方向,所述根据所述运动信息确定所述目标功能界面中的目标位置,包括:
根据第二预设映射关系确定所述目标人体部位的移动距离在所述目标功能界面中的映射移动距离;
将所述目标人体部位的移动方向确定为所述目标功能界面中的映射移动方向;
根据所述映射移动距离和映射移动方向在所述目标功能界面中确定出所述目标位置。
19.根据权利要求18所述的功能选择方法,其特征在于,所述根据所述映射移动距离和映射移动方向在所述目标功能界面中确定出所述目标位置,包括:
在所述目标功能界面中确定出目标界面中心;
以所述目标界面中心为起点,根据所述映射移动距离和映射移动方向在所述目标功能界面中确定出所述目标位置。
20.根据权利要求18所述的功能选择方法,其特征在于,在根据第二预设映射关系确定所述目标人体部位的移动距离在所述目标功能界面中的映射移动距离之前,所述方法还包括:
确定电子设备与所述目标人体部位之间的空间距离;
根据所述空间距离确定所述第二预设映射关系。
21.根据权利要求17所述的功能选择方法,其特征在于,所述运动信息包括所述目标人体部位的移动距离和移动方向,所述根据所述运动信息确定所述目标功能界面中的目标位置,包括:
确定所述目标人体部位的目标尺寸;
根据所述目标尺寸和所述移动距离确定所述移动距离在所述目标功能界面中的映射移动距离;
将所述目标人体部位的移动方向确定为所述目标功能界面中的映射移动方向;
根据所述映射移动距离和映射移动方向在所述目标功能界面中确定出所述目标位置。
22.根据权利要求21所述的功能选择方法,其特征在于,所述根据所述目标尺寸和所述移动距离确定所述移动距离在所述目标功能界面中的映射移动距离,包括:
确定所述移动距离和所述目标尺寸的比值;
根据所述比值和所述映射移动距离的第三预设映射关系,确定所述移动距离在所述目标功能界面中的映射移动距离。
23.根据权利要求17所述的功能选择方法,其特征在于,所述目标功能区域包括缓冲区域,在所述根据所述目标位置在所述目标功能界面中确定出所述目标功能区域之前,所述方法还包括:
若所述目标位置处于所述缓冲区域,则重新确定所述目标位置或者返回至默认显示界面。
24.根据权利要求1-23任一项所述的功能选择方法,其特征在于,所述目标人体部位包括用户手部,在执行所述目标功能区域对应的目标功能操作之前,所述方法还包括:
识别所述用户手部对应的选择手势;
所述执行所述目标功能区域对应的目标功能操作,包括:
根据所述选择手势执行所述目标功能区域对应的目标功能操作。
25.根据权利要求24所述的功能选择方法,其特征在于,所述识别所述用户手部对应的选择手势,包括:
识别所述用户手部的关键点;
根据所述关键点确定用户手部对应的选择手势。
26.根据权利要求24所述的功能选择方法,其特征在于,在根据所述选择手势执行所述目标功能区域对应的目标功能操作之前,所述方法还包括:
判断在第二预设时长内是否识别出所述选择手势;
若在所述第二预设时长内识别出所述选择手势,则根据所述选择手势执行所述目标功能区域对应的目标功能操作;
若在所述第二预设时长内未识别出所述选择手势,则返回至默认显示界面。
27.根据权利要求1-23任一项所述的功能选择方法,其特征在于,响应于界面显示指令,确定目标功能界面之后,所述方法还包括:
将所述目标功能界面的目标界面中心确定为默认焦点;
根据所述位置信息确定所述目标人体部位的初始位置,并将所述初始位置与所述默认焦点对应;
显示所述默认焦点对应的功能图标。
28.根据权利要求1-23任一项所述的功能选择方法,其特征在于,在所述识别所述目标人体部位之前,所述方法还包括:
判断在第三预设时长内是否获取到所述目标人体部位;
若在第三预设时长内未获取到所述目标人体部位,则返回至默认显示界面。
29.一种功能选择装置,其特征在于,包括:
第一确定模块,用于响应于界面显示指令,确定目标功能界面;
获取模块,用于获取目标人体部位的位置信息;
第二确定模块,用于根据所述位置信息,在所述目标功能界面中确定目标功能区域;
执行模块,用于执行所述目标功能区域对应的目标功能操作。
30.一种电子设备,其特征在于,包括:
存储有可执行程序代码的存储器、与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行如权利要求1至28任一项所述的功能选择方法中的步骤。
31.一种计算机可读存储介质,其特征在于,所述存储介质存储有多条指令,所述指令适于处理器进行加载,以执行权利要求1至28任一项所述的功能选择方法中的步骤。
CN202110921416.7A 2021-08-11 2021-08-11 功能选择方法、装置、电子设备及存储介质 Pending CN115914701A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110921416.7A CN115914701A (zh) 2021-08-11 2021-08-11 功能选择方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110921416.7A CN115914701A (zh) 2021-08-11 2021-08-11 功能选择方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN115914701A true CN115914701A (zh) 2023-04-04

Family

ID=86482623

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110921416.7A Pending CN115914701A (zh) 2021-08-11 2021-08-11 功能选择方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN115914701A (zh)

Similar Documents

Publication Publication Date Title
US10401964B2 (en) Mobile terminal and method for controlling haptic feedback
US9389779B2 (en) Depth-based user interface gesture control
AU2014200250B2 (en) Method for providing haptic effect in portable terminal, machine-readable storage medium, and portable terminal
US11443453B2 (en) Method and device for detecting planes and/or quadtrees for use as a virtual substrate
KR102169206B1 (ko) 햅틱 피드백 제어 시스템
CN103914249B (zh) 鼠标功能提供方法和实施所述方法的终端
US20190012000A1 (en) Deformable Electronic Device with Methods and Systems for Controlling the Deformed User Interface
KR101869083B1 (ko) 정전 용량식 터치 스크린의 터치 감도 제어방법 및 이를 이용한 디스플레이 장치
KR20140112910A (ko) 입력 제어 방법 및 이를 지원하는 전자 장치
JP2013524311A (ja) 近接性に基づく入力のための装置および方法
KR20140114913A (ko) 사용자 기기의 센서 운용 방법 및 장치
US20150234467A1 (en) Method and apparatus for gesture detection and display control
US10936184B2 (en) Display apparatus and controlling method thereof
KR20140133095A (ko) 정보를 사용자에게 제공하기 위한 전자 장치
US20130257809A1 (en) Optical touch sensing apparatus
KR20110020642A (ko) 사용자 접근을 인식하여 반응하는 gui제공 장치 및 방법
TW201510772A (zh) 手勢判斷方法及電子裝置
KR20150052481A (ko) 콘텐츠 표시 방법 및 이를 구현하는 전자 장치
US20120062477A1 (en) Virtual touch control apparatus and method thereof
US9335827B2 (en) Gesture input systems and methods using 2D sensors
CN115914701A (zh) 功能选择方法、装置、电子设备及存储介质
US20120182231A1 (en) Virtual Multi-Touch Control Apparatus and Method Thereof
JPWO2019235263A1 (ja) 情報処理装置、情報処理方法、及びプログラム
CN114322445B (zh) 设备控制方法、装置、电子设备及存储介质
RU2781492C2 (ru) Способ вывода информации и абонентское оборудование мобильной связи

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination