CN112256190A - 触控交互方法、装置、存储介质及电子设备 - Google Patents
触控交互方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN112256190A CN112256190A CN202011055401.9A CN202011055401A CN112256190A CN 112256190 A CN112256190 A CN 112256190A CN 202011055401 A CN202011055401 A CN 202011055401A CN 112256190 A CN112256190 A CN 112256190A
- Authority
- CN
- China
- Prior art keywords
- screen
- touch
- touch gesture
- display screen
- gesture template
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3234—Power saving characterised by the action undertaken
- G06F1/325—Power saving in peripheral device
- G06F1/3265—Power saving in display device
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请公开了一种触控交互方法、装置、存储介质及电子设备,属于电子通讯信息技术领域。在显示屏处于亮屏状态时,接收熄屏指令,其中,所述显示屏的上方设置有触摸屏,所述光学指纹传感器设置在所述显示屏的下方,响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态,通过所述光学指纹传感器识别用户在触摸屏上的触摸手势,在所述触摸手势与预设的触摸手势模板匹配时,执行与所述触摸手势模板关联的操作。故本申请中终端设备在接收熄屏指令后,通过覆盖显示屏的图像层,用户可以在该状态下控制应用程序,从而达到操作方面,提升用户体验以及节省终端设备的功耗,增加待机时间。
Description
技术领域
本发明涉及电子通讯信息技术领域,具体涉及一种触控交互方法、装置、存储介质及电子设备。
背景技术
近年来,随着移动通信的快速发展,各种带触摸屏移动终端如手机的使用越来越普及,触屏手机已经成为人们生活中不可或缺的通信工具。对于触摸屏智能设备,一般地,若没有对触摸屏智能设备进行其它操作,一段时间后设备就会自动进入待机状态,显示屏背光熄灭,处于省电、低功耗的睡眠模式。在此种情况下,除了一小部分电路在工作,其它部分电路,如触摸屏、传感器等功能件都进入省电的睡眠模式,例如:在未唤醒设备之前,触摸屏无法进行感知操作,若需要对设备进行控制操作,则需要频繁地唤醒设备,操作十分不方便,影响用户的体验,而且每次唤醒触摸屏设备会导致设备额外的电量消耗,减少设备待机时间。
发明内容
本申请实施例提供了一种触控交互方法、装置、存储介质及电子设备,可节省终端设备功耗,增加待机时间。所述技术方案如下:
第一方面,本申请实施例提供了一种触控交互方法,包括:
在显示屏处于亮屏状态时,接收熄屏指令;其中,所述显示屏的上方设置有触摸屏,所述光学指纹传感器设置在所述显示屏的下方;
响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态;
通过所述光学指纹传感器识别用户在触摸屏上的触摸手势;
在所述触摸手势与预设的触摸手势模板匹配时,执行与所述触摸手势模板关联的操作。
第二方面,本申请实施例提供了一种触控交互装置,所述装置包括:
接收模块,用于在显示屏处于亮屏状态时,接收熄屏指令;其中,所述显示屏的上方设置有触摸屏,所述光学指纹传感器设置在所述显示屏的下方;
响应模块,用于响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态;
识别模块,用于通过所述光学指纹传感器识别用户在触摸屏上的触摸手势;
执行模块,用于在所述触摸手势与预设的触摸手势模板匹配时,执行与所述触摸手势模板关联的操作。
第三方面,本申请实施例提供了一种计算机存储介质,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行上述的方法步骤。
第四方面,本申请实施例提供了一种电子设备,包括:存储器和处理器;其中,所述存储器存储有计算机程序,所述计算机程序适用于由所述处理器加载并执行上述的方法步骤。
本申请一些实施例提供的技术方案带来的有益效果至少包括:
上述触控交互方法、装置、存储介质及电子设备工作时,在显示屏处于亮屏状态时,接收熄屏指令,其中,所述显示屏的上方设置有触摸屏,所述光学指纹传感器设置在所述显示屏的下方,响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态,通过所述光学指纹传感器识别用户在触摸屏上的触摸手势,在所述触摸手势与预设的触摸手势模板匹配时,执行与所述触摸手势模板关联的操作。终端设备在接收熄屏指令后,通过覆盖显示屏的图像层,用户可以在该状态下控制应用程序,从而达到操作方面,提升用户体验以及降低终端设备的电耗的目的。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种触控交互方法的屏幕层叠结构示意图;
图2是本申请实施例提供的一种触控交互方法的流程示意图;
图3是本申请实施例提供的一种图像层遮挡示意图;
图4是本申请实施例提供的一种感应区域位置示意图;
图5是本申请实施例提供的一种触控轨迹示意图;
图6是本申请实施例提供的一种手势示意图;
图7是本申请实施例提供的一种触控交互方法的另一流程示意图;
图8是本申请实施例提供的一种触控交互装置的结构示意图;
图9是本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施例方式作进一步地详细描述。
下面的描述设计附图时,除非另有表示,不同附图中的相同数字表示相同的或相似的要素。以下示例性实施例中描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请的描述中,需要理解的是,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本申请中的具体含义。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
为了解决上述提到的在未唤醒设备之前,触摸屏无法进行感知操作,若需要对设备进行控制操作,则需要频繁地唤醒设备,操作十分不方便,影响用户的体验,而且每次唤醒触摸屏设备会导致设备额外的电量消耗,减少设备待机时间的技术问题,特提出了一种触控交互方法,本申请实施例方法可依赖于计算机程序实现,可运行于基于冯诺依曼体系且安装有摄像头或可旋转摄像头的计算机系统上。该计算机系统可以是智能手机、笔记本电脑、平板电按等显示屏为可触控的计算机设备。
在下述方法实施例中,为了便于说明,仅以各步骤的执行主体为终端设备进行介绍说明。
下面将结合附图2或图7,对本申请实施例提供的触控交互方法进行详细介绍。
请参见图1,为本申请实施例提供了一种触控交互方法的屏幕层叠结构示意图。现有屏幕层叠结构包括浅遮罩(Scrim)顶层、中间插件(View)层和Scrim底层,Scrim底层用于显示底层的文字以及各种类型的图像等内容,View层是显示屏插件层,通过点击或者移动等操作插件可以产生响应指令,处理器接收响应指令对设备进行控制,Scrim顶层用于显示顶层的文字以及各种类型的图像等内容,Scrim顶层内容会覆盖Scrim底层内容。本申请实施例方案中屏幕层叠结构为行为识别层、Scrim顶层、中间View层和Scrim底层,在现有屏幕的层叠结构上添加了一层行为识别层覆盖,该行为识别层采集用户在显示屏上划出的轨迹并进行识别,进而达到对设备显示屏在熄屏状态下的一些操作,该行为识别层覆盖整个设备屏幕,在显示屏熄屏状态下进行显示,执行本申请实施例中的方案。
请参见图2,为本申请实施例提供的一种触控交互的流程示意图。所述方法可以包括以下步骤:
S201、在显示屏处于亮屏状态时,接收熄屏指令。
一般的,亮屏状态是指终端设备的显示屏上能显示图形的状态,显示屏中彩色滤光膜的各像素对应显示屏的各像素,每个像素包含红、绿、蓝三个子像素,终端设备通过由显示屏背光产生的光线透过彩色滤光膜形成红、绿、蓝三基色分量,对不同基色进行组合,就能在显示屏上显示不同图形。熄屏指令是指终端设备显示屏由点亮状态切换到熄屏状态的指令,例如:用户可以通过按压终端设备侧边电源按钮,或者终端设备判断满足熄屏条件,例如:手机检测到靠近耳朵进行语音通话、显示屏长时间没采集到触控手势;则会产生熄屏指令。
S202、响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态。
一般的,终端设备接收到熄屏指令之后,会响应于所述熄屏指令,终端设备处理器会响应于所述熄屏指令获取所述图像层的尺寸,基于所述所述尺寸生成遮挡层,以及在所述图像层上方绘制所述遮挡层,保持所述显示屏的背光处于开启状态,显示屏显示全黑,但显示屏背光可以通过显示层像素间间隙发射出来,但人眼察觉不到,如图3所示。图中左图表示终端设备显示屏点亮状态,右图表示终端设备显示屏在所述显示屏上的图像层上覆盖遮挡层,显示屏显示层像素不进行显示,但保持所述显示屏的背光处于开启状态,所以背光可用通过显示屏显示层像素间间隙发射。
S203、通过所述光学指纹传感器识别用户在触摸屏上的触摸手势。
一般的,所述显示屏包括感应区域,所述光学指纹传感器设置在所述感应区域的下方,所述感应区域形状为矩形或圆形,如图4所示,终端设备可以光学指纹传感器位置预先设置感应区域的位置和形状。终端设备在应于所述熄屏指令后,激活所述光学指纹传感器,基于所述光学指纹传感器测量所述感应区域的光线强度,基于所述光线强度确定用户在所述感应区域上的触控轨迹,基于所述触控轨迹识别触摸手势,如图5所示,图中左图表示确定的竖直触控轨迹,如果触控轨迹中上面点先于下面点确定则可以判断为下滑触控轨迹,右图表示确定的水平触控轨迹,如果触控轨迹中左边面点先于右边点确定则可以判断为右滑触控轨迹。
S204、在所述触摸手势与预设的触摸手势模板匹配时,执行与所述触摸手势模板关联的操作。
一般的,终端设备采集到用户在触摸屏上的触摸手势,首先检测正在运行的应用程序,例如:音乐播放程序,广播播放程序等,获取与所述应用程序关联的触摸手势模板,例如:左滑手势模板、右滑手势模板、上滑手势模板、下滑手势模板和双击手势模板中一种或多种,如图6所示,图中分别表示左滑手势、右滑手势、上滑手势和下滑手势。终端设备中相同的触摸手势可以控制不同应用程序,例如:上滑手势模板可以作为音乐播放程序关联的增加音量的触摸手势模板,也可以作为应图像投影程序关联的显示上一张的触摸手势模板。
由上述内容可知,在显示屏处于亮屏状态时,接收熄屏指令,其中,所述显示屏的上方设置有触摸屏,所述光学指纹传感器设置在所述显示屏的下方,响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态,通过所述光学指纹传感器识别用户在触摸屏上的触摸手势,在所述触摸手势与预设的触摸手势模板匹配时,执行与所述触摸手势模板关联的操作。终端设备在接收熄屏指令后,通过覆盖显示屏的图像层,用户可以在该状态下控制应用程序,从而达到操作方面,提升用户体验以及降低终端设备的电耗的目的。
请参见图7,为本申请实施例提供了一种触控交互方法的另一流程示意图。该触控交互方法可以包括以下步骤:
S701、在显示屏处于亮屏状态时,接收熄屏指令。
一般的,终端设备只有在显示屏处于亮屏状态时,才会接收熄屏指令,例如:终端设备在显示屏处于亮屏状态时,用户按压终端设备侧边电源按钮后,则电源按钮控件会产生一个响应消息,终端设备接收到响应消息,发送熄屏指令到显示屏模块,显示屏模块接收到熄屏指令后会进行相应的控制,例如:关闭显示屏显示层,关闭显示器触控层等。
S702、响应于所述熄屏指令获取所述图像层的尺寸。
一般的,终端设备接收到熄屏指令后,会获取显示屏中图像层的尺寸,例如:获取所述图像层的尺寸为6.1英寸。
S703、基于所述尺寸生成遮挡层,以及在所述图像层上方绘制所述遮挡层。
一般的,遮挡层是指用来遮挡显示屏图像层处于图像层上一层的显示屏结构层。终端设备获取所述图像层的尺寸后,生成遮挡层以及在所述图像层上方绘制所述遮挡层,此时用户看不到显示屏显示图形,用户可能判断和熄屏状态一样,但实际上相当于只关闭了显示屏的图像层,其他,触控层、显示屏背光灯正常工作。
S704、保持所述显示屏的背光处于开启状态。
一般的,终端设备在所述图像层上方绘制所述遮挡层的同时,不能关闭显示屏背光,需要保持所述显示屏的背光处于开启状态。
S705、激活所述光学指纹传感器,基于所述光学指纹传感器测量所述感应区域的光线强度。
一般的,光学指纹传感器是指用来识别屏下指纹的光学传感器。由于屏幕像素间天生具有一定的间隔,能够保证光线透过,当用户手指按压屏幕时,屏幕发出光线将手指区域照亮,照亮指纹的反射光线透过屏幕像素的间隙返回到紧贴于屏下的光学指纹传感器上。最终形成的触摸手势通过与数据库中已存的触摸手势模板进行对比分析,进行识别判断。
S706、基于所述光线强度确定用户在所述感应区域上的触控轨迹,基于所述触控轨迹识别触摸手势。
一般的,终端设备可以通过光学指纹传感器接收在所述感应区域的光线强度,然后解析识别判断,例如:确定用户在所述感应区域上的触控轨迹由上到下,则可以识别触摸手势为下滑手势。
S707、检测正在运行的应用程序,获取与所述应用程序关联的触摸手势模板。
一般的,终端设备中的相同的触摸手势可以控制不同应用程序,例如:上滑手势模板可以作为音乐播放程序关联的增加音量的触摸手势模板,也可以作为应图像投影程序关联的显示上一张的触摸手势模板。因此终端设备需要检测正在运行的应用程序,获取与所述应用程序关联的触摸手势模板,例如:检测正在运行的应用程序为音乐播放程序、图像投影程序等。
S708、计算所述触摸手势与所述触摸手势模板的相关性系数。
一般的,终端设备基于图像识别来计算所述触摸手势与所述触摸手势模板的相关性系数,例如:终端设备检测正在运行的应用程序为音乐播放程序,所述触摸手势为右滑手势,所述触摸手势模板包括上滑、下滑、左滑和右滑,运用图像识别算法计算出右滑手势与四个触摸手势模板的相关性系数,分别为0.12、0.24、0.05、0.89。
S709、判断所述相关性系数是否大于相关性阈值。
一般的,终端设备计算所述触摸手势与所述触摸手势模板的相关性系数后,需要判断所述相关性系数是否大于相关性阈值,例如:计算出相关性系数分别为0.12、0.24、0.05、0.89,相关性阈值为0.75,则0.12、0.24和0.05对应的触摸手势小于相关性阈值,0.89对应的触摸手势大于相关性阈值。
S310、确定所述触摸手势与预设的触摸手势模板匹配,执行与所述触摸手势模板关联的操作。
一般的,终端设备确定所述相关性系数大于相关性阈值后,确定所述触摸手势与预设的触摸手势模板匹配,之后执行与所述触摸手势模板关联的操作,例如:计算出相关性系数为0.89,相关性阈值为0.75,则确定所述下滑触摸手势与预设的2号触摸手势模板匹配,预设的2号触摸手势模板对应切换下一曲歌曲,则终端设备执行切换下一曲操作。
S711、确定所述触摸手势与预设的触摸手势模板不匹配,继续监测所述触控屏。
一般的,终端设备确定所述相关性系数不大于相关性阈值后,确定所述触摸手势与预设的触摸手势模板不匹配后,不执行任何操作,显示屏触控层继续监测所述触控屏。
本申请实施例的方案在执行时,在显示屏处于亮屏状态时,接收熄屏指令,响应于所述熄屏指令获取所述图像层的尺寸,基于所述尺寸生成遮挡层,以及在所述图像层上方绘制所述遮挡层,保持所述显示屏的背光处于开启状态,激活所述光学指纹传感器,基于所述光学指纹传感器测量所述感应区域的光线强度,基于所述光线强度确定用户在所述感应区域上的触控轨迹,基于所述触控轨迹识别触摸手势,检测正在运行的应用程序,获取与所述应用程序关联的触摸手势模板,计算所述触摸手势与所述触摸手势模板的相关性系数,判断所述相关性系数是否大于相关性阈值,若大于,确定所述触摸手势与预设的触摸手势模板匹配,执行与所述触摸手势模板关联的操作;否则,确定所述触摸手势与预设的触摸手势模板不匹配,继续监测所述触控屏。终端设备在接收熄屏指令后,通过覆盖显示屏的图像层,用户可以在该状态下控制应用程序,从而达到操作方面,提升用户体验以及降低终端设备的电耗的目的。
下述为本申请装置实施例,可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节,请参照本申请方法实施例。
请参见图8,其示出了本申请一个示例性实施例提供的触控交互装置的结构示意图,以下简称交互装置8。交互装置8可以通过软件、硬件或者两者的结合实现成为终端的全部或一部分。包括:
接收模块801,用于在显示屏处于亮屏状态时,接收熄屏指令;其中,所述显示屏的上方设置有触摸屏,所述光学指纹传感器设置在所述显示屏的下方;
响应模块802,用于响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态;
识别模块803,用于通过所述光学指纹传感器识别用户在触摸屏上的触摸手势;
执行模块804,用于在所述触摸手势与预设的触摸手势模板匹配时,执行与所述触摸手势模板关联的操作。
可选地,所述响应模块802,还包括:
获取单元,用于响应于所述熄屏指令获取所述图像层的尺寸;基于所述尺寸生成遮挡层,以及在所述图像层上方绘制所述遮挡层;保持所述显示屏的背光处于开启状态。
可选地,所述识别模块803,还包括:
激活单元,用于激活所述光学指纹传感器;基于所述光学指纹传感器测量所述感应区域的光线强度;基于所述光线强度确定用户在所述感应区域上的触控轨迹;基于所述触控轨迹识别触摸手势;所述显示屏包括感应区域,所述光学指纹传感器设置在所述感应区域的下方,所述感应区域形状为矩形或圆形。
可选地,所述执行模块804,还包括:
检测单元,用于检测正在运行的应用程序;获取与所述应用程序关联的触摸手势模板;其中,所述触摸手势模板包括:左滑手势模板、右滑手势模板、上滑手势模板、下滑手势模板和双击手势模板中一种或多种。
计算单元,用于计算所述触摸手势与所述触摸手势模板的相关性系数;在所述相关性系数大于相关性阈值时,确定所述触摸手势与预设的触摸手势模板匹配;在所述相关性系数不大于相关性阈值时,确定所述触摸手势与预设的触摸手势模板不匹配,继续监测所述触控屏。
本申请实施例和图2或图7的方法实施例基于同一构思,其带来的技术效果也相同,具体过程可参照图2或图7的方法实施例的描述,此处不再赘述。
所述装置8可以为实现相关功能的现场可编程门阵列(field-programmable gatearray,FPGA),专用集成芯片,系统芯片(system on chip,SoC),中央处理器(centralprocessor unit,CPU),网络处理器(network processor,NP),数字信号处理电路,微控制器(micro controller unit,MCU),还可以采用可编程控制器(programmable logicdevice,PLD)或其他集成芯片。
本申请实施例的方案在执行时,在显示屏处于亮屏状态时,接收熄屏指令,响应于所述熄屏指令获取所述图像层的尺寸,基于所述尺寸生成遮挡层,以及在所述图像层上方绘制所述遮挡层,保持所述显示屏的背光处于开启状态,激活所述光学指纹传感器,基于所述光学指纹传感器测量所述感应区域的光线强度,基于所述光线强度确定用户在所述感应区域上的触控轨迹,基于所述触控轨迹识别触摸手势,检测正在运行的应用程序,获取与所述应用程序关联的触摸手势模板,计算所述触摸手势与所述触摸手势模板的相关性系数,判断所述相关性系数是否大于相关性阈值,若大于,确定所述触摸手势与预设的触摸手势模板匹配,执行与所述触摸手势模板关联的操作;否则,确定所述触摸手势与预设的触摸手势模板不匹配,继续监测所述触控屏。终端设备在接收熄屏指令后,通过覆盖显示屏的图像层,用户可以在该状态下控制应用程序,从而达到操作方面,提升用户体验以及降低终端设备的电耗的目的。
本申请实施例还提供了一种计算机存储介质,所述计算机存储介质可以存储有多条指令,所述指令适于由处理器加载并执行如上述的方法步骤,具体执行过程可以参见图2或图7所示实施例的具体说明,在此不进行赘述。
本申请还提供了一种计算机程序产品,该计算机程序产品存储有至少一条指令,所述至少一条指令由所述处理器加载并执行以实现如上各个实施例所述的模板的控制方法。
请参见图9,为本申请实施例提供了一种电子设备的结构示意图。如图9所示,所述电子设备9可以包括:至少一个处理器901,至少一个网络接口904,用户接口903,存储器905,至少一个通信总线902。
其中,通信总线902用于实现这些组件之间的连接通信。
其中,用户接口903可以包括显示屏(Display)、摄像头(Camera),可选用户接口903还可以包括标准的有线接口、无线接口。
其中,网络接口904可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。
其中,处理器901可以包括一个或者多个处理核心。处理器901利用各种借口和线路连接整个终端900内的各个部分,通过运行或执行存储在存储器905内的指令、程序、代码集或指令集,以及调用存储在存储器905内的数据,执行终端900的各种功能和处理数据。可选的,处理器901可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable LogicArray,PLA)中的至少一种硬件形式来实现。处理器901可集成中央处理器(CentralProcessing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示屏所需要显示的内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器901中,单独通过一块芯片进行实现。
其中,存储器905可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。可选的,该存储器905包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器905可用于存储指令、程序、代码、代码集或指令集。存储器905可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等;存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器905可选的还可以是至少一个位于远离前述处理器901的存储装置。如图9所示,作为一种计算机存储介质的存储器905中可以包括操作系统、网络通信模块、用户接口模块以及触控交互应用程序。
在图9所示的电子设备900中,用户接口903主要用于为用户提供输入的接口,获取用户输入的数据;而处理器901可以用于调用存储器905中存储的触控交互应用程序,并具体执行以下操作:
在显示屏处于亮屏状态时,接收熄屏指令;其中,所述显示屏的上方设置有触摸屏,所述光学指纹传感器设置在所述显示屏的下方;
响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态;
通过所述光学指纹传感器识别用户在触摸屏上的触摸手势;
在所述触摸手势与预设的触摸手势模板匹配时,执行与所述触摸手势模板关联的操作。
在一个实施例中,处理器901执行所述响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态,包括:
响应于所述熄屏指令获取所述图像层的尺寸;
基于所述尺寸生成遮挡层,以及在所述图像层上方绘制所述遮挡层;
保持所述显示屏的背光处于开启状态。
在一个实施例中,处理器901执行所述操作,其特征在于,所述显示屏包括感应区域,所述光学指纹传感器设置在所述感应区域的下方,所述感应区域形状为矩形或圆形;
其中,所述通过所述光学指纹传感器识别用户在触摸屏上的触摸手势,包括:
激活所述光学指纹传感器;
基于所述光学指纹传感器测量所述感应区域的光线强度;
基于所述光线强度确定用户在所述感应区域上的触控轨迹;
基于所述触控轨迹识别触摸手势。
在一个实施例中,处理器901执行所述在所述触摸手势与预设的触摸手势模板匹配时之前,还包括:
检测正在运行的应用程序;
获取与所述应用程序关联的触摸手势模板;其中,所述触摸手势模板包括:左滑手势模板、右滑手势模板、上滑手势模板、下滑手势模板和双击手势模板中一种或多种。
在一个实施例中,处理器901执行在所述触摸手势与预设的触摸手势模板匹配时,包括:
计算所述触摸手势与所述触摸手势模板的相关性系数;
在所述相关性系数大于相关性阈值时,确定所述触摸手势与预设的触摸手势模板匹配。
在一个实施例中,处理器901执行所述操作,还包括:
在所述相关性系数不大于相关性阈值时,确定所述触摸手势与预设的触摸手势模板不匹配,继续监测所述触控屏。
本申请实施例的技术构思和图2或图7的技术构思相同,具体过程可参照图2或图7的方法实施例,此处不再赘述。
在本申请实施例中,在显示屏处于亮屏状态时,接收熄屏指令,响应于所述熄屏指令获取所述图像层的尺寸,基于所述尺寸生成遮挡层,以及在所述图像层上方绘制所述遮挡层,保持所述显示屏的背光处于开启状态,激活所述光学指纹传感器,基于所述光学指纹传感器测量所述感应区域的光线强度,基于所述光线强度确定用户在所述感应区域上的触控轨迹,基于所述触控轨迹识别触摸手势,检测正在运行的应用程序,获取与所述应用程序关联的触摸手势模板,计算所述触摸手势与所述触摸手势模板的相关性系数,判断所述相关性系数是否大于相关性阈值,若大于,确定所述触摸手势与预设的触摸手势模板匹配,执行与所述触摸手势模板关联的操作;否则,确定所述触摸手势与预设的触摸手势模板不匹配,继续监测所述触控屏。终端设备在接收熄屏指令后,通过覆盖显示屏的图像层,用户可以在该状态下控制应用程序,从而达到操作方面,提升用户体验以及降低终端设备的电耗的目的。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体或随机存储记忆体等。
以上所揭露的仅为本申请较佳实施例而已,当然不能以此来限定本申请之权利范围,因此依本申请权利要求所作的等同变化,仍属本申请所涵盖的范围。
Claims (10)
1.一种触控交互方法,其特征在于,所述方法包括:
在显示屏处于亮屏状态时,接收熄屏指令;其中,所述显示屏的上方设置有触摸屏,所述光学指纹传感器设置在所述显示屏的下方;
响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态;
通过所述光学指纹传感器识别用户在触摸屏上的触摸手势;
在所述触摸手势与预设的触摸手势模板匹配时,执行与所述触摸手势模板关联的操作。
2.根据权利要求1所述方法,其特征在于,所述响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态,包括:
响应于所述熄屏指令获取所述图像层的尺寸;
基于所述尺寸生成遮挡层,以及在所述图像层上方绘制所述遮挡层;
保持所述显示屏的背光处于开启状态。
3.根据权利要求1所述方法,其特征在于,所述显示屏包括感应区域,所述光学指纹传感器设置在所述感应区域的下方,所述感应区域形状为矩形或圆形;
其中,所述通过所述光学指纹传感器识别用户在触摸屏上的触摸手势,包括:
激活所述光学指纹传感器;
基于所述光学指纹传感器测量所述感应区域的光线强度;
基于所述光线强度确定用户在所述感应区域上的触控轨迹;
基于所述触控轨迹识别触摸手势。
4.根据权利要求1所述方法,其特征在于,所述在所述触摸手势与预设的触摸手势模板匹配时之前,还包括:
检测正在运行的应用程序;
获取与所述应用程序关联的触摸手势模板;其中,所述触摸手势模板包括:左滑手势模板、右滑手势模板、上滑手势模板、下滑手势模板和双击手势模板中一种或多种。
5.根据权利要求4所述方法,其特征在于,所述应用程序为音乐播放程序,所述关联的操作包括:开始播放音乐操作、暂停播放音乐操作、切换上一曲操作和切换下一曲操作中一种或多种。
6.根据权利要求1所述方法,其特征在于,所述在所述触摸手势与预设的触摸手势模板匹配时,包括:
计算所述触摸手势与所述触摸手势模板的相关性系数;
在所述相关性系数大于相关性阈值时,确定所述触摸手势与预设的触摸手势模板匹配。
7.根据权利要求6所述方法,其特征在于,还包括:
在所述相关性系数不大于相关性阈值时,确定所述触摸手势与预设的触摸手势模板不匹配,继续监测所述触控屏。
8.一种触控交互装置,其特征在于,包括:
接收模块,用于在显示屏处于亮屏状态时,接收熄屏指令;其中,所述显示屏的上方设置有触摸屏,所述光学指纹传感器设置在所述显示屏的下方;
响应模块,用于响应于所述熄屏指令在所述显示屏上的图像层上覆盖遮挡层,以及保持所述显示屏的背光处于开启状态;
识别模块,用于通过所述光学指纹传感器识别用户在触摸屏上的触摸手势;
执行模块,用于在所述触摸手势与预设的触摸手势模板匹配时,执行与所述触摸手势模板关联的操作。
9.一种计算机存储介质,其特征在于,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行如权利要求1~7任意一项的方法步骤。
10.一种电子设备,其特征在于,包括:存储器和处理器;其中,所述存储器存储有计算机程序,所述计算机程序适用于由所述处理器加载并执行如权利要求1~7任意一项的方法步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011055401.9A CN112256190A (zh) | 2020-09-29 | 2020-09-29 | 触控交互方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011055401.9A CN112256190A (zh) | 2020-09-29 | 2020-09-29 | 触控交互方法、装置、存储介质及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112256190A true CN112256190A (zh) | 2021-01-22 |
Family
ID=74233865
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011055401.9A Pending CN112256190A (zh) | 2020-09-29 | 2020-09-29 | 触控交互方法、装置、存储介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112256190A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114281423A (zh) * | 2021-12-28 | 2022-04-05 | 深圳市欧瑞博科技股份有限公司 | 灭屏方法及电子设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107395889A (zh) * | 2017-07-28 | 2017-11-24 | 广东欧珀移动通信有限公司 | 降低移动终端功耗的方法、装置、存储介质及移动终端 |
CN107765950A (zh) * | 2017-11-01 | 2018-03-06 | 王东红 | 一种智能终端及其显示控制方法 |
CN110531918A (zh) * | 2018-05-25 | 2019-12-03 | 青岛海信移动通信技术股份有限公司 | 一种音乐数据的处理方法、装置、移动终端和存储介质 |
EP2693319B1 (en) * | 2012-07-30 | 2020-04-29 | Samsung Electronics Co., Ltd | Flexible display apparatus and display method thereof |
-
2020
- 2020-09-29 CN CN202011055401.9A patent/CN112256190A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2693319B1 (en) * | 2012-07-30 | 2020-04-29 | Samsung Electronics Co., Ltd | Flexible display apparatus and display method thereof |
CN107395889A (zh) * | 2017-07-28 | 2017-11-24 | 广东欧珀移动通信有限公司 | 降低移动终端功耗的方法、装置、存储介质及移动终端 |
CN107765950A (zh) * | 2017-11-01 | 2018-03-06 | 王东红 | 一种智能终端及其显示控制方法 |
CN110531918A (zh) * | 2018-05-25 | 2019-12-03 | 青岛海信移动通信技术股份有限公司 | 一种音乐数据的处理方法、装置、移动终端和存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114281423A (zh) * | 2021-12-28 | 2022-04-05 | 深圳市欧瑞博科技股份有限公司 | 灭屏方法及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107945769B (zh) | 环境光强度检测方法、装置、存储介质及电子设备 | |
US20200372692A1 (en) | Method and apparatus for generating cartoon face image, and computer storage medium | |
CN108509037B (zh) | 一种信息显示方法及移动终端 | |
CN107885534B (zh) | 一种锁屏方法、终端及计算机可读介质 | |
WO2017185578A1 (zh) | 一种应用通知消息查看方法以及终端 | |
CN107835322A (zh) | 界面显示方法、装置、存储介质及终端设备 | |
CN108492363B (zh) | 基于增强现实的结合方法、装置、存储介质及电子设备 | |
CN107250969B (zh) | 屏幕开启方法、装置及电子设备 | |
CN107450837B (zh) | 响应黑屏手势的方法、装置、存储介质及移动终端 | |
EP2879095A1 (en) | Method, apparatus and terminal device for image processing | |
CN108647055A (zh) | 应用程序预加载方法、装置、存储介质及终端 | |
CN108429888B (zh) | 补光的方法和移动终端 | |
CN108984089B (zh) | 触控操作方法、装置、存储介质及电子设备 | |
CN104699237B (zh) | 辨识使用者操作的方法及相关互动装置与计算机可读介质 | |
CN110298304A (zh) | 一种皮肤检测方法及终端 | |
CN108108117B (zh) | 一种截屏方法、装置及终端 | |
WO2022222510A1 (zh) | 交互控制方法、终端设备及存储介质 | |
CN106707512B (zh) | 一种低功耗智能ar系统及智能ar眼镜 | |
CN114138215B (zh) | 一种显示方法及相关设备 | |
TW201510772A (zh) | 手勢判斷方法及電子裝置 | |
CN107562356B (zh) | 指纹识别定位方法、装置、存储介质及电子设备 | |
CN114077465A (zh) | Ui界面渲染方法、装置、电子设备及存储介质 | |
CN109144447A (zh) | 分屏窗口调节方法、装置、存储介质及电子设备 | |
CN105022583A (zh) | 一种触摸屏的锁定方法及装置 | |
CN112256190A (zh) | 触控交互方法、装置、存储介质及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210122 |