CN117827054A - 截屏方法、设备及存储介质 - Google Patents
截屏方法、设备及存储介质 Download PDFInfo
- Publication number
- CN117827054A CN117827054A CN202311633488.7A CN202311633488A CN117827054A CN 117827054 A CN117827054 A CN 117827054A CN 202311633488 A CN202311633488 A CN 202311633488A CN 117827054 A CN117827054 A CN 117827054A
- Authority
- CN
- China
- Prior art keywords
- screen
- determining
- acceleration sensor
- gradient
- knocking
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 68
- 230000001133 acceleration Effects 0.000 claims abstract description 160
- 230000008859 change Effects 0.000 claims description 24
- 238000004590 computer program Methods 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 4
- 230000001976 improved effect Effects 0.000 abstract description 8
- 238000010079 rubber tapping Methods 0.000 description 62
- 230000006870 function Effects 0.000 description 38
- 238000012545 processing Methods 0.000 description 25
- 238000005192 partition Methods 0.000 description 24
- 238000007726 management method Methods 0.000 description 23
- 239000010410 layer Substances 0.000 description 22
- 238000004891 communication Methods 0.000 description 16
- 210000001145 finger joint Anatomy 0.000 description 15
- 230000010355 oscillation Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 11
- 238000010295 mobile communication Methods 0.000 description 11
- 210000000988 bone and bone Anatomy 0.000 description 10
- 230000008569 process Effects 0.000 description 8
- 230000000903 blocking effect Effects 0.000 description 6
- 238000005070 sampling Methods 0.000 description 6
- 230000001960 triggered effect Effects 0.000 description 6
- 238000010009 beating Methods 0.000 description 5
- 230000011218 segmentation Effects 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000003062 neural network model Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- JVKRKMWZYMKVTQ-UHFFFAOYSA-N 2-[4-[2-(2,3-dihydro-1H-inden-2-ylamino)pyrimidin-5-yl]pyrazol-1-yl]-N-(2-oxo-3H-1,3-benzoxazol-6-yl)acetamide Chemical compound C1C(CC2=CC=CC=C12)NC1=NC=C(C=N1)C=1C=NN(C=1)CC(=O)NC1=CC2=C(NC(O2)=O)C=C1 JVKRKMWZYMKVTQ-UHFFFAOYSA-N 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 239000002096 quantum dot Substances 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 238000010030 laminating Methods 0.000 description 1
- 239000010985 leather Substances 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000008093 supporting effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请提供了一种截屏方法、设备及存储介质。通过将触摸屏划分成多个面积相对较小的屏幕分块,并通过确定敲击位置所在的屏幕分块对应的常量参数、加速度传感器所在的屏幕分块的梯度门限阈值,以及这两个屏幕分块之间的相对距离和该相对距离对应的距离系数来确定敲击位置所在的屏幕分块对应的梯度门限阈值,从而使得不同的敲击位置能够对应不同的梯度门限阈值,进而能够更加准确的识别本次敲击是否为触发截屏操作,大大提升了截屏操作的识别率。
Description
本申请是分案申请,原申请的申请号是202210606734.9,原申请日是2022年05月31日,原申请的全部内容通过引用结合在本申请中。
技术领域
本申请涉及终端设备技术领域,尤其涉及一种截屏方法、设备及存储介质。
背景技术
随着终端设备技术的不断发展,终端设备支持的功能也越来越丰富,例如现有的终端设备通常支持截屏功能,从而使得用户在使用终端设备的过程中,能够通过截屏功能随时截取自己需要的内容。
目前,为了方便用户单手截屏,很多终端设备具备支持指关节截屏的特性,这样用户可以单指关节连续敲击屏幕就可以实现截屏操作。
然而,现有指关节截屏功能通常是适用于手机等屏幕相对较小的终端设备,对于平板电脑等屏幕较大的终端设备,指关节截屏成功率较低。
发明内容
为了解决上述技术问题,本申请提供一种截屏方法、设备及存储介质,旨在提高大屏设备,如平板电脑设备的指关节截屏成功率。
第一方面,本申请提供一种截屏方法,应用于终端设备。其中,终端设备的触摸屏被划分为多个屏幕分块,该方法包括:响应于用户对触摸屏的敲击操作,确定敲击位置所在的屏幕分块和敲击操作对应的梯度值,梯度值用于指示多帧加速度数据间的数据变化量;确定敲击位置所在的屏幕分块与加速度传感器所在的屏幕分块之间的相对距离;根据加速度传感器所在的屏幕分块的梯度门限阈值、相对距离、相对距离对应的距离系数和敲击位置所在的屏幕分块对应的常量参数,确定敲击位置所在的屏幕分块的梯度门限阈值;在敲击操作对应的梯度值大于敲击位置所在的屏幕分块的梯度门限阈值时,触发截屏。由此,通过将触摸屏划分成多个面积相对较小的屏幕分块,并通过确定敲击位置所在的屏幕分块对应的常量参数、加速度传感器所在的屏幕分块的梯度门限阈值,以及这两个屏幕分块之间的相对距离和该相对距离对应的距离系数来确定敲击位置所在的屏幕分块对应的梯度门限阈值,从而使得不同的敲击位置能够对应不同的梯度门限阈值,进而能够更加准确的识别本次敲击是否为触发截屏操作,大大提升了截屏操作的识别率。
根据第一方面,确定敲击位置所在的屏幕分块,包括:确定敲击位置相对触摸屏的坐标;根据敲击位置相对触摸屏的坐标确定敲击位置所在的屏幕分块。这样,通过定位敲击位置的坐标,进而能够根据具体的坐标精准的确定敲击位置所在的屏幕分块,从而保证基于敲击位置所在的屏幕分块和加速度传感器所在屏幕分块确定的相对距离更加精准,进而保证计算出的梯度门限阈值更加精准,从而进一步提升了截屏操作的识别率。
根据第一方面,或者以上第一方面的任意一种实现方式,确定敲击位置相对触摸屏的坐标,包括:通过触摸屏中的触摸传感器采集用户敲击敲击位置时的报点数据;构建相对于触摸屏的坐标系;根据报点数据,确定敲击位置在坐标系中的坐标。
根据第一方面,或者以上第一方面的任意一种实现方式,确定敲击位置在坐标系中的坐标,包括:根据报点数据中触摸传感器采集到的敲击位置在敲击前第一时间阈值内的第一电容值、敲击时刻的第二电容值,以及敲击后第二时间阈值内的第三电容值,确定电容值的变化趋势;根据电容值的变化趋势,确定敲击位置在坐标系中的坐标。由于手指,或者指关节与触摸屏接触时,会引起电容值的变化,为了保证识别率,尽可能降低误判情况,通过获取敲击时刻,以及敲击时刻前后一定时间内的电容值,从而能够精准的获知电容值的变化,由此通过电容值的变化趋势便可以精准的确定是否发生了敲击操作,以及具体的敲击位置。
根据第一方面,或者以上第一方面的任意一种实现方式,在得到报点数据之后,方法还包括:通过加速度传感器采集用户敲击敲击位置时的加速度数据;根据报点数据和加速度数据,预测敲击操作触发截屏的置信度值;在置信度值大于设定的置信度阈值时,执行构建相对于触摸屏的坐标系的操作。这样,在置信度值大于设定的置信度阈值时,才执行本申请提供的截屏方法的流程,从而进一步提升了截屏操作的识别率。
根据第一方面,或者以上第一方面的任意一种实现方式,构建相对于触摸屏的坐标系,包括:以触摸屏的左下角为坐标原点;设置X轴水平指向右侧,Y轴垂直指向顶部,Z轴指向触摸屏前方,得到相对于触摸屏的坐标系。
根据第一方面,或者以上第一方面的任意一种实现方式,确定所述敲击操作对应的梯度值,包括:通过加速度传感器采集用户敲击所述敲击位置时的加速度数据;根据加速度数据,确定敲击操作对应的梯度值。
根据第一方面,或者以上第一方面的任意一种实现方式,基于下述公式,根据加速度传感器所在的屏幕分块的梯度门限阈值、相对距离、相对距离对应的距离系数和敲击位置所在的屏幕分块对应的常量参数,确定敲击位置所在的屏幕分块的梯度门限阈值:
Current_Grandient=Threshold_Grandient*distance*Coeff+K
其中,Current_Grandient为敲击位置所在的屏幕分块的梯度门限阈值,Threshold_Grandient为加速度传感器所在的屏幕分块的梯度门限阈值;distance为敲击位置所在的屏幕分块与加速度传感器所在的屏幕分块之间的相对距离,Coeff为相对距离对应的距离系数,K为敲击位置所在的屏幕分块对应的常量参数。
根据第一方面,或者以上第一方面的任意一种实现方式,加速度传感器的数量大于1;确定敲击操作对应的梯度值包括:获取每一个加速度传感器采集用户敲击敲击位置时的加速度数据;根据每一个加速度传感器采集用户敲击敲击位置时的加速度数据,确定敲击操作作用于敲击位置时,每一个加速度传感器对应的梯度值。
根据第一方面,或者以上第一方面的任意一种实现方式,确定敲击位置所在的屏幕分块与加速度传感器所在的屏幕分块之间的相对距离,包括:确定敲击位置所在的屏幕分块与每一个加速度传感器所在的屏幕分块之间的相对距离。
根据第一方面,或者以上第一方面的任意一种实现方式,根据加速度传感器所在的屏幕分块的梯度门限阈值、相对距离、相对距离对应的距离系数和敲击位置所在的屏幕分块对应的常量参数,确定敲击位置所在的屏幕分块的梯度门限阈值,包括:从确定的多个相对距离中选取最短的相对距离;根据最短的相对距离对应的加速度传感器所在的屏幕分块的梯度门限阈值、最短的相对距离、最短的相对距离对应的距离系数和敲击位置所在的屏幕分块对应的常量参数,确定敲击位置所在的屏幕分块的梯度门限阈值。这样,在终端设备中有多个加速度传感器时,优先考虑最短的相对距离,以及最短的相对距离对应的距离系数和加速度传感器所在屏幕分块的梯度门限阈值来计算敲击位置所在屏幕分块的梯度门限阈值,进而保证计算出的梯度门限阈值更加精准,从而进一步提升了截屏操作的识别率。
根据第一方面,或者以上第一方面的任意一种实现方式,在敲击操作对应的梯度值大于敲击位置所在的屏幕分块的梯度门限阈值时,触发截屏,包括:在最短的相对距离对应的加速度传感器对应的梯度值,大于敲击位置所在的屏幕分块的梯度门限阈值时,触发截屏。这样,保证了所有的判断都是基于最短的相对距离对应的相关参数,进而保证了结果的准确性。
根据第一方面,或者以上第一方面的任意一种实现方式,在确定敲击位置所在的屏幕分块与加速度传感器所在的屏幕分块之间的相对距离之前,方法还包括:确定每一个屏幕分块与加速度传感器所在的屏幕分块之间的相对距离;以加速度传感器为中心,基于距离关系函数向外映射,为每一个相对距离设置对应的距离系数。这样,以加速度传感器为中心向外映射,设置不同相对距离对应的距离系数,从而使得计算梯度门限阈值时所需的距离系数能够更精准的贴合本次敲击操作,进而保证计算出的梯度门限阈值更加精准,从而进一步提升了截屏操作的识别率。
根据第一方面,或者以上第一方面的任意一种实现方式,在确定敲击位置所在的屏幕分块与加速度传感器所在的屏幕分块之间的相对距离之前,方法还包括:确定摄像头相对触摸屏的坐标;根据摄像头相对触摸屏的坐标,确定触摸屏的对折线,摄像头相对触摸屏的坐标位于对折线上,对折线贯穿了触摸屏的部分屏幕分块;根据摄像头相对触摸屏的坐标和对折线,为每一个屏幕分块设置对应的常量参数。由于摄像头的凸起会导致终端设备水平放置时,部分区域与水平面无法平行,即存在一定夹角,这样用户在点击终端设备的触摸屏时,报点数据和加速度数据差异就会很大,因此通过考虑摄像头相对触摸屏的坐标,为摄像头所在位置的屏幕分块,以及摄像头所在对折线上的屏幕分块设置特殊的常量参数,能够保证计算出的梯度门限阈值更加精准,从而进一步提升了截屏操作的识别率。
根据第一方面,或者以上第一方面的任意一种实现方式,响应于用户对触摸屏的敲击操作,确定敲击位置所在的屏幕分块和敲击操作对应的梯度值,包括:在设定的时间阈值内接收到用户对触摸屏的任意同一区域的N次敲击操作时,确定敲击位置所在的屏幕分块和敲击操作对应的梯度值,N为大于1的整数。这样,在特定时间内,监测到对触摸屏同一区域的多次敲击时触发本申请提供的截屏流程,从而降低了误触率,进可能避免了用户误触导致截屏的情况发生。
第二方面,本申请提供了一种终端设备。该终端设备包括:存储器和处理器,存储器和处理器耦合;存储器存储有程序指令,程序指令由处理器执行时,使得所述终端设备执行第一方面或第一方面的任意可能的实现方式中的方法的指令。
示例性的,第二方面中的终端设备例如可以为平板电脑等屏幕尺寸相对较大的终端设备。
第三方面,本申请提供了一种计算机可读介质,用于存储计算机程序,该计算机程序包括用于执行第一方面或第一方面的任意可能的实现方式中的方法的指令。
第四方面,本申请提供了一种计算机程序,该计算机程序包括用于执行第一方面或第一方面的任意可能的实现方式中的方法的指令。
第五方面,本申请提供了一种芯片,该芯片包括处理电路、收发管脚。其中,该收发管脚、和该处理电路通过内部连接通路互相通信,该处理电路执行第一方面或第一方面的任一种可能的实现方式中的方法,以控制接收管脚接收信号,以控制发送管脚发送信号。
附图说明
图1为示例性示出的一种终端设备的硬件结构示意图;
图2为示例性示出的一种终端设备的软件结构示意图;
图3为示例性示出的一种手机的用于界面操作示意图;
图4为示例性示出的敲击手机的屏幕后加速度数据的振荡特征示意图;
图5为示例性示出的一种平板的用于界面操作示意图;
图6为示例性示出的又一种平板的用于界面操作示意图;
图7为示例性示出的敲击图6所示屏幕区域后加速度数据的振荡特征示意图;
图8为示例性示出的一种截屏方法的流程示意图;
图9为示例性示出的一种平板的触摸屏划分格式示意图;
图10为示例性示出的敲击平板的示意图;
图11为示例性示出的又一种截屏方法的流程示意图;
图12为示例性示出的又一种截屏方法的流程示意图;
图13为示例性示出的平板中设置有两个加速度传感器的示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。
本申请实施例的说明书和权利要求书中的术语“第一”和“第二”等是用于区别不同的对象,而不是用于描述对象的特定顺序。例如,第一目标对象和第二目标对象等是用于区别不同的目标对象,而不是用于描述目标对象的特定顺序。
在本申请实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
在本申请实施例的描述中,除非另有说明,“多个”的含义是指两个或两个以上。例如,多个处理单元是指两个或两个以上的处理单元;多个系统是指两个或两个以上的系统。
为了更好的理解本申请实施例提供的技术方案,在对本申请实施例的技术方案说明之前,首先结合附图对本申请实施例的适用于的终端设备(例如手机、平板电脑、可触控PC机等)的硬件结构进行说明。
需要说明的是,本申请实施例提供的技术方案尤其适用于屏幕相对较大的终端设备,例如平板电脑、可触控PC机、智慧屏等,为了便于说明,图1以平板电脑为例进行说明。
参见图1,终端设备100可以包括:处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。
示例性的,在一些实现方式中,传感器模块180可以包括压力传感器,陀螺仪传感器,气压传感器,磁传感器,加速度传感器,距离传感器,接近光传感器,指纹传感器,温度传感器,触摸传感器,环境光传感器,骨传导传感器等,此处不再一一例举,本申请对此不作限制。
为了更好的理解上述各个传感器的工作原理,以下进行具体说明:
压力传感器用于感受压力信号,可以将压力信号转换成电信号。在一些实现方式中,压力传感器可以设置于显示屏194。压力传感器的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器,电极之间的电容改变。终端设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,终端设备100根据压力传感器检测所述触摸操作强度。终端设备100也可以根据压力传感器的检测信号计算触摸的位置。在一些实现方式中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器可以用于确定终端设备100的运动姿态。在一些实现方式中,可以通过陀螺仪传感器确定终端设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器检测终端设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消终端设备100的抖动,实现防抖。陀螺仪传感器还可以用于导航,体感游戏场景。
气压传感器用于测量气压。在一些实现方式中,终端设备100通过气压传感器测得的气压值计算海拔高度,辅助定位和导航。
磁传感器包括霍尔传感器。终端设备100可以利用磁传感器检测翻盖皮套的开合。在一些实现方式中,当终端设备100是翻盖机时,终端设备100可以根据磁传感器检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器可检测终端设备100在各个方向上(一般为三轴)加速度的大小。当终端设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器,用于测量距离。终端设备100可以通过红外或激光测量距离。在一些实现方式中,拍摄场景,终端设备100可以利用距离传感器测距以实现快速对焦。
接近光传感器可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。终端设备100通过发光二极管向外发射红外光。终端设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定终端设备100附近有物体。当检测到不充分的反射光时,终端设备100可以确定终端设备100附近没有物体。终端设备100可以利用接近光传感器检测用户手持终端设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器用于感知环境光亮度。终端设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器也可用于拍照时自动调节白平衡。环境光传感器还可以与接近光传感器配合,检测终端设备100是否在口袋里,以防误触。
指纹传感器用于采集指纹。终端设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器用于检测温度。在一些实现方式中,终端设备100利用温度传感器检测的温度,执行温度处理策略。例如,当温度传感器上报的温度超过阈值,终端设备100执行降低位于温度传感器附近的处理器的性能,以便降低功耗实施热保护。在另一些实现方式中,当温度低于另一阈值时,终端设备100对电池142加热,以避免低温导致终端设备100异常关机。在其他一些实现方式中,当温度低于又一阈值时,终端设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器,也称“触控面板”。触摸传感器可以设置于显示屏194,由触摸传感器与显示屏194组成触摸屏,也称“触控屏”。触摸传感器用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型,例如,可以包括滑动、点击、长按等触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实现方式中,触摸传感器也可以设置于终端设备100的表面,与显示屏194所处的位置不同。具体到本申请实施例提供的技术方案中,当用户触摸或敲击触摸屏时,触摸传感器就会监测到用户的操作行为,终端设备100接收到来自触摸屏中触摸传感器采集到的数据,就会响应于该操作行为,例如执行本申请实施例提供的技术方案中的确定敲击位置所在的屏幕分块的操作。
骨传导传感器可以获取振动信号。在一些实现方式中,骨传导传感器可以获取人体声部振动骨块的振动信号。骨传导传感器也可以接触人体脉搏,接收血压跳动信号。在一些实现方式中,骨传导传感器也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器获取的血压跳动信号解析心率信息,实现心率检测功能。
具体到本申请实施例提供的技术方案中,传感器模块180至少需要包括触摸传感器和加速度传感器。这样,通过触摸传感器采集的数据就可以确定用户是否敲击了触摸屏,并确定用户敲击位置的具体坐标,通过加速度传感器采集的数据就可以确定多帧加速度数据之间的数据变化情况,并确定加速度传感器的具体坐标。进而根据敲击位置的坐标确定敲击位置在触控屏的具体屏幕分块,根据加速度传感器的坐标确定加速度传感器在触控屏的具体屏幕分块,进而根据确定的两个屏幕分块获取计算敲击位置所在屏幕分块的梯度门限阈值,从而能够精准的确定本次敲击是否需要触发截屏操作。
此外,需要说明的是,处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processing unit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
可理解的,控制器可以是终端设备100的神经中枢和指挥中心。在实际应用中,控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
此外,还需要说明的是,处理器110中还可以设置存储器,用于存储指令和数据。在一些实现方式中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
示例性的,在一些实现方式中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuit sound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purpose input/output,GPIO)接口,用户标识模块(subscriber identitymodule,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
继续参见图1,示例性的,充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实现方式中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实现方式中,充电管理模块140可以通过终端设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
继续参见图1,示例性的,电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实现方式中,电源管理模块141也可以设置于处理器110中。在另一些实现方式中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
继续参见图1,示例性的,终端设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
需要说明的是,天线1和天线2用于发射和接收电磁波信号。终端设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实现方式中,天线可以和调谐开关结合使用。
继续参见图1,示例性的,移动通信模块150可以提供应用在终端设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实现方式中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实现方式中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
此外,需要说明的是,调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实现方式中,调制解调处理器可以是独立的器件。在另一些实现方式中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
继续参见图1,示例性的,无线通信模块160可以提供应用在终端设备100上的包括无线局域网(wireless local area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellitesystem,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near fieldcommunication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
具体到本申请实施例提供的技术方案中,终端设备100可通过移动通信模块150或无线通信模块160与云端服务器或者其他服务器进行通信。例如,终端设备100可以通过移动通信模块150向云端服务器发送相应延迟时间。示例性的,云端可以是多个服务器组成的服务器集群。
此外,还需要说明的是,终端设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
继续参见图1,示例性的,显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emitting diode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,AMOLED),柔性发光二极管(flex light-emitting diode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot light emitting diodes,QLED)等。在一些实现方式中,终端设备100可以包括1个或N个显示屏194,N为大于1的正整数。
此外,还需要说明的是,终端设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
此外,还需要说明的是,ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实现方式中,ISP可以设置在摄像头193中。
此外,还需要说明的是,摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实现方式中,终端设备100可以包括1个或N个摄像头193,N为大于1的正整数。
具体到本申请实施例提供的技术方案中,考虑到后置摄像头的凸起会影响终端设备100水平放置,故而为每个屏幕分块设置的常量参数考虑了摄像头所在位置对各个屏幕分块的影响。
此外,还需要说明的是,数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当终端设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
此外,还需要说明的是,视频编解码器用于对数字视频压缩或解压缩。终端设备100可以支持一种或多种视频编解码器。这样,终端设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
继续参见图1,示例性的,外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展终端设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
继续参见图1,示例性的,内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行终端设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储终端设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flashstorage,UFS)等。
具体到本申请实施例提供的技术方案中,每一个屏幕分块对应的常量参数、任意一个屏幕分块与加速度传感器所在的屏幕分块之间的相对距离对应的距离系数,以及加速度传感器所在的屏幕分块的梯度门限阈值,可以预先确定存储在终端设备的内部存储器121中,从而便于快速读取。
此外,还需要说明的是,终端设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
此外,还需要说明的是,音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实现方式中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
继续参见图1,示例性的,按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。终端设备100可以接收按键输入,产生与终端设备100的用户设置以及功能控制有关的键信号输入。
继续参见图1,示例性的,马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
继续参见图1,示例性的,指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
关于终端设备100的硬件结构就介绍到此,应当理解的是,图1所示终端设备100仅是一个范例,在具体实现中,终端设备100可以具有比图中所示的更多的或者更少的部件,可以组合两个或多个的部件,或者可以具有不同的部件配置。图1中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
为了更好的理解图1所示终端设备100的软件结构,以下对终端设备100的软件结构进行说明。在对终端设备100的软件结构进行说明之前,首先对终端设备100的软件系统可以采用的架构进行说明。
具体的,在实际应用中,终端设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。
此外,可理解的,目前主流的终端设备使用的软件系统包括但不限于Windows系统、Android系统和iOS系统。为了便于说明,本申请实施例以分层架构的Android系统为例,示例性说明终端设备100的软件结构。
此外,后续关于本申请实施例提供的截屏方案在具体实现中,本申请实施例提供的截屏方案同样适用于其他系统。
参见图2,为本申请实施例的终端设备100的软件结构框图。
如图2所示,终端设备100的分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实现方式中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
其中,应用程序层可以包括一系列应用程序包。如图2所示,应用程序包可以包括应用市场,视频,购物,权限管理,蓝牙,Wi-Fi,设置等应用程序,此处不再一一列举,本申请对此不作限制。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。
其中,应用程序框架层包括一些预先定义的函数。如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等,此处不再一一列举,本申请对此不作限制。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。具体到本申请实施例提供的技术翻案中,截屏操作就需要用到窗口管理器。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等,此处不再一一列举,本申请对此不作限制。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等,此处不再一一列举,本申请对此不作限制。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android Runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
可理解的,上述所说的2D图形引擎是2D绘图的绘图引擎。
此外,可理解的,Android系统中的内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动等。示例性的,传感器驱动可用于将传感器(例如触摸传感器)的检测信号输出至视图系统,以使得视图系统响应于检测信号,显示对应的应用界面。
关于终端设备100的软件结构就介绍到此,可以理解的是,图2示出的软件结构中的层以及各层中包含的部件,并不构成对终端设备100的具体限定。在本申请另一些实施例中,终端设备100可以包括比图示更多或更少的层,以及每个层中可以包括更多或更少的部件,本申请不做限定。
为了更好的理解本申请提供的技术方案,以下结合图3至图7,分别以终端设备为屏幕相对较小的手机和屏幕相对较大的平板为例,对截屏方案的使用场景进行说明。
参见图3,示例性的,手机10当前的显示界面10a中可以包括一个或多个控件。控件包括但不限于:网络控件、电量控件、应用图标控件等。
继续参见图3,示例性的,应用图标控件包括但不限于:时钟应用图标控件、日历应用图标控件、图库应用图标控件、备忘录应用图标控件、文件管理应用图标控件、电子邮件应用图标控件、音乐应用图标控件、计算器应用图标控件、视频应用图标控件、设置应用图标控件、天气应用图标控件、浏览器应用图标控件302等,此处不再一一列举,本申请对此不作限制。
继续参见图3,示例性的,以用户在显示页面10a触发指关节截屏功能为例,当用户通过手指/指关节(图3为使用指关节)对显示页面10a的10a-1区域,在一定的时间,例如1s内连续敲击2次,手机10便会响应于用户的敲击操作。可理解的,由于手机10的屏幕相对较小,因此即便用户敲击的10a-1区域距离手机10中的加速度传感器相对较远,加速度传感器采集到的加速度数据(后续简称为:ACC数据)的振荡特征也很明显,因此手机10可以确定本次敲击操作是触发指关节截屏功能的,因此会生成截屏指令,触发截屏操作,进而截取到显示页面10a对应的画面。
示例性的,在一些实现方式中,可以设置加速度传感器采集到的ACC数据包括敲击时刻对应的采样点,以及敲击时刻前后的部分采样点对应的ACC数据,例如敲击时刻前后总共126个采样点的ACC数据。
示例性的,在另一些实现方式中,可以设置加速度传感器采集到的ACC数据包括敲击时刻、敲击时刻前一定时间内,以及敲击时刻后一定时间内的ACC数据。
此外,需要说明的是,为了使得振荡特征更加明显,可以为加速度传感器采集到的ACC数据乘以固定的倍数,从而能够更加清楚、直观的确定本次敲击操作对应的ACC数据的振荡特征。如图4所示,则为用户敲击10a-1区域时,手机10内的加速度传感器采集到的敲击前后126个采集点的ACC数据乘以固定倍数后的振荡特性示意图。
应当理解的是,上述说明仅是为了更好的理解本实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
通过上述描述可知,在实际应用中,对于手机10等屏幕相对较小的终端设备,由于其屏幕相对较小,因此敲击屏幕任意位置时,内部的加速度传感器采集到的ACC数据的振荡特性都比较明显,因此对于不同的敲击区域即便采用相同的梯度门限阈值(用来指示多帧/多个采样点ACC数据间的数据变量),也能准确的识别出当前敲击操作是否需要触发指关节截屏功能。然而对于屏幕相对较大的终端设备,例如图5和图6所示的平板20,假设平板20内设置的加速度传感器位于20a附近,当用户敲击20a时,加速度传感器采集到的ACC数据的振荡特征会比较明显,其振荡特征图例如可以如图4所示,即采用现有不同的敲击区域对应相同的梯度门限阈值的方式,依旧可以准确的识别出当前敲击操作需要触发指关节截屏功能。但是,当用户敲击的位置位于图6所示的区域20b内时,由于区域20b距离位于区域20a附件的加速度传感器较远,加之平板20的屏幕较大,因此加速度传感器采集到的ACC数据的振荡特征就不够明显,例如图7所示,即便ACC数据乘以了固定的倍数,最大的振荡幅度也就在3000~5000之间,而图4所示的则在-3000~18000直接。对于平板20等屏幕相对较大的终端设备,在敲击位置距离加速度传感器较远时,敲击操作对应的梯度值(用于指示多帧加速度数据间的数据变化量)往往不会大于预先设置的固定的梯度门限阈值,因此敲击操作经常不能被识别为触发截屏操作,识别率和误判率都很低,用户体验较差。
由此,为了解决现有指关节截屏功能应用到大屏设备时存在的不足,本申请提供了一种截屏方案,通过将触摸屏划分成多个面积相对较小的屏幕分块,并通过确定敲击位置所在的屏幕分块对应的常量参数、加速度传感器所在的屏幕分块的梯度门限阈值,以及这两个屏幕分块之间的相对距离和该相对距离对应的距离系数来确定敲击位置所在的屏幕分块对应的梯度门限阈值,从而使得不同的敲击位置能够对应不同的梯度门限阈值,这样只需将敲击操作对应的梯度值与敲击位置所在屏幕分块的梯度门限阈值进行比较,就能准确的识别本次敲击是否为触发截屏操作,使得判断时所采用的梯度门限阈值更加合理,从而大大提升了截屏操作的识别率。
结合图3至图7所示的截屏场景,下面以终端设备为屏幕相对较大的平板设备为例,用几个具体的实施例,对本申请提供的技术方案的实现细节进行说明,以下内容仅为方便理解而提供的实现细节,并非实施本方案的必须。
示例性的,参见图8,在一些实施例中,本申请提供的截屏方案的具体实现步骤包括:
S101,在设定的时间阈值内接收到用户对触摸屏的任意同一区域的N次敲击操作时,确定敲击位置所在的屏幕分块和敲击操作对应的梯度值。
可理解的,目前指关节截屏功能的触发通常是在一定的时间,例如1s内,对触摸屏的同一位置进行多次敲击,例如2次。因此,上述N为大于1的整数。换句话说,平板设备在设定的时间阈值内接收到用户对触摸屏的任意同一区域的N次敲击操作时,会响应于用户对触摸屏的敲击操作,进而确定敲击位置所在的屏幕分块。
需要说明的是,上述所说的屏幕分块可以是根据业务需求对触摸屏划分得到的,也可以是根据产品型号对触摸屏划分得到的,本申请对此不作限制。
此外,还需要说明的是,在一些实现方式中,对触摸屏划分的多个屏幕分块,可以是均匀的分块,也可以是不均匀的分块,本申请对此不作限制。
关于监测到用户对触摸屏的敲击操作后,平板设备响应于用户的敲击操作,确定敲击位置所在的屏幕分块的方式,在一些实现方式中可以通过先确定敲击位置相对触摸屏的坐标,然后根据确定的敲击位置相对触摸屏的坐标确定敲击位置所在的屏幕分块的方式实现。
可理解的,触摸事件/敲击事件通常是通过触摸屏中的触摸传感器(或者电容传感器)感知的,因此在确定敲击位置相对触摸屏的坐标时,可以通过触摸传感器采集到的用户敲击上述敲击位置时的报点数据来确定。
所谓报点(Touch report),是指触摸屏的集成电路(Touch Panel IntegratedCircuit,TP IC)通过集成电路总线(Inter Integrated Circuit,I2C)或串行外设接口(Serial Peripheral Interface,SPI),向平板设备中的应用处理器(ApplicationProcessor,AP)上报的敲击位置处获取的坐标。由于敲击操作对应到触摸屏上的敲击位置可能不止一个坐标,因此触摸传感器会采集到多个坐标,本实施例将采集到的多个报点称为报点数据。
相应地,在得到报点数据后,便可以根据现有依据触摸传感器采集的报点数据确定敲击位置的具体坐标的标准,确定本次敲击操作对应的敲击位置相对触摸屏的坐标。例如,根据报点数据中触摸传感器采集到的敲击位置在敲击前第一时间阈值内的第一电容值、敲击时刻的第二电容值,以及敲击后第二时间阈值内的第三电容值,确定电容值的变化趋势;根据电容值的变化趋势,确定敲击位置在坐标系中的坐标。
可理解的,在一些实现方式中,也可以设置电容值的变化趋势是根据多个采样点采集到的电容值确定,例如敲击时刻、敲击时刻前、敲击时刻后总共126个采样点采集到的电容值。
应当理解的是,上述说明仅是为了更好的理解本实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
此外,需要说明的是,为了使得连续两次敲击位置的坐标是针对同一坐标系而言的,以便后续计算的可行性。因此,本实施例选择以触摸屏为参考标准构建的坐标系为例来确定敲击位置的坐标,即根据报点数据确定的敲击位置相对触摸屏的坐标,实质就是确定敲击位置在构建的坐标系中的坐标。
示例性的,关于以触摸屏为参考标准构建的坐标系,例如可以约定坐标原点位于触摸屏的左下角,X轴水平指向右侧,Y轴垂直指向顶部,Z轴指向触摸屏前方,触摸屏后方的坐标为具有负值的Z轴。即,以触摸屏的左下角为坐标原点,设置X轴水平指向右侧,Y轴垂直指向顶部,Z轴指向触摸屏前方,这样就可以得到一个相对于触摸屏的坐标系。
应当理解的是,上述说明仅是为了更好的理解本实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
此外,关于本实施例中所确定的敲击操作对应的梯度值,具体是用于指示多帧加速度数据(ACC数据)间的数据变化量,或者说振荡特征的。因此,敲击操作对应的梯度值,具体是根据加速度传感器采集到的用户敲击敲击位置时的加速度数据确定的。
可理解的,由于梯度值是用于指示多帧加速度数据(ACC数据)间的数据变化量,或者说振荡特征的,因此在一些实现方式中可以计算加速度传感器,例如三轴加速度传感器X轴、Y轴和Z轴上信号的最大值和最小值,根据三个轴上信号的最大值和最小值来计算信号振荡幅度矢量,进而得到敲击操作对应的梯度值。
示例性的,在另一些实现方式中,敲击操作对应的梯度值也可以根据目前的触控技术和软件算法来确定。具体的实现方式可以参见相关标准,此处不再赘述。
应当理解的是,上述说明仅是为了更好的理解本实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
S102,确定敲击位置所在的屏幕分块与加速度传感器所在的屏幕分块之间的相对距离。
基于上述对触摸屏划分的描述可知,不论是按照那种划分方式,在划分方式和需要划分的数量确定后,终端设备中的加速度传感器所在的屏幕分块就是已知的了,因此在响应于用户对触摸屏的敲击操作时,直接获取加速度传感器所在的屏幕分块的信息即可。
示例性的,在一些实现方式中,加速度传感器所在的屏幕分块的信息例如可以预先记录在内部存储器中,这样在需要的时候直接访问内部存储器读取即可。
示例性的,在一些实现方式中,可以根据两个屏幕分块的中心点的坐标,确定这两个屏幕分块之间的相对距离。以触摸屏被划分的多个屏幕分块为均匀的矩形分块为例,在确定敲击位置所在的屏幕分块后,先根据该屏幕分块四个顶点的坐标确定该屏幕分块的中心点的坐标。同理在获取加速度传感器所在的屏幕分块后,先根据该屏幕分块四个顶点的坐标确定该屏幕分块的中心点的坐标。接着,基于两点之间的距离公式,根据确定的两个中心点的坐标,确定这两个屏幕分块之间的相对距离。
示例性的,在另一些实现方式中,敲击位置所在的屏幕分块与加速度传感器所在的屏幕分块之间的相对距离,也可以是根据敲击位置的坐标和加速度传感器的坐标确定的。
此外,需要说明的是,不论根据哪两个位置的坐标信息来确定敲击位置所在的屏幕分块与加速度传感器所在的屏幕分块之间的相对距离,由于敲击操作不会有Z轴上的位置变化,因而在根据两点之间的距离公式确定这两个屏幕分块之间的相对距离时,不需要考虑Z轴的坐标信息,只需根据X轴和Y轴的坐标信息即可。
应当理解的是,上述说明仅是为了更好的理解本实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
S103,根据加速度传感器所在的屏幕分块的梯度门限阈值、相对距离、相对距离对应的距离系数和敲击位置所在的屏幕分块对应的常量参数,确定敲击位置所在的屏幕分块的梯度门限阈值。
示例性的,在一些实现方式中,加速度传感器所在的屏幕分块的梯度门限阈值(后续表示为:Threshold_Grandient)例如可以根据设备型号、加速度传感器型号、设备采用的芯片型号等因素预先设置,例如设置为300。相对距离对应的距离系数和敲击位置所在的屏幕分块对应的常量参数则可以通过算法跑库,或者对不同设备测试获得的数据构建的距离系数表和常量参数表中查找出。
示例性的,关于记录了不同距离对应的距离系数的距离系数表的构建,例如可以是在确定每一个屏幕分块与加速度传感器所在的屏幕分块之间的相对距离后,以加速度传感器为中心,基于距离关系函数向外映射,为每个相对距离设置的。
示例性的,关于记录了不同敲击位置所在的屏幕分块对应的常量参数的常量参数表的构建,例如可以是考虑摄像头,特别是凸出的后置摄像头这一因素后为每个屏幕分块设置的。
示例性的,在考虑摄像头这一因素时,每个屏幕分块对应的常量参数的设置,例如可以通过以下方式:
首先,确定摄像头相对触摸屏的坐标。
然后,根据摄像头相对触摸屏的坐标,确定触摸屏的对折线。
需要说明的是,上述所说的对折线贯穿了触摸屏的部分屏幕分块,并且摄像头相对触摸屏的坐标位于对折线上。
最后,根据摄像头相对触摸屏的坐标和对折线,为每一个屏幕分块设置对应的常量参数。
示例性的,在一些实现方式中,可以为对折线贯穿的每一个屏幕分块设置不同的常量参数,例如可以考虑距离摄像头的远近设置不同的常量参数。
示例性的,在另一些实现方式中,可以为摄像头所在的屏幕分块,以及包含触摸屏四个顶角的屏幕分块设置不同的常量参数。
示例性的,在另一些实现方式中,可以为对折线上侧的屏幕分块和对折线下侧的屏幕分块设置不同的常量参数。
应当理解的是,上述说明仅是为了更好的理解本实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
S104,在敲击操作对应的梯度值大于敲击位置所在的屏幕分块的梯度门限阈值时,触发截屏。
可理解的,在敲击操作对应的梯度值大于敲击位置所在的屏幕分块的梯度门限阈值时,平板设备响应于该操作,会生成截屏指令,进而根据截屏指令调用对应的进程,由该进程对平板设备当前显示的画面的进行抓取,并将抓取的内容保存为图片即可完成截图操作。
为了更好的理解本实施例的技术细节,以将平板设备的触摸屏划分为均匀的16个屏幕分块为例,结合图9和图10进行具体说明。
参见图9,示例性的,平板20的触摸屏20a为2000*1200的分辨率,触摸屏20a被划分为了16(4*4)个屏幕分块,这16个屏幕分块在上述以左下角为原点,X轴指向右侧,Y轴垂直向上,Z轴指向屏幕上方(图中未示出)的坐标系中的位置,如图9所示,顺序编号分别表示为屏幕分块0~屏幕分块15。
为了能够实现不同的屏幕分块对应不同的梯度门限阈值,可以按照上述给出的设置任意一个屏幕分块与加速度传感器所在屏幕分块之间的相对距离对应的距离系数的方式构建距离系数表,同时考虑摄像头这一因素为每一个屏幕分块设置不同的常量参数,即构建常量参数表。
为了便于说明,以摄像头(在平板20背面凸出的后置摄像头)20a-1位于图9所示的位置,加速度传感器20a-2为图9所示的位置(位于屏幕分块8)为例,给出一种距离系数表和常量参数表。
表1距离系数表
表2常量参数表
屏幕分块 | 屏幕分块对应的常量参数 | 屏幕分块 | 屏幕分块对应的常量参数 |
SB0 | K0 | SB1 | K1 |
SB2 | K2 | SB3 | K3 |
SB4 | K4 | SB5 | K5 |
SB6 | K6 | SB7 | K7 |
SB8 | K8 | SB9 | K9 |
SB10 | K`10 | SB11 | K11 |
SB12 | K12 | SB13 | K13 |
SB14 | K14 | SB15 | K15 |
示例性的,根据业务需求,表1中任意两个相对距离对应的距离系数可以相同,也可以不相同。
相应地,表2中任意两个屏幕分块对应的常量参数可以相同,也可以不相同。
示例性的,在实际应用中,表1中记录的距离系数和表2中记录的常量参数也可以以队列的形式记录,例如用Coeff_list表示记录距离系数的队列,用K_list表示记录常量参数的队列。则,表1中的内容转换到Coeff_list中可以表示为Coeff_list{Coeff8-0,Coeff8-1,Coeff8-2,Coeff8-3,Coeff8-4,Coeff8-5,Coeff8-6,Coeff8-7,Coeff8-8,Coeff8-9,Coeff8-10,Coeff8-11,Coeff8-12,Coeff8-13,Coeff8-14,Coeff8-15};表2中的内容转换到K_list中可以表示为K_list{K0,K1,K2,K3,K4,K5,K6,K7,K8,K9,K`10,K11,K12,K13,K14,K15}。
示例性的,在根据触摸屏20a构建的坐标系如图9所示时用户敲击触摸屏20a触发截屏操作时,敲击位置位于对折线I的左侧的概率较大,因此可以将对折线I的左侧的屏幕分块,如屏幕分块0、屏幕分块1、屏幕分块2、屏幕分块4、屏幕分块5和屏幕分块8对应常量参数大于对折线I右侧的屏幕分块,如屏幕分块7、屏幕分块10、屏幕分块11、屏幕分块13、屏幕分块14和屏幕分块15。
此外,还可以为对折线I贯穿的屏幕分块3、屏幕分块6、屏幕分块9和屏幕分块12设置不同的常量参数。
关于为不同屏幕分块设置的常量参数的取值,例如可以是K_list{475,300,260,115,300,260,200,115,350,130,165,230,150,125,245,340}。
应当理解的是,上述说明仅是为了更好的理解本实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
在完成上述距离系数和常量参数的设置后,如果用户在1s内对图10中的位置20a-3连续敲击了2次,平板20响应于该敲击操作,根据触摸屏20a中的触摸传感器采集的报点数据确定敲击位置20a-3在图10所示的坐标系中的坐标,进而根据敲击位置20a-3的坐标和每一个屏幕分块包括的坐标信息,确定敲击位置20a-3位于屏幕分块2中,根据上述表2可以确定屏幕分块2对应的常量参数为K2。
继续参见图10,示例性的,由于加速度传感器位于屏幕分块8中,因此按照上述根据屏幕分块的中心点的坐标确定两个屏幕分块之间的相对距离的方式,可以确定屏幕分块2和屏幕分块之间的相对距离为D8-2,根据上述表1可以确定相对距离D8-2对应的距离系数为Coeff8-2。
在确定相对距离为D8-2,相对距离D8-2对应的距离系数为Coeff8-2,敲击位置20a-3所在的屏幕分块2对应的常量参数为K2后,根据确定的这3个参数和为加速度传感器所在屏幕分块设定的梯度门限阈值(Threshold_Grandient),便可以确定敲击位置20a-3所在的屏幕分块2对应的梯度门限阈值(后续表示为:Current_Grandient)。
关于根据上述参数确定Current_Grandient的方式,可以用如下公式表示:
Current_Grandient=Threshold_Grandient*distance*Coeff+K
其中,Current_Grandient,即每次敲击操作对应的敲击位置所在屏幕分块的梯度门限阈值,例如上述示例中的屏幕分块2的梯度门限阈值;Threshold_Grandient为加速度传感器所在屏幕分块设定的梯度门限阈值;distance为确定的敲击位置所在屏幕分块和加速度传感器所在屏幕分块之间的相对距离,例如上述示例中的相对距离D8-2;Coeff为确定的相对距离对应的距离系数,例如上述示例中相对距离D8-2对应的距离系数为Coeff8-2;K为敲击位置所在的屏幕分块对应的常量参数,例如上述示例中敲击位置20a-3所在的屏幕分块2对应的常量参数为K2。
接着,在按照上述公式计算出敲击位置所在的屏幕分块,例如敲击位置20a-3所在的屏幕分块2对应的梯度门限阈值Current_Grandien后,将Current_Grandien与本次敲击操作对应的梯度值进行比较,如果本次敲击操作对应的梯度值大于Current_Grandien,则确定当前识别到的敲击操作是触发截屏功能的,这种情况下会生成截屏指令,从而根据截屏指令调用对应的进程进行截屏。
相应地,如果本次敲击操作对应的梯度值不大于Current_Grandien,则确定当前识别到的敲击操作不是触发截屏功能的,可能是用户的误触,这种情况下不会生成截屏指令,即不触发截屏功能。
应当理解的是,上述说明仅是为了更好的理解本实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。在实际应用中,也可以规定在本次敲击操作对应的梯度值不小于Current_Grandien,即大于、等于Current_Grandien的情况都认为当前识别到的敲击操作是触发截屏功能的。
由此,本实施例提供的截屏方法,通过将触摸屏划分成多个面积相对较小的屏幕分块,并通过确定敲击位置所在的屏幕分块对应的常量参数、加速度传感器所在的屏幕分块的梯度门限阈值,以及这两个屏幕分块之间的相对距离和该相对距离对应的距离系数来确定敲击位置所在的屏幕分块对应的梯度门限阈值,从而使得不同的敲击位置能够对应不同的梯度门限阈值,进而能够更加准确的识别本次敲击是否为触发截屏操作,大大提升了截屏操作的识别率。
示例性的,参见图11,在另一些实施例中,本申请提供的截屏方案的具体实现步骤包括:
S201,在设定的时间阈值内接收到用户对触摸屏的任意同一区域的N次敲击操作时,通过触摸屏中的触摸传感器采集用户敲击敲击位置时的报点数据,通过加速度传感器采集用户敲击敲击位置时的加速度数据。
关于步骤S201的具体实现细节,可以参见图8所示实施例的文字描述部分,此处不再赘述。
S202,根据报点数据和加速度数据,预测敲击操作触发截屏的置信度值。
示例性的,在一些实现方式中,可以将报点数据和加速度数据作为输入参数,输入预先训练后的神经网络模型,由神经网络模型进行识别处理,进而预测本次敲击操作触发截屏的置信度值。
相应地,如果置信度值大于设定的置信度阈值,比如80,则执行步骤S203;反之,则认为本次敲击操作不是触发截屏功能的,即无需进行后续步骤S203至步骤S209的操作,直接退出本实施例提供的截屏方法的处理流程。
可理解的,关于上述所说的神经网络模型,例如可以是根据目前市面上流行的各种大屏设备(平板电脑、智慧屏、可触控PC等)触发指关节截屏功能的数据训练获得的。关于训练神经网络模型的具体方式,可以参见现有标准,此处不再赘述。
此外,为了进一步降低误判率,进而提高识别率,在一些实现方式中,可以设置在进行置信度预测之前,先执行判断报点数据和加速度数据是否有效的操作。
示例性的,在另一些实现方式中,判断报点数据和加速度数据是否有效的操作也可以在进行置信度预测之后,具体为在预测出的置信度值大于设定的置信度阈值前。
关于判断报点数据和加速度数据是否有效的方式,例如可以是在监测到用户对触控屏的某一区域的第一次敲击后,判断加速度传感器是否感应到了超过预设值的加速度矢量变化事件,且同期触摸传感器是否感应到了有效触摸事件。
相应地,如果加速度传感器感应到了超过预设值的加速度矢量变化事件,且同期触摸传感器感应到了有效触摸事件,则启动定时器计时。如果在一定的时间内,例如1s内再次监测到了用户对触控屏的同一区域的第二次敲击,则继续判断加速度传感器是否感应到了超过预设值的加速度矢量变化事件,且同期触摸传感器是否感应到了有效触摸事件。
相应地,如果加速度传感器感应到了超过预设值的加速度矢量变化事件,且同期触摸传感器感应到了有效触摸事件,则判断前后两次的敲击操作,触摸传感器感知到的触摸事件在触摸屏中位置的有效距离是否小于预设值。
相应地,如果小于,则确定报点数据和加速度数据有效。
反之,如果上述任意一次判断出现异常,则可以认为本次敲击为误触,无需触发截屏功能。
应当理解的是,上述说明仅是为了更好的理解本实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
S203,在置信度值大于设定的置信度阈值时,构建相对于触摸屏的坐标系。
S204,根据报点数据,确定敲击位置在坐标系中的坐标。
S205,根据敲击位置相对触摸屏的坐标确定敲击位置所在的屏幕分块。
S206,根据加速度数据,确定所述敲击操作对应的梯度值。
S207,确定敲击位置所在的屏幕分块与加速度传感器所在的屏幕分块之间的相对距离。
S208,根据加速度传感器所在的屏幕分块的梯度门限阈值、相对距离、相对距离对应的距离系数和敲击位置所在的屏幕分块对应的常量参数,确定敲击位置所在的屏幕分块的梯度门限阈值。
S209,在敲击操作对应的梯度值大于敲击位置所在的屏幕分块的梯度门限阈值时,触发截屏。
关于步骤S203至步骤S209的具体实现细节,可以参见图8所示实施例的文字描述部分,此处不再赘述。
由此,本实施例提供的截屏方法,在置信度值大于设定的置信度阈值时,才执行本申请提供的截屏方法的流程,从而进一步提升了截屏操作的识别率。
示例性的,参见图12,在另一些实施例中,本申请提供的截屏方案的具体实现步骤包括:
S301,在设定的时间阈值内接收到用户对触摸屏的任意同一区域的N次敲击操作时,确定敲击位置所在的屏幕分块和敲击操作作用于敲击位置时每一个加速度传感器对应的梯度值。
S302,确定敲击位置所在的屏幕分块与每一个加速度传感器所在的屏幕分块之间的相对距离。
不难发现,本实施例与图8所示实施例的区别在于,本实施例中终端设备中加速度传感器的数量大于1,因此需要获取每一个加速度传感器所在的屏幕分块,以及敲击位置所在的屏幕分块与每一个加速度传感器所在的屏幕分块之间的相对距离。关于获取每一个加速度传感器所在的屏幕分块,以及敲击位置所在的屏幕分块与每一个加速度传感器所在的屏幕分块之间的相对距离的具体实现细节可以参见图8所示实施例的文字部分,此处不再赘述。
S303,从确定的多个相对距离中选取最短的相对距离。
为了更好的理解,以平板设备中设置了两个加速度传感器为例,结合图13进行具体说明。
参见图13,示例性的,平板20例如可以是以中轴线20a-5为轴线的可折叠设备,其触控屏20a被划分为16个均匀的矩形屏幕分块。在图13所示的20a-1的位置设置有后置摄像头,20a-2的位置设置有一个加速度传感器,在中轴线20a-4的位置设置有另一个加速度传感器。每一个屏幕分块对应的常量参数可以如上述实施例中的表2所示,20a-2位置处的加速度传感器所在的屏幕分块8与任意一个屏幕分块之间的相对距离对应的距离系数可以如上述实施例中的表1所示。
示例性的,基于同样的方式,20a-4位置处的加速度传感器所在地屏幕分块11与任意一个屏幕分块之间的相对距离对应的距离系数可以如下表3所示。
表3距离系数表
相对距离 | 相对距离对应的距离系数 | 相对距离 | 相对距离对应的距离系数 |
D11-0 | Coeff11-0 | D11-1 | Coeff11-1 |
D11-2 | Coeff11-2 | D11-3 | Coeff11-3 |
D11-4 | Coeff11-4 | D11-5 | Coeff11-5 |
D11-6 | Coeff11-6 | D11-7 | Coeff11-7 |
D11-8 | Coeff11-8 | D11-9 | Coeff11-9 |
D11-10 | Coeff11-10 | D11-11 | Coeff11-11 |
D11-12 | Coeff11-12 | D11-13 | Coeff11-13 |
D11-14 | Coeff11-14 | D11-15 | Coeff11-15 |
继续参见图13,示例性的,当用户敲击了图13中的位置20a-3后,通过触摸传感器采集到的报点数据确定敲击位置20a-3所在的屏幕分块为屏幕分块2,通过20a-2位置处的加速度传感器采集到的加速度数据确定20a-2位置处的加速度传感器位于屏幕分块2,通过20a-4位置处的加速度传感器采集到的加速度数据确定20a-4位置处的加速度传感器位于屏幕分块11。接着,根据屏幕分块2中心点的坐标和屏幕分块8中心点的坐标确定屏幕分块2和屏幕分块8之间的相对距离为D1(表1中的D8-2),根据屏幕分块2中心点的坐标和屏幕分块11中心点的坐标确定屏幕分块2和屏幕分块11之间的相对距离为D2(表3中的D11-2)。接着,通过比较D1和D2的大小,当D2小于D1时,将D2确定为最终用来计算敲击位置20a-3所在的屏幕分块2的梯度门限阈值的相对距离,与D2对应的距离系数即为表3中的Coeff11-2;反之,如果D1小于D2,将D1确定为最终用来计算敲击位置20a-3所在的屏幕分块2的梯度门限阈值的相对距离,与D1对应的距离系数即为表1中的Coeff8-2。这样,就可以更加精准的识别本次敲击操作是否需要触发指关节截屏功能。
应当理解的是,上述说明仅是为了更好的理解本实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
S304,根据最短的相对距离对应的加速度传感器所在的屏幕分块的梯度门限阈值、最短的相对距离、最短的相对距离对应的距离系数和敲击位置所在的屏幕分块对应的常量参数,确定敲击位置所在的屏幕分块的梯度门限阈值。
S305,在最短的相对距离对应的加速度传感器对应的梯度值,大于敲击位置所在的屏幕分块的梯度门限阈值时,触发截屏。
这样,保证了所有的判断都是基于最短的相对距离对应的相关参数,进而保证了结果的准确性。
关于步骤S304、步骤S305的具体实现细节,可以参见图8所示实施例的文字描述部分,此处不再赘述。
此外,应当理解的是,在实际应用中,本实施例也可以在图11所示实施例的基础上进行改进,本申请对此不作限制。
由此,本实施例提供的截屏方法,在终端设备中有多个加速度传感器时,优先考虑最短的相对距离,以及最短的相对距离对应的距离系数和加速度传感器所在屏幕分块的梯度门限阈值来计算敲击位置所在屏幕分块的梯度门限阈值,进而保证计算出的梯度门限阈值更加精准,从而进一步提升了截屏操作的识别率。
应当理解的是,上述几种实施例仅是为了更好的理解本申请提供的截屏方案而列举具体实现方式,不作为对本申请技术方案的唯一限制。
此外,可以理解的是,终端设备为了实现上述功能,其包含了执行各个功能相应的硬件和/或软件模块。结合本文中所公开的实施例描述的各示例的算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以结合实施例对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
此外,需要说明的是,在实际的应用场景中由终端设备实现的上述各实施例提供的截屏方法,也可以由终端设备中包括的一种芯片系统来执行,其中,该芯片系统可以包括处理器。该芯片系统可以与存储器耦合,使得该芯片系统运行时调用该存储器中存储的计算机程序,实现上述终端设备执行的步骤。其中,该芯片系统中的处理器可以是应用处理器也可以是非应用处理器的处理器。
另外,本申请实施例还提供一种计算机可读存储介质,该计算机存储介质中存储有计算机指令,当该计算机指令在终端设备上运行时,使得终端设备执行上述相关方法步骤实现上述实施例中的截屏方法。
另外,本申请实施例还提供了一种计算机程序产品,当该计算机程序产品在终端设备上运行时,使得终端设备执行上述相关步骤,以实现上述实施例中的截屏方法。
另外,本申请的实施例还提供一种芯片(也可以是组件或模块),该芯片可包括一个或多个处理电路和一个或多个收发管脚;其中,所述收发管脚和所述处理电路通过内部连接通路互相通信,所述处理电路执行上述相关方法步骤实现上述实施例中的截屏方法,以控制接收管脚接收信号,以控制发送管脚发送信号。
此外,通过上述描述可知,本申请实施例提供的终端设备、计算机可读存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
以上所述,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
Claims (21)
1.一种截屏方法,其特征在于,应用于电子设备,所述电子设备包括触摸屏,所述方法包括:
响应于用户对所述触摸屏的操作,确定所述操作对应的屏幕分块和所述操作对应的梯度值,所述梯度值用于指示多帧加速度数据间的数据变化量;
确定所述操作对应的屏幕分块与加速度传感器对应的屏幕分块之间的相对距离;
根据所述加速度传感器对应的屏幕分块的梯度门限阈值、所述相对距离、所述相对距离对应的距离系数和所述操作对应的屏幕分块对应的常量参数,确定所述操作对应的屏幕分块的梯度门限阈值;
在所述操作对应的梯度值大于所述操作对应的屏幕分块的梯度门限阈值的情况下,触发截屏。
2.根据权利要求1所述的方法,其特征在于,所述加速度传感器对应的屏幕分块的梯度门限阈值是根据所述加速度传感器采集到的多帧加速度数据间的数据变化量确定的。
3.根据权利要求1或2所述的方法,其特征在于,所述电子设备中预置的每一个屏幕分块对应的常量参数是根据所述电子设备的摄像头相对所述触摸屏的坐标和所述触摸屏的对折线确定的;
其中,所述对折线根据所述摄像头相对所述触摸屏的坐标确定,所述摄像头相对所述触摸屏的坐标位于所述对折线上,所述对折线贯穿了所述触摸屏的部分屏幕分块。
4.根据权利要求1至3任一项所述的方法,其特征在于,所述电子设备中预置了所述加速度传感器对应的屏幕分块的梯度门限阈值,以及所述加速度传感器与所述触摸屏的每一个屏幕分块之间的相对距离,以及每一个相对距离对应的距离系数,以及每一个屏幕分块对应的常量参数。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述根据所述加速度传感器对应的屏幕分块的梯度门限阈值、所述相对距离、所述相对距离对应的距离系数和所述操作对应的屏幕分块对应的常量参数,确定所述操作对应的屏幕分块的梯度门限阈值,包括:
对所述加速度传感器对应的屏幕分块的梯度门限阈值、所述相对距离和所述相对距离对应的距离系数进行乘法结合律运算;
将乘法结合律运算得到的结果与所述操作对应的屏幕分块对应的常量参数进行相加运算,得到所述操作对应的屏幕分块的梯度门限阈值。
6.根据权利要求1至4任一项所述的方法,其特征在于,所述操作包括敲击操作或点击操作。
7.根据权利要求6所述的方法,其特征在于,所述操作对应的屏幕分块为所述敲击位置所在的屏幕分块,或者,所述点击位置所在的屏幕分块。
8.根据权利要求7所述的方法,其特征在于,所述确定所述操作对应的屏幕分块,包括:
确定所述敲击位置或所述点击位置,相对所述触摸屏的坐标;
根据所述坐标,确定所述敲击位置或所述点击位置所在的屏幕分块。
9.根据权利要求8所述的方法,其特征在于,所述确定所述敲击位置或所述点击位置,相对所述触摸屏的坐标,包括:
获取所述触摸屏中的触摸传感器在用户敲击所述敲击位置或点击所述点击位置的情况下,采集到的报点数据;
构建相对于所述触摸屏的坐标系;
根据所述报点数据,确定所述敲击位置或所述点击位置在所述坐标系中的坐标。
获取每一个加速度传感器在用户做出所述操作的情况下,采集到的加速度数据。
10.根据权利要求9所述的方法,其特征在于,所述根据所述报点数据,确定所述敲击位置或所述点击位置在所述坐标系中的坐标,包括:
根据所述报点数据中,所述触摸传感器采集到的第一电容值、第二电容值和第三电容值,确定电容值的变化趋势;其中,所述第一电容值为第一时间阈值内采集到的电容值,所述第一时间阈值为敲击所述敲击位置前或点击所述点击位置前的一段时间;所述第二电容值为敲击所述敲击位置或点击所述点击位置时采集到的电容值;所述第三电容值为第二时间阈值内采集到的电容值,所述第二时间阈值为敲击所述敲击位置后或点击所述点击位置后的一段时间;
根据所述电容值的变化趋势,确定所述敲击位置或所述点击位置,在所述坐标系中的坐标。
11.根据权利要求9所述的方法,其特征在于,在得到所述报点数据之后,所述方法还包括:
通过所述加速度传感器采集用户敲击所述敲击位置时的加速度数据,或点击所述点击位置时的加速度数据;
根据所述报点数据和所述加速度数据,预测所述操作触发截屏的置信度值;
在所述置信度值大于设定的置信度阈值的情况下,执行所述构建相对于所述触摸屏的坐标系的步骤。
12.根据权利要求9所述的方法,其特征在于,所述构建相对于所述触摸屏的坐标系,包括:
以所述触摸屏的左下角为坐标原点;
设置X轴水平指向右侧,Y轴垂直指向顶部,Z轴指向所述触摸屏前方,得到相对于所述触摸屏的坐标系。
13.根据权利要求7所述的方法,其特征在于,确定所述操作对应的梯度值,包括:
通过所述加速度传感器采集用户敲击所述敲击位置,或点击所述点击位置时的加速度数据;
根据所述加速度数据,确定所述敲击操作或所述点击操作对应的梯度值。
14.根据权利要求7所述的方法,其特征在于,所述加速度传感器的数量大于1;
所述确定所述操作对应的梯度值,包括:
获取每一个加速度传感器采集用户敲击所述敲击位置,或点击所述点击位置时的加速度数据;
根据每一个加速度传感器采集到的加速度数据,确定所述敲击操作作用于所述敲击位置或所述点击操作作用于所述点击位置时,每一个加速度传感器对应的梯度值。
15.根据权利要求14所述的方法,其特征在于,所述确定所述操作对应的屏幕分块与所述加速度传感器对应的屏幕分块之间的相对距离,包括:
确定所述敲击位置所在的屏幕分块与每一个加速度传感器所在的屏幕分块之间的相对距离;
或者,
确定所述点击位置所在的屏幕分块与每一个加速度传感器所在的屏幕分块之间的相对距离。
16.根据权利要求15所述的方法,其特征在于,所述根据所述加速度传感器对应的屏幕分块的梯度门限阈值、所述相对距离、所述相对距离对应的距离系数和所述操作对应的屏幕分块对应的常量参数,确定所述操作对应的屏幕分块的梯度门限阈值,包括:
从确定的多个所述相对距离中,选取最短的所述相对距离;
根据最短的所述相对距离对应的加速度传感器对应的屏幕分块的梯度门限阈值、最短的所述相对距离、最短的所述相对距离对应的距离系数和所述操作对应的屏幕分块对应的常量参数,确定所述操作对应的屏幕分块的梯度门限阈值。
17.根据权利要求16所述的方法,其特征在于,在所述操作对应的梯度值大于所述操作对应的屏幕分块的梯度门限阈值的情况下,触发截屏,包括:
在最短的所述相对距离对应的加速度传感器对应的梯度值,大于所述敲击操作或所述点击操作对应的屏幕分块的梯度门限阈值的情况下,触发截屏。
18.根据权利要求7所述的方法,其特征在于,所述响应于用户对触摸屏的操作,确定所述操作对应的屏幕分块和所述操作对应的梯度值,包括:
在设定的时间阈值内接收到用户对所述触摸屏的任意同一区域的N次敲击操作或点击操作的情况下,确定所述敲击操作或所述点击操作对应的屏幕分块,以及所述敲击操作或所述点击操作对应的梯度值,所述N为大于1的整数。
19.根据权利要求1至4任一项所述的方法,其特征在于,所述触摸屏包括多个区域,一个或多个区域属于一个屏幕分块。
20.一种电子设备,其特征在于,所述电子设备包括:存储器和处理器,所述存储器和所述处理器耦合;所述存储器存储有程序指令,所述程序指令由所述处理器执行时,使得所述电子设备执行如权利要求1至19任意一项所述的截屏方法。
21.一种计算机可读存储介质,其特征在于,包括计算机程序,当所述计算机程序在电子设备上运行时,使得所述电子设备执行如权利要求1至19任意一项所述的截屏方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311633488.7A CN117827054A (zh) | 2022-05-31 | 2022-05-31 | 截屏方法、设备及存储介质 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210606734.9A CN116027940B (zh) | 2022-05-31 | 2022-05-31 | 截屏方法、设备及存储介质 |
CN202311633488.7A CN117827054A (zh) | 2022-05-31 | 2022-05-31 | 截屏方法、设备及存储介质 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210606734.9A Division CN116027940B (zh) | 2022-05-31 | 2022-05-31 | 截屏方法、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117827054A true CN117827054A (zh) | 2024-04-05 |
Family
ID=86069537
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311633488.7A Pending CN117827054A (zh) | 2022-05-31 | 2022-05-31 | 截屏方法、设备及存储介质 |
CN202210606734.9A Active CN116027940B (zh) | 2022-05-31 | 2022-05-31 | 截屏方法、设备及存储介质 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210606734.9A Active CN116027940B (zh) | 2022-05-31 | 2022-05-31 | 截屏方法、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (2) | CN117827054A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105320436A (zh) * | 2015-07-07 | 2016-02-10 | 崔景城 | 一种以手指关节敲击屏幕来触发截屏的方法 |
CN106569686A (zh) * | 2016-10-12 | 2017-04-19 | 上海斐讯数据通信技术有限公司 | 滚动球控制截屏的方法及相关的智能设备 |
US20200026388A1 (en) * | 2018-07-20 | 2020-01-23 | Hefei Boe Optoelectronics Technology Co., Ltd. | Method and system for setting a touch report threshold, and display apparatus |
CN110806831A (zh) * | 2019-09-30 | 2020-02-18 | 华为技术有限公司 | 一种触摸屏的响应方法及电子设备 |
CN113867562A (zh) * | 2021-08-18 | 2021-12-31 | 荣耀终端有限公司 | 触摸屏报点的校正方法、装置和电子设备 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9557809B2 (en) * | 2002-10-09 | 2017-01-31 | Pierre Bonnat | Method of controlling an electronic or computer system |
EP2214087B1 (en) * | 2009-01-30 | 2015-07-08 | BlackBerry Limited | A handheld electronic device having a touchscreen and a method of using a touchscreen of a handheld electronic device |
CN108874280B (zh) * | 2018-05-11 | 2021-08-31 | 努比亚技术有限公司 | 屏幕划分方法、终端及计算机可读存储介质 |
-
2022
- 2022-05-31 CN CN202311633488.7A patent/CN117827054A/zh active Pending
- 2022-05-31 CN CN202210606734.9A patent/CN116027940B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105320436A (zh) * | 2015-07-07 | 2016-02-10 | 崔景城 | 一种以手指关节敲击屏幕来触发截屏的方法 |
CN106569686A (zh) * | 2016-10-12 | 2017-04-19 | 上海斐讯数据通信技术有限公司 | 滚动球控制截屏的方法及相关的智能设备 |
US20200026388A1 (en) * | 2018-07-20 | 2020-01-23 | Hefei Boe Optoelectronics Technology Co., Ltd. | Method and system for setting a touch report threshold, and display apparatus |
CN110806831A (zh) * | 2019-09-30 | 2020-02-18 | 华为技术有限公司 | 一种触摸屏的响应方法及电子设备 |
CN113867562A (zh) * | 2021-08-18 | 2021-12-31 | 荣耀终端有限公司 | 触摸屏报点的校正方法、装置和电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN116027940B (zh) | 2023-12-08 |
CN116027940A (zh) | 2023-04-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN115866121B (zh) | 应用界面交互方法、电子设备和计算机可读存储介质 | |
US20220253144A1 (en) | Shortcut Function Enabling Method and Electronic Device | |
CN112714901B (zh) | 系统导航栏的显示控制方法、图形用户界面及电子设备 | |
US20220358089A1 (en) | Learning-Based Keyword Search Method and Electronic Device | |
CN112114912A (zh) | 一种用户界面布局方法及电子设备 | |
US11972106B2 (en) | Split screen method and apparatus, and electronic device | |
CN111882642B (zh) | 三维模型的纹理填充方法及装置 | |
WO2021238370A1 (zh) | 显示控制方法、电子设备和计算机可读存储介质 | |
CN112751954A (zh) | 一种操作提示的方法和电子设备 | |
CN113688019B (zh) | 响应时长检测方法及装置 | |
CN116070035B (zh) | 数据处理方法和电子设备 | |
CN113641271A (zh) | 应用窗口的管理方法、终端设备及计算机可读存储介质 | |
CN114205457B (zh) | 一种移动用户界面元素的方法、电子设备及存储介质 | |
CN115904160A (zh) | 一种图标移动方法、相关图形界面及电子设备 | |
CN110609650B (zh) | 一种应用状态切换方法及终端设备 | |
CN115437601B (zh) | 图像排序方法、电子设备、程序产品及介质 | |
US20220317841A1 (en) | Screenshot Method and Related Device | |
CN116027940B (zh) | 截屏方法、设备及存储介质 | |
CN111475363B (zh) | 卡死识别方法及电子设备 | |
CN110109813B (zh) | 用于gpu性能的信息确定方法、装置、终端及存储介质 | |
CN112712378A (zh) | 一种服务社区模式的售后服务管理系统 | |
CN114764300B (zh) | 一种窗口页面的交互方法、装置、电子设备以及可读存储介质 | |
CN116048681B (zh) | 图标显示方法、电子设备和计算机可读存储介质 | |
CN114449622B (zh) | 一种用于计算Wi-Fi耗电量的方法及电子设备 | |
CN114264884B (zh) | 介电常数测量方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |