CN113867562A - 触摸屏报点的校正方法、装置和电子设备 - Google Patents

触摸屏报点的校正方法、装置和电子设备 Download PDF

Info

Publication number
CN113867562A
CN113867562A CN202110949876.0A CN202110949876A CN113867562A CN 113867562 A CN113867562 A CN 113867562A CN 202110949876 A CN202110949876 A CN 202110949876A CN 113867562 A CN113867562 A CN 113867562A
Authority
CN
China
Prior art keywords
value
screen
posture
preset
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110949876.0A
Other languages
English (en)
Other versions
CN113867562B (zh
Inventor
王利飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202110949876.0A priority Critical patent/CN113867562B/zh
Publication of CN113867562A publication Critical patent/CN113867562A/zh
Application granted granted Critical
Publication of CN113867562B publication Critical patent/CN113867562B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/0418Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G06F3/04186Touch location disambiguation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例提供一种触摸屏报点的校正方法、装置和电子设备,该方法包括:响应于检测到用户触摸电子设备的屏幕,基于所述屏幕中触摸传感器的电容采样值的变化量,获取用户触摸所述屏幕的位置;获取所述电子设备的姿态;根据所述电子设备的姿态,对所述位置进行校正,得到校正后的位置,执行响应于校正后的位置的操作。本申请实施例中TP报点的校正方法可以提高TP报点的准确性。

Description

触摸屏报点的校正方法、装置和电子设备
技术领域
本申请实施例涉及终端技术,尤其涉及一种触摸屏报点的校正方法、装置和电子设备。
背景技术
随着电子设备的发展,触摸屏(touch panel,TP)得到广泛的应用。用户在触摸屏上进行点击、滑动等操作时,触摸屏中的TP处理器可以根据用户的操作,获取用户操作的坐标,并将该坐标上报至电子设备中的应用处理器(application processor,AP)。AP可以基于用户的操作坐标,执行相应的动作。其中,TP处理器向AP上报的坐标就是触摸屏TP报点。
目前,TP处理器可以基于触摸屏中触摸传感器TP sensor的电容采样值的变化量,确定用户操作的坐标,但用户采用手指接触触摸屏时,手指并非接触触摸屏的一个位置,而是具有一定的接触面积,采用目前的方法得到的用户操作的坐标准确性低。
发明内容
本申请实施例提供一种触摸屏报点的校正方法、装置和电子设备,可以提高TP报点的准确性。
第一方面,本申请实施例提供一种触摸屏报点的校正方法,该方法的执行主体可以为电子设备或电子设备中的芯片,下述以执行主体为电子设备为例进行说明。该方法中,电子设备响应于检测到用户触摸电子设备的屏幕,可以基于所述屏幕中触摸传感器的电容采样值的变化量,获取用户触摸所述屏幕的位置。其中,电子设备检测用户触摸电子设备的屏幕的方式可以为:电子设备响应于检测到触摸传感器的电容采样值的变化量发生变化,且触摸传感器的电容采样值的变化量等于预设电容采样值的变化量(如100%),以及触摸传感器的电容采样值的变化量发生变化的区域的面积大于预设面积,则确定用户触摸电子设备的屏幕。
现有技术中TP报点的坐标即为采用触摸传感器的电容采样值的变化量获取的位置,该位置与电子设备的姿态相关,因此现有技术中TP报点的准确性低,影响电子设备的反馈响应的准确性。本申请实施例中,电子设备可以获取所述电子设备的姿态,进而根据所述电子设备的姿态,对所述位置进行校正,得到校正后的位置,执行响应于所述校正后的位置的操作。在一种实施例中,响应于所述校正后的位置的操作可以包括:电子设备对校正后的位置进行TP报点,如触控消息处理模块向应用程序上报校正后的位置,或者电子设备可以执行响应于用户触摸校正后的位置的操作。
本申请实施例中的TP报点的校正方法,避免了现有技术中采用用户的手指和屏幕的接触区域的重心作为用户的手指在屏幕上的位置的不准确的问题,结合电子设备的姿态,对TP报点进行校正,提高了电子设备获取的用户的手指在屏幕上的位置的准确性,即提高了TP报点的准确性。
在一种实施例中,电子设备可以采用目前已有的技术方案中的方式获取电子设备的姿态。本申请实施例中,电子设备中预先存储有电子设备的预设姿态对应的校正方式,因此,为了便于基于电子设备的姿态,对用户触摸所述屏幕的位置进行校正,电子设备可以根据所述电子设备中的加速度传感器采集的加速度数据,获取所述电子设备的加速度值;根据所述电子设备的加速度值和预设姿态的加速度值,获取所述电子设备的姿态。
其中,电子设备根据所述电子设备的加速度值和预设姿态的加速度值,获取所述电子设备的姿态,具体可以为:获取所述电子设备的加速度值中X值和所述预设姿态的加速度值中X值的第一差值;获取所述电子设备的加速度值中Y值和所述预设姿态的加速度值中Y值的第二差值;基于所述第一差值、所述第二差值,获取所述电子设备的姿态。应理解,当第一差值位于第一预设差值范围,且第二差值位于第二预设差值范围,则可以确定电子设备的姿态为所述预设姿态。
在一种可能的实现方式中,所述预设姿态为第一姿态、第二姿态、第三姿态或第四姿态中的至少两个,其中,电子设备可以获取所述电子设备的加速度值中X值和每个预设姿态的加速度值中X值的第一差值;获取所述电子设备的加速度值中Y值和每个预设姿态的加速度值中Y值的第二差值;根据多个第一差值和多个第二差值,获取所述电子设备的姿态。
示例性的,预设姿态可以为第一姿态、第二姿态、第三姿态,以及第四姿态。姿态处理模块可以获取电子设备的X值和每个姿态下的X值的第一差值,以及电子设备的Y值和每个姿态下的Y值的第二差值,姿态处理模块可以将第一差值位于第一预设差值范围内,以及第二差值位于第二预设差值范围内的姿态作为电子设备的姿态。示例性的,如电子设备的X值与第一姿态下的X值的第一差值位于第一预设差值范围内,以及电子设备的Y值与第一姿态下的Y值的第二差值位于第二预设差值范围内,则姿态处理模块可以将第一姿态作为电子设备的姿态。
在一种实施例中,所述第一姿态为:所述电子设备的屏幕所在的平面与地面垂直,且所述电子设备中听筒所在的第一侧边与竖直方向垂直的姿态,所述第二姿态为所述第一姿态旋转180度后的姿态,所述第三姿态为所述第一姿态顺时针旋转90度后的姿态,所述第四姿态为所述第一姿态逆时针旋转90度后的姿态。
下述对电子设备基于电子设备的姿态,对位置进行校正的过程进行说明:
电子设备可以根据所述电子设备的姿态,以及所述屏幕的预设坐标系,对所述用户触摸所述屏幕的位置进行校正。在一种实施例中,所述屏幕的预设坐标系的X轴与所述电子设备的听筒所在的第一侧边平行,所述屏幕的预设坐标系的Y轴与所述第一侧边垂直;所述根据所述电子设备的姿态。
如上,因为电子设备可以基于预设姿态,确定电子设备的姿态为预设姿态中的一种,因此,电子设备的姿态为第一姿态、第二姿态、第三姿态或第四姿态。电子设备可以基于所述电子设备的姿态、所述预设坐标系、第一预设校正值和第二预设校正值,对所述用户触摸所述屏幕的位置进行校正,所述第一预设校正值用于对所述用户触摸所述屏幕的位置的X值进行校正,所述第二预设校正值用于对所述用户触摸所述屏幕的位置的Y值进行校正。
在一种实施例中,第一预设校正值和第二预设校正值可以相等或不等。
如上实施例中的方法适用于用户的人脸方向与竖直方向平行,或者人脸方向与竖直方向的夹角小于预设夹角。对于人脸方向与竖直方向垂直,或者人脸方向与竖直方向的夹角大于预设夹角的场景,如用户躺着玩手机的场景,用户触摸屏幕的手指的重心是偏向人脸方向的,因此电子设备获取的手指在屏幕上点击的位置偏向人脸方向,不准确,进而造成TP报点不准确,导致电子设备不能准确进行响应。
因此,本申请实施例中,电子设备还可以采集用户的人脸图像,且基于所述人脸图像,获取所述用户的人脸方向,所述人脸方向为所述用户的额头至下巴的方向,电子设备根据所述电子设备的姿态、所述预设坐标系,将所述用户触摸所述屏幕的位置朝向远离所述人脸方向进行校正。
本申请实施例中,电子设备可以基于电子设备的姿态和人脸图像,对用户的手指在屏幕上的位置进行远离人脸方向的校正,不仅避免了现有技术中采用用户的手指和屏幕的接触区域的重心作为用户的手指在屏幕上的位置的不准确的问题,还解决了用户握持电子设备的姿态不同,导致朝向远离地面方向校正不准确的问题,进一步提高了TP报点的准确性。
在一种可能的实现方式中,用户操作屏幕时,用户的手指的方向往往与竖直方向呈一定的角度,则电子设备对X值(Y值)进行减小或增大固定的值处理,则校正不准确。因此,本申请实施例中,电子设备可以获取所述用户触摸所述屏幕的压力值;基于所述触摸传感器的电容采样值的变化量发生变化的区域的形状,获取所述用户触摸所述屏幕的第一方向;根据所述屏幕的预设方向和所述第一方向,获取所述预设方向和所述第一方向的夹角;所述根据所述电子设备的姿态,对所述位置进行校正,包括:根据所述电子设备的姿态、所述夹角、所述压力值,以及预设压力值,对所述用户触摸所述屏幕的位置进行校正。
其中,电子设备可以根据所述压力值和所述预设压力值的比值、所述夹角,以及第一预设校正值,得到所述用户触摸所述屏幕的位置在X轴上的校正值;根据所述压力值和所述预设压力值的比值、所述夹角,以及第二预设校正值,得到所述用户触摸所述屏幕的位置在Y轴上的校正值;根据所述电子设备的姿态、所述X轴上的校正值,以及所述Y轴上的校正值,对所述用户触摸所述屏幕的位置进行校正。
本申请实施例中,电子设备可以在电子设备的姿态的基础上(或电子设备的姿态和人脸方向的基础上),可以进一步结合用户的手指的方向与竖直方向的夹角,以及用户的压力值,对用户的手指在屏幕上的位置各轴上的值进行校正,能够进一步提高TP报点的准确性。
第二方面,本申请实施例提供一种触摸屏报点的校正方法,该方法的执行主体可以为电子设备或电子设备中的芯片,下述以执行主体为电子设备为例进行说明。该方法中,电子设备响应于检测到用户触摸电子设备的屏幕,基于所述屏幕中触摸传感器的电容采样值的变化量,获取用户触摸所述屏幕的位置;获取所述用户触摸所述屏幕的压力值;基于所述触摸传感器的电容采样值的变化量发生变化的区域的形状,获取所述用户触摸所述屏幕的第一方向;根据所述屏幕的预设方向和所述第一方向,获取所述预设方向和所述第一方向的夹角;根据所述夹角、所述压力值,以及预设压力值,对所述位置进行校正,得到校正后的位置;执行响应于所述校正后的位置的操作。
本申请实施例中,因为用户操作屏幕时,用户的手指的方向往往与竖直方向呈一定的角度,因此,本申请实施例中结合用户的手指的方向往往与竖直方向的夹角,以及用户按压屏幕的压力,对用户触摸所述屏幕的位置进行校正,可以提高TP报点的准确性。
在一种可能的实现方式中,电子设备可以根据所述压力值和所述预设压力值的比值、所述夹角,以及第一预设校正值,得到所述用户触摸所述屏幕的位置在X轴上的校正值;根据所述压力值和所述预设压力值的比值、所述夹角,以及第二预设校正值,得到所述用户触摸所述屏幕的位置在Y轴上的校正值;根据所述X轴上的校正值,以及所述Y轴上的校正值,对所述用户触摸所述屏幕的位置进行校正。
其中,电子设备可以根据所述屏幕的预设坐标系,将所述用户触摸所述屏幕的位置中的X值增大或减小所述X轴上的校正值,且将所述用户触摸所述屏幕的位置中的Y值增大或减小所述Y轴上的校正值,使得校正后的位置相较于校正前的位置远离所述第一方向。
第三方面,本申请实施例提供一种触摸屏报点的校正装置,该装置可以为如上第一方面的电子设备,该装置可以包括:
触控集成电路IC芯片,用于响应于检测到用户触摸电子设备的屏幕,基于所述屏幕中触摸传感器的电容采样值的变化量,获取用户触摸所述屏幕的位置,以及通过触控驱动向触控消息处理模块上报用户触摸所述屏幕的位置。
姿态处理模块,用于获取所述电子设备的姿态。
触控消息处理模块,用于从姿态处理模块获取所述电子设备的姿态,且根据所述电子设备的姿态,对所述位置进行校正,得到校正后的位置,以及向应用程序上报所述校正后的位置。
应用程序,用于执行响应于所述校正后的位置的操作。
在一种可能的实现方式中,姿态处理模块,具体用于根据所述电子设备中的加速度传感器采集的加速度数据,获取所述电子设备的加速度值;根据所述电子设备的加速度值和预设姿态的加速度值,获取所述电子设备的姿态。
在一种可能的实现方式中,姿态处理模块,具体用于获取所述电子设备的加速度值中X值和所述预设姿态的加速度值中X值的第一差值;获取所述电子设备的加速度值中Y值和所述预设姿态的加速度值中Y值的第二差值;基于所述第一差值、所述第二差值,获取所述电子设备的姿态。
在一种可能的实现方式中,所述预设姿态为第一姿态、第二姿态、第三姿态或第四姿态中的至少两个,姿态处理模块,具体用于获取所述电子设备的加速度值中X值和每个预设姿态的加速度值中X值的第一差值;获取所述电子设备的加速度值中Y值和每个预设姿态的加速度值中Y值的第二差值;根据多个第一差值和多个第二差值,获取所述电子设备的姿态。
在一种可能的实现方式中,触控消息处理模块,具体用于根据所述电子设备的姿态,以及所述屏幕的预设坐标系,对所述用户触摸所述屏幕的位置进行校正。
在一种可能的实现方式中,所述屏幕的预设坐标系的X轴与所述电子设备的听筒所在的第一侧边平行,所述屏幕的预设坐标系的Y轴与所述第一侧边垂直。
触控消息处理模块,具体用于基于所述电子设备的姿态、所述预设坐标系、第一预设校正值和第二预设校正值,对所述用户触摸所述屏幕的位置进行校正,所述第一预设校正值用于对所述用户触摸所述屏幕的位置的X值进行校正,所述第二预设校正值用于对所述用户触摸所述屏幕的位置的Y值进行校正。
在一种可能的实现方式中,所述电子设备的姿态为第一姿态、第二姿态、第三姿态或第四姿态,所述第一姿态为:所述电子设备的屏幕所在的平面与地面垂直,且所述电子设备中听筒所在的第一侧边与竖直方向垂直的姿态,所述第二姿态为所述第一姿态旋转180度后的姿态,所述第三姿态为所述第一姿态顺时针旋转90度后的姿态,所述第四姿态为所述第一姿态逆时针旋转90度后的姿态。
在一种可能的实现方式中,相机,用于采集用户的人脸图像。姿态处理模块,还用于获取人脸图像,且基于所述人脸图像,获取所述用户的人脸方向,所述人脸方向为所述用户的额头至下巴的方向。
触控消息处理模块,具体用于根据所述电子设备的姿态、所述预设坐标系,将所述用户触摸所述屏幕的位置朝向远离所述人脸方向进行校正。
在一种可能的实现方式中,压力传感器,用于采集用户触摸屏幕的压力信号。姿态处理模块,还用于获取用户触摸所述屏幕的压力值。
触控消息处理模块,还用于基于所述触摸传感器的电容采样值的变化量发生变化的区域的形状,获取所述用户触摸所述屏幕的第一方向;根据所述屏幕的预设方向和所述第一方向,获取所述预设方向和所述第一方向的夹角;根据所述电子设备的姿态、所述夹角、所述压力值,以及预设压力值,对所述用户触摸所述屏幕的位置进行校正。
在一种可能的实现方式中,触控消息处理模块,具体用于根据所述压力值和所述预设压力值的比值、所述夹角,以及第一预设校正值,得到所述用户触摸所述屏幕的位置在X轴上的校正值;根据所述压力值和所述预设压力值的比值、所述夹角,以及第二预设校正值,得到所述用户触摸所述屏幕的位置在Y轴上的校正值;根据所述电子设备的姿态、所述X轴上的校正值,以及所述Y轴上的校正值,对所述用户触摸所述屏幕的位置进行校正。
第四方面,本申请实施例提供一种触摸屏报点的校正装置,该装置可以为如上第二方面的电子设备,该装置可以包括:
触控集成电路IC芯片,用于响应于检测到用户触摸电子设备的屏幕,基于所述屏幕中触摸传感器的电容采样值的变化量,获取用户触摸所述屏幕的位置,且通过触控驱动向触控消息处理模块上报用户触摸所述屏幕的位置。
压力传感器,用于采集用户触摸屏幕的压力信号。姿态处理模块,用于获取用户触摸所述屏幕的压力值。
触控消息处理模块,用于基于所述触摸传感器的电容采样值的变化量发生变化的区域的形状,获取所述用户触摸所述屏幕的第一方向;根据所述屏幕的预设方向和所述第一方向,获取所述预设方向和所述第一方向的夹角;根据所述夹角、所述压力值,以及预设压力值,对所述用户触摸所述屏幕的位置进行校正。
在一种可能的实现方式中,触控消息处理模块,具体用于根据所述压力值和所述预设压力值的比值、所述夹角,以及第一预设校正值,得到所述用户触摸所述屏幕的位置在X轴上的校正值;根据所述压力值和所述预设压力值的比值、所述夹角,以及第二预设校正值,得到所述用户触摸所述屏幕的位置在Y轴上的校正值;根据所述X轴上的校正值,以及所述Y轴上的校正值,对所述用户触摸所述屏幕的位置进行校正。
在一种可能的实现方式中,触控消息处理模块,具体用于根据所述屏幕的预设坐标系,将所述用户触摸所述屏幕的位置中的X值增大或减小所述X轴上的校正值,且将所述用户触摸所述屏幕的位置中的Y值增大或减小所述Y轴上的校正值,使得校正后的位置相较于校正前的位置远离所述第一方向。
第五方面,本申请实施例提供一种触摸屏报点的校正装置,该装置可以包括:处理器、存储器。存储器用于存储计算机可执行程序代码,程序代码包括指令;当处理器执行指令时,指令使电子设备执行如第一方面或第二方面中的方法。
第六方面,本申请实施例提供一种电子设备,该电子设备可以为第三方面或第四方面的触摸屏报点的校正装置。该电子设备包括用于执行以上第一方面或第二方面所提供的方法的单元、模块或电路。
第七方面,本申请实施例提供一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述第一方面或第二方面中的方法。
第八方面,本申请实施例提供一种计算机可读存储介质,计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述第一方面或第二方面中的方法。
上述第二方面至第八方面的各可能的实现方式,其有益效果可以参见上述第一方面所带来的有益效果,在此不加赘述。
本申请实施例提供一种触摸屏报点的校正方法、装置和电子设备,该方法包括:响应于检测到用户触摸电子设备的屏幕,基于所述屏幕中触摸传感器的电容采样值的变化量,获取用户触摸所述屏幕的位置;获取所述电子设备的姿态;根据所述电子设备的姿态,对所述位置进行校正,得到校正后的位置,执行响应于校正后的位置的操作。本申请实施例中TP报点的校正方法,避免了现有技术中采用用户的手指和屏幕的接触区域的重心作为用户的手指在屏幕上的位置的不准确的问题,提高了触控消息处理模块上报的用户的手指在屏幕上的位置的准确性,即提高了TP报点的准确性。
附图说明
图1为本申请实施例提供的电子设备的屏幕的一种结构示意图;
图2为本申请实施例适用的一种场景示意图;
图3为本申请实施例提供的电子设备的姿态的一种示意图;
图4为本申请实施例提供的电子设备的一种结构示意图;
图5为本申请实施例提供的触摸屏报点的校正方法的一种实施例的流程示意图;
图6A为本申请实施例提供的电子设备的姿态的另一种示意图;
图6B为本申请实施例提供的用户的手指在屏幕上的位置的一种校正示意图;
图7为本申请实施例适用的另一种场景示意图;
图8为本申请实施例适用的另一种场景示意图;
图9A为本申请实施例提供的触摸屏报点的校正方法的另一种实施例的流程示意图;
图9B为本申请实施例提供的用户的手指在屏幕上的位置的另一种校正示意图;
图10为本申请实施例提供的用户的手指在屏幕上的位置的另一种校正示意图;
图11为本申请实施例提供的用户的手指在屏幕上的位置的另一种校正示意图;
图12为本申请实施例提供的用户的手指在屏幕上的位置的另一种校正示意图;
图13为本申请实施例提供的用户的手指在屏幕上的位置的另一种校正示意图;
图14为本申请实施例适用的另一种场景示意图;
图15为本申请实施例提供的触摸屏报点的校正方法的另一种实施例的流程示意图;
图16为本申请实施例提供的获取用户的手指的方向和电子设备的方向的夹角一种示意图;
图17为本申请实施例提供的触摸屏报点的校正方法的另一种实施例的流程示意图;
图18为本申请实施例提供的触摸屏报点的校正方法的另一种实施例的流程示意图。
具体实施方式
图1为本申请实施例提供的电子设备的屏幕的一种结构示意图。参照图1,电子设备的屏幕包括:盖板玻璃、触控面板和显示面板。可以理解的是,本申请实施例示意的结构并不构成对电子设备的屏幕的具体限定。在本申请另一些实施例中,电子设备的屏幕可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。在一种实施例中,参照图1,盖板玻璃位于触控面板的上层,触控面板位于显示面板的上层。盖板玻璃起到保护触控面板和显示面板的作用。显示面板,用于显示电子设备的界面,本申请实施例对显示面板的结构不做赘述。
在一种实施例中,触控面板中包括:触摸集成电路IC芯片(integrated circuitchip)和触摸传感器(touch panel sensor,TP sensor)。用户的手指的笔尖靠近电子设备的屏幕时,会引起屏幕中的TP sensor的电容采样值的变化量变化,且手指距离屏幕越近,TP sensor的电容采样值的变化量越大。触摸IC芯片,用于基于TP sensor上的电容采样值的变化量,获取用户的手指在屏幕上的位置(坐标),即获取用户触摸屏幕的位置。示例性的,触摸IC芯片可以将TP sensor上的电容采样值的变化量最大处的位置,作为手指在屏幕上的位置,或者触摸IC芯片可以将TP sensor上的电容采样值的变化量发生变化的重心位置,作为手指在屏幕上的位置。触摸IC芯片在得到手指在屏幕上的位置后,可以向电子设备中的应用处理器(application processor,AP)上报用户触摸的坐标,即进行TP报点。应理解,本申请实施例中用户触摸屏幕,不限于用户的手指触摸屏幕,也可以为用户的指关节等触摸屏幕,下述实施例中以用户的手指触摸屏幕为例进行说明。在一种实施例中,触摸屏(touch panel,TP)可以理解为电子设备的屏幕。
图2为本申请实施例适用的一种场景示意图。用户站立握持电子设备,或者坐着握持电子设备,即用户的人脸方向与竖直方向平行,或者人脸方向与竖直方向的夹角小于预设夹角,预设夹角可以为45度,人脸方向指的是用户的额头至下巴的方向,竖直方向指的是竖直、且朝向地面的方向。图2中的a以用户的人脸方向与竖直方向平行为例,在该种场景中,用户采用手指点击屏幕上显示的应用程序A的图标时,因为手指接触屏幕时并非接触屏幕的一个位置,而是与屏幕具有一定的接触区域。参照图2中的b所示,示例性的,接触区域为一椭圆,基于目前触摸IC芯片采用TP sensor上的电容采样值的变化量的方式,可以将TPsensor上的电容采样值的变化量发生变化的重心位置,如接触区域的重心,作为手指在屏幕上点击的位置。
但用户采用手指点击屏幕时,手指的重心是偏向地面方向的,因此触摸IC芯片得到的作为手指在屏幕上点击的位置偏向地面方向,不准确,进而造成TP报点不准确,导致AP不能准确进行响应。示例性的,实际上用户需求指尖点击位置1,但触摸IC芯片基于TPsensor上的电容采样值的变化量,得到的作为手指在屏幕上点击的位置为位置2,而位置2处并非应用程序A的图标对应的位置,因此,AP基于触摸IC芯片上报的位置2,不会执行响应于用户点击应用程序A的图标的操作,如图2中的b所示的放大图。
因此,本申请实施例中可以基于触摸IC芯片上报的TP报点,对TP报点进行远离地面方向的校正,以使得TP报点准确。但因为TP报点的坐标是由X值和Y值组成的,假设屏幕的预设坐标系是预设固定不变的,因此随着电子设备的姿态的不同,预设坐标系相对于远离地面方向是变化的。示例性的,假设屏幕的预设坐标系如图3中的a和b所示,屏幕中设置听筒的侧边称为第一侧边,设置话筒的侧边称为第二侧边,当第一侧边远离地面方向时,屏幕的左侧边为第三侧边,屏幕的右侧边为第四侧边。如图3中的a所示,当电子设备为第一姿态时,即第一侧边远离地面方向时,远离地面方向为Y轴的负方向,则需要对TP报点的Y值进行减小校正。如图3中的b所示,当电子设备为第二姿态时,即第二侧边远离地面方向时,远离地面方向为Y轴的正方向,则需要对TP报点的Y值进行增大校正。
据此,本申请实施例中,可以基于触摸IC芯片上报的TP报点,结合电子设备的姿态,对TP报点进行远离地面方向的校正,以使得TP报点准确。
应理解,本申请实施例中的电子设备可以称为用户设备(user equipment,UE)、终端(terminal)等,例如,电子设备可以为手机、平板电脑(portable android device,PAD)、个人数字处理(personal digital assistant,PDA)、具有无线通信功能的手持设备、计算设备、车载设备或可穿戴设备,虚拟现实(virtual reality,VR)终端设备、增强现实(augmented reality,AR)终端设备、工业控制(industrial control)中的无线终端、无人驾驶(self driving)中的无线终端、远程医疗(remote medical)中的无线终端、智能电网(smart grid)中的无线终端、运输安全(transportation safety)中的无线终端、智慧城市(smart city)中的无线终端、智慧家庭(smart home)中的无线终端等具有触控屏的移动终端或固定终端。本申请实施例中对电子设备的形态不做具体限定。
在介绍本申请实施例提供的触摸屏报点的校正方法之前,首先对电子设备的结构进行说明:
图4为本申请实施例适用的电子设备的一种结构框图。参照图4,电子设备的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的Android系统为例,示例性说明电子设备的软件结构。分层架构将电子设备的软件系统分成若干个层,每一层都有清晰的角色和分工,层与层之间通过软件接口通信。
在一种实施例中,可以将Android系统分为四层,分别为应用程序层(applications)、应用程序框架层(application framework)、安卓运行时(Androidruntime)和系统库,以及内核层(kernel)。应理解,图4中未示出安卓运行时(Androidruntime)和系统库的软件层,本申请实施例对电子设备的软件结构的分层不做限制。
其中,应用程序层可以包括应用程序包。示例性的,应用程序层内可以包括:相机,图库,日历,通话,地图,导航,蓝牙,音乐,视频,短信息等应用程序包(图4中以应用程序为例进行说明)。参照图4,应用程序层可以包括:应用程序。在一种实施例中,应用程序可以理解为AP。
应用程序框架层可以为应用程序层中的应用程序提供应用编程接口(application programming interface,API)和编程框架。在一种实施例中,参照图4,应用程序框架层可以包括:触控消息处理模块、姿态处理模块,可以参照下述实施例中的相关描述。应理解,应用程序框架层还可以包括:窗口管理服务(window manager service,WMS)模块、界面管理服务模块(activity manager service,AMS)、蓝牙消息处理模块等,图4中并未示出。
内核层中至少包括硬件的驱动,用于驱动硬件工作,如内核层中包括触控驱动、显示驱动等,本申请实施例对此不做任何限制。在一种实施例中,当电子设备支持蓝牙时,电子设备的内核层还可以包括蓝牙驱动。应理解,图4中示出了本申请实施例涉及的触控驱动。
上述所述的为电子设备的软件层架构,在一种实施例中,电子设备中可以包括硬件层。
硬件层包括硬件设备,如触控面板、显示面板、蓝牙、加速度传感器和陀螺仪传感器等。其中,触控驱动可以驱动触控面板工作,显示驱动可以驱动显示面板工作,蓝牙驱动可以驱动蓝牙工作。触摸面板中包括TP sensor和触摸IC芯片,显示面板中包括显示屏和显示IC芯片,显示IC芯片用于控制显示屏显示电子设备的界面。应理解,图4中示出了本申请实施例涉及的触控面板和加速度传感器。应理解,图4中还可以包括陀螺仪传感器,或者将加速度传感器替换为陀螺仪传感器,下述实施例中以加速度传感器为例进行说明。
陀螺仪传感器可以用于确定电子设备的运动姿态。在一些实施例中,可以通过陀螺仪传感器确定电子设备围绕三个轴(即,X,Y和Z轴)的角速度。陀螺仪传感器可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器检测电子设备抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备的抖动,实现防抖。陀螺仪传感器还可以用于导航,体感游戏场景等。
加速度传感器可检测电子设备在各个方向上(一般为三轴,即X,Y和Z轴)加速度的大小。当电子设备静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
在图4所示的电子设备的基础上,下面结合具体的实施例对本申请实施例提供的触摸屏报点的校正方法进行说明。下面这几个实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例不再赘述。
图5为本申请实施例提供的触摸屏报点的校正方法的一种实施例的流程示意图。参照图5,本申请实施例提供的触摸屏报点的校正方法可以包括:
S501,触摸IC芯片获取TP sensor的电容采样值的变化量。
S501如图4中的步骤(1)。
应理解,触控笔靠近屏幕,以及用户的手指靠近屏幕时,均会引起触控面板中的TPsensor的电容采样值的变化量发生变化。相应的,触摸IC芯片可以实时获取TP sensor的电容采样值的变化量。
S502,触摸IC芯片若基于TP sensor的电容采样值的变化量,确定用户的手指接触屏幕,则向触控驱动上报用户的触摸信息。
S502如图4中的步骤(2)。
在一种实施例中,触摸IC芯片可以基于TP sensor的电容采样值的变化量发生变化的面积,确定靠近屏幕的是触控笔还是用户的手指。其中,用户的手指引起TP sensor的电容采样值的变化量发生变化的面积,相较于触控笔引起的TP sensor的电容采样值的变化量发生变化的面积大。其中,若触摸IC芯片基于TP sensor的电容采样值的变化量发生变化的面积大于预设面积,则确定靠近屏幕的是用户的手指,则可以确定触控类型为用户类型,若触摸IC芯片确定靠近屏幕的是触控笔,则确定触控类型为触控笔类型。下述实施例中以触控类型为用户类型为例进行说明。
在一种实施例中,当用户的手指逐渐靠近屏幕时,触摸IC芯片检测到TP sensor的电容采样值的变化量逐渐增大,且触摸IC芯片检测到TP sensor的电容采样值的变化量增大至预设电容采样值的变化量时,触摸IC芯片可以确定用户的手指接触屏幕。也就是说,当触摸IC芯片检测到TP sensor的电容采样值的变化量达到预设电容采样值的变化量,确定用户的手指接触屏幕,则触摸IC芯片基于TP sensor的电容采样值的变化量,获取用户的手指在屏幕上的位置,参照上述图2中的相关描述,应理解,用户的手指在屏幕上的位置可以理解为用户触摸屏幕的位置。示例性的,触摸IC芯片响应于TP sensor的电容采样值的变化量大于或等于100%(即用户的手指接触屏幕)时,触摸IC芯片获取用户的手指在屏幕上的位置。
在该实施例中,用户的触摸信息可以包括:用户的手指在屏幕上的位置,以及用户类型。用户类型用于指示以及靠近屏幕的为用户的手指,并非触控笔。
在一种实施例中,触摸IC芯片获取TP sensor的电容采样值的变化量增大至预设电容采样值的变化量时,可以将TP sensor的电容采样值的变化量,以及用户类型上报至触控驱动。该种实施例中,用户的触摸信息可以包括:TP sensor的电容采样值的变化量,以及用户类型。
S503,触控驱动向触控消息处理模块上报用户的手指在屏幕上的位置,以及用户类型。
S503如图4中的步骤(3)。
在一种实施例中,触控驱动可以接收触摸IC芯片上报的用户的手指在屏幕上的位置,以及用户类型。
在一种实施例中,当触控笔的信息中包括TP sensor的电容采样值的变化量,以及用户类型时,触控驱动可以基于TP sensor的电容采样值的变化量,获取用户的手指在屏幕上的位置。
据此,触控驱动可以得到用户的手指在屏幕上的位置,以及触控类型为用户类型,进而触控驱动向触控消息处理模块上报用户的手指在屏幕上的位置,以及用户类型。
在一种实施例中,触控驱动还可以获取系统时间,并将系统时间与“用户的手指在屏幕上的位置,以及用户类型”进行封装,得到封装后的信息,且将封装后的信息上报至触控消息处理模块。本申请实施例中以触控驱动向触控消息处理模块上报“用户的手指在屏幕上的位置,以及用户类型”为例进行说明。
S504,加速度传感器采集电子设备的加速度数据。
在一种实施例中,加速度传感器采集的加速度数据可以为三轴模拟电压值。
S505,姿态处理模块获取加速度传感器采集的加速度数据。
S505如图4中的步骤(4)。
姿态处理模块可以实时读取加速度传感器采集的加速度数据,或者加速度传感器可以将实时采集的加速度数据上报至姿态处理模块,本申请实施例对姿态处理模块获取加速度传感器采集的加速度数据的方式不做限制。
S506,姿态处理模块基于加速度数据,获取电子设备的姿态。
姿态处理模块可以采用模数转换器(analogue to digital conversion,ADC)将加速度传感器采集的三轴模拟电压值转换成三轴数字电压值。每个轴的数字电压值与加速度值具有映射关系,姿态处理模块可以基于每个轴的数字电压值与加速度值的映射关系,以及三轴数字电压值,得到电子设备的三轴加速度值,在一种实施例中,电子设备的三轴加速度值可以称为电子设备的加速度值。
示例性的,X轴的数字电压值与加速度值具有第一映射关系,Y轴的数字电压值与加速度值具有第二映射关系,Z轴的数字电压值与加速度值具有第三映射关系,则姿态处理模块可以基于第一映射关系,以及X轴的数字电压值,得到X轴的加速度值,姿态处理模块可以基于第二映射关系,以及Y轴的数字电压值,得到Y轴的加速度值,姿态处理模块可以基于第三映射关系,以及Z轴的数字电压值,得到Z轴的加速度值,进而姿态处理模块可以得到电子设备的三轴加速度值。
姿态处理模块可以基于三轴加速度值,得到电子设备的姿态。其中,姿态处理模块中可以预先存储预设姿态对应的三轴加速度值,姿态处理模块基于电子设备的三轴加速度值,以及预设姿态对应的三轴加速度值,获取电子设备的姿态。在一种实施例中,预设姿态对应的三轴加速度值可以称为预设姿态对应的加速度值。应理解,因为本申请实施例的目的在于:对用户的手指在屏幕上的位置(X值或者Y值)进行校正,因此下述实施例中,以“姿态处理模块可以基于获取的X轴和Y轴的加速度值,以及预设姿态对应的X轴和Y轴的加速度值,获取电子设备的姿态”为例进行说明。下述实施例中,以姿态处理模块获取的电子设备的X轴和Y轴的加速度值分别为第一X值、第一Y值,以预设姿态对应的X轴和Y轴的加速度值分别为预设X值、预设Y值进行说明。
在一种实施例中,预设姿态可以为图6A中所示的a、b、c和d中的任一姿态。以图6A中的a的姿态为第一姿态,图6A中的b的姿态为第二姿态,图6A中的c的姿态为第三姿态,图6A中的d的姿态为第四姿态。第一姿态为第一侧边远离地面方向,且第一侧边与竖直方向垂直,第二姿态为第二侧边远离地面方向,且第二侧边与竖直方向垂直,第三姿态为第三侧边远离地面方向,且第三侧边与竖直方向垂直,第四姿态为第四侧边远离地面方向,且第四侧边与竖直方向垂直。
应理解,图6A所示的预设姿态为所述电子设备的屏幕所在的平面与地面垂直的场景,可以想到的是,预设姿态还可以为电子设备的屏幕所在的平面与地面平行的场景,该种场景下,位置的校正方法可以参照本申请实施例中对“第一姿态-第四姿态”下的位置的校正的相关描述,具体为:朝向远离手指重心的方向(屏幕所在的平面与地面垂直的场景中,远离手指重心的方向为远离地面的方向)进行校正。下述实施例中以“电子设备的屏幕所在的平面与地面垂直的场景”为例,介绍本申请实施例提供的触摸屏报点的校正方法。
以预设姿态为第一姿态为例,说明姿态处理模块可以基于获取的X轴和Y轴的加速度值,以及预设姿态对应的X轴和Y轴的加速度值,获取电子设备的姿态:
姿态处理模块可以获取第一X值和预设X值的第一差值,以及第一Y值和预设Y值的第二差值。若第一差值位于第一预设差值范围内,且第二差值位于第二预设差值范围内,则姿态处理模块可以将电子设备的姿态确定为第一姿态。若第一差值位于第一预设差值范围外,且第二差值位于第二预设差值范围外,则姿态处理模块可以将电子设备的姿态确定为第二姿态。若第一差值位于第一预设差值范围外,但第二差值位于第二预设差值范围内,则姿态处理模块可以将电子设备的姿态确定为第三姿态。若第一差值位于第一预设差值范围内,且第二差值位于第二预设差值范围外,则姿态处理模块可以将电子设备的姿态确定为第四姿态。
在一种实施例中,预设姿态可以为第一姿态和第二姿态中的任意一个,以及第三姿态和第四姿态中的任意一个。以预设姿态为第一姿态和第三姿态为例,第一姿态对应的X轴和Y轴的加速度值分别为第一预设X值、第一预设Y值,第三姿态对应的X轴和Y轴的加速度值分别为第三预设X值、第三预设Y值。
姿态处理模块可以获取第一X值和第一预设X值的第一差值,以及第一Y值和第一预设Y值的第二差值,以及第一X值和第三预设X值的第三差值,以及第一Y值和第三预设Y值的第四差值。其中,若第一差值位于第一预设差值范围内,且第二差值位于第二预设差值范围内,则姿态处理模块可以将电子设备的姿态确定为第一姿态。若第一差值位于第一预设差值范围外,且第二差值位于第二预设差值范围外,则姿态处理模块可以将电子设备的姿态确定为第二姿态。若第三差值位于第一预设差值范围内,且第四差值位于第二预设差值范围内,则姿态处理模块可以将电子设备的姿态确定为第三姿态。若第三差值位于第三预设差值范围外,且第四差值位于第四预设差值范围外,则姿态处理模块可以将电子设备的姿态确定为第四姿态。
在一种实施例中,预设姿态可以为第一姿态、第二姿态、第三姿态,以及第四姿态。姿态处理模块可以获取第一X值和每个姿态下的预设X值的第一差值,以及第一Y值和每个姿态下的预设Y值的第二差值,姿态处理模块可以将第一差值位于第一预设差值范围内,以及第二差值位于第二预设差值范围内的姿态作为电子设备的姿态。示例性的,如第一X值与第一姿态下的预设X值的第一差值位于第一预设差值范围内,以及第一Y值与第一姿态下的预设Y值的第二差值位于第二预设差值范围内,则姿态处理模块可以将第一姿态作为电子设备的姿态。
如上获取电子设备的姿态为示例说明,姿态处理模块还可以采用现有技术中的方式获取电子设备处于第一姿态、第二姿态、第三姿态或第四姿态。
应理解,S501-S503与S504-S506之间没有先后顺序的区分,二者可以同时执行。
S507,触控消息处理模块从姿态处理模块中获取电子设备的姿态。
S505如图4中的步骤(5)。
在一种实施例中,姿态处理模块可以在电子设备的姿态发生改变时,如电子设备的姿态从第一姿态变为第二姿态,可以向触控消息处理模块发送姿态获取消息,该姿态获取消息用于指示触控消息处理模块获取电子设备的姿态。触控消息处理模块响应于该姿态获取消息,可以向姿态处理模块发送姿态请求,姿态处理模块响应于接收该姿态请求,可以向触控消息处理模块发送电子设备的姿态。
在一种实施例中,姿态处理模块可以在电子设备的姿态发生改变时,向触控消息处理模块发送电子设备的姿态。
在一种实施例中,触控消息处理模块可以实时从姿态处理模块中获取电子设备的姿态,以得到电子设备的姿态。
S508,触控消息处理模块基于电子设备的姿态,对用户的手指在屏幕上的位置进行校正,得到校正后的位置。
触控消息处理模块中可以预先存储预设校正值M,该预设校正值的单位可以为单位像素的长度。在一种实施例中,预设校正值可以为9-15个像素的长度,相应的,预设校正值可以为1.5-2mm中的一个值。示例性的,预设校正值可以为1.5mm。触控消息处理模块可以基于电子设备的姿态,以及预设校正值,对用户的手指在屏幕上的位置(X值和Y值)进行校正。在一种实施例中,用户的手指在屏幕上的位置中对X值的第一预设校正值和Y值的第二预设校正值可以相等或不等,下述实施例中先以手指在屏幕上的位置中的X值的第一预设校正值和Y值的第二预设校正值均为M为例进行说明。
示例性的,以校正前的用户的手指在屏幕上的位置为1,校正后的位置为2为例进行说明。参照图6B中a,当电子设备的姿态为第一姿态时,用户的手指在屏幕上的位置为(X,Y),预设坐标系远离地面方向为Y轴的负方向,则触控消息处理模块可以将Y值减小预设校正值M,即校正后的位置为(X,Y-M)。同理的,参照图6B中b,当电子设备的姿态为第二姿态时,用户的手指在屏幕上的位置为(X,Y),预设坐标系远离地面方向为Y轴的正方向,则触控消息处理模块可以将Y值增加预设校正值M,即校正后的位置为(X,Y+M)。参照图6B中c,当电子设备的姿态为第三姿态时,用户的手指在屏幕上的位置为(X,Y),预设坐标系远离地面方向为X轴的负方向,则触控消息处理模块可以将X值减小预设校正值M,即校正后的位置为(X-M,Y)。参照图6B中d,当电子设备的姿态为第四姿态时,用户的手指在屏幕上的位置为(X,Y),预设坐标系远离地面方向为X轴的正方向,则触控消息处理模块可以将X值增加预设校正值M,即校正后的位置为(X+M,Y)。
S509,触控消息处理模块向应用程序上报校正后的位置。
S505如图4中的步骤(6)。
本申请实施例提供的触摸屏报点的校正方法,因为触控消息处理模块对触控驱动上报的用户的手指在屏幕上的位置进行远离地面方向的校正,因此避免了现有技术中采用用户的手指和屏幕的接触区域的重心作为用户的手指在屏幕上的位置的不准确的问题,提高了触控消息处理模块上报的用户的手指在屏幕上的位置的准确性,即提高了TP报点的准确性。
示例性的,参照图7所示,用户的人脸方向与竖直方向平行,或者人脸方向与竖直方向的夹角小于预设夹角时,用户采用手指点击屏幕上显示的应用程序A的图标时,如触控驱动向触控消息处理模块上报的用户的手指在屏幕上的位置为位置2(X,Y)时,触控消息处理模块可以基于电子设备的第一姿态,得到校正后的位置1(X,Y-M),进而将校正后的位置1(X,Y-M)上报至应用程序,使得应用程序可以基于位置1(X,Y-M),确定位置1(X,Y-M)为应用程序A的图标对应的位置,进而,应用程序可以执行响应于用户点击应用程序A的图标的操作。
如上实施例适用的场景为:用户的人脸方向与竖直方向平行,或者人脸方向与竖直方向的夹角小于预设夹角。对于人脸方向与竖直方向垂直,或者人脸方向与竖直方向的夹角大于预设夹角的场景,如用户躺着玩手机的场景,参照图8中的a,用户侧躺着玩手机,电子设备的姿态为第四姿态,应理解,图8中的a为俯视图。用户采用手指点击屏幕时,用户的手指与屏幕的具有一定的接触区域,目前触摸IC芯片采用TP sensor上的电容采样值的变化量的方式,可以将TP sensor上的电容采样值的变化量发生变化的重心位置,如接触区域的重心,作为手指在屏幕上点击的位置。
但该种场景中,手指的重心是偏向人脸方向的,因此触摸IC芯片得到的手指在屏幕上点击的位置偏向人脸方向,不准确,进而造成TP报点不准确,导致AP不能准确进行响应。示例性的,参照图8中的b,实际上用户需求指尖点击位置3,但触摸IC芯片基于TPsensor上的电容采样值的变化量,得到的作为手指在屏幕上点击的位置为位置4,位置4相较于位置3偏向于人脸方向,进而导致TP报点不准确,导致AP不会执行响应于用户点击的操作,或者响应不准确。
如此,结合图2所示的场景与图8所示的场景,可以得到:目前触摸IC芯片采用TPsensor上的电容采样值的变化量的方式,获取的手指在屏幕上的位置不准确,需要对手指在屏幕上的位置进行校正,但校正X值还是Y值,不仅与电子设备的姿态相关,还与人脸方向相关,应对用户在屏幕上的位置进行远离人脸方向的校正。示例性的,若在图8所示的场景中,采用如上图5所示的方式进行远离地面方向进行校正,TP报点不准确,而是需要进行远离人脸方向进行套校正。
因此,本申请实施例中,提供一种触摸屏报点的校正方法,可以基于触摸IC芯片上报的TP报点,结合电子设备的姿态以及用户的人脸方向,对TP报点进行远离人脸方向的校正,提高TP报点的准确性。
在该种实施例中,电子设备相较于图4,硬件层可以包括用于获取人脸图像的部件,如相机或红外摄像头,下述实施例中以相机为例进行说明。应理解,该种实施例中电子设备相较于图4增加的部件采用虚线框表示。
图9A为本申请实施例提供的触摸屏报点的校正方法的另一种实施例的流程示意图。参照图9A,如上图5中在上述S501-S506后,可以包括S501A-S503A,S507、S508可以分别替换为S507A、S508A:
S501A,相机采集用户的人脸图像。
相机可以一直处于打开状态,以采集用户的人脸图像。
S502A,姿态处理模块获取人脸图像。
S502A可以如图4中的步骤(4A)。
姿态处理模块获取人脸图像的方式,可以参照姿态处理模块获取加速度数据的方式,在此不做赘述。
应理解,S501-S503与S504-S506、S501A-S502A之间没有先后顺序的区分,可以同时执行。
S503A,姿态处理模块按照时间戳,将人脸图像和电子设备的姿态对应存储。
姿态处理模块可以将人脸图像的采集时间戳和加速度数据的时间戳对齐,将相同时间戳获取的人脸图像和电子设备的姿态对应存储。
在一种实施例中,S501A-S502A中的姿态处理模块可以替换为人脸图像获取模块,在该种实施例中,姿态处理模块可以从人脸图像获取模块中获取人脸图像,进而执行如上S503A。
S507A,触控消息处理模块从姿态处理模块中获取电子设备的姿态,以及人脸图像。
S507A可以如图4中的步骤(5A)所示。应理解,当图4中包括步骤(4)和步骤(4A)时,步骤(5)可以替换为步骤(5A)。
S507A可以参照S507中的相关描述,指的注意的是,触控消息处理模块从姿态处理模块中获取电子设备的姿态,以及人脸图像时,可以基于时间戳,获取相同时间戳对应存储的电子设备的姿态,以及人脸图像。
S508A,触控消息处理模块基于电子设备的姿态以及人脸图像,对用户的手指在屏幕上的位置进行校正,得到校正后的位置。
触控消息处理模块中可以预先存储预设校正值M。
触控消息处理模块基于电子设备的姿态以及人脸图像,得到人脸方向与竖直方向的夹角,进而触控消息处理模块基于电子设备的姿态,以及人脸方向与竖直方向的夹角,对用户的手指在屏幕上的位置进行校正。其中,触控消息处理模块基于电子设备的姿态以及人脸图像,得到人脸方向与竖直方向的夹角,可以包括:
其一,当电子设备的姿态为第一姿态时,若第一侧边朝向第二侧边的方向与人脸方向的夹角小于预设夹角,则可以确定人脸方向与竖直方向的夹角小于预设夹角。当电子设备的姿态为第二姿态时,若第二侧边朝向第一侧边的方向与人脸方向的夹角小于预设夹角,则可以确定人脸方向与竖直方向的夹角小于预设夹角。当电子设备的姿态为第三姿态时,若第三侧边朝向第四侧边的方向与人脸方向的夹角小于预设夹角,则可以确定人脸方向与竖直方向的夹角小于预设夹角。当电子设备的姿态为第四姿态时,若第四侧边朝向第三侧边的方向与人脸方向的夹角小于预设夹角,则可以确定人脸方向与竖直方向的夹角小于预设夹角。
其中,当人脸方向与竖直方向的夹角小于预设夹角时,表征用户为站立或者坐着握持电子设备,可以按照如上S508中的方式,对用户的手指在屏幕上的位置进行校正,得到校正后的位置。
S508中的方式,也可以理解为:基于电子设备的姿态,朝着远离人脸方向,对用户的手指在屏幕上的位置进行校正,得到校正后的位置。
示例性的,以校正前的用户的手指在屏幕上的位置为位置1,校正后的为位置2为例进行说明,图6B中的a可以替换为图9B中的a,当电子设备的姿态为第一姿态时,人脸方向与Y轴的正方向的夹角小于预设夹角,图9B中的a以人脸方向与Y轴的正方向相同为例,预设坐标系远离人脸方向为Y轴的负方向,则触控消息处理模块可以将Y值减小预设校正值M,即校正后的位置为(X,Y-M)。图6B中的b可以替换为图9B中的b,当电子设备的姿态为第二姿态时,用户的手指在屏幕上的位置为(X,Y),人脸方向与Y轴的负方向的夹角小于预设夹角,图9B中的b以人脸方向与Y轴的负方向相同为例,预设坐标系远离人脸方向为Y轴的正方向,则触控消息处理模块可以将Y值增加预设校正值M,即校正后的位置为(X,Y+M)。图6B中c可以替换为图9B中的c,当电子设备的姿态为第三姿态时,用户的手指在屏幕上的位置为(X,Y),人脸方向与X轴的正方向的夹角小于预设夹角,图9B中的c以人脸方向与X轴的正方向相同为例,预设坐标系远离人脸方向为X轴的负方向,则触控消息处理模块可以将X值减小预设校正值M,即校正后的位置为(X-M,Y)。图6B中d可以替换为图9B中的d,当电子设备的姿态为第四姿态时,用户的手指在屏幕上的位置为(X,Y),人脸方向与X轴的负方向的夹角小于预设夹角,图9B中的d以人脸方向与X轴的负方向相同为例,预设坐标系远离人脸方向为X轴的正方向,则触控消息处理模块可以将X值增加预设校正值M,即校正后的位置为(X+M,Y)。
其二,与上述“其一”相反的,当电子设备的姿态为第一姿态时,若第一侧边朝向第二侧边的方向与人脸方向的夹角大于或等于预设夹角,则可以确定人脸方向与竖直方向的夹角大于或等于预设夹角。当电子设备的姿态为第二姿态时,若第二侧边朝向第一侧边的方向与人脸方向的夹角大于或等于预设夹角,则可以确定人脸方向与竖直方向的夹角大于或等于预设夹角。当电子设备的姿态为第三姿态时,若第三侧边朝向第四侧边的方向与人脸方向的夹角大于或等于预设夹角,则可以确定人脸方向与竖直方向的夹角大于或等于预设夹角。当电子设备的姿态为第四姿态时,若第四侧边朝向第三侧边的方向与人脸方向的夹角大于或等于预设夹角,则可以确定人脸方向与竖直方向的夹角大于或等于预设夹角。
其中,当人脸方向与竖直方向的夹角大于或等于预设夹角时,表征用户躺着握持电子设备,在该种方式中,触控消息处理模块可以朝向远离人脸方向,对用户的手指在屏幕上的位置进行校正,得到校正后的位置。应理解,下述均以校正前的用户的手指在屏幕上的位置为位置1,校正后的为位置2为例进行说明。
示例性的,参照图10中的a,当电子设备的姿态为第一姿态时,若人脸方向朝向X轴的正方向,预设坐标系远离人脸方向为X轴的负方向,则触控消息处理模块可以将X值减小预设校正值M,即校正后的位置为(X-M,Y)。参照图10中的b,当电子设备的姿态为第一姿态时,若人脸方向远离X轴的正方向,预设坐标系远离人脸方向为X轴的正方向,则触控消息处理模块可以将X值减小预设校正值M,即校正后的位置为(X+M,Y)。
同理的,参照图11中的a,当电子设备的姿态为第二姿态时,若人脸方向朝向X轴的正方向,预设坐标系远离人脸方向为X轴的负方向,则触控消息处理模块可以将X值减小预设校正值M,即校正后的位置为(X-M,Y)。参照图11中的b,当电子设备的姿态为第二姿态时,若人脸方向远离X轴的正方向,预设坐标系远离人脸方向为X轴的正方向,则触控消息处理模块可以将X值减小预设校正值M,即校正后的位置为(X+M,Y)。
参照图12中的a,当电子设备的姿态为第三姿态时,若人脸方向朝向Y轴的正方向,预设坐标系远离人脸方向为Y轴的负方向,则触控消息处理模块可以将Y值减小预设校正值M,即校正后的位置为(X,Y-M)。参照图12中的b,当电子设备的姿态为第三姿态时,若人脸方向远离Y轴的正方向,预设坐标系远离人脸方向为Y轴的正方向,则触控消息处理模块可以将X值减小预设校正值M,即校正后的位置为(X,Y+M)。
同理的,参照图13中的a,当电子设备的姿态为第四姿态时,若人脸方向远离Y轴的正方向,预设坐标系远离人脸方向为Y轴的正方向,则触控消息处理模块可以将X值减小预设校正值M,即校正后的位置为(X,Y+M)。参照图13中的b,当电子设备的姿态为第四姿态时,若人脸方向朝向Y轴的正方向,预设坐标系远离人脸方向为Y轴的负方向,则触控消息处理模块可以将Y值减小预设校正值M,即校正后的位置为(X,Y-M)。
本申请实施例提供的触摸屏报点的校正方法,触控消息处理模块可以基于电子设备的姿态和人脸图像,对触控驱动上报的用户的手指在屏幕上的位置进行远离人脸方向的校正,不仅避免了现有技术中采用用户的手指和屏幕的接触区域的重心作为用户的手指在屏幕上的位置的不准确的问题,还解决了上述图5所示的实施例中用户握持电子设备的姿态不同,导致朝向远离地面方向校正不准确的问题,进一步提高了TP报点的准确性。
在上述图5和图9A所示的实施例中,均是基于X轴和Y轴的方向对用户的手指在屏幕上的位置(X值和Y值)进行校正,在一种实施例中,预设校正值为M时,X值和Y值进行校正的校正值,与用户的手指的方向与预设方向夹角相关,预设方向如竖直方向,用户的手指的方向可以称为第一方向,应理解,手指的方向指的是手指的指尖至手掌的方向。示例性的,参照图14中的a所示,当电子设备为第一姿态时,若用户的手指的方向与竖直方向平行,则触控消息处理模块对Y值进行减小M处理是准确的。参照图14中的b所示,用户操作屏幕时,用户的手指的方向往往与竖直方向呈一定的角度,则若触控消息处理模块对Y值进行减小M处理,则校正不准确。
基于该问题,本申请实施例在上述图5和图9A所示的实施例的基础上,可以结合用户的手指的方向与竖直方向的夹角,对用户的手指在屏幕上的位置进行校正,可以提高校正的准确性,进而提高TP报点的准确性。
在该种实施例中,电子设备相较于图4,硬件层可以包括用于压力传感器,应理解,该种实施例中电子设备相较于图4增加的部件采用点划线框表示。
压力传感器,用于感受用户手指操作屏幕的压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器可以设置于显示屏中。压力传感器的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器,电极之间的电容改变。电子设备可以根据电容的变化确定压力的强度。当有触摸操作作用于显示屏,电子设备根据压力传感器检测所述触摸操作强度。
其一,在图5所示的实施例的基础上,参照图15,上述S502-S503可以替换为S502B-S503B:
S502B,触摸IC芯片若基于TP sensor的电容采样值的变化量,确定用户的手指接触屏幕,向触控驱动上报用户的触摸信息。
触摸IC芯片基于TP sensor的电容采样值的变化量,确定用户的手指接触屏幕的方式可以参照上述S502中的相关描述。本申请实施例中,触摸IC芯片在确定用户的手指接触屏幕时,还可以获取TP sensor的电容采样值的变化量的区域(下述称为区域),区域可以包括:TP sensor的电容采样值的变化量的坐标集合。
与上述S502不同的是,S502B中,在一种实施例中,用户的触摸信息可以包括:用户的手指在屏幕上的位置,用户类型,以及区域。在一种实施例中,用户的触摸信息可以包括:TP sensor的电容采样值的变化量、用户类型,以及区域。
S503B,触控驱动向触控消息处理模块上报用户的手指在屏幕上的位置、用户类型,以及区域。
S503B中触控驱动获取用户的手指在屏幕上的位置、用户类型的方式可以参照上述S503的相关描述。因为S502B中触摸IC芯片向触控驱动上报的用户的触摸信息中包括区域,因此触控驱动可以得到区域,因此可以向触控消息处理模块上报用户的手指在屏幕上的位置、用户类型,以及区域。
本申请实施例提供的触摸TP报点的校正方法,还可以包括:S504-S506(可以参照上述实施例中的描述)、S501C-S504C,S507、S508可以分别替换为S507B、S508B:
S501C,压力传感器采集用户的手指的压力信号。
在一种实施例中,压力传感器采集用户的手指的压力信号为压力值。
在一种实施例中,压力传感器可以将压力信号转换为电信号,示例性的,压力信号为压力值,电信号可以为电压值或电流值,下述以电压值为例进行说明。压力值与电压值具有映射关系,压力传感器可以将采集的压力值转换为电压值。
S501C,姿态处理模块获取压力信号。
S501C可以如图4中的步骤(4B)。
姿态处理模块获取压力信号的方式可以参照姿态处理模块获取加速度数据的描述。
S503C,姿态处理模块基于压力信号,获取用户的手指的压力值。
在一种实施例中,当压力传感器采集用户的手指的压力信号为压力值时,姿态处理模块可以基于压力信号,得到用户的手指的压力值。
在一种实施例中,当压力传感器将压力值转换为电压值时,姿态处理模块可以基于压力值与电压值的映射关系,以及从压力传感器获取的电压值,得到用户的手指的压力值。
应理解,S501-S503与S504-S506、S501B-S503B之间没有先后顺序的区分,可以同时执行。
S504C,姿态处理模块按照时间戳,将电子设备的姿态和压力值对应存储。
S504C中,姿态处理模块按照时间戳,将电子设备的姿态和压力值对应存储的方式,可以参照上述S503A中的相关描述。
在一种实施例中,S502B-S503B中的姿态处理模块可以替换为压力值获取模块,在该种实施例中,姿态处理模块可以从压力值获取模块中获取用户的手指的压力值,进而执行如上S504C。
S507B,触控消息处理模块从姿态处理模块中获取电子设备的姿态,以及压力值。
S507B对应的步骤未在图4中示出。
S508B,触控消息处理模块基于电子设备的姿态、压力值,以及区域,对用户的手指在屏幕上的位置进行校正,得到校正后的位置。
触控消息处理模块中可以预先存储预设校正值M,预设压力值,预设压力值和预设校正值均为预先设置的。预设压力值可以理解为:用户的手指完全接触屏幕时对应的压力值。
本申请实施例中,触控消息处理模块可以基于区域中的坐标集合,得到用户的手指接触屏幕的区域,触控消息处理模块可以基于用户接触屏幕的区域,得到用户接触屏幕的形状,进而触控消息处理模块可以基于用户接触屏幕的形状,得到用户的手指的方向。
示例性的,参照图16所示,用户接触屏幕的形状为一椭圆形,则触控消息处理模块可以将椭圆的长轴所在的方向,作为用户的手指的方向。如此,触控消息处理模块可以获取用户的手指的方向和竖直方向的夹角。如图16所示,用户的手指的方向与竖直方向的夹角可以为α。
触控消息处理模块可以基于用户的手指的方向与竖直方向的夹角可以为α、预设校正值M,以及预设压力值,获取用户的手指在屏幕上的位置在X轴上的校正值X1(可以参照公式一),以及用户的手指在屏幕上的位置在Y轴上的校正值Y1(可以参照公式二):
Figure BDA0003217975990000171
Figure BDA0003217975990000172
其中,d为触控消息处理模块从姿态处理模块中获取的压力值,D为预设压力值。
在该种实施例中,触控消息处理模块可以基于电子设备的姿态,对用户的手指在屏幕上的位置进行校正,其中,S508B中校正的方式可以参照上述S508。只不过,在校正X值时,上述S508中的预设校正值M需要替换成X1,在校正Y值时,上述S508中的预设校正值M需要替换成Y1。
示例性的,参照图6B中a,当电子设备的姿态为第一姿态时,用户的手指在屏幕上的位置为(X,Y),预设坐标系远离地面方向为Y轴的负方向,则触控消息处理模块可以将Y值减小Y1,即校正后的位置为(X,Y-Y1)。同理的,参照图6B中b,当电子设备的姿态为第二姿态时,用户的手指在屏幕上的位置为(X,Y),预设坐标系远离地面方向为Y轴的正方向,则触控消息处理模块可以将Y值增加Y1,即校正后的位置为(X,Y+Y1)。参照图6B中c,当电子设备的姿态为第三姿态时,用户的手指在屏幕上的位置为(X,Y),预设坐标系远离地面方向为X轴的负方向,则触控消息处理模块可以将X值减小X1,即校正后的位置为(X-X1,Y)。参照图6B中d,当电子设备的姿态为第四姿态时,用户的手指在屏幕上的位置为(X,Y),预设坐标系远离地面方向为X轴的正方向,则触控消息处理模块可以将X值增加X1,即校正后的位置为(X+X1,Y)。
在一种实施例中,触控消息处理模块可以不结合电子设备的姿态,而是基于用户的手指的方向与竖直方向的夹角,以及用户的压力值,对用户的手指在屏幕上的位置各轴上的值进行校正,在该种实施例中,可以不执行S405C,且S507B-S508B可以替换为S507b-S508b:
S507b,触控消息处理模块从姿态处理模块中获取压力值。
S508b,触控消息处理模块基于压力值,以及区域,对用户的手指在屏幕上的位置进行校正,得到校正后的位置。
触控消息处理模块可以基于用户接触屏幕的区域,得到用户接触屏幕的形状,进而触控消息处理模块可以基于用户接触屏幕的形状,得到用户的手指的方向,进而得到手指的方向与竖直方向的夹角。电子设备可以基于压力值、预设压力值,以及手指的方向与竖直方向的夹角,参照上述公式一和公式二得到用户的手指在屏幕上的位置在X轴上的校正值X1,以及用户的手指在屏幕上的位置在Y轴上的校正值Y1。基于此,触控消息处理模块可以基于X轴上的校正值X1和Y轴上的校正值Y1,对用户的手指在屏幕上的位置朝向远离用户的手指的方向进行校正。
本申请实施例中,触控消息处理模块可以根据所述屏幕的预设坐标系,将所述位置的中的X值增大或减小所述X轴上的校正值,且将所述位置的中的Y值增大或减小所述Y轴上的校正值。示例性的,如预设坐标系如电子设备处于第一姿态时所示,如图14所示,远离用户的手指的方向为:Y轴的负方向,以及X轴的负方向,则当用户的手指在屏幕上的位置为(X,Y)时,校正后的位置为(X-X1,Y-Y1)。
该种实施例中,触控消息处理模块可以基于用户的手指的方向与竖直方向的夹角,以及用户的压力值,对用户的手指在屏幕上的位置各轴上的值进行校正,能够提高TP报点的准确性。
如此,本申请实施例中,在上述图5所示的实施例的基础上,触控消息处理模块可以进一步结合用户的手指的方向与竖直方向的夹角,以及用户的压力值,对用户的手指在屏幕上的位置各轴上的值进行校正,能够进一步提高TP报点的准确性。
其二,在图9A所示的实施例的基础上,参照图17,在执行上述S501,S502B-S503B,还可以包括:S504-S506、S501A-S502A,S501C-S503C,S504C可以替换为S504C1,S507、S508可以分别替换为S507C、S508C:
应理解,S501-S503与S504-S506、S501B-S503B,以及S501A-S502A之间没有先后顺序的区分,可以同时执行。
S504C1,姿态处理模块按照时间戳,将电子设备的姿态、压力值,以及人脸图像对应存储。
S504C1中,姿态处理模块按照时间戳,将电子设备的姿态、压力值,以及人脸图像对应存储的方式,可以参照上述S503A中的相关描述。
S507C,触控消息处理模块从姿态处理模块中获取电子设备的姿态、压力值,以及人脸图像。
应理解,当图4中包括步骤(4)、步骤(4A),以及(4B)时,步骤(5)可以替换为步骤(5B)。
S508C,触控消息处理模块基于电子设备的姿态、压力值、人脸图像,以及区域,对用户的手指在屏幕上的位置进行校正,得到校正后的位置。
触控消息处理模块中可以预先存储预设校正值M,预设压力值,预设压力值和预设校正值均为预先设置的。触控消息处理模块基于区域,得到用户的手指的方向与竖直方向的夹角,以及在X轴上的校正值X1,Y轴上的校正值Y1,可以参照S508B中的相关描述。
在该种实施例中,触控消息处理模块可以基于电子设备的姿态,以及人脸图像,对用户的手指在屏幕上的位置进行校正,其中,S508C中校正的方式可以参照上述S508A,只不过在校正X值时,上述S508A中的预设校正值M需要替换成X1,在校正Y值时,上述S508A中的预设校正值M需要替换成Y1。
示例性的,参照图9B中a,校正后的位置为(X,Y-Y1)。参照图9B中b,校正后的位置为(X,Y+Y1)。参照图9B中c,校正后的位置为(X-X1,Y)。参照图9B中d,校正后的位置为(X+X1,Y)。
对应的,参照图10中的a,校正后的位置为(X-X1,Y),参照图10中的b,校正后的位置为(X+X1,Y)。参照图11中的a,校正后的位置为(X-X1,Y)。参照图11中的b,校正后的位置为(X+X1,Y)。参照图12中的a,校正后的位置为(X,Y-Y1)。参照图12中的b,校正后的位置为(X,Y+Y1)。参照图13中的a,校正后的位置为(X,Y+Y1)。参照图13中的b,校正后的位置为(X,Y-Y1)。
如此,本申请实施例中,在上述图9A所示的实施例的基础上,可以进一步结合用户的手指的方向与竖直方向的夹角,以及用户的压力值,对用户的手指在屏幕上的位置各轴上的值进行校正,能够进一步提高TP报点的准确性。
在一种实施例中,电子设备中包括如上实施例中的触摸IC芯片、TP sensor、触控驱动、触控消息处理模块,以及加速度传感器、姿态处理模块等。以电子设备为执行本申请实施例提供的触摸屏报点的校正方法的主体,参照图18,该触摸屏报点的校正方法可以包括:
S1801,电子设备响应于检测到用户触摸电子设备的屏幕,基于屏幕中触摸传感器的电容采样值的变化量,获取用户触摸屏幕的位置。
其中,S1801可以参照S501-S503中的相关描述。
S1802,获取电子设备的姿态。
S1802可以参照S504-S506中的相关描述。
S1803,根据电子设备的姿态,对位置进行校正,得到校正后的位置。
S1803可以参照S507-S508中的相关描述。
S1804,电子设备执行响应于校正后的位置的操作。
S1804可以参照S509中的相关描述。在一种实施例中,电子设备执行响应于校正后的位置的操作可以包括:触控消息处理模块向应用程序上报校正后的位置的操作,或者还可以包括应用程序执行用户触摸校正后的位置的操作,如应用程序控制电子设备的显示器显示界面等操作。
在一种实施例中,电子设备中还可以包括相机,因此电子设备可以执行如上图9A所示的步骤。在一种实施例中,电子设备中还可以包括压力传感器,因此电子设备可以执行如上图15和图17中所示的步骤。
本申请实施例中的触摸屏报点的校正方法的原理和技术效果与上述实施例中相同,可以参照上述实施例的相关描述。
在一种实施例中,图4以及上述实施例中的模块可以是被配置成实施以上方法的一个或多个集成电路,例如:一个或多个专用集成电路(application specificintegrated circuit,ASIC),或,一个或多个微处理器(digital signal processor,DSP),或,一个或者多个现场可编程门阵列(field programmable gate array,FPGA)等。再如,当以上某个模块通过处理元件调度程序代码的形式实现时,该处理元件可以是通用处理器,例如中央处理器(central processing unit,CPU)或其它可以调用程序代码的处理器。再如,这些模块可以集成在一起,以片上系统(system-on-a-chip,SOC)的形式实现。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本申请实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
本文中的术语“多个”是指两个或两个以上。本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系;在公式中,字符“/”,表示前后关联对象是一种“相除”的关系。
可以理解的是,在本申请的实施例中涉及的各种数字编号仅为描述方便进行的区分,并不用来限制本申请的实施例的范围。在本申请的实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请的实施例的实施过程构成任何限定。
本文中的术语“多个”是指两个或两个以上。本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系;在公式中,字符“/”,表示前后关联对象是一种“相除”的关系。“第一”、“第二”为区分描述,并不对本申请的实施例的实施过程构成任何限定。
可以理解的是,在本申请的实施例中涉及的各种数字编号仅为描述方便进行的区分,并不用来限制本申请的实施例的范围。
可以理解的是,在本申请的实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请的实施例的实施过程构成任何限定。

Claims (16)

1.一种触摸屏报点的校正方法,其特征在于,包括:
响应于检测到用户触摸电子设备的屏幕,基于所述屏幕中触摸传感器的电容采样值的变化量,获取所述用户触摸所述屏幕的位置;
获取所述电子设备的姿态;
根据所述电子设备的姿态,对所述位置进行校正,得到校正后的位置;
执行响应于所述校正后的位置的操作。
2.根据权利要求1所述的方法,其特征在于,所述获取所述电子设备的姿态,包括:
根据所述电子设备中的加速度传感器采集的加速度数据,获取所述电子设备的加速度值;
根据所述电子设备的加速度值和预设姿态的加速度值,获取所述电子设备的姿态。
3.根据权利要求2所述的方法,其特征在于,所述根据所述电子设备的加速度值和预设姿态的加速度值,获取所述电子设备的姿态,包括:
获取所述电子设备的加速度值中X值和所述预设姿态的加速度值中X值的第一差值;
获取所述电子设备的加速度值中Y值和所述预设姿态的加速度值中Y值的第二差值;
基于所述第一差值、所述第二差值,获取所述电子设备的姿态。
4.根据权利要求3所述的方法,其特征在于,所述预设姿态为第一姿态、第二姿态、第三姿态或第四姿态中的至少两个,所述获取所述电子设备的加速度值中X值和所述预设姿态的加速度值中X值的第一差值,包括:
获取所述电子设备的加速度值中X值和每个预设姿态的加速度值中X值的第一差值;
所述获取所述电子设备的加速度值中Y值和所述预设姿态的加速度值中Y值的第二差值,包括:
获取所述电子设备的加速度值中Y值和每个预设姿态的加速度值中Y值的第二差值;
所述基于所述第一差值、所述第二差值,获取所述电子设备的姿态,包括:
根据多个第一差值和多个第二差值,获取所述电子设备的姿态。
5.根据权利要求1-4中任一项所述的方法,其特征在于,所述根据所述电子设备的姿态,对所述位置进行校正,包括:
根据所述电子设备的姿态,以及所述屏幕的预设坐标系,对所述用户触摸所述屏幕的位置进行校正。
6.根据权利要求5所述的方法,其特征在于,所述屏幕的预设坐标系的X轴与所述电子设备的听筒所在的第一侧边平行,所述屏幕的预设坐标系的Y轴与所述第一侧边垂直;所述根据所述电子设备的姿态,以及所述屏幕的预设坐标系,对所述用户触摸所述屏幕的位置进行校正,包括:
基于所述电子设备的姿态、所述预设坐标系、第一预设校正值和第二预设校正值,对所述用户触摸所述屏幕的位置进行校正,所述第一预设校正值用于对所述用户触摸所述屏幕的位置的X值进行校正,所述第二预设校正值用于对所述用户触摸所述屏幕的位置的Y值进行校正。
7.根据权利要求4-6中任一项所述的方法,其特征在于,所述电子设备的姿态为第一姿态、第二姿态、第三姿态或第四姿态,所述第一姿态为:所述电子设备的屏幕所在的平面与地面垂直,且所述电子设备中听筒所在的第一侧边与竖直方向垂直的姿态,所述第二姿态为所述第一姿态旋转180度后的姿态,所述第三姿态为所述第一姿态顺时针旋转90度后的姿态,所述第四姿态为所述第一姿态逆时针旋转90度后的姿态。
8.根据权利要求5或6所述的方法,其特征在于,所述方法还包括:
采集用户的人脸图像;
基于所述人脸图像,获取所述用户的人脸方向,所述人脸方向为所述用户的额头至下巴的方向;
所述根据所述电子设备的姿态,以及所述屏幕的预设坐标系,对所述用户触摸所述屏幕的位置进行校正,包括:
根据所述电子设备的姿态、所述预设坐标系,将所述用户触摸所述屏幕的位置朝向远离所述人脸方向进行校正。
9.根据权利要求1-8中任一项所述的方法,其特征在于,所述方法还包括:
获取所述用户触摸所述屏幕的压力值;
基于所述触摸传感器的电容采样值的变化量发生变化的区域的形状,获取所述用户触摸所述屏幕的第一方向;
根据所述屏幕的预设方向和所述第一方向,获取所述预设方向和所述第一方向的夹角;
所述根据所述电子设备的姿态,对所述位置进行校正,包括:
根据所述电子设备的姿态、所述夹角、所述压力值,以及预设压力值,对所述用户触摸所述屏幕的位置进行校正。
10.根据权利要求9所述的方法,其特征在于,所述根据所述电子设备的姿态、所述夹角、所述压力值,以及预设压力值,对所述用户触摸所述屏幕的位置进行校正,包括:
根据所述压力值和所述预设压力值的比值、所述夹角,以及第一预设校正值,得到所述用户触摸所述屏幕的位置在X轴上的校正值;
根据所述压力值和所述预设压力值的比值、所述夹角,以及第二预设校正值,得到所述用户触摸所述屏幕的位置在Y轴上的校正值;
根据所述电子设备的姿态、所述X轴上的校正值,以及所述Y轴上的校正值,对所述用户触摸所述屏幕的位置进行校正。
11.一种触摸屏报点的校正方法,其特征在于,包括:
响应于检测到用户触摸电子设备的屏幕,基于所述屏幕中触摸传感器的电容采样值的变化量,获取用户触摸所述屏幕的位置;
获取所述用户触摸所述屏幕的压力值;
基于所述触摸传感器的电容采样值的变化量发生变化的区域的形状,获取所述用户触摸所述屏幕的第一方向;
根据所述屏幕的预设方向和所述第一方向,获取所述预设方向和所述第一方向的夹角;
根据所述夹角、所述压力值,以及预设压力值,对所述位置进行校正,得到校正后的位置;
执行响应于所述校正后的位置的操作。
12.根据权利要求11所述的方法,其特征在于,所述根据所述夹角、所述压力值,以及预设压力值,对所述位置进行校正,包括:
根据所述压力值和所述预设压力值的比值、所述夹角,以及第一预设校正值,得到所述用户触摸所述屏幕的位置在X轴上的校正值;
根据所述压力值和所述预设压力值的比值、所述夹角,以及第二预设校正值,得到所述用户触摸所述屏幕的位置在Y轴上的校正值;
根据所述X轴上的校正值,以及所述Y轴上的校正值,对所述用户触摸所述屏幕的位置进行校正。
13.根据权利要求12所述的方法,其特征在于,所述根据所述X轴上的校正值,以及所述Y轴上的校正值,对所述用户触摸所述屏幕的位置进行校正,包括:
根据所述屏幕的预设坐标系,将所述用户触摸所述屏幕的位置中的X值增大或减小所述X轴上的校正值,且将所述用户触摸所述屏幕的位置中的Y值增大或减小所述Y轴上的校正值,使得校正后的位置相较于校正前的位置远离所述第一方向。
14.一种触摸屏报点的校正装置,其特征在于,包括:
触控集成电路IC芯片,用于响应于检测到用户触摸电子设备的屏幕,基于所述屏幕中触摸传感器的电容采样值的变化量,获取用户触摸所述屏幕的位置;
姿态处理模块,用于获取所述电子设备的姿态;
触控消息处理模块,用于根据所述电子设备的姿态,对所述位置进行校正,得到校正后的位置,以及向应用程序上报所述校正后的位置;
所述应用程序,用于执行响应于所述校正后的位置的操作。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序或指令,当所述计算机程序或指令被运行时,实现如权利要求1-13中任一项所述的方法。
16.一种计算机程序产品,包括计算机程序或指令,其特征在于,所述计算机程序或指令被处理器执行时,实现权利要求1-13中任一项所述的方法。
CN202110949876.0A 2021-08-18 2021-08-18 触摸屏报点的校正方法、装置和电子设备 Active CN113867562B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110949876.0A CN113867562B (zh) 2021-08-18 2021-08-18 触摸屏报点的校正方法、装置和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110949876.0A CN113867562B (zh) 2021-08-18 2021-08-18 触摸屏报点的校正方法、装置和电子设备

Publications (2)

Publication Number Publication Date
CN113867562A true CN113867562A (zh) 2021-12-31
CN113867562B CN113867562B (zh) 2022-11-15

Family

ID=78990606

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110949876.0A Active CN113867562B (zh) 2021-08-18 2021-08-18 触摸屏报点的校正方法、装置和电子设备

Country Status (1)

Country Link
CN (1) CN113867562B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116027940A (zh) * 2022-05-31 2023-04-28 荣耀终端有限公司 截屏方法、设备及存储介质
CN117707352A (zh) * 2023-07-11 2024-03-15 荣耀终端有限公司 一种轮盘方向的显示方法及电子设备

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1692371A (zh) * 2002-05-17 2005-11-02 3M创新有限公司 基于力的触摸屏系统的校正
CN102253778A (zh) * 2011-07-22 2011-11-23 苏州瀚瑞微电子有限公司 一种电容传感器的定位方法
CN102591505A (zh) * 2011-01-12 2012-07-18 纬创资通股份有限公司 电子装置及其触碰位置的校正方法
CN102722311A (zh) * 2011-03-30 2012-10-10 联想(北京)有限公司 一种显示方法、显示装置及移动终端
CN103186329A (zh) * 2011-12-27 2013-07-03 富泰华工业(深圳)有限公司 电子设备及其触摸输入控制方法
CN103793113A (zh) * 2014-03-10 2014-05-14 航天海鹰光电信息技术(天津)有限公司 一种光学触摸模组的成像定位方法及光学触摸控制设备
CN103809820A (zh) * 2012-11-14 2014-05-21 晨星软件研发(深圳)有限公司 触控座标校正的方法与相关系统
CN104536567A (zh) * 2014-12-23 2015-04-22 深圳市金立通信设备有限公司 一种方向检测方法
CN104778395A (zh) * 2015-04-27 2015-07-15 努比亚技术有限公司 终端控制方法及装置
CN108845713A (zh) * 2018-07-31 2018-11-20 广东美的制冷设备有限公司 显示设备及其触摸控制方法和计算机可读存储介质
CN109032387A (zh) * 2018-07-18 2018-12-18 厦门丰臻电子科技有限公司 一种通过超声波跟电磁定位双传感器检测笔身姿态的方法
CN110703947A (zh) * 2019-09-30 2020-01-17 Oppo(重庆)智能科技有限公司 触摸屏校正方法及装置、电子设备以及存储介质
CN110851014A (zh) * 2019-10-29 2020-02-28 Tcl移动通信科技(宁波)有限公司 触摸识别方法、装置、存储介质及终端设备

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1692371A (zh) * 2002-05-17 2005-11-02 3M创新有限公司 基于力的触摸屏系统的校正
CN102591505A (zh) * 2011-01-12 2012-07-18 纬创资通股份有限公司 电子装置及其触碰位置的校正方法
CN102722311A (zh) * 2011-03-30 2012-10-10 联想(北京)有限公司 一种显示方法、显示装置及移动终端
CN102253778A (zh) * 2011-07-22 2011-11-23 苏州瀚瑞微电子有限公司 一种电容传感器的定位方法
CN103186329A (zh) * 2011-12-27 2013-07-03 富泰华工业(深圳)有限公司 电子设备及其触摸输入控制方法
CN103809820A (zh) * 2012-11-14 2014-05-21 晨星软件研发(深圳)有限公司 触控座标校正的方法与相关系统
CN103793113A (zh) * 2014-03-10 2014-05-14 航天海鹰光电信息技术(天津)有限公司 一种光学触摸模组的成像定位方法及光学触摸控制设备
CN104536567A (zh) * 2014-12-23 2015-04-22 深圳市金立通信设备有限公司 一种方向检测方法
CN104778395A (zh) * 2015-04-27 2015-07-15 努比亚技术有限公司 终端控制方法及装置
CN109032387A (zh) * 2018-07-18 2018-12-18 厦门丰臻电子科技有限公司 一种通过超声波跟电磁定位双传感器检测笔身姿态的方法
CN108845713A (zh) * 2018-07-31 2018-11-20 广东美的制冷设备有限公司 显示设备及其触摸控制方法和计算机可读存储介质
CN110703947A (zh) * 2019-09-30 2020-01-17 Oppo(重庆)智能科技有限公司 触摸屏校正方法及装置、电子设备以及存储介质
CN110851014A (zh) * 2019-10-29 2020-02-28 Tcl移动通信科技(宁波)有限公司 触摸识别方法、装置、存储介质及终端设备

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116027940A (zh) * 2022-05-31 2023-04-28 荣耀终端有限公司 截屏方法、设备及存储介质
CN116027940B (zh) * 2022-05-31 2023-12-08 荣耀终端有限公司 截屏方法、设备及存储介质
CN117707352A (zh) * 2023-07-11 2024-03-15 荣耀终端有限公司 一种轮盘方向的显示方法及电子设备

Also Published As

Publication number Publication date
CN113867562B (zh) 2022-11-15

Similar Documents

Publication Publication Date Title
EP2711825B1 (en) System for providing a user interface for use by portable and other devices
CN105159539B (zh) 可穿戴设备的触控响应方法、装置及可穿戴设备
US8269842B2 (en) Camera gestures for user interface control
US8629851B1 (en) Finger gesture recognition for touch sensing surface
EP2354893B1 (en) Reducing inertial-based motion estimation drift of a game input controller with an image-based motion estimation
EP2864932B1 (en) Fingertip location for gesture input
US9632626B2 (en) Apparatuses and methods for providing a 3D man-machine interface (MMI)
US20140210748A1 (en) Information processing apparatus, system and method
CN113867562B (zh) 触摸屏报点的校正方法、装置和电子设备
US20100328351A1 (en) User interface
CN110169056A (zh) 一种动态三维图像获取的方法和设备
WO2011146070A1 (en) System and method for reporting data in a computer vision system
EP2402844A1 (en) Electronic devices including interactive displays and related methods and computer program products
US9310851B2 (en) Three-dimensional (3D) human-computer interaction system using computer mouse as a 3D pointing device and an operation method thereof
CN205050078U (zh) 一种可穿戴设备
US20170024124A1 (en) Input device, and method for controlling input device
WO2021004413A1 (zh) 一种手持输入设备及其指示图标的消隐控制方法和装置
US9235338B1 (en) Pan and zoom gesture detection in a multiple touch display
US20130201157A1 (en) User interface device and method of providing user interface
Kim et al. Oddeyecam: A sensing technique for body-centric peephole interaction using wfov rgb and nfov depth cameras
US20200257396A1 (en) Electronic device and control method therefor
US9983685B2 (en) Electronic apparatuses and methods for providing a man-machine interface (MMI)
TW201419087A (zh) 微體感偵測模組及其微體感偵測方法
JP7504723B2 (ja) 入力システム及び入力方法
CN116774832A (zh) 信息处理方法、电子设备及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant