CN103970328A - 触摸式或非触摸式的多输入点控制指令检测方法和装置 - Google Patents

Abstract

提供了显示面板的多输入点控制指令检测方法和装置。该方法可以包括：检测当前时刻的第一输入点和第二输入点，第一输入点和第二输入点的各自的先前输入点形成各自的第一轨迹和第二轨迹；确定第一输入点和第二输入点分别属于的第一轨迹和第二轨迹；获得第一轨迹上的第一先前输入点；获得第二轨迹上的第二先前输入点；从第一输入点、第二输入点、第一先前输入点、第二先前输入点中任取三点，计算以该三点中属于同一轨迹的两个点中的任一点为角顶点以及由该角顶点与该三点中的其它两点的连线形成的角的大小；以及基于该角的大小，确定多输入点控制指令的种类。该多点控制指令检测方法和装置能简单有效地单独依赖切线角特性识别多输入点控制指令。

Description

触摸式或非触摸式的多输入点控制指令检测方法和装置

技术领域

本发明总体地涉及人机交互领域，更具体地涉及显示面板的触摸式或非触摸式的多输入点控制指令检测方法和装置。

背景技术

传统上，多点触摸技术是一种通过用户的例如两个手指在触摸屏上的触摸并运动来控制人机交互的技术，从而不再需要传统的输入设备(如鼠标或者键盘)。多点触摸技术的使用增强了用户体验感，使人机交互更加友好，用户能更加自由简单的操作计算机及其他设备。

广义地，多点触摸操作包括触摸屏操作模式和非接触式多点触摸操作模式。多点触摸操作方式包括两种：(a)一个点作为中轴点保持静止，另一个点相对于该点运动；(b)两个点同时运动。

目前，多点触摸操作主要包括两手指相对合拢或分开手势和两手指相对转动手势，因为这样的双指合拢分开手势和转动手势简单，同时用户能较容易的完成。另外通过双指合拢分开手势和转动手势，用户可以做许多操作，如图片缩放/旋转，视频的播放/停止，游戏的开始/停止等。

美国专利申请公开US2011/0148804A1中公开了一种识别多点触摸命令的检测方法，该方法根据电容触摸板上的触摸点及两触摸点的中间点之间的位置关系，检测对应的多点触摸命令。首先，当用户触发第一个触摸点的时候，检测该触摸点。第二，在用户触发第二个触摸点的时候，根据第一个触摸点和第二个触摸点之间的位置关系，计算得到第一个中间点。第三，当用户触发第三个触摸点的时候，根据第一个触摸点和第三个触摸点之间的位置关系，计算得到第二个中间点。最后，根据第一个触摸点、第一个和第二个中间点之间的位置关系确定该多点触摸命令。该发明通过判断第一个触摸点与第一个中间点之间的连线与第一个触摸点和第二个中间点之间的连线是否平行来识别多点触摸命令。该发明在识别多点触摸命令过程中，需要保持第一个触摸点静止，因此该发明主要用于固定触摸点和其他运动触摸点之间的触摸命令识别。美国专利申请公开US2011/0221701A1中公开了一种电容触摸板上的多点触摸检测方法。该专利中，多点触摸命令包括缩放或旋转一幅图像。当所参考的两个触摸点之间直线距离发生变化时，判断该命令为缩放一幅图像；当其中一个触摸点绕另一个触摸点旋转时，判断该命令为旋转一幅图像。另外包括几种特别情况，当两触摸点之间的直线距离发生变化且保持旋转时，该判断规则为：如果旋转角度小于预设阈值，则该命令为缩放一幅图像；如果旋转角度大于预设阈值，则该命令为旋转一幅图像。当两个触摸点中，有一个点保持静止，而另一个点运动时，如果运动点与静止点之间形成的夹角小于预设阈值角度时，则判断该命令为缩放一幅图像；否则，该命令则为旋转一幅图像。该发明判断多点触摸命令主要依靠所设定的临界角度阈值。另外，该专利对于一些特殊情况无法进行识别，如当两触摸点同时移动，且两点之间的距离保持不变。

中国专利申请公开CN101667089A公开了一种多点触摸手势识别方法。首先，它需要检测并记录至少四个触摸点的位置信息。第二，相对于初始连线，计算每个点对应的旋转角度。第三，通过旋转角度变化情况，识别旋转或缩放命令。如果该旋转角度保持递增或递减，则它为旋转命令。缩放命令则根据每个触摸点与第一个触摸点之间的距离变化进行判断。该发明主要应用于一个点静止，而另一条轨迹保持运动的多点触摸操作。另外缩放命令和旋转命令需要两种不同的方式进行判断。

此外还有很多专利或文章进行多点触摸操作的识别，较多方法采用临界角度或临界距离阈值进行多点触摸命令的识别；或者采用临界角度阈值和临界距离阈值相结合的方法进行多点触摸操作命令识别。

发明内容

现有技术中，通常情况下，多点触摸设备通过旋转角度或者距离变化信息识别多点触摸命令。许多方法仅仅依据固定的角度阈值或距离阈值进行多点触摸命令识别，其中角度或者距离阈值的大小主要依据设计者的经验值或测试用户的习惯而定，存在主观因素，因此该方法在某些特殊情况下可能失效。因此，我们需要一种客观的判断条件，进行缩放运动和旋转运动的识别。

另外，对于非接触式的多点触摸操作，由于噪声的影响，有时运动轨迹并不平滑，这将影响到操作命令的判断。例如对于双指合拢分开操作的直线运动轨迹，旋转角度应该大约等于0，但因为噪声的影响，旋转角度可能突然变大，如果我们使用角度阈值进行多点触摸命令识别，那么双指合拢分开操作可能误判为旋转操作，因此设置一种稳定且特殊的判断方法非常重要。

鉴于上述情况，做出了本发明。

根据本发明的一个方面，提供了一种显示面板的触摸式或非触摸式的多输入点控制指令检测方法，可以包括：检测当前时刻的触摸式或非触摸式的第一输入点和第二输入点，第一输入点和第二输入点的各自的先前输入点形成各自的第一轨迹和第二轨迹；确定第一输入点所属于的第一轨迹；确定第二输入点所属于的第二轨迹；获得第一轨迹上的就在当前时刻前一时刻的第一先前输入点；获得第二轨迹上的就在当前时刻前一时刻的第二先前输入点；从第一输入点、第二输入点、第一先前输入点、第二先前输入点中任取三点，计算以该三点中属于同一轨迹的两个点中的任一点为角顶点以及由该角顶点与该三点中的其它两点分别连接形成的两条连线形成的角的大小；以及基于该角的大小，确定由该多个输入点触发的多输入点控制指令的种类。

根据本发明的另一方面，提供了一种显示面板的触摸式或非触摸式的多输入点控制指令检测装置，可以包括：输入点检测部件，检测当前时刻的触摸式或非触摸式的第一输入点和第二输入点，第一输入点和第二输入点的各自的先前输入点形成各自的第一轨迹和第二轨迹；第一输入点和第二输入点所属轨迹确定部件，确定第一输入点所属于的第一轨迹，第二输入点所属于的第二轨迹；第一先前输入点获得部件，获得第一轨迹上的就在当前时刻前一时刻的第一先前输入点；第二先前输入点获得部件，获得第二轨迹上的就在当前时刻前一时刻的第二先前输入点；切线角计算部件，从第一输入点、第二输入点、第一先前输入点、第二先前输入点中任取三点，计算以该三点中属于同一轨迹的两个点中的任一点为角顶点以及由该角顶点与该三点中的其它两点分别连接形成的两条连线形成的角的大小；以及多输入点控制指令种类确定部件，基于该角的大小，确定由该多个输入点触发的多输入点控制指令的种类。

在本发明实施例的多输入点控制指令检测方法和装置(下文，有时也称为多点触控指令检测方法和装置，两者可以互换使用)中，根据例如双指旋转和双指合拢分开手势(下文中有时也称为缩放手势)所形成的运动轨迹不同的几何特性，引入了由一个轨迹上的一个最新输入点和另一个轨迹上的两个最新输入点所形成的近似切线角的概念，之所以称之为切线角，是因为在严格圆周运动的情况下，从以上述一个轨迹上的一个最新输入点为圆心而另一个轨迹上的两个最新输入点为圆周的视角看来，该角度为圆周上的切线角。利用此切线角特性来识别多点触摸命令的方法，至少具有下述优点：

1、通常情况下，对于旋转手势，上述切线角大约等于90度，而缩放手势的切线角则大约等于180度，两者间差异巨大，因此便于区分旋转运动和缩放运动，而不必如现有技术那样努力地人为设置适当旋转角度或者两点距离的阈值来识别旋转操作和缩放操作，并且因而适合于运动轨迹不平滑或者存在较多噪声的情况。

2、对于例如用户希望进行较小的旋转的情况，由于旋转角度较小，现有技术的基于角度阈值的方法可能出现将其误认为缩放操作或者不将其视为任何操作的情况，而本发明的基于切线角的方法则可以准确地将此小角度旋转操作识别出来。

3、适用于一个输入点静止另一个输入点相对该输入点运动和两个点同时运动这两种情况。

4、可以单独依赖此切线角特性来区分旋转手势和缩放手势。

因此本发明实施例的多点触控指令检测方法和装置能简单有效地单独依赖此切线角特性来识别旋转手势和缩放手势，从而识别出旋转手势和缩放手势所触发的多点触摸命令。

附图说明

图1为根据本发明一个实施例的多点触摸命令检测方法工作过程的示意性系统框图。

图2以旋转命令和缩放命令为例示意性示出了识别多点触摸命令方法的原理图。

图3示出了根据本发明实施例的显示面板的触摸式或非触摸式的多输入点控制指令检测方法的总体流程图。

图4(a)、4(b)、4(c)示意性说明了根据本发明实施例的切线角的计算方法示例。

图5(a)和图5(b)示出了根据本发明一个实施例在缩放指令和旋转指令情况下的运动参数的计算方法的示意图。

图6(a)和图6(b)示出了根据本发明一个实施例的在确定多输入点控制指令为旋转指令的情况下判断旋转方向(顺时针或者逆时针)的示意图。

图7示出了根据本发明一个实施例的显示面板的触摸式或非触摸式的多输入点控制指令检测装置的配置框图。

图8示出了按照本发明实施例的多输入点控制指令检测系统的总体硬件框图。

具体实施方式

为了使本领域技术人员更好地理解本发明，下面结合附图和具体实施方式对本发明作进一步详细说明。

将按下列顺序进行描述：

1、术语或词汇含义解释

2、多点触摸命令检测方法工作过程示意

3、多点触摸命令识别方法的原理概述

4、多点触摸命令检测方法的第一实施例

5、多点触摸命令检测方法的第二实施例

6、多点触摸命令检测方法的第三实施例

7、旋转指令和缩放指令同时存在情况的判断示例

8、多输入点控制指令检测装置

9、系统硬件配置

10、总结

1、术语或词汇含义解释

下文中，“双指合拢分开手势”或“缩放手势”是指用户的多点触摸手势为近似“直线运动”(例如，两手指相对合拢或者分开)，而谈及“旋转手势”或“转动手势”是指用户的多点触摸手势为近似“圆周运动”。“缩放指令”是指将有关用户手势例如双指合拢分开手势识别为计算机可以对图片、网页、文档等显示执行的缩放命令，“旋转指令”是指将有关用户手势例如旋转手势识别为计算机可以对图片、网页、文档等显示执行的旋转命令。下文中，为便于说明，将以双指合拢分开手势和旋转手势触发对图片的缩放命令和旋转命令为例来描述各个实施例，不过这仅为示例，如前所述双指合拢分开手势(或“缩放手势”)和旋转手势(或“转动手势”)可以根据需要对应到视频的播放/停止，游戏的开始/停止等指令。

下文中，除非特别说明，否则“多输入点控制指令检测”(或“多输入点控制命令检测”)和“多点触摸指令检测”(“多点触摸命令检测”)、多点触控指令检测”(“多点触控命令检测”)具有相同含义，并可互换使用，并均包括基于显示面板的触摸式手势或非触摸式手势的控制命令检测。

下文中，提及的“切线角”并非特定于圆形的切线角，而是为了描述方便用该词汇来表示以一个手指(手或者其它部位或物体)的运动轨迹上的两个点(通常为最新的两个点)中的一个为角顶点，由该角顶点与该两个点中的另一点的连线和该角顶点与另一个手指(手或者其它部位或物体)的运动轨迹上的一个点(通常为最新的点)的连线这两个连线所形成的角。

下文中，将以用户手势为用户手指接触触摸屏为例来说明用户的多点触摸，不过如前所述，例如借助于摄像机等设备，用户手势可以为手部不接触显示屏的多点触摸动作。

2、多点触摸命令检测方法工作过程示意

图1为根据本发明一个实施例的多点触摸命令检测方法工作过程的示意性系统框图。图1中的黑色圆点表示由例如用户手指动作所产生的不同触摸点。如图1所示，用户的两个手指在触摸屏上的运动产生了运动轨迹，系统可根据运动轨迹识别多点触摸命令，如左侧轨迹被对应识别为旋转指令，右侧轨迹被对应识别为放大指令，并进而针对图片执行该旋转指令或放大指令，并进行显示，由此进行人机交互操作。

3、多点触摸命令识别方法的原理概述

为了便于理解，下面参考图2简要说明本发明的识别多点触摸命令方法的原理。

图2以旋转命令和缩放命令为例示意性示出了识别多点触摸命令方法的原理图，其解释了为什么能通过切线角特性进行多点触摸命令识别。以其上部所示的旋转运动为例，点1作为固定不动点，而来自其它同一轨迹的触摸点(如点2，点2’，点2”)以点1为中心进行旋转，则该运动近似于圆周运动。相似的，对于缩放运动，则该运动轨迹近似于直线运动。针对直线和圆周轨迹，可以发现两者的切线角基本保持稳定不变且角度值相差很大，标准圆上形成的切线角等于90度，而直线上的切线角则为180度。因此基于切线角特性，系统能简单并快速地识别出缩放或旋转运动。

4、多点触摸命令检测方法的第一实施例

下面将参考图3描述根据本发明实施例的显示面板的触摸式或非触摸式的多输入点控制指令检测方法示例。

图3示出了根据本发明实施例的显示面板的触摸式或非触摸式的多输入点控制指令检测方法100的总体流程图。

如图3所示，在步骤S110中，检测当前时刻的触摸式或非触摸式的第一输入点和第二输入点，第一输入点和第二输入点的各自的先前输入点形成各自的第一轨迹和第二轨迹。

这里输入点可以由人操作触摸屏而产生，或者为非接触式的人手运动轨迹信息，或者其它方式的轨迹点信息。

另外，在此步骤中，可以包括判断当前手部操作是否为多点触摸操作，如果当前触摸点的总数小于2，则认为该操作不是多点触摸操作，因此不需要做多点触摸命令识别。反之，则识别相应的操作命令并执行该操作。

本发明关注多点触摸的情况，因此假设在一个时刻同时检测到了多个触摸点，并基于此前提进行后面的描述。

这里，以两个手指在触摸屏上的触摸为例，每个手指触碰所触发的触摸点随着时间进行而形成了各自的运动轨迹。并且随着要触发的命令不同，运动轨迹的性质不同。例如在一个示例中，为了触发缩放指令，手指运动轨迹为两手指近似在直线上地相互靠近或相互远离；而为了触发旋转指令，则两手指近似进行圆周运动。对于圆周运动来说，近似切线角接近为90度，而对于直线运动来说，近似切线角接近为180度或者0度。本实施例正是基于不同手势的轨迹对应的切线角不同而进行的。在每个输入点进行缓存时，可以将该输入点的信息例如坐标信息与指示该点所隶属的轨迹的标记，例如编号，相关联地存储。

在检测到当前时刻的多个输入点之后，前进到步骤S120。

在步骤S120中，确定第一输入点和第二输入点分别属于的第一轨迹和第二轨迹。例如确定第一输入点所属于的第一轨迹，可以通过计算第一输入点与两个轨迹中的一个轨迹的最新存储的输入点之间的距离以及该第一输入点与另一轨迹中的最新缓存的输入点之间的距离、比较该两个距离、将该第一输入点归类到与较近距离相关联的轨迹中。或者，在另一示例中，可以根据属于第一轨迹的多个点的历史位置信息之间的关系对第一输入点进行归类。这里，假设将第一输入点确定并标识为属于第一轨迹。需要说明的是，本文中为了描述方便，将第一输入点以及第一先前输入点描述为属于第一轨迹，将第二输入点以及第二先前输入点描述为属于第二轨迹，这仅仅是为了描述方便如此命名，实际上哪个输入点属于哪个轨迹是通过判断得到的。

在确定第一输入点所属轨迹之后，前进到步骤S130中。

在步骤S130中，获得第一轨迹上的就在当前时刻前一时刻的第一先前输入点。

因为在存储器中存储了一个轨迹的至少最新的轨迹点，因此在知道第一输入点所属的轨迹后，就可以得到属于相同轨迹的其前一时刻的第一先前输入点。例如如图4(a)中所示，当前时刻的第一输入点1’，并已经确定其属于第一轨迹，从而可以获得第一轨迹上的第一先前输入点1。

在步骤S140中，获得第二轨迹上的就在当前时刻前一时刻的第二先前输入点。

类似地，可以获得第二轨迹上的就在当前时刻前一时刻的第二先前输入点，例如如图4(a)中所示的第二先前输入点2。

在步骤S150中，从第一输入点、第二输入点、第一先前输入点、第二先前输入点中任取三点，计算以该三点中属于同一轨迹的两个点中的任一点为角顶点以及由该角顶点与该三点中的其它两点分别连接形成的两条连线形成的角的大小。例如，计算以第一先前输入点为角顶点，由第一输入点和第一先前输入点的连线和第二先前输入点和第一先前输入点的连线这两个连线形成的角的大小。

下面参考图4(a)、4(b)、4(c)描述根据本发明实施例的切线角的计算示例。

如图4(a)所示，即以第一先前输入点1为角顶点，将第一输入点1’与第一先前输入点1连接，以及将第二先前输入点2和第一先前输入点1连接，由该两条连线形成了切线角a。如果以点2作为圆中心点，如图2所示，旋转运动则近似于圆周运动，而由数学上的微分原理可知，此时图4(a)中的角a将无线接近与圆形的切线角，即90度。

具体计算方法如公式(1)和(2)所示。

$\cos \left(a\right)=\frac{\mathrm{dis}{\left(\mathrm{1,2}\right)}^2+\mathrm{dis}{(1,1^{\′})}^2-\mathrm{dis}{(1^{\′},2)}^2}{2*\mathrm{dis}\left(\mathrm{1,2}\right)*\mathrm{dis}(1,1^{\′})}---\left(1\right)$

a＝arc(cos(a)) (2)

公式(1)为余弦定理，dis(A，B)表示A、B两点间的空间直线距离，例如dis(1，2)表示点1和点2之间的空间直线距离。根据余弦定理，我们能计算得到角a的余弦值，并根据反余弦定理可以得到角a的角度值大小。

在计算完切线角a后，用当前时刻的第一输入点1’的位置更新替代第一先前输入点1，即此时第一输入点1’对于后面要处理的输入点成为了第一先前输入点的角色。如果存在其它的当前时刻的触摸点，如来自图4(b)中第二轨迹2上的第二输入点2’，就能基于当前点1’，点2和点2’的空间位置，计算得到角b的值，然后用点2’更新代替点2。采用同样的方法，每次有新的触摸点产生时，系统都能计算得到相应的近似切线角，如图4(c)中所示的角c。

需要说明的是，图4(b)中示出了是基于第一轨迹上的第一输入点1’，第二轨迹上的第二先前输入点2和当前时刻第二输入点2’来计算第二轨迹上的切线角，换句话说，即在该例子中是将当前时刻的第一输入点1’视为圆心，来计算第二轨迹上的切线角。不过在另一实施例中，可以是基于第一轨迹上的第一先前输入点1，第二轨迹上的第二先前输入点2和当前时刻第二输入点2’来计算第二轨迹上的切线角，换句话说，即此时是将先前时刻的第一输入点1视为圆心，来计算第二轨迹上的切线角。

通过上述的迭代更新过程，可以不断针对最新时刻来计算相关切线角。

在步骤S150中计算得到切线角后，前进到步骤S160。

在步骤S160中，基于该切线角的大小，确定由该多个输入点触发的多输入点控制指令的种类。

在一个示例中，当该切线角的大小落入范围[90°-θ，90°+θ]时，确定多输入点控制指令为旋转指令；以及当该切线角的大小落入范围[0°，θ]∪[180°-θ，180°]时，确定多输入点控制指令为缩放指令，其中θ为预定阈值。

需要说明的是，虽然这里也设置了一个阈值θ，但是该阈值的大小并不是特别敏感，只要根据经验能覆盖住因为噪声导致的缩放手势或旋转手势的波动范围即可。另外，该示例中，对于缩放指令和旋转指令，设置了相同的阈值。不过在另一个示例中，对于缩放指令和旋转指令，可以设置不同的阈值。

另外，对于不同的应用，相同的多点触摸手势可能触发不同的指令。例如，对于音频播放器应用，缩放手势可以触发音量调高或调低指令，而旋转手势可以根据方向触发播放或者暂停指令等等。即可以根据需要设定有关多点触摸操作所触发的指令。

需要说明的是，上文中的第一输入点和第二输入点仅仅是为了区分同一时刻触碰触摸屏所触发的两个触摸点，可以以两个触摸点中的任何一个为第一输入点，另一个为第二输入点，反之亦然。

在本实施例的多输入点控制指令检测方法中，根据例如旋转和双指合拢分开手势(有时也称为缩放手势)所形成的运动轨迹不同的几何特性，引用了由一个轨迹上的一个最新输入点和另一个轨迹上的两个最新输入点所形成的近似切线角的概念，之所以称之为切线角，是因为在严格圆周运动的情况下，从以上述一个轨迹上的一个最新输入点为圆心而另一个轨迹上的两个最新输入点为圆周的视角看来，该角度为圆周上的切线角。利用此切线角特性来识别多点触摸命令的方法，至少具有下述优点：

1)、通常情况下，对于旋转手势，上述切线角大约等于90度，而缩放手势的切线角则大约等于180度，两者间差异巨大，因此便于区分旋转运动和缩放运动，而不必如现有技术那样努力地人为设置适当旋转角度或者两点距离的阈值来识别旋转操作和缩放操作，并且因而适合于运动轨迹不平滑或者存在较多噪声的情况。

2)、对于例如用户希望进行较小的旋转的情况，由于旋转角度较小，现有技术的基于角度阈值的方法可能出现将其误认为缩放操作或者不将其视为任何操作的情况，而本发明的基于切线角的方法则可以准确地将此小角度旋转操作识别出来。

3)、适用于一个输入点静止另一个输入点相对该输入点运动和两个点同时运动这两种情况。

4)、可以单独依赖此切线角特性来区分旋转手势和缩放手势。

因此本发明实施例的多点触控指令检测方法和装置能简单有效地单独依赖此切线角特性来识别旋转手势和缩放手势，从而识别出旋转手势和缩放手势所触发的多点触摸命令。

5、多点触摸命令检测方法的第二实施例

前述第一实施例操作的例子中，基于每个时刻来判断多输入点控制指令的种类。

替代地，在第二实施例中，为了更加鲁棒的识别多点触摸命令，可以判断一段时间内的多个连续时刻的多输入点控制指令的种类，通过多数取胜的投票原则来确定在该段时间内应执行的多输入点控制指令。

基于例如图4中所示的近似切线角度值，我们能非常容易的进行各个时刻点处的多点触摸命令的识别。由此在一个示例中，可以在一段时间内，统计各个触摸命令的计数，并以数量多者取胜的规则来确定在该段时间内应触发的多点触摸命令的种类。

在另一个示例中，基于多数取胜的投票原则的多点触摸指令识别方法如公式(3)和公式(4)所示。

在公式(3)中，roCnt表示连续识别为旋转命令的多点触摸命令总数；zoCnt表示连续识别为缩放命令的命令总数。zoCntTemp表示在旋转操作执行过程中，临时识别为缩放命令的命令数；roCntTemp表示在缩放操作执行过程中，临时识别为旋转命令的命令数，其中roCntTemp和zoCntTemp主要用于去除噪声的影响。例如，在旋转操作执行过程中，如果zoCntTemp＞T，即如果频繁出现缩放手势，则系统将认为一个新的缩放命令已出现并且不是噪声，系统将停止旋转操作的执行，进行缩放命令检测；反之则旋转操作过程中检测到的缩放命令仅视为噪声，系统不需要对其进行处理。最后，如果当前近似切线角a满足条件a∈[90°-θ，90°+θ]androCnt＞C，则判断旋转指令成立并执行旋转操作；如果近似切线角a满足条件a∈[0°，θ]∪[180°-θ，180°]and zoCnt＞C，则判断缩放指令成立并执行缩放操作。否则，不会触发多点触摸命令。在一个示例中，将有关参数设置为T＝4，C＝10，θ＝30°，不过这仅为示例有关参数取值可以根据经验设定或者通过学习设定。

根据本发明第二实施例的多点触摸指令检测方法特别适合于运动轨迹不平滑或者存在噪声的情况，可以去除噪声影响，鲁棒地进行多点触摸命令识别和执行。

6、多点触摸命令检测方法的第三实施例

前述多点触摸命令检测方法的第一实施例和第二实施例检测或识别了多点触摸命令的种类。

替代地或者附加地，在第三实施例中，为了更精确地执行多点触摸命令，除了检测或识别多点触摸命令的种类之外，还计算在执行多点触摸命令中所涉及的运动参数或者命令参数。

例如，对于缩放指令，需要计算缩放因子；而对于旋转指令，需要计算旋转角度。

不过需要说明的是，对于某些情况，可能不需要计算运动参数或者命令参数。例如在游戏应用中，如果旋转手势触发的是游戏开始指令或游戏结束指令，则不需要计算旋转角度。

作为示例，下面参考图5(a)和图5(b)描述在缩放指令和旋转指令情况下的运动参数的计算。

图5(a)和图5(b)示出了根据本发明一个实施例在缩放指令和旋转指令情况下的运动参数的计算方法的示意图。

在检测到的多点触摸指令为缩放指令的情况下，在一个例子中，也可以通过计算目前正处理的一个当前输入点和另一轨迹上的先前输入点之间的距离与该当前输入点所属轨迹上的先前输入点和该另一轨迹上的先前输入点之间的距离之间的比率，来确定缩放指令的缩放比率。如图5(a)所示，目前正在处理第二轨迹上的当前第二输入点2’，获得第二轨迹上的第二先前输入点2以及第一轨迹上的第一先前输入点1，计算第二输入点2’和第一先前输入点1之间的距离dist(1，2’)，以及计算先前第二输入点2和第一先前输入点1之间的距离dist(1，2)，比较求得二者之间的比率作为缩放因子或缩放尺度，如下面的公式(5)所示。

$\mathrm{cof}1=\frac{\mathrm{dist}(1,2^{\′})}{\mathrm{dist}\left(\mathrm{1,2}\right)}---\left(5\right)$

在公式(5)中，cof1表示缩放尺度或缩放因子，dist(1，2’)表示第一轨迹上的第一先前输入点1与第二轨迹上的当前第二输入点2’之间的距离，dist(1，2)表示第一轨迹上的第一先前输入点1与第二轨迹上的第二先前输入点2之间的距离。

替代地，在另一个例子中，可以通过计算第一轨迹上的当前第一输入点1’和第二轨迹上的当前第二输入点2’之间的距离与第一轨迹上的第一先前输入点1和第二轨迹上的第二先前输入点2之间的距离之间的比率，来确定缩放指令的缩放比率。

在旋转指令的情况下，旋转角度的计算相对复杂，其既涉及旋转角度的大小，也涉及到旋转方向的确定。

在一个示例中，当确定多输入点控制指令为旋转指令时，基于由连接第一先前输入点和第二先前输入点得到的线段与由连接第一输入点和第二输入点得到的线段相交的夹角来确定旋转指令对应的旋转角度；以及根据第一输入点、第一先前输入点和第二先前输入点之间的位置关系或根据第二输入点、第二先前输入点和第一先前输入点之间的位置关系来判断旋转指令对应的旋转方向。例如，如图5(b)所示，在从连接第一轨迹上的第一先前输入点1和第二轨迹上的第二先前输入点2得到的连线line(1，2)转动到连接第一轨迹上的当前第一输入点1’和第二轨迹上的当前第二输入点2’得到的连线line(1’，2’)过程中，旋转角度大小为angle(A)。根据三角形定理，三角形的外角等于与其不相邻的两内角和，因此如图5(b)可见，旋转角度angle(A)可以通过以第二先前输入点2为角顶点的三顶点1、1’、2所确定的角a与以当前第一输入点1为角顶点的三顶点1’、2、2’所确定的角b两者求和得到，如下面的公式(6)、(7)、(8)、(9)、(10)所示。

$\cos \left(a\right)=\frac{\mathrm{dist}{(1^{\′},2)}^2+\mathrm{dist}{(1,2)}^2-\mathrm{dist}{(1,1^{\′})}^2}{2\×\mathrm{dist}(1^{\′},2)\×\mathrm{dist}(1,2)}---\left(6\right)$

$\cos \left(b\right)=\frac{\mathrm{dist}{(1^{\′},2)}^2+\mathrm{dist}{(1^{\′},2^{\′})}^2-\mathrm{dist}{(2,2^{\′})}^2}{2\×\mathrm{dist}(1^{\′},2)\×\mathrm{dist}(1^{\′},2^{\′})}---\left(7\right)$

angle(a)＝arc(cos(a)) (8)

angle(b)＝arc(cos(b)) (9)

angle(A)＝angle(a)+angle(b) (10)

在一段时间内的真实旋转角度RealRotationAngle可以通过该时间段内的各个时刻的旋转角度A的求和来得到，如下面的公式(11)所示，其中i＝1到n表示该段时间内的n个时刻，而angle(A_i)表示第i个时刻根据上述公式(6)-(10)求得的该第i时刻相对于第i-1时刻的旋转角度Ai。

$\mathrm{Real}\mathrm{RotationAngle}={\mathrm{\Σ}}_{i=1}^n\mathrm{angle}\left(A_i\right)---\left(11\right)$

上述公式(8)、(9)、(10)、(11)中涉及到的旋转角度均为矢量，具有方向信息，如果当前旋转为顺时针旋转，则角度值为负值；如果旋转方向为逆时针旋转，则角度值为正值。

根据本发明上述实施例所计算得到的旋转角度值，非常接近用户操作的真实旋转角度，因此操作更加灵敏。

下面参考图6说明一个判断旋转角度的旋转方向(顺时针或者逆时针)的示例方法。

图6示出了根据本发明一个实施例的在确定多输入点控制指令为旋转指令的情况下判断旋转方向(顺时针或者逆时针)的示意图。

在该示例中，仍然可以根据三点(即，目前处理的当前输入点以及各自两个轨迹上的先前输入点)间的相对位置关系进行旋转方向的判断，具体地可以包括两步：

步骤1：根据不同轨迹上的两点位置关系判断两个轨迹上同一时刻的点的相对位置(左边或右边)；

步骤2：根据相同轨迹上的两点间位置变化关系dx和dy并结合步骤1的结果，判断当前点为顺时针旋转还是逆时针旋转，判断准则如公式(13)、(14)所示，dx和dy的计算公式如公式(12)所示。

$\left\{\begin{array}{c}\mathrm{dx}={\mathrm{point}1}^{\′}.x-\mathrm{point}1.x\\ \mathrm{dy}={\mathrm{point}1}^{\′}.y-\mathrm{point}1.y\end{array}\right.---\left(12\right)$

$\left|\mathrm{dy}\right|\&GreaterEqual;\left|\mathrm{dx}\right|\left\{\begin{array}{c}\mathrm{right}\&cap;(\mathrm{dy}<0),\mathrm{clockwise}\left(2\mathrm{or}7\mathrm{area}\right)\\ \mathrm{right}\&cap;(\mathrm{dy}>0),\mathrm{anti}-\mathrm{clokwise}\left(2\mathrm{or}7\mathrm{area}\right)\\ \mathrm{left}\&cap;(\mathrm{dy}<0),\mathrm{anti}-\mathrm{clockwise}\left(3\mathrm{or}6\mathrm{area}\right)\\ \mathrm{left}\&cap;(\mathrm{dy}>0),\mathrm{clockwise}\left(3\mathrm{or}6\mathrm{area}\right)\end{array}\right.---\left(13\right)$

$\left|\mathrm{dx}\right|>\left|\mathrm{dy}\right|\left\{\begin{array}{c}\mathrm{right}\&cap;(\mathrm{dx}<0)\&cap;(\mathrm{dy}>0),\mathrm{anti}-\mathrm{clockwise}\left(1\mathrm{area}\right)\\ \mathrm{right}\&cap;(\mathrm{dx}<0)\&cap;(\mathrm{dy}<0),\mathrm{clockwise}\left(8\mathrm{area}\right)\\ \mathrm{right}\&cap;(\mathrm{dx}>0)\&cap;(\mathrm{dy}>0),\mathrm{anti}-\mathrm{clockwise}\left(8\mathrm{area}\right)\\ \mathrm{right}\&cap;(\mathrm{dx}>0)\&cap;(\mathrm{dy}<0),\mathrm{clockwise}\left(1\mathrm{area}\right)\\ \mathrm{left}\&cap;(\mathrm{dx}<0)\&cap;(\mathrm{dy}>0),\mathrm{clockwise}\left(5\mathrm{area}\right)\\ \mathrm{left}\&cap;(\mathrm{dx}<0)\&cap;(\mathrm{dy}<0),\mathrm{anti}-\mathrm{clockwise}\left(4\mathrm{area}\right)\\ \mathrm{left}\&cap;(\mathrm{dx}>0)\&cap;(\mathrm{dy}>0),\mathrm{clockwise}\left(4\mathrm{area}\right)\\ \mathrm{left}(\mathrm{dx}>0)\&cap;(\mathrm{dy}<0),\mathrm{anti}-\mathrm{clockwise}\left(5\mathrm{area}\right)\end{array}\right.---\left(14\right)$

上述公式(12)中，dx表示第一轨迹上的当前第一输入点1’的x坐标(即point1’.x)和第一先前输入点1的x坐标(即point1.x)之间的差，dy表示第一轨迹上的当前第一输入点1’(即point1’.y)的y坐标和第一先前输入点1的y坐标(即point1.y)之间的差。

在公式(13)和(14)中，“right”或“left”为根据步骤1判断得到，表示两点之间的相对位置关系，例如，判断第一先前输入点1和第二先前输入点2相互位置关系为第一先前输入点1在第二先前输入点2的右边；clockwise表示旋转方向是顺时针，anti-clockwise表示旋转方向是逆时针，为了表示方便，将圆形区域划分为八个区域如1area、2area、3area、4area、5area、6area、7area、8area所处的区域，其中区域编号1，2，3，4，5，6，7，8如图6(b)所示。

以图6(a)为例进行旋转方向的判断说明。当前有三个触摸点，即第一先前输入点1和当前第一输入点1’来自同一轨迹1，第二先前输入点2来自轨迹2。根据步骤1能判断得到第一先前输入点1在第二先前输入点2的右边，再根据第一先前输入点1和当前第一输入点1’两点之间的位置关系，能得到|dy|＞|dx|且dy＞0。根据公式(13)，我们能容易判断得到轨迹1做逆时针旋转，因此angle(a)的角度值为正值。采用同样的方法，当|dx|＞|dy|时，我们可以采用公式(14)进行判断旋转方向。

这里的旋转方向判断方法仅为示例，任何可以判断一点相对另一点旋转方向的方法均可以用于本发明。

7、旋转指令和缩放指令同时存在情况的判断示例

前面的示例中都是单独依赖于近似切线角来识别并区分旋转指令和缩放指令，即同一时刻旋转指令和缩放指令只能为非此即彼，或者均不存在的关系。在大多数情况下是符合实际应用的。例如，对于图片应用，一般情况下用户或者仅想旋转图片，或者仅想缩放图片。

不过，根据设计需要，如果用户希望同时对图片进行缩放和旋转操作，则在一个实施例中，可以当该角的大小落入范围[90°-θ，90°+θ]并且第一输入点和第二输入点之间的距离与第一先前输入点和第二先前输入点之间的距离之间的差或者距离比值大于预定阈值时，确定多输入点控制指令同时为旋转指令和缩放指令两者。并且上述的缩放指令运动参数计算方法和旋转指令的运动参数计算方法同样适用于此情况。

8、多输入点控制指令检测装置

下面参考图7描述根据本发明一个实施例的显示面板的触摸式或非触摸式的多输入点控制指令检测装置200的配置。

图7示出了根据本发明一个实施例的显示面板的触摸式或非触摸式的多输入点控制指令检测装置200的配置框图。

该显示面板的触摸式或非触摸式的多输入点控制指令检测装置200包括：输入点检测部件210，检测当前时刻的触摸式或非触摸式的第一输入点和第二输入点，第一输入点和第二输入点的各自的先前输入点形成各自的第一轨迹和第二轨迹；第一输入点和第二输入点所属轨迹确定部件220，确定第一输入点和第二输入点分别属于的第一轨迹和第二轨迹；第一先前输入点获得部件230，获得第一轨迹上的就在当前时刻前一时刻的第一先前输入点；第二先前输入点获得部件240，获得第二轨迹上的就在当前时刻前一时刻的第二先前输入点；切线角计算部件250，从第一输入点、第二输入点、第一先前输入点、第二先前输入点中任取三点，计算以该三点中属于同一轨迹的两个点中的任一点为角顶点，由该角顶点与该三点中的其它两点分别连接形成的两条连线形成的角的大小；以及多输入点控制指令种类确定部件260，基于该角的大小，确定由该多个输入点触发的多输入点控制指令的种类。关于上述输入点检测部件210、输入点所属轨迹确定部件220、第一先前输入点获得部件230、第二先前输入点获得部件240、切线角计算部件250、多输入点控制指令种类确定部件260的具体功能和操作可以参考上述和图1到图6相关的描述。这里省略有关重复描述。

9、系统硬件配置

本发明还可以通过一种多输入点控制指令检测系统来实施。图8是示出按照本发明实施例的多输入点控制指令检测系统1000的总体硬件框图。如图8所示，多输入点控制指令检测系统1000可以包括：输入设备1100，用于从外部输入有关触发点的信息(例如触摸式输入的情况下)或者图像(例如，非触摸式输入的情况下)信息等，例如可以包括键盘、鼠标器、以及通信网络及其所连接的远程输入设备等等；处理设备1200，用于实施上述的按照本发明实施例的多输入点控制指令检测方法，或者实施为上述的多输入点控制指令检测装置，例如可以包括计算机的中央处理器或其它的具有处理能力的芯片等等，可以连接到诸如因特网的网络(未示出)，根据处理过程的需要向远程传送处理后的指令等等；输出设备1300，用于向输出实施上述多输入点控制指令检测过程所得的结果，例如可以包括显示器、打印机、以及通信网络及其所连接的远程输出设备等等；以及存储设备1400，用于以易失或非易失的方式存储上述多输入点控制指令检测过程所涉及的诸如输入点位置信息、所属轨迹编号、点间距离信息、缩放因子、旋转角度等数据，例如可以包括随机存取存储器(RAM)、只读存储器(ROM)、硬盘、或半导体存储器等等的各种易失或非易失性存储器。

10、总结

根据本发明的实施例，提供了一种显示面板的触摸式或非触摸式的多输入点控制指令检测方法，可以包括：检测当前时刻的触摸式或非触摸式的第一输入点和第二输入点，第一输入点和第二输入点的各自的先前输入点形成各自的第一轨迹和第二轨迹；确定第一输入点和第二输入点分别属于的第一轨迹和第二轨迹；获得第一轨迹上的就在当前时刻前一时刻的第一先前输入点；获得第二轨迹上的就在当前时刻前一时刻的第二先前输入点；从第一输入点、第二输入点、第一先前输入点、第二先前输入点中任取三点，计算以该三点中属于同一轨迹的两个点中的任一点为角顶点，由该角顶点与该三点中的其它两点分别连接形成的两条连线形成的角的大小；以及基于该角的大小，确定由该多个输入点触发的多输入点控制指令的种类。

根据本发明的另一实施例，提供了一种显示面板的触摸式或非触摸式的多输入点控制指令检测装置，可以包括：输入点检测部件，检测当前时刻的触摸式或非触摸式的第一输入点和第二输入点，第一输入点和第二输入点的各自的先前输入点形成各自的第一轨迹和第二轨迹；输入点所属轨迹确定部件，确定第一输入点和第二输入点分别属于的第一轨迹和第二轨迹；第一先前输入点获得部件，获得第一轨迹上的就在当前时刻前一时刻的第一先前输入点；第二先前输入点获得部件，获得第二轨迹上的就在当前时刻前一时刻的第二先前输入点；切线角计算部件，从第一输入点、第二输入点、第一先前输入点、第二先前输入点中任取三点，计算以该三点中属于同一轨迹的两个点中的任一点为角顶点，由该角顶点与该三点中的其它两点分别连接形成的两条连线形成的角的大小；以及多输入点控制指令种类确定部件，基于该角的大小，确定由该多个输入点触发的多输入点控制指令的种类。

在本发明实施例的多输入点控制指令检测方法和装置中，根据例如旋转和双指合拢分开手势(有时也称为缩放手势)所形成的运动轨迹不同的几何特性，引入了由一个轨迹上的一个最新输入点和另一个轨迹上的两个最新输入点所形成的近似切线角的概念。利用此切线角特性来识别多点触摸命令的方法和装置，至少具有下述优点：

1)、通常情况下，对于旋转手势，上述切线角大约等于90度，而缩放手势的切线角则大约等于180度，两者间差异巨大，因此便于区分旋转运动和缩放运动，而不必如现有技术那样努力地人为设置适当旋转角度或者两点距离的阈值来识别旋转操作和缩放操作，并且因而适合于运动轨迹不平滑或者存在较多噪声的情况。

2)、对于例如用户希望进行较小的旋转的情况，由于旋转角度较小，现有技术的基于角度阈值的方法可能出现将其误认为缩放操作或者不将其视为任何操作的情况，而本发明的基于切线角的方法则可以准确地将此小角度旋转操作识别出来。

3)、适用于一个输入点静止另一个输入点相对该输入点运动和两个点同时运动这两种情况。

4)、可以单独依赖此切线角特性来区分旋转手势和缩放手势。

因此本发明实施例的多点触控指令检测方法和装置能简单有效地单独依赖此切线角特性来识别旋转手势和缩放手势，从而识别出旋转手势和缩放手势所触发的多点触摸命令。

以上结合具体实施例描述了本发明的基本原理，但是，需要指出的是，对本领域的普通技术人员而言，能够理解本发明的方法和装置的全部或者任何步骤或者部件，可以在任何计算装置(包括处理器、存储介质等)或者计算装置的网络中，以硬件、固件、软件或者它们的组合加以实现，这是本领域普通技术人员在阅读了本发明的说明的情况下运用他们的基本编程技能就能实现的。

需要说明的是，前述描述仅为示例，可以进行很多修改和/或替换。

例如，前面以显示面板为触摸屏，多输入点为接触该触摸屏的触摸式多输入点为例说明了多输入点控制指令检测。不过替代地，可以借助于摄像机等监测例如人手或者其它部位或部件来对于非触摸式的多输入点进行多输入点控制指令检测。

另外，前文中是基于一个当前输入点和分别属于两个轨迹上的两个先前输入点这三个点以及以与当前输入点属于同一轨迹的先前输入点为角顶点来利用三角原理计算切线角。不过其实这仅为示例，同样是基于一个当前输入点和分别属于两个轨迹上的两个先前输入点这三个点，以当前输入点为角顶点来计算切线角也是可以的。进一步更概括而言，任何时刻存在至少两个当前输入点，从当前第一输入点、当前第二输入点、第一先前输入点、第二先前输入点中任取三点，计算以该三点中属于同一轨迹的两个点中的任一点为角顶点，由该角顶点与该三点中的其它两点分别连接形成的两条连线形成的切线角的大小都是可以的。

另外，前文中只是计算了单一时刻的近似切线角，并基于此切线角来判定所触发的指令种类。替代地，可以计算多个相邻时刻的近似切线角，然后求得切线角的平均值来判定触发的指令种类。

另外，前文以同一时刻存在两个触摸点为例说明了多输入点控制指令检测。替代地，可以对多余两个输入点的情况进行多输入点控制指令检测。例如，在以大拇指为独立运动单位，而其他手指中的多个为运动单位的情况下，可以以大拇指作为本发明实施例中的构成一个轨迹的输入点如作为第一输入点，而以其它手指为另一组输入点，可以以另一组输入点中任一输入点例如作为前述实施例中第二输入点来进行切线角分析。或者也可以从另一组输入点中分别取出各个输入点来相对第一输入点进行分析。更复杂地，可以分析多个输入点中任意两个输入点的各自轨迹的相对切线角关系等进行分析。总之，本发明实施例中的两个输入点可以扩展应用于3个输入点、4个输入点等更多输入点的情况，实际上，只要知道两条轨迹间的配对关系就能应用本发明实施例的技术进行处理。

另外，前文以针对图片的缩放指令和旋转指令为例说明多输入点控制指令的检测。不过这仅为示例，例如，可以以游戏应用中的开始指令和停止指令或者音频播放器中的音量控制指令等作为多输入点控制指令。

此外，前文以两手指进行的旋转手势或者相互合拢分开手势为例说明了用于触发多输入点控制指令的手势。不过，这仅为示例，可以根据实际需要使用不同的手势，例如不是使用两手指，而是使用两只手来进行手势操作。

另外，本发明的目的还可以通过在任何计算装置上运行一个程序或者一组程序来实现。所述计算装置可以是公知的通用装置。因此，本发明的目的也可以仅仅通过提供包含实现所述方法或者装置的程序代码的程序产品来实现。也就是说，这样的程序产品也构成本发明，并且存储有这样的程序产品的存储介质也构成本发明。显然，所述存储介质可以是任何公知的存储介质或者将来所开发出来的任何存储介质。

还需要指出的是，在本发明的装置和方法中，显然，各部件或各步骤是可以分解和/或重新组合的。这些分解和/或重新组合应视为本发明的等效方案。并且，执行上述系列处理的步骤可以自然地按照说明的顺序按时间顺序执行，但是并不需要一定按照时间顺序执行，以及某些步骤可以并行或彼此独立地执行。这些都不构成对本发明的限制。

上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，取决于设计要求和其他因素，可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

Claims (10)

1.一种显示面板的触摸式或非触摸式的多输入点控制指令检测方法，包括：

检测当前时刻的触摸式或非触摸式的第一输入点和第二输入点，第一输入点和第二输入点的各自的先前输入点形成各自的第一轨迹和第二轨迹；

确定第一输入点和第二输入点分别属于的第一轨迹和第二轨迹；

获得第一轨迹上的就在当前时刻前一时刻的第一先前输入点；

获得第二轨迹上的就在当前时刻前一时刻的第二先前输入点；

从第一输入点、第二输入点、第一先前输入点、第二先前输入点中任取三点，计算以该三点中属于同一轨迹的两个点中的任一点为角顶点以及由该角顶点与该三点中的其它两点分别连接形成的两条连线形成的角的大小；以及

基于该角的大小，确定由该多个输入点触发的多输入点控制指令的种类。

2.根据权利要求1的多输入点控制指令检测方法，还包括判断一段时间内的多个连续时刻的多输入点控制指令的种类，通过多数取胜的投票原则来确定在该段时间内应执行的多输入点控制指令。

3.根据权利要求1的多输入点控制指令检测方法，当该角的大小落入范围[90°-θ,90°+θ]时，确定多输入点控制指令为旋转指令；以及当该角的大小落入范围[0°,θ]∪[180°-θ,180°]时，确定多输入点控制指令为缩放指令，其中θ为预定阈值。

4.根据权利要求3的多输入点控制指令检测方法，还包括：当确定多输入点控制指令为旋转指令时，基于由连接第一先前输入点和第二先前输入点得到的线段与由连接第一输入点和第二输入点得到的线段相交的夹角来确定旋转指令对应的旋转角度；以及

根据第一输入点、第一先前输入点和第二先前输入点之间的位置关系或根据第二输入点、第二先前输入点和第一先前输入点之间的位置关系来判断旋转指令对应的旋转方向。

5.根据权利要求4的多输入点控制指令检测方法，还包括：根据一个时间段内的各时刻的旋转角度和旋转方向，来确定该时间段内的旋转角度值。

6.根据权利要求3的多输入点控制指令检测方法，还包括：当确定多输入点控制指令为缩放指令时，通过将第一输入点和第二输入点之间的距离与第一先前输入点和第二先前输入点之间的距离相比较，来确定该多输入点控制指令为缩小指令还是放大指令。

7.根据权利要求6的多输入点控制指令检测方法，还包括：通过计算第一输入点和第二输入点之间的距离与第一先前输入点和第二先前输入点之间的距离之间的比率，来确定缩放指令的缩放比率。

8.根据权利要求3的多输入点控制指令检测方法，当该角的大小落入范围[90°-θ,90°+θ]并且第一输入点和第二输入点之间的距离与第一先前输入点和第二先前输入点之间的距离之间的差或者距离比值大于预定阈值时，确定多输入点控制指令同时为旋转指令和缩放指令两者。

9.根据权利要求1的多输入点控制指令检测方法，其中所述显示面板为触摸屏，所述多输入点为触摸式多输入点。

10.一种显示面板的触摸式或非触摸式的多输入点控制指令检测装置，

包括：

输入点检测部件，检测当前时刻的触摸式或非触摸式的第一输入点和第二输入点，第一输入点和第二输入点的各自的先前输入点形成各自的第一轨迹和第二轨迹；

输入点所属轨迹确定部件，确定第一输入点和第二输入点分别属于的第一轨迹和第二轨迹；

第一先前输入点获得部件，获得第一轨迹上的就在当前时刻前一时刻的第一先前输入点；

第二先前输入点获得部件，获得第二轨迹上的就在当前时刻前一时刻的第二先前输入点；

切线角计算部件，从第一输入点、第二输入点、第一先前输入点、第二先前输入点中任取三点，计算以该三点中属于同一轨迹的两个点中的任一点为角顶点，由该角顶点与该三点中的其它两点分别连接形成的两条连线形成的角的大小；以及

多输入点控制指令种类确定部件，基于该角的大小，确定由该多个输入点触发的多输入点控制指令的种类。