CN102479212B - 识别网页上键盘不可访问节点的方法以及装置 - Google Patents

Abstract

本公开提供了一种用于识别网页上键盘不可访问节点的方法和装置。该方法包括步骤：获取网页的结构树中的所有节点；识别所有节点中的鼠标可操作节点；检查所述鼠标可操作节点是否键盘可达以及是否键盘可操作；提取键盘不可达的节点以及键盘不可操作的节点，作为所述键盘不可访问节点。通过本公开的方法和装置，可以更精确地确定网页上的键盘不可达以及键盘不可操作的元素，从而提高网页设计的效率与精度。

Description

识别网页上键盘不可访问节点的方法以及装置

技术领域

本公开涉及计算机、互联网等技术，更具体地，涉及网页上的节点信息识别技术。

背景技术

为了使网页应用可访问，网页上的所有可操作的元素(诸如按钮、文本输入、链接等)都应该是键盘可达的，并且应该附有鼠标事件和键盘事件两者。鼠标事件例如包括确定键和选项键的按下、松开，导向轮的滑动等，键盘事件例如包括键盘的各个键的按下、松开等。在信息无障碍验证测试(AVT)中，一个重要的步骤是识别所有鼠标可操作的元素，并接着验证它们是否键盘可达，以及是否附有相关的键盘事件。

至今为止，已存在可以分析静态网页，收集鼠标可操作对象，并接着检查它们是否具有相关的键盘事件的工具，例如WebKing。WebKing是用于网页静态代码扫描的工具，其通过对静态代码中声明的可操作标签，例如<button>，<input>等进行扫描，查看其是否声明了相关的事件。

对于Web2.0技术，网页上应用有扩展和动态的JavaScript。网页上的许多元素是动态生成的，虽然它们可以被定制为鼠标可操作，但是它们并不是标准HTML可操作元素，例如<div>或<span>的HTML元素。同时，某些事件在编程时被绑定到元素上，而不是被定义为该元素的显式属性，例如，dojoconnect函数可以将事件通过编程连接到元素上。也就是说，在Web2.0中，节点可以不是传统意义中的可操作标签，例如<button>、<input>等，可以使用任意的HTML节点标签，例如<div>、<span>等等，节点的事件也可以不在编写源码的时候写入，而是在生成页面时通过JavaScript动态地加载事件。甚至对于传统的可操作标签，其事件也可以通过在页面生成时动态地挂载。因此，对于通过扫描静态代码的扫描工具来说，在页面没有生成前，无法检测此类节点的键盘和鼠标事件等。对于这些新的情况，现有的对标准HTML可操作元素的静态分析工具已经不适用了。

由于上述原因，目前大多数的分析工作都是通过手动完成的。AVT测试者必须通过鼠标和键盘手工地操作网页上的所有元素，然后获得键盘不可达或者缺少相关键盘事件的元素列表，这很费时而且易出错误。

发明内容

根据本公开的一个方面，提供了一种用于识别网页上键盘不可访问节点的方法，包括步骤：获取网页的结构树中的所有节点；识别所有节点中的鼠标可操作节点；检查所述鼠标可操作节点是否键盘可达以及是否键盘可操作；提取键盘不可达的节点以及键盘不可操作的节点，作为所述键盘不可访问节点。

根据本公开的另一个方面，提供了一种用于识别网页上键盘不可访问节点的装置，包括：获取单元，获取网页的结构树中的所有节点；第一识别单元，识别所有节点中的鼠标可操作节点；第二识别单元，检查所述鼠标可操作节点是否键盘可达以及是否键盘可操作；以及确定单元，提取键盘不可达的节点以及键盘不可操作的节点，作为所述键盘不可访问节点。

利用本公开的方法和装置，通过在页面生成后，直接对内存中已经生成的文档对象模型(DOM)进行操作和检测，可以更精确地确定网页上的键盘不可达以及键盘不可操作的元素，做到对于任何有事件的节点的检测，从而提高网页设计的效率与精度。

附图说明

从下面结合附图对本公开的实施例的详细描述中，本公开的这些和/或其它方面和优点将变得更加清楚并更容易理解，其中，

图1是示出根据本公开的第一实施例的识别网页上键盘不可访问节点的装置的方框图；

图2是示出根据本公开的第二实施例的识别网页上键盘不可访问节点的方法的流程图；

图3是示出图2中的子步骤的进一步的流程图；以及

图4是示出图2中的子步骤的进一步的流程图。

具体实施方式

下面将结合附图详细描述本公开的具体实施例。如果对某些相关现有技术的详细描述可能会混淆本公开的要点，则不会在这里提供其详细描述。在各个实施例中，相同的附图标记用于表示执行同样功能的元件或单元。

这里首先描述本公开的部分术语：

键盘不可访问的节点，是指键盘不能对其进行访问的、网页上的节点，包括键盘不可达的节点以及键盘不可操作的节点。

键盘不可达的节点，是指通过触发键盘上的例如<tab>、<上>、<下>、<左>、<右>等键所获得的光标焦点在其上无效的节点，或者具有键盘“禁用”属性的节点等。

键盘不可操作的节点，是指响应于键盘事件的发出，不能引起网页状态发生改变的节点。鼠标可操作节点，是指响应于鼠标事件的发出，能引起网页状态发生改变的节点。

图1是示出根据本公开的第一实施例的识别网页上键盘不可访问节点的装置的方框图。

如图1所示，根据本公开第一实施例的识别网页上键盘不可访问节点的装置100包括：获取单元102，获取网页的结构树中的所有节点；第一识别单元104，识别所有节点中的鼠标可操作节点；第二识别单元106，检查所述鼠标可操作节点是否键盘可达以及是否键盘可操作；以及确定单元108，提取键盘不可达的节点以及键盘不可操作的节点，作为键盘不可访问节点。一方面，检查所述鼠标可操作节点是否键盘可达以及是否键盘可操作，是指可以对同一节点同时检查是否键盘可达，以及是否键盘可操作。针对键盘不可达的节点，在输出结果中将该节点标记为“键盘不可达”，针对键盘不可操作的节点，在输出结果中将该节点标记为“键盘不可操作”。另一方面，检查所述鼠标可操作节点是否键盘可达或者是否键盘可操作，还可以是指对同一节点先检查是否键盘可达，或者先检查是否键盘可操作，然后再检查是否键盘可操作或者是否键盘可达。针对键盘不可达的节点，在输出结果中将该节点标记为“键盘不可达”，针对键盘不可操作的节点，在输出结果中将该节点标记为“键盘不可操作”。

另外，根据本公开的装置100还可以包括：中央处理单元(CPU)110，用于执行相关的程序，以处理各种数据并控制装置100中的各个单元的操作；只读存储器(ROM)112，用于存储CPU110进行各种处理和控制所需的各种程序；随机存取存储器(RAM)114，用于存储CPU110在处理和控制过程中临时产生的中间数据；输入输出(I/O)单元116，用于与外部设备之间发送和接收各种命令和数据等；以及存储单元109，用于非易失地存储各种程序和结果数据等。上述获取单元102、第一识别单元104、第二识别单元106、确定单元108、存储单元109、CPU110、ROM112、RAM114、I/O单元116等可以通过数据和/或命令总线120来连接，并相互之间传送信号。

上述各个单元不对本公开的范围构成限制。根据本公开的一个实施例，也可以通过与上述CPU110、ROM112、RAM114、I/O单元116等相结合的功能软件来实现上述获取单元102、第一识别单元104、第二识别单元106以及确定单元108中的任一单元的功能。

下面将详细描述根据本公开的装置100中的各个单元的具体操作。

获取单元102获取网页的结构树中的所有节点。这里，结构树可以是网页中的文档对象模型(DOM-DocumentObjectModel)结构树，其包括网页中的各种内容以及内容的名称、ID、属性等，并划分为多个节点。该DOM结构树由供应商提供，可以作为HTML编程接口。获取单元102解析DOM树，获取其中的所有节点，并将所有节点收集到列表中。这些节点可以包括鼠标可操作元素，例如文本输入、按钮、链接等中的任何一个，也可以包括鼠标不可操作元素，例如段落、文本消息、标签等中的任何一个。

第一识别单元104识别结构树的所有节点中的鼠标可操作节点。具体地，第一识别单元104在每个节点上模拟鼠标事件(将在稍后进行描述)，并在对每个节点模拟鼠标事件时监测网页状态是否改变、以及侦听结果。网页状态的改变包括DOM树结构改变、发送请求、或者打开新的浏览器窗口等中的任何一个。对于鼠标可操作节点，必然存在网页状态改变作为鼠标事件的结果。然后，标记该鼠标可操作节点。也就是说，第一识别单元104对所有节点中的各个节点模拟鼠标事件，判断网页状态是否改变，并将网页状态发生改变的节点识别为鼠标可操作节点。

第二识别单元106检查这些鼠标可操作节点是否是键盘可达的以及是否是键盘可操作的。具体地，根据本公开的一个实施例，针对某个鼠标可操作节点，第二识别单元106可以首先检查该节点是否是键盘可达的。第二识别单元106可以利用目前已知的识别网页上键盘不可达节点的方法，例如：触发<tab>键或<上>、<下>、<左>、<右>移动键来获得光标焦点，并通过光标焦点在鼠标可操作节点上是否有效来识别键盘不可达的节点；或者通过对各个节点的属性进行扫描，例如检查节点的“禁用(disable)”属性、或“tabindex”属性等，在鼠标可操作节点中识别键盘不可达节点。如果识别的结果是该节点是键盘不可达的，则第二识别单元106可以将该节点标记为“键盘不可达”，并输出被识别为键盘不可达的节点，作为第一结果。被识别为键盘不可达的这些节点是最终的结果集的子集。该子集中的节点可以被存储在例如存储单元109中。

第二识别单元106再对该节点判断是否是键盘可操作的。具体地，第二识别单元106在该鼠标可操作节点上模拟键盘事件(将在稍后进行描述)，并监视网页状态的改变。也就是说，第二识别单元106在鼠标可操作节点上模拟键盘事件，并判断在键盘事件中网页状态是否发生改变。如果在键盘事件中网页状态发生改变，则第二识别单元106将这种节点标记为符合节点(键盘可操作节点)。对于在键盘事件中网页状态不发生改变的节点，则将它们标记为“键盘不可操作”的节点。第二识别单元106可以输出被标记为“键盘不可操作”的节点，作为第二结果。这些节点也是最终的结果集的子集。该子集中的节点可以被存储在存储单元109中。

根据本公开的另一个实施例，第二识别单元106也可以对某一个节点先检查是否是键盘可操作的(具体方式如上所述)。当结果为该节点是键盘不可操作时，将该节点标记为“键盘不可操作”，并将该节点作为结果输出。然后，再对该节点进一步检查是否是键盘可达的。当进一步的检查结果是该节点是键盘不可达时，将该节点标记为“键盘不可达”，并作为结果输出。

对于同一节点的检查，包括关于是否键盘可达以及是否键盘可操作两者。

如前所述，也可以对同一节点同时检查是否键盘可达以及是否键盘可操作。在这种情况下，当该节点的检查结果既是键盘不可达，又是键盘不可操作时，可以将该节点标记为“键盘不可达”和“键盘不可操作”，并将具有该两个标记的该节点作为结果来输出。或者，其中仅有一个结果为否定，即该结果是键盘不可达，或者是键盘不可操作，则可以将该节点标记为“键盘不可达”或者“键盘不可操作”，并作为结果输出。

通过上述处理所获得的结果，即带有“键盘不可达”和/或“键盘不可操作”标记的节点，可以被生成为节点列表或者其它形式，存储在存储单元109中。存储在存储单元109中的这些节点，可以根据需要，通过I/O单元116等输出到外部设备，例如是显示设备、打印设备、或者扬声器等设备，来向用户通知该结果。通过上述处理所获得的带有“键盘不可达”和/或“键盘不可操作”标记的节点也可以不存储在存储单元109中，而直接通过I/O单元116等输出到例如显示设备、打印设备、或者扬声器等设备的外部设备，来向用户通知该结果。

对于鼠标事件和键盘事件的模拟，是指在DOM结构树的框架下，通过编程的方法构造出每个节点的鼠标事件和/或键盘事件，例如某个节点的onKeyPress，onMouseMove，onDoubleClick等事件，然后在DOM结构树的节点上分发(dispatch)、以及触发这个事件。如果该节点是鼠标可操作或者键盘可操作的，则响应于该事件的触发，相应的网页状态会发生改变，如上所述。由此，可以通过监视网页状态是否发生改变来识别DOM树的节点是否是鼠标可操作或者键盘可操作。

用于模拟鼠标点击一个节点对象的Javascript的一个具体代码例子如下所示：

functionsimulateClick(varnode){

varevt＝document.createEvent(″MouseEvents″)；

evt.initMouseEvent(″click″，true，true，window，

0，0，0，0，0，false，false，false，false，0，null)；

node.dispatchEvent(evt)；

}

确定单元108提取作为第一结果输出的键盘不可达的节点以及作为第二结果输出的在键盘事件中网页状态不发生改变的节点(键盘不可操作的节点)，并将这两个结果集组合在一起，作为键盘不可访问节点的识别结果的最终的结果集。

图2是示出根据本公开的第二实施例的识别网页上键盘不可访问节点的方法的流程图。

如图2所示，根据本公开的用于识别网页上键盘不可访问节点的方法包括如下步骤。在步骤S201，获取网页的结构树中的所有节点。在步骤S202，识别所有节点中的鼠标可操作节点。在步骤S203，检查所述鼠标可操作节点是否是键盘可达的以及是否键盘可操作。在步骤S204，提取键盘不可达的节点以及键盘不可操作的节点，作为所述键盘不可访问节点。

上述步骤S201可以通过图1中的获取单元102来实现，步骤S202可以通过图1中的第一识别单元104来实现，步骤S203可以通过图1中的第二识别单元106来实现，以及步骤S204可以通过图1中的确定单元108来实现。

图3是示出图2中的子步骤S202的方法的进一步的流程图。

如图3所示，识别所有节点中的鼠标可操作节点的步骤S202还包括以下步骤。在步骤S301，对所有节点中的各个节点模拟鼠标事件。在步骤S302，判断网页状态是否改变。当步骤S302中的判断结果为肯定的“是”时，进行到步骤S303。在步骤S303，将所述网页状态发生改变的节点识别为鼠标可操作节点。当步骤S302中的判断结果为否定的“否”时，返回到步骤S301，继续对下一个节点进行鼠标事件的模拟，直到对所有节点的识别结束为止。

上述步骤S301、S302以及S303可以通过图1中的第一识别单元104来实现。

图4是示出图2中的子步骤S203的方法的进一步的流程图。

如图4所示，对所述鼠标可操作节点模拟键盘事件的步骤还包括以下步骤。在步骤S401，对鼠标可操作节点模拟键盘事件。在步骤S402，判断在键盘事件中网页状态是否发生改变。当步骤S402中的判断结果为肯定的“是”时，进行到步骤S403，否则，进行到步骤S404。在步骤S403，将所述节点标记为键盘可操作节点。在步骤S404，将网页状态不发生改变的节点标记为键盘不可操作的节点。

上述步骤S401、S402、S403以及S404可以通过图1中的第二识别单元106来实现。

在本公开的上述方法中，网页状态的改变包括结构树改变、发送请求、打开新的浏览器窗口中的任何一个。在本公开的上述方法中，节点包括文本输入、按钮、链接、段落、文本消息、标记中的任何一个，并且所述鼠标可操作节点包括文本输入、按钮、链接中的任何一个。

由于本公开的节点是通过分析DOM树而获得的节点，所以键盘不可访问节点的输出列表中包括诸如节点类型、名称、id、属性等节点信息，这对于开发者在源码中定位元素并修复它们非常有用。

另外，根据本公开的装置和方法覆盖了所有鼠标可操作的元素，其不仅包括标准HTML鼠标可操作元素，还包括静态附有鼠标事件的、未被已有的信息无障碍分析工具支持的其它HTML元素。

本公开的实施例可以通过硬件、软件、固件或它们之间结合的方式来实现，其实现方式不对本公开的范围构成限制。例如，本公开可以通过在通用计算机系统中执行根据本公开的软件程序来完成。

本公开的实施例可以通过网页浏览器的插件，例如FireFox扩展或IE插件等来实现，从而使分析和操纵网页的DOM树大大简易化。

本公开的上述实施例仅为示例性描述，它们的具体结构和操作不对本公开的范围构成限制，本领域的技术人员可以将上述各个实施例中的不同部分和操作进行组合，产生新的实施方式，同样符合本公开的构思。

本公开的实施例中的各个功能元件(单元)相互之间的连接关系不对本公开的范围构成限制，其中的一个或多个功能元件或者单元可以包括或连接于其它任意的功能元件或者单元。

虽然上面已经结合附图示出并描述了本公开的一些实施例，但是本领域的技术人员应当理解，在不偏离本公开的原则和精神的情况下，可以对这些实施例进行变化和修改，但它们仍然落在本公开的权利要求及其等价物的范围之内。

Claims (14)

1.一种用于识别网页上键盘不可访问节点的方法，包括：

获取网页的结构树中的所有节点；

识别所有节点中的鼠标可操作节点；

检查所述鼠标可操作节点是否键盘可达以及是否键盘可操作；

提取键盘不可达的节点以及键盘不可操作的节点，作为所述键盘不可访问节点，

其中识别所有节点中的鼠标可操作节点的步骤还包括：

对所有节点中的各个节点模拟鼠标事件。

2.根据权利要求1所述的方法，其中识别所有节点中的鼠标可操作节点的步骤还包括：

判断网页状态是否改变；和

将网页状态发生改变的节点识别为鼠标可操作节点。

3.根据权利要求1所述的方法，其中检查鼠标可操作节点是否键盘可操作的步骤还包括：

对所述鼠标可操作节点模拟键盘事件；

判断网页状态是否发生改变；以及

将网页状态不发生改变的节点识别为键盘不可操作节点。

4.根据权利要求1所述的方法，还包括：

将键盘不可达的节点标记为“键盘不可达”，将键盘不可操作的节点标记为“键盘不可操作”。

5.根据权利要求2或3所述的方法，其中所述网页状态的改变包括结构树改变、发送请求、打开新的浏览器窗口中的任何一个。

6.根据权利要求1所述的方法，其中检查所述鼠标可操作节点是否键盘可达以及是否键盘可操作的步骤包括先检查是否键盘可达或者先检查是否键盘可操作。

7.根据权利要求1所述的方法，其中所述节点包括文本输入、按钮、链接、段落、文本消息、标记中的任何一个，并且所述鼠标可操作节点包括文本输入、按钮、链接中的任何一个。

8.一种用于识别网页上键盘不可访问节点的装置，包括：

获取单元，获取网页的结构树中的所有节点；

第一识别单元，识别所有节点中的鼠标可操作节点；

第二识别单元，检查所述鼠标可操作节点是否键盘可达以及是否键盘可操作；以及

确定单元，提取键盘不可达的节点以及键盘不可操作的节点，作为所述键盘不可访问节点，

其中第一识别单元被进一步配置为：

对所有节点中的各个节点模拟鼠标事件。

9.根据权利要求8所述的装置，其中所述第一识别单元将在鼠标事件中网页状态发生改变的节点识别为鼠标可操作节点。

10.根据权利要求8所述的装置，其中所述第二识别单元对所述鼠标可操作节点模拟键盘事件，并将在键盘事件中网页状态不发生改变的节点识别为键盘不可操作的节点。

11.根据权利要求8所述的装置，其中所述第二识别单元将键盘不可达的节点标记为“键盘不可达”，将键盘不可操作的节点标记为“键盘不可操作”。

12.根据权利要求9或11所述的装置，其中所述网页状态的改变包括结构树改变、发送请求、打开新的浏览器窗口中的任何一个。

13.根据权利要求8所述的装置，其中所述第二识别单元先检查是否键盘可达或者先检查是否键盘可操作。

14.根据权利要求8所述的装置，其中所述节点包括文本输入、按钮、链接、段落、文本消息、标记中的任何一个，并且所述鼠标可操作节点包括文本输入、按钮、链接中的任何一个。