CN101706786A

CN101706786A - 在浏览器/服务器中批量处理数据的方法及装置

Info

Publication number: CN101706786A
Application number: CN200910109781A
Authority: CN
Inventors: 杨忠
Original assignee: Shenzhen Clou Electronics Co Ltd
Current assignee: Shenzhen Clou Electronics Co Ltd
Priority date: 2009-11-20
Filing date: 2009-11-20
Publication date: 2010-05-12

Abstract

本发明涉及一种在浏览器/服务器中批量处理数据的方法，包括如下步骤：服务器接收浏览器发出的数据处理请求，将需要处理的数据分组；服务器开始处理所述分组的数据；未接收到中断信号，服务器处理完上述分组数据后执行下一步骤或接收到中断信号，服务器停止处理数据并执行下一步骤；服务器将处理后的数据返回浏览器。本发明还揭示了一种在浏览器/服务器中批量处理数据的装置。实施本发明的在浏览器/服务器中批量处理数据的方法及装置，具有以下有益效果：由于将请求的数据分批处理并将处理好的数据存储起来，在请求被中断时可以将已处理的数据返回到请求发起方。因此，其用户的操作更为方便、系统的效率得到提高。

Description

在浏览器/服务器中批量处理数据的方法及装置

技术领域

本发明涉及数据处理领域，更具体地说，涉及一种在浏览器/服务器中批量处理数据的方法及装置。

背景技术

在WEB系统的开发实施过程中，如果用户要进行一些大批量的数据查询或数据计算汇总，其操作总是较为固定，因为当处理大批量数据时，系统的效率及速度自然会变慢，而用户在界面上提交了请求后，只能长时间的等待处理结果返回；有时由于时间太久，用户不得不强制关掉窗口结束操作；有时还因为WEB请求长时间不能得到回应而引起WEB服务器的处理超时，从而使系统的友好性及效率大打折扣。如果用户自己中断上述请求，则得不到任何数据返回，白白浪费了时间。这样一种客户可以随时发起数据查询请求，也可以根据需要随时中断自己发起的数据处理请求，使客户看到已处理好的部分数据。从而使用户的操作更为方便、系统的效率得到提高。

发明内容

本发明要解决的技术问题在于，针对现有技术的上述操作较为不方便、效率不高的缺陷，提供一种操作方便、效率较高的在浏览器/服务器中批量处理数据的方法及装置。

本发明解决其技术问题所采用的技术方案是：构造一种在浏览器/服务器中批量处理数据的方法，包括如下步骤：

A)服务器接收浏览器发出的数据处理请求，将需要处理的数据分组；

B)服务器开始处理所述分组的数据；

C)未接收到中断信号，服务器处理完上述分组数据后执行步骤D)或接收到中断信号，服务器停止处理数据并执行步骤D)；

D)服务器将处理后的数据返回浏览器。

在本发明所述的数据处理方法中，所述步骤A)进一步包括服务器将所述需要处理的数据按照其来源、类型或数据量分为多个组。

在本发明所述的数据处理方法中，所述步骤B)包括如下步骤：

B1)取得并处理一个分组的数据；

B2)保存该组的已处理数据。

在本发明所述的数据处理方法中，所述步骤C)进一步包括：

C1)判断是否已处理完所有分组的数据，如是，执行步骤D)；如否，返回步骤B)。

在本发明所述的数据处理方法中，所述步骤C)进一步包括：

C1′)接收中断信号；

C2′)调用监测线程处理所述数据处理。

在本发明所述的数据处理方法中，所述步骤C2′)进一步包括如下步骤：

C21′)读取所述已处理的全部数据；

C22′)强制停止所述数据处理。

本发明还涉及一种在浏览器/服务器中批量处理数据的装置，包括用于接收数据处理请求的请求接收模块、用于将被处理的数据分为多个组的数据分组模块、用于处理上述每组数据的数据处理模块、用于存储已处理数据的数据存储模块以及用于传送所述已处理数据的数据传送模块。

在本发明所述的装置中，所述数据处理模块包括用于判断是否已处理完本次数据处理的全部分组数据的分组判断模块。

在本发明所述的装置中，所述数据处理模块还包括在接收到中断信号后调出并用于结束本次信号处理的监测子模块。

在本发明所述的装置中，所述监测子模块进一步包括用于读取已处理数据并将其传送的数据读取子模块和用于使得数据处理模块停止工作并退出的进程强制终止子模块。

实施本发明的在浏览器/服务器中批量处理数据的方法及装置，具有以下有益效果：由于将请求的数据分批处理并将处理好的数据存储起来，在请求被中断时可以将已处理的数据返回到请求发起方。因此，其用户的操作更为方便、系统的效率得到提高。

附图说明

图1是本发明在浏览器/服务器中批量处理数据的方法及装置实施例中方法流程图；

图2是所述实施例中装置结构示意图；

图3是所述实施例中各部分之间的相互关系示意图。

具体实施方式

下面将结合附图对本发明实施例作进一步说明。

如图1所示，在本发明浏览器/服务器中批量处理数据的方法及装置实施例中，该方法包括如下步骤：

步骤S11接受数据处理请求：在本步骤中，浏览器端产生一个数据处理请求，并将该请求发送到与其连接的服务器上，而服务器则接收该数据处理请求，开始由浏览器发起的本次数据处理。在本实施例中，该数据处理请求包括批量的数据查询或数据计算汇总，由于涉及数据量较大，这些数据处理需要较长的时间。

步骤S12数据分组：本步骤中，将涉及的数据分组，这是一个重要的步骤，如果没有将这些数据分组，则在数据处理过程中服务器不会将已处理的数据存储，这样，当强制中断数据处理时，不会有数据回传到浏览器端。因此，在本步骤中的分组是必要的。在本实施例中，服务器将需要处理的数据按照数据的来源将其分为多个组，在进行数据处理时，一次只处理其中一个组；当然，在其他实施例中，服务器也可以按照需要处理的数据的类型或数据量将其分组。

步骤S13处理分组数据：在本步骤中，服务器按照浏览器端的请求开始处理一个分组数据。例如，读取存储在一个文件夹内的数据或对一个名称的数据进行统计。

步骤S14存储已处理数据：在本步骤中，将一个已处理完毕的分组数据存储起来.这些数据存储在服务器中存储模块上的一个指定区域，该区域用于专门存储在数据处理过程中的中间结果.同时，该指定区域是在开始数据处理时专门划分出来的，不同于在数据处理过程中使用的临时存储器，因此，不会随着数据处理的强制中断而丢失数据.

步骤S15分组处理完成？在本步骤中，判断是否已经处理完在步骤S12中被分组的全部数据，如果已处理完全部分组，执行步骤S16；否则，返回步骤S13，开始处理下一个分组的数据。

步骤S16读取已处理数据：在本步骤中，将上述已经全部处理好的数据读取出来。值得一提的是，如果由步骤S15进入步骤S16，则读取的是完整的、已处理的数据；如果是由步骤S19跳转来的，则读取的数据并不是浏览器请求所要求处理的全部数据，而是其中的一部分，这部分数据是在接收到中断信号时已经处理好并存储起来的。

步骤S17发送已处理数据：在本步骤中，将上一步骤S16中取得的数据传送到浏览器端，浏览器端将这些数据显示出来，不管这些数据是完整的还是不完整的。

步骤S18接受中断信号：在本步骤中，浏览器端产生一个中断信号并发送到与其相连的服务器上，服务器接收到该中断信号。在一定意义上来讲，步骤S18和步骤S19与上述步骤S11-15是并行的，也就是说，当浏览器产生一个数据处理请求后，可能随时会产生一个中断信号，此时，虽然服务器正在处理上述数据处理请求，但是，同时可以接收上述中断信号，并及时终止该数据处理并将处理好的数据返回浏览器。不过，该中断信号产生的时间越晚，返回的数据就越多；该中断信号产生的时间越早，返回的数据就越少。

步骤S19调用监测线程，强制终止数据处理：在本步骤中，由于接收到中断信号，服务器调用监测线程，该监测线程检测数据处理的状态，强制中断线程，并跳转到步骤S16执行。

本实施例还揭示了一种浏览器/服务器中批量处理数据的装置，如图2所示，该装置包括用于接收数据处理请求的请求接收模块21、用于将被处理的数据分为多个组的数据分组模块22、用于处理上述每组数据的数据处理模块25、用于存储已处理数据的数据存储模块23以及用于传送所述已处理数据的数据传送模块24。在本实施例中，请求接收模块21接收由浏览器发出的数据处理请求，确定需要处理的数据及其处理的内容，数据分组模块22将上述需要处理的数据按照这些数据的某个特性分为多个组，在本实施例中是按数据所在的存储区域分组的；之后，数据处理模块25开始处理数据，包括取得数据等等，当然是按照上述分组逐一进行的；数据处理模块25处理完一组数据，就将其存储在数据存储模块23中，当所有数据组出来完成后，数据传送模块24将这些数据传送到浏览器，使其可以被显示出来。当然，上面的描述是较为粗略的，特别是数据处理上，实际上，上面的描述对数据处理过程中没有发生中断的过程而言的，当出现中断时，数据处理模块25的操作稍有不同。在本实施例中，就整体而言，数据处理和终端是并行的。

在本实施例中，数据处理模块25包括用于判断是否已处理完本次数据处理的全部分组数据的分组判断模块251.分组判断模块251在数据处理过程中用于判断已经处理过的数据组的数量，在没有中断发生的情况下，只有在处理完所有分组数据时，才会将处理后的数据传送给浏览器；当然，如果中断信号出现，则不再顾及未处理的数据组，只要将已处理并存储的数据读取并发送到浏览器即可.此外，数据处理模块25还包括在接收到中断信号后调出并用于结束本次信号处理的监测子模块.而监测子模块进一步包括用于读取已处理数据并将其传送的数据读取子模块252和用于使得数据处理模块停止工作并退出的进程强制终止子模块253.上述数据读取子模块252和强制终止子模块253构成上述监测子模块的主要部分.服务器在接收到中断信号后，通过上述监测子模块监测数据处理，在强制中断数据处理的基础上取得已处理的数据返回浏览器，避免中断后没有任何数据返回浏览器，从而提高了服务器的效率并方便了用户使用.

综上所述，在本实施例中，用户在浏览器端发起数据查询或数据计算等数据处理请求；服务器端收到数据处理请求后，启动相应的数据处理线程，在线程中调用数据处理方法，为了不影响数据处理速度，数据处理方法会分批处理数据，每一批处理好后放入相应结果集合中，如果客户端一直没有发起中断数据处理请求，则在数据全部处理完成后，线程自动结束，并返回处理完成的数据；客户在浏览器中提交中断数据处理查询并马上返回已处理好的数据的请求；服务器端收到中断请求后，启动监测线程，监测线程取得数据处理线程中已处理好的数据集合，并检测数据处理线程的状态，如果状态为未结束，则强制中断线程。返回从数据处理线程中取得的数据；客户端浏览器界面显示从数据处理线程或中断处理线程中得到的处理好的部分或全部数据。图3较为具体地描述了上述过程。

以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims

1.一种在浏览器/服务器中批量处理数据的方法，其特征在于，包括如下步骤：

B)服务器开始处理所述分组的数据；

D)服务器将处理后的数据返回浏览器。

2.根据权利要求1所述的批量处理数据的方法，其特征在于，所述步骤A)进一步包括服务器将所述需要处理的数据按照其来源、类型或数据量分为多个组。

3.根据权利要求2所述的批量处理数据的方法，其特征在于，所述步骤B)包括如下步骤：

B1)取得并处理一个分组的数据；

B2)保存该组的已处理数据。

4.根据权利要求3所述的批量处理数据的方法，其特征在于，所述步骤C)进一步包括：

5.根据权利要求4所述的批量处理数据的方法，其特征在于，所述步骤C)进一步包括：

C1′)接收中断信号；

C2′)调用监测线程处理所述数据处理。

6.根据权利要求5所述的批量处理数据的方法，其特征在于，所述步骤C2′)进一步包括如下步骤：

C21′)读取所述已处理的全部数据；

C22′)强制停止所述数据处理。

7.一种在浏览器/服务器中批量处理数据的装置，其特征在于，包括用于接收数据处理请求的请求接收模块、用于将被处理的数据分为多个组的数据分组模块、用于处理上述每组数据的数据处理模块、用于存储已处理数据的数据存储模块以及用于传送所述已处理数据的数据传送模块。

8.根据权利要求7所述的批量处理数据的装置，其特征在于，所述数据处理模块包括用于判断是否已处理完本次数据处理的全部分组数据的分组判断模块。

9.根据权利要求8所述的批量处理数据的装置，其特征在于，所述数据处理模块还包括在接收到中断信号后调出并用于结束本次信号处理的监测子模块。

10.根据权利要求9所述的批量处理数据的装置，其特征在于，所述监测子模块进一步包括用于读取已处理数据并将其传送的数据读取子模块和用于使得数据处理模块停止工作并退出的进程强制终止子模块。