CN103440257A - 一种数据访问处理的实现方法及系统 - Google Patents
一种数据访问处理的实现方法及系统 Download PDFInfo
- Publication number
- CN103440257A CN103440257A CN201310320001XA CN201310320001A CN103440257A CN 103440257 A CN103440257 A CN 103440257A CN 201310320001X A CN201310320001X A CN 201310320001XA CN 201310320001 A CN201310320001 A CN 201310320001A CN 103440257 A CN103440257 A CN 103440257A
- Authority
- CN
- China
- Prior art keywords
- data
- web page
- server
- page server
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Transfer Between Computers (AREA)
Abstract
本发明提供一种数据访问处理的实现方法及系统。上述方法包括以下步骤：网页服务器统计预设周期内每个时间间隔用户对不同数据的访问次数；网页服务器根据获取的每个时间间隔内用户对不同数据的访问次数及数据等级分类表，确定每个时间间隔内被访问数据的数据等级；策略控制服务器从网页服务器获取每个时间间隔内被访问数据的数据等级，并根据被访问数据的数据等级及数据提取策略确定需要提取的目标数据，策略控制服务器将需要提取的目标数据的信息发送至网页服务器，网页服务器从数据服务器提取目标数据；网页服务器将提取的目标数据封装成数据包，并根据用户的数据访问请求将数据包发送至用户。
Description
技术领域
本发明属于计算机技术，尤其涉及一种数据访问处理的实现方法及系统。
背景技术
在互联网应用中，通常需要对数据进行大量的访问。传统的数据访问的处理方法通常是直接从后台的数据服务器中拉取请求访问的数据。然而，当对某一数据的访问量很大时，会给后台的数据服务器造成巨大的压力。
发明内容
本发明提供一种数据访问处理的实现方法及系统，以解决上述问题。
本发明提供一种数据访问处理的实现方法。上述方法包括以下步骤：网页服务器统计预设周期内每个时间间隔用户对不同数据的访问次数；网页服务器根据获取的每个时间间隔内用户对不同数据的访问次数及数据等级分类表，确定每个时间间隔内被访问数据的数据等级；策略控制服务器从网页服务器获取每个时间间隔内被访问数据的数据等级，并根据被访问数据的数据等级及数据提取策略确定需要提取的目标数据，策略控制服务器将需要提取的目标数据的信息发送至网页服务器，网页服务器从数据服务器提取目标数据；网页服务器将提取的目标数据封装成数据包，并根据用户的数据访问请求将数据包发送至用户；若数据包中存在用户不需要的数据，则用户向策略控制服务器发送反馈信息，策略控制服务器接收反馈信息，并根据重封装策略确定是否通知网页服务器重新封装目标数据。
本发明还提供一种数据访问处理的实现系统，包括用户客户端、网页服务器、数据服务器以及策略控制服务器。网页服务器连接用户客户端、数据服务器以及策略控制服务器，策略控制服务器连接用户客户端。其中，网页服务器，用于统计预设周期内每个时间间隔用户对不同数据的访问次数。网页服务器，用于根据获取的每个时间间隔内用户对不同数据的访问次数及数据等级分类表，确定每个时间间隔内被访问数据的数据等级。策略控制服务器，用于从网页服务器获取每个时间间隔内被访问数据的数据等级，并根据被访问数据的数据等级及数据提取策略确定需要提取的目标数据，策略控制服务器将需要提取的目标数据的信息发送至网页服务器，网页服务器从数据服务器提取目标数据。网页服务器，用于将提取的目标数据封装成数据包，并根据用户的数据访问请求将所述数据包发送至所述用户。若数据包中存在用户不需要的数据，则用户向策略控制服务器发送反馈信息，策略控制服务器接收反馈信息，并根据重封装策略确定是否通知网页服务器重新封装目标数据。
相较于先前技术，根据本发明提供的数据访问处理的实现方法及系统，网页服务器根据获取的每个时间间隔内用户对不同数据的访问次数及数据等级分类表，确定每个时间间隔内被访问数据的数据等级，策略控制服务器根据从网页服务器获取的被访问数据的数据等级及数据提取策略确定需要提取的目标数据，并将需要提取的目标数据发送至网页服务器。此外，网页服务器将提取的目标数据封装成数据包，并根据用户的数据访问请求将数据包发送至用户。若数据包中存在用户不需要的数据，则用户向策略控制服务器发送反馈信息，策略控制服务器接收反馈信息，并根据重封装策略确定是否通知网页服务器重新封装目标数据。如此，通过策略控制服务器为目标数据的选择提供了有效的提取方式。而且，将目标数据缓存于网页服务器，如此，用户需要相应数据时，无需从数据服务器获取目标数据，可直接从网页服务器获取目标数据，从而有效减少了数据服务器的压力。另外，策略控制服务器根据用户的反馈信息控制网页服务器对目标数据进行重封装，从而有助于用户的个性化体验。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1所示为根据本发明的较佳实施例提供的数据访问处理的实现方法的流程图；
图2所示为根据本发明的较佳实施例提供的数据访问处理的实现系统的示意图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。
图1所示为根据本发明的较佳实施例提供的数据访问处理的实现方法的流程图。如图1所示，本发明的较佳实施例提供的数据访问处理的实现方法包括步骤101～105。
于步骤101，网页服务器统计预设周期内每个时间间隔用户对不同数据的访问次数。
于本实施例中，预设周期被划分为若干等份的时间间隔。举例而言，若预设周期为10秒，且预设周期例如被划分为5等份的时间间隔，则每个时间间隔为2秒。然而，本发明对此并不限定。于实际应用中，可根据实际需要对预设周期及时间间隔进行设置。
于此，网页服务器统计的预设周期（10秒）内每个时间间隔（2秒）内用户对不同数据的访问次数例如表1所示。
表1
于步骤102，所述网页服务器根据获取的每个时间间隔内用户对不同数据的访问次数及数据等级分类表，确定每个时间间隔内被访问数据的数据等级。
于本实施例中，网页服务器存储数据等级分类表。数据等级分类表包括每个时间间隔内被访问数据的访问次数与数据等级的对应关系。于此，数据等级分类表例如表2所示，然而，本发明对此并不限定。
| 数据等级 | 每个时间间隔内被访问数据的访问次数 |
| 重要 | 访问次数大于或等于10次 |
| 一般 | 访问次数小于10次 |
表2
于本实施例中，网页服务器根据表1及表2可确定每个时间间隔内被访问数据的数据等级（如表3所示）。
表3
于步骤103，策略控制服务器从所述网页服务器获取每个时间间隔内被访问数据的数据等级，并根据被访问数据的数据等级及数据提取策略确定需要提取的目标数据，所述策略控制服务器将需要提取的目标数据的信息发送至所述网页服务器，所述网页服务器从数据服务器提取所述目标数据。
于本实施例中，所述数据提取策略为：计算每个被访问数据在所述预设周期内的不同数据等级的比例，并根据因子对照表确定不同数据等级的比例对应的因子a、b，根据函数Y=ax2+bx及所述因子确定每个被访问数据所对应的函数的最小值，比较所有被访问数据对应的函数的最小值及预设值，选出大于所述预设值的被访问数据做为目标数据。
此外，策略控制服务器存储因子对照表，因子对照表包括相应数据等级的比例与因子的对照关系。于此，因子对照表例如表4所示，然而，本发明对此并不限定。于实际应用中，可根据实际需要进行设定。
| 数据等级的比例 | 因子 |
| 大于或等于60% | 1 |
| 大于或等于30%且小于60% | 0.8 |
| 小于30% | 0.6 |
表4
于此，以表3所示的被访问数据为例进行说明。策略控制服务器从网页服务器获取例如表3的数据信息。参照表3，具体而言，对于被访问数据A，在预设周期内数据等级为重要的次数为3次，数据等级为一般的次数为2次。由此可知，被访问数据A的数据等级为重要的比例=3/5=60%，数据等级为一般的比例=2/5=40%。对于被访问数据B，在预设周期内数据等级为重要的次数为1次，数据等级为一般的次数为4次，因此，被访问数据B的数据等级为重要的比例=1/5=20%，数据等级为一般的比例=4/5=80%。对于被访问数据C，在预设周期内数据等级为重要的次数为4次，数据等级为一般的次数为1次，因此，被访问数据C的数据等级为重要的比例=4/5=80%，数据等级为一般的比例=1/5=20%。
接着，参照表4可知，被访问数据A的数据等级为重要的比例为60%，对应的因子a=1，数据等级为一般的比例为40%，对应的因子b=0.8。于此，被访问数据A对应的函数Y=ax2+bx=x2+0.8x=（x+0.4）2-0.16。即，被访问数据A对应的函数的最小值Y1=-0.16。被访问数据B的数据等级为重要的比例为20%，对应的因子a=0.6，数据等级为一般的比例为80%，对应的因子b=1，因此，被访问数据B对应的函数Y=ax2+bx=0.6x2+x=0.6（x+5/6）2-5/12。即，被访问数据B对应的函数的最小值Y2=-5/12。被访问数据C的数据等级为重要的比例为80%，对应的因子a=1，数据等级为一般的比例为20%，对应的因子b=0.6，因此，被访问数据C对应的函数Y=ax2+bx=x2+0.6x=0.6（x+0.3）2-0.09。即，被访问数据C对应的函数的最小值Y3=-0.09。于此，预设值例如为-0.2，则比较所有被访问数据对应的函数的最小值（于此，即Y1、Y2及Y3）与预设值（即，-0.2），选出大于预设值的函数最小值（即，Y1及Y3），即可确定目标数据为：被访问数据A及被访问数据C。于此，预设值的设置可根据需要进行设定，然而，本发明对此并不限定。
于本实施例中，策略控制服务器确定需要提取的目标数据为被访问数据A及被访问数据C后，将所述信息发送至网页服务器，网页服务器再从数据服务器提取被访问数据A及被访问数据C。
于步骤104，所述网页服务器将提取的目标数据封装成数据包，并根据用户的数据访问请求将所述数据包发送至所述用户。
仍以步骤103的例子描述，网页服务器将提取的目标数据（即被访问数据A和被访问数据C）封装成数据包后进行保存。用户于需要数据访问时向网页服务器发送数据访问请求，当网页服务器接收到用户的数据访问请求时，若请求的数据包含在网页服务器存储的数据包中，则网页服务器将数据包发送至该用户。
于步骤105，若所述数据包中存在所述用户不需要的数据，则所述用户向策略控制服务器发送反馈信息，所述策略控制服务器接收所述反馈信息，并根据重封装策略确定是否通知所述网页服务器重新封装目标数据。
于本实施例中，重封装策略为：在修正周期内，若所述策略控制服务器收到的携带特定目标数据信息的反馈信息次数大于预设次数，则所述策略控制服务器向所述网页服务器发送重封装指令，所述网页服务器根据所述重封装指令，重新封装相应的目标数据。
于本实施例中，若数据包中存在用户不需要的数据，则该用户向策略控制服务器发送反馈信息。其中，反馈信息携带了用户不需要的特定目标数据信息。于此，仍以步骤104中的数据包（包括被访问数据A及被访问数据C）为例进行说明。若用户不需要被访问数据A，则用户向策略控制服务器发送的反馈信息中携带了被访问数据A的信息。若在修正周期内，策略控制服务器接收到的反馈信息次数（例如，3次）大于预设次数（例如，2次），则策略控制服务器向网页服务器发送重封装指令，网页服务器根据重封装指令重新封装相应的目标数据。于此，由于用户不需要被访问数据A，因此，网页服务器接收重封装指令后，会重新封装被访问数据C形成数据包。
图2所示为根据本发明的较佳实施例提供的数据访问处理的实现系统的示意图。如图2所示，本发明的较佳实施例提供的数据访问处理的实现系统包括用户客户端10、网页服务器12、数据服务器14以及策略控制服务器16。网页服务器12连接用户客户端10、数据服务器14以及策略控制服务器16，策略控制服务器16连接用户客户端10。
于本实施例中，网页服务器12，用于统计预设周期内每个时间间隔用户对不同数据的访问次数。网页服务器12，用于根据获取的每个时间间隔内用户对不同数据的访问次数及数据等级分类表，确定每个时间间隔内被访问数据的数据等级。策略控制服务器16，用于从网页服务器12获取每个时间间隔内被访问数据的数据等级，并根据被访问数据的数据等级及数据提取策略确定需要提取的目标数据，策略控制服务器16将需要提取的目标数据的信息发送至网页服务器12，网页服务器12从数据服务器14提取目标数据。网页服务器12，用于将提取的目标数据封装成数据包，并根据用户的数据访问请求将数据包发送至用户。若数据包中存在用户不需要的数据，则用户通过用户客户端10向策略控制服务器16发送反馈信息，策略控制服务器16接收反馈信息，并根据重封装策略确定是否通知网页服务器12重新封装目标数据。关于上述系统的具体操作过程同上述方法所述，故于此不再赘述。
综上所述，根据本发明较佳实施例提供的数据访问处理的实现方法及系统，网页服务器根据获取的每个时间间隔内用户对不同数据的访问次数及数据等级分类表，确定每个时间间隔内被访问数据的数据等级，策略控制服务器根据从网页服务器获取的被访问数据的数据等级及数据提取策略确定需要提取的目标数据，并将需要提取的目标数据发送至网页服务器。此外，网页服务器将提取的目标数据封装成数据包，并根据用户的数据访问请求将数据包发送至用户。若数据包中存在用户不需要的数据，则用户向策略控制服务器发送反馈信息，策略控制服务器接收反馈信息，并根据重封装策略确定是否通知网页服务器重新封装目标数据。如此，通过策略控制服务器为目标数据的选择提供了有效的提取方式。而且，将目标数据缓存于网页服务器，如此，用户需要相应数据时，无需从数据服务器获取目标数据，可直接从网页服务器获取目标数据，从而有效减少了数据服务器的压力。另外，策略控制服务器根据用户的反馈信息控制网页服务器对目标数据进行重封装，从而有助于用户的个性化体验。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (10)
1.一种数据访问处理的实现方法，其特征在于，包括以下步骤：
网页服务器统计预设周期内每个时间间隔用户对不同数据的访问次数；
所述网页服务器根据获取的每个时间间隔内用户对不同数据的访问次数及数据等级分类表，确定每个时间间隔内被访问数据的数据等级；
策略控制服务器从所述网页服务器获取每个时间间隔内被访问数据的数据等级，并根据被访问数据的数据等级及数据提取策略确定需要提取的目标数据，所述策略控制服务器将需要提取的目标数据的信息发送至所述网页服务器，所述网页服务器从数据服务器提取所述目标数据；
所述网页服务器将提取的目标数据封装成数据包，并根据用户的数据访问请求将所述数据包发送至所述用户；
若所述数据包中存在所述用户不需要的数据，则所述用户向策略控制服务器发送反馈信息，所述策略控制服务器接收所述反馈信息，并根据重封装策略确定是否通知所述网页服务器重新封装目标数据。
2.根据权利要求1所述的方法，其特征在于，所述数据提取策略为：计算每个被访问数据在所述预设周期内的不同数据等级的比例，并根据因子对照表确定不同数据等级的比例对应的因子a、b，根据函数Y=ax2+bx及所述因子确定每个被访问数据所对应的函数的最小值，比较所有被访问数据对应的函数的最小值及预设值，选出大于所述预设值的被访问数据做为目标数据。
3.根据权利要求1所述的方法，其特征在于，所述预设周期被划分为若干等份的时间间隔。
4.根据权利要求1所述的方法，其特征在于，所述网页服务器存储所述数据等级分类表，所述数据等级分类表包括每个时间间隔内被访问数据的访问次数与数据等级的对应关系。
5.根据权利要求1所述的方法，其特征在于，当所述网页服务器收到用户的数据访问请求后，若所述用户请求的数据包含在所述数据包中，则所述网页服务器将所述数据包发送至所述用户。
6.根据权利要求1所述的方法，其特征在于，所述重封装策略为：在修正周期内，若所述策略控制服务器收到的携带特定目标数据信息的反馈信息次数大于预设次数，则所述策略控制服务器向所述网页服务器发送重封装指令，所述网页服务器根据所述重封装指令，重新封装相应的目标数据。
7.根据权利要求1或6所述的方法，其特征在于，所述反馈信息携带了用户不需要的特定目标数据信息。
8.一种数据访问处理的实现系统，其特征在于，包括用户客户端、网页服务器、数据服务器以及策略控制服务器，所述网页服务器连接所述用户客户端、所述数据服务器以及所述策略控制服务器，所述策略控制服务器连接所述用户客户端，
其中，所述网页服务器，用于统计预设周期内每个时间间隔用户对不同数据的访问次数，
所述网页服务器，用于根据获取的每个时间间隔内用户对不同数据的访问次数及数据等级分类表，确定每个时间间隔内被访问数据的数据等级，
所述策略控制服务器，用于从所述网页服务器获取每个时间间隔内被访问数据的数据等级，并根据被访问数据的数据等级及数据提取策略确定需要提取的目标数据，所述策略控制服务器将需要提取的目标数据的信息发送至所述网页服务器，所述网页服务器从所述数据服务器提取所述目标数据，
所述网页服务器，用于将提取的目标数据封装成数据包，并根据用户的数据访问请求将所述数据包发送至所述用户，
若所述数据包中存在所述用户不需要的数据，则所述用户向策略控制服务器发送反馈信息，所述策略控制服务器接收所述反馈信息，并根据重封装策略确定是否通知所述网页服务器重新封装目标数据。
9.根据权利要求8所述的系统，其特征在于，所述数据提取策略为：计算每个被访问数据在所述预设周期内的不同数据等级的比例，并根据因子对照表确定不同数据等级的比例对应的因子a、b，根据函数Y=ax2+bx及所述因子确定每个被访问数据所对应的函数的最小值，比较所有被访问数据对应的函数的最小值及预设值，选出大于所述预设值的被访问数据做为目标数据。
10.根据权利要求8所述的系统，其特征在于，所述重封装策略为：在修正周期内，若所述策略控制服务器收到的携带特定目标数据信息的反馈信息次数大于预设次数，则所述策略控制服务器向所述网页服务器发送重封装指令，所述网页服务器根据所述重封装指令，重新封装相应的目标数据。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310320001XA CN103440257A (zh) | 2013-07-26 | 2013-07-26 | 一种数据访问处理的实现方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310320001XA CN103440257A (zh) | 2013-07-26 | 2013-07-26 | 一种数据访问处理的实现方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN103440257A true CN103440257A (zh) | 2013-12-11 |
Family
ID=49693948
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310320001XA Pending CN103440257A (zh) | 2013-07-26 | 2013-07-26 | 一种数据访问处理的实现方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103440257A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106611010A (zh) * | 2015-10-26 | 2017-05-03 | 北京国双科技有限公司 | 网页加载速度的确定方法和装置 |
| CN111193698A (zh) * | 2019-08-22 | 2020-05-22 | 腾讯科技（深圳）有限公司 | 数据处理方法、装置、终端及存储介质 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102761861A (zh) * | 2011-04-27 | 2012-10-31 | 中国移动通信集团广东有限公司 | 信息的更新方法、服务器以及信息的更新系统 |
| CN103177005A (zh) * | 2011-12-21 | 2013-06-26 | 深圳市腾讯计算机系统有限公司 | 一种数据访问的处理方法和系统 |
-
2013
- 2013-07-26 CN CN201310320001XA patent/CN103440257A/zh active Pending
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102761861A (zh) * | 2011-04-27 | 2012-10-31 | 中国移动通信集团广东有限公司 | 信息的更新方法、服务器以及信息的更新系统 |
| CN103177005A (zh) * | 2011-12-21 | 2013-06-26 | 深圳市腾讯计算机系统有限公司 | 一种数据访问的处理方法和系统 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106611010A (zh) * | 2015-10-26 | 2017-05-03 | 北京国双科技有限公司 | 网页加载速度的确定方法和装置 |
| CN106611010B (zh) * | 2015-10-26 | 2020-02-07 | 北京国双科技有限公司 | 网页加载速度的确定方法和装置 |
| CN111193698A (zh) * | 2019-08-22 | 2020-05-22 | 腾讯科技（深圳）有限公司 | 数据处理方法、装置、终端及存储介质 |
| CN111193698B (zh) * | 2019-08-22 | 2021-09-28 | 腾讯科技（深圳）有限公司 | 数据处理方法、装置、终端及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109863527B (zh) | 用于展现的本地内容的服务器侧渲染的方法和系统 | |
| CN103457929A (zh) | 一种数据访问处理方法及系统 | |
| CN102662993A (zh) | 一种页面数据提供方法 | |
| CN103488732A (zh) | 一种静态页面生成方法及装置 | |
| CN102170479A (zh) | Web缓存的更新方法及Web缓存的更新装置 | |
| CN103763209A (zh) | 一种cdn服务器的调度方法与装置 | |
| CN104809116A (zh) | 一种收藏内容的方法、装置及终端 | |
| CN108112038B (zh) | 一种控制访问流量的方法及装置 | |
| CN107729137A (zh) | 服务器、区块链验签解密的方法及存储介质 | |
| CN108023867A (zh) | 移动端网页广告过滤的方法、网关服务器及过滤服务器 | |
| CN107707404A (zh) | 网站在线人数统计方法、装置和网站服务器 | |
| CN110249324B (zh) | 在多个网页上维护会话标识符以进行内容选择 | |
| CN103530314A (zh) | 一种实现数据处理的方法及系统 | |
| CN103761257A (zh) | 基于移动浏览器的网页处理方法及系统 | |
| CN108984641A (zh) | 一种基于web端的页面跳转方法 | |
| CN103440257A (zh) | 一种数据访问处理的实现方法及系统 | |
| CN105069074A (zh) | 策略配置文件处理方法、装置和系统 | |
| CN103093377A (zh) | 一种广告投放方法和系统 | |
| CN103455549A (zh) | 一种数据处理的方法及系统 | |
| CN107766322A (zh) | 同名实体识别方法、电子设备及计算机可读存储介质 | |
| US9471552B1 (en) | Optimization of scripting for web applications | |
| CN102289479A (zh) | 一种确定图像展现方式并展现图像的方法、装置和设备 | |
| US9805177B1 (en) | Processing large data sets from heterogeneous data sources using federated computing resources | |
| US20130185793A1 (en) | Apparatus and Method for Tracking Network Path | |
| CN108093096B (zh) | 服务端的访问链接的升级方法、服务器及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20131211 |