CN101282342A - 一种网络内容拉取方法与系统 - Google Patents

一种网络内容拉取方法与系统 Download PDF

Info

Publication number
CN101282342A
CN101282342A CN200810098354.9A CN200810098354A CN101282342A CN 101282342 A CN101282342 A CN 101282342A CN 200810098354 A CN200810098354 A CN 200810098354A CN 101282342 A CN101282342 A CN 101282342A
Authority
CN
China
Prior art keywords
priority
network
user
content
group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200810098354.9A
Other languages
English (en)
Other versions
CN101282342B (zh
Inventor
陈元强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN200810098354.9A priority Critical patent/CN101282342B/zh
Publication of CN101282342A publication Critical patent/CN101282342A/zh
Priority to PCT/CN2009/071471 priority patent/WO2009143733A1/zh
Priority to US12/816,877 priority patent/US20100257201A1/en
Application granted granted Critical
Publication of CN101282342B publication Critical patent/CN101282342B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/564Enhancement of application control based on intercepted application data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/61Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources taking into account QoS or priority requirements

Abstract

本发明实施例公开了一种网络内容拉取方法与系统。该方法包括:记录网络用户的操作信息,根据网络用户的操作信息设置所述网络用户的网络业务优先级、和/或用户分组优先级,生成与所述优先级对应的内容拉取策略并存储;需要为网络用户拉取网络内容时,获取与该网络用户的优先级对应的内容拉取策略,根据所述内容拉取策略拉取网络内容。该系统包括操作信息数据库、优先级生成器、内容拉取策略生成器和网络内容拉取代理。应用本发明可提高用户体验。

Description

一种网络内容拉取方法与系统
技术领域
本发明涉及互联网领域,尤其涉及一种网络内容拉取方法与系统。
背景技术
互联网服务提供商在为互联网用户提供服务时,需要互联网用户侧的浏览器等上网软件从互联网服务器中拉取相应的网络内容,例如,当互联网用户通过浏览器打开某个网站时,该互联网用户所在客户端需要从该网站的服务器上拉取相应的网络内容,将该网络内容显示或输出给网络用户,实现对该网络用户的网络服务。
现有的网络内容拉取方法为:针对所有互联网用户,使用统一的网络内容拉取规则拉取网络内容。
采用这种网络内容拉取方法存在的问题是:
1、从互联网用户角度讲,每个互联网用户关注的网络业务不同,采用这种统一的拉取规则拉取网络内容时,存在某些互联网用户先得到自己并不关注的网络服务,而非自己真正关注的网络业务服务的情况,用户体验不高。
2、从互联网服务提供商角度讲,由于需为海量的互联网用户提供服务,所有互联网用户采用相同的规则拉取网络内容时,无法为网络用户提供个性化服务,影响用户体验。
发明内容
有鉴于此,本发明实施例的目的在于提供一种网络内容拉取方法与系统,以提高用户体验。
为达到上述目的,本发明实施例的技术方案具体是这样实现的:
一种网络内容拉取方法,该方法包括步骤:
记录网络用户的操作信息,根据网络用户的操作信息设置所述网络用户的网络业务优先级、和/或用户分组优先级,生成与所述优先级对应的内容拉取策略并存储;
需要为网络用户拉取网络内容时,获取与该网络用户的优先级对应的内容拉取策略,根据所述内容拉取策略拉取网络内容。
一种网络内容拉取系统,该系统包括操作信息数据库、优先级生成器、内容拉取策略生成器和网络内容拉取代理;
所述操作信息数据库用于,记录网络用户的操作信息;
所述优先级生成器用于,根据所述操作信息数据库中的操作信息设置网络用户的网络业务优先级、和/或用户分组优先级;
所述内容拉取策略生成器用于,生成与所述优先级生成器中的优先级对应的内容拉取策略并存储;
所述网络内容拉取代理用于,需要为网络用户拉取网络内容时,获取与该网络用户的优先级对应的内容拉取策略,根据所述内容拉取策略拉取网络内容。
可见,本发明实施例中,根据网络用户的操作信息为所述网络用户设置网络业务优先级、和/或用户分组优先级,生成与所述优先级对应的内容拉取策略,根据该内容拉取策略为所述网络用户拉取网络内容。
从互联网用户角度讲,由于这些内容拉取策略以该网络用户以往的操作信息为依据,从而可以体现该网络用户对各种网络业务的关注程度,这样,针对不同的网络用户采用不同的内容拉取策略时,可使网络用户先得到自己关注的网络服务,提高用户体验。
从互联网服务提供商角度讲,当为海量的互联网用户提供服务时,由于不同互联网用户的内容拉取策略一般不同,因此,可为网络用户提供个性化服务,提高用户体验。
附图说明
图1是网络内容拉取方法的流程图;
图2是本发明方法实施例提供的网络内容拉取方法流程图;
图3是本发明装置实施例提供的网络内容拉取系统结构图;
图4是优先级生成器302的结构图
图5是优先级缓存305的结构图;
图6是用户分组优先级容器3052和网络业务优先级容器3053的存储结构示意图;
图7是内容拉取策略生成器303的结构图;
图8是内容拉取策略缓存306的结构图;
图9是网络内容拉取代理304的结构图;
图10是用户分组检测代理309的结构图。
具体实施方式
本发明实施例中,根据网络用户的操作信息为网络用户设置优先级,根据该优先级生成内容拉取策略,需要为网络用户拉取网络内容时,根据该网络用户的内容拉取策略拉取网络内容。
图1是网络内容拉取方法的流程图,如图1所示,该方法具体包括如下步骤:
步骤101,记录网络用户的操作信息。
步骤102,根据网络用户的操作信息设置所述网络用户的网络业务优先级、和/或用户分组优先级。
步骤103,生成与所述优先级对应的内容拉取策略并存储。
步骤104,需要为网络用户拉取网络内容时,获取与该网络用户的优先级对应的内容拉取策略,根据所述内容拉取策略拉取网络内容。
为使本发明的目的、技术方案及优点更加清楚明白,以下参照附图并举实施例,对本发明进一步详细说明。
方法实施例
本实施例中,根据记录的网络用户操作信息对网络用户分组,设置每组用户的网络业务优先级和用户分组优先级,生成与所述优先级对应的内容拉取策略,在需要拉取网络内容时,根据网络用户所在用户组对应的内容拉取策略拉取网络内容,下面对这种方法予以详细说明,具体请参见图2。
图2是本发明方法实施例提供的网络内容拉取方法流程图,如图2所示,该方法具体包括如下步骤:
步骤201,记录网络用户的操作信息,存入操作信息数据库。
本步骤中,将网络用户的操作信息与该网络用户的身份标识(ID)对应存储至操作信息数据库。
步骤202,从操作信息数据库中读取网络用户的操作信息,根据该操作信息对网络用户分组,建立网络用户ID与组ID的对应关系。
本步骤中,可定时或根据读取指示,从操作信息数据库中读取网络用户ID及对应的操作信息,存至缓存,再根据该缓存中的操作信息,对网络用户分组,建立网络用户ID与组ID的对应关系,以加快分组速度;也可以直接从操作信息数据库中读取网络用户ID及对应的操作信息,对网络用户分组,建立网络用户ID与组ID的对应关系。一个网络用户可以只属于一个网络用户组,也可属于两个以上(含两个)网络用户组。
步骤203,根据每组用户的操作信息,设置每组用户的网络业务优先级和用户分组优先级。
用户的操作信息可以反映用户对各种网络业务的关注程度,例如,用户对关注程度较高的网络业务的使用次数较多、持续时间较长,根据这些操作信息即可将关注程度较高的网络业务设为较高的优先级。
用户的操作信息也可以反映用户类别的不同,例如,用户的业务付费操作表明该用户为缴费用户,而非免费用户,根据这一操作信息,也可为缴费用户设置较高的优先级。
步骤204,将网络用户身份标识ID与组ID的对应关系存储至用户分组数据库和用户分组缓存,将网络用户组ID与该组网络用户的网络业务优先级和用户分组优先级对应存储至优先级缓存。
本步骤中,将网络用户身份标识ID与组ID的对应关系存储至用户分组数据库后,还需进一步将该对应关系存储至用户分组缓存,以提高查找网络用户在哪一网络用户组的速度。将网络用户组ID与该组网络用户的网络业务优先级和用户分组优先级对应存储至优先级缓存之前,也可先将网络用户组ID与该组网络用户的网络业务优先级和用户分组优先级的对应关系存储至优先级数据库,以长期保存该对应关系。
本步骤中,可以对应网络用户组ID,存储该组网络用户的用户分组优先级和网络业务优先级,这时,可以通过组ID查找到该组网络用户的用户分组优先级和网络业务优先级;还可以对应网络用户组ID,存储该组网络用户的用户分组类别和用户分组优先级,这时,可以通过组ID查找到该组网络用户的用户分组类别和用户分组优先级;还可以对应网络用户组ID,存储该组网络用户的网络业务类别和网络业务优先级,这时,可以通过组ID查找到该组网络用户的网络业务类别和网络业务优先级。
本步骤中,还可以在优先级缓存中存储网络用户ID与网络用户组ID的对应关系,以查找某一网络用户属于哪一网络用户组。
步骤205,从优先级缓存中读取网络用户组ID及对应的优先级信息,根据该优先级信息生成该组网络用户的内容拉取策略。
在内容拉取策略中可指定先拉取具有较高优先级的网络业务对应的网络内容,也可指定先为具有较高优先级的用户拉取网络内容。
每一优先级对应何种内容拉取策略还可依据网络服务提供商的策略而定,例如,对应缴费的网络用户(用户优先级较高),如果该网络用户写日志的操作较多(写日志这一网络业务具有较高的优先级),可指定该网络用户的拉取服务器IP地址为某一网络带宽较高、且日志资源丰富的服务器的IP地址。
步骤206,将网络用户组ID与该组网络用户的内容拉取策略对应存储至内容拉取策略缓存。
将网络用户组ID与该组网络用户的内容拉取策略的对应关系存储至内容拉取策略缓存之前,还可以将该对应关系存储至内容拉取策略数据库,以长期保存该对应关系。
步骤207,网络用户所在客户端需要为网络用户拉取网络内容时,查询用户分组缓存,获取该网络用户所在网络用户组的组ID,根据所述组ID从内容拉取策略缓存中读取该组ID对应的内容拉取策略。
步骤208,网络用户所在客户端根据该内容拉取策略拉取网络内容。
本步骤中,先根据内容拉取策略生成拉取规则,然后按照该拉取规则拉取网络内容。其中,内容拉取策略可指明需要拉取的网络内容的编号、顺序等,拉取规则可指明拉取网络内容的具体网络地址、操作步骤等,拉取规则可以由一个拉取策略生成,也可以由两个以上(含两个)的拉取策略组合生成。
在该方法实施例中,若优先级缓存中的优先级信息需要更新,则确定需要更新的优先级信息对应的网络用户组ID,查询网络用户ID与网络用户组ID的对应关系,按照步骤202的方法对该组网络用户重新分组,按照步骤203的方法设置网络业务优先级和用户分组优先级,按照步骤204的方法存储重新分组的结果和优先级设置结果。
其中,有以下情况需要更新优先级信息:若为优先级缓存中的优先级信息设置有效期,则在优先级信息过期时,该过期的优先级信息需要更新;优先级缓存也可接收优先级更新指示,对该指示中指定的优先级信息进行更新,或对该指示中指定的网络用户组ID对应的优先级信息进行更新。
在该方法实施例中,若内容拉取策略缓存中的内容拉取策略需要更新,则确定需要更新的内容拉取策略对应的网络用户组ID,按照步骤205的方法,从优先级缓存中读取网络用户组ID及对应的优先级信息,根据该优先级信息生成该组网络用户的内容拉取策略,按照步骤206的方法,将网络用户组ID与该组网络用户的内容拉取策略对应存储至内容拉取策略缓存。
其中,有以下情况需要更新内容拉取策略:若为内容拉取策略缓存中的内容拉取策略设置有效期,则在内容拉取策略过期时,该过期的内容拉取策略需要更新;内容拉取策略缓存也可接收内容拉取策略更新指示,对该指示中指定的内容拉取策略进行更新,或对该指示中指定的网络用户组ID对应的内容拉取策略进行更新。
在该方法实施例中,步骤203也可只设置每组用户的网络业务优先级,或者只设置每组用户的用户分组优先级。
当设置网络业务优先级时,可使网络用户先得到自己关注的网络业务服务,提高用户体验。
当设置用户分组优先级时,对不同的用户组采用不同的拉取策略,可为网络用户提供个性化服务,提高用户体验。
下面给出对应上述方法实施例的系统实施例。
图3是本发明系统实施例提供的网络内容拉取系统结构图,如图3所示,该系统包括操作信息数据库301、优先级生成器302、内容拉取策略生成器303和网络内容拉取代理304。
操作信息数据库301用于,记录网络用户的操作信息。
优先级生成器302用于,根据操作信息数据库301中的操作信息设置网络用户的网络业务优先级、和/或用户分组优先级。
内容拉取策略生成器303用于,生成与优先级生成器302中的优先级对应的内容拉取策略并存储。
网络内容拉取代理304用于,需要为网络用户拉取网络内容时,获取与该网络用户的优先级对应的内容拉取策略,根据所述内容拉取策略拉取网络内容。
该系统还可以进一步包括优先级缓存305、内容拉取策略缓存306、用户分组数据库307、用户分组缓存308和用户分组检测代理309,这时:
优先级生成器302用于,根据操作信息数据库301中的操作信息对网络用户分组,建立网络用户ID与组ID的对应关系,设置每组用户的网络业务优先级、和/或用户分组优先级,将网络用户ID与组ID的对应关系存储至用户分组数据库307,将设置的优先级信息与对应的组ID发给优先级缓存305,其中,优先级信息与对应的组ID也可先存至优先级数据库,然后再缓存至优先级缓存305。
用户分组数据库307用于,存储网络用户ID与组ID的对应关系。
用户分组缓存308用于,缓存用户分组数据库307中的对应关系。
优先级缓存305用于,对应存储组ID与该组网络用户的优先级信息。
内容拉取策略生成器303用于,从优先级缓存305中读取组ID及对应的优先级信息,根据该优先级信息生成对应的内容拉取策略,将所述组ID与所述内容拉取策略发给内容拉取策略缓存306。也可先将所述组ID与所述内容拉取策略存储至内容拉取策略数据库,然后再将所述组ID与所述内容拉取策略缓存至内容拉取策略缓存306。
内容拉取策略缓存306用于,对应地存储组ID与该组网络用户的内容拉取策略。
网络内容拉取代理304用于,根据网络用户的网络内容拉取请求,向用户分组检测代理309发送携带有网络用户ID的查询请求,根据用户分组检测代理309返回的内容拉取策略拉取网络内容。
用户分组检测代理309用于,收到网络内容拉取代理304发来的查询请求后,根据该查询请求携带的网络用户ID查询用户分组缓存308,获取所述网络用户ID对应的组ID,查询内容拉取策略缓存306,将所述组ID对应的内容拉取策略返回给网络内容拉取代理304。
优先级缓存305可以包括分组信息容器、网络业务优先级容器和用户分组优先级容器。
分组信息容器用于,对应组ID存储该组网络用户的用户分组优先级和网络业务优先级。
网络业务优先级容器用于,对应组ID存储该组网络用户的用户分组类别和用户分组优先级。
用户分组优先级容器用于,对应组ID存储该组网络用户的网络业务类别和网络业务优先级。
优先级缓存305还可进一步用于,收到优先级更新指示或者存储的优先级过期后,将该更新指示对应的组ID或者该过期的优先级对应的组ID,以及优先级生成指示发给优先级生成器302,根据优先级生成器302发来的优先级设置结果,对应存储组ID与该组网络用户的优先级信息。
相应地,优先级生成器302进一步用于,收到优先级生成指示后,根据操作信息数据库301中的操作信息,为收到的组ID标识的该组用户重新分组,并设置网络业务优先级、和/或用户分组优先级,将重新分组结果存储至用户分组数据库307,将优先级设置的结果发给优先级缓存305。
内容拉取策略缓存306还可进一步用于,收到内容拉取策略更新指示或者存储的内容拉取策略过期后,将该更新指示对应的组ID或者该过期的内容拉取策略对应的组ID,以及内容拉取策略生成指示发给内容拉取策略生成器303,收到内容拉取策略生成器303返回的内容拉取策略后,对应存储所述组ID和所述内容拉取策略。
相应地,内容拉取策略生成器303进一步用于,收到内容拉取策略生成指示后,根据收到的组ID从优先级缓存305中读取对应的优先级信息,根据该优先级信息生成对应的内容拉取策略,将该内容拉取策略发给内容拉取策略缓存306。
优先级生成器302还可进一步用于,定时从所述操作信息数据库中读取网络用户的操作信息,根据所述操作信息设置所述网络用户的网络业务优先级和/或用户分组优先级。
下面对图3所示系统的各组成部分分别举实施例予以说明。
表一是操作信息数据库301的存储结构。由表一可见,在操作信息数据库301中,对应用户ID、存储了该用户的行为操作类型、以及记录该行为操作类型的时间。
  字段   名称   意义
  userid varchar(20)   用户ID   记录用户ID
  op_type number   行为操作类型   用来标识用户所做的操作的类型,如写日志,贴图,听音乐等
  op_time date   记录时间   2008年5月21日
表一
图4是优先级生成器302的结构图,如图4所示,优先级生成器302包括主控调度模块3021、数据抓取模块3022、缓存模块3023、用户分组引擎3024和输出模块3025。
主控调度模块3021用于,定时调度数据抓取模块3022,收到数据抓取模块3022的抓取完毕指示后,调度用户分组引擎模块3024,收到用户分组引擎模块3024的分组完毕指示后,调度输出模块3025。
数据抓取模块3022用于,收到主控调度模块3021的调度命令后,从操作信息数据库301中抓取网络用户的ID及操作信息,将所述ID及操作信息存入缓存模块3023后,向主控调度模块3021发送抓取完毕指示。
用户分组引擎模块3024用于,收到主控调度模块3021的调度命令后,从缓存模块3023读取网络用户的ID及操作信息,根据预设的网络业务优先级生成原则和用户分组优先级生成原则、以及所述操作信息,对网络用户分组,设置每组网络用户的网络业务优先级和用户分组优先级,建立网络用户ID与网络用户组ID的对应关系,将网络用户ID与网络用户组ID的对应关系、每组网络用户的优先级存入缓存模块3023。
输出模块3025用于,收到主控调度模块3021的调度命令后,从缓存模块3023提取网络用户ID与网络用户组ID的对应关系、每组网络用户的优先级,存入优先级缓存305。
图5是优先级缓存305的结构图,如图5所示,优先级缓存305包括分组信息容器3051、用户分组优先级容器3052、网络业务优先级容器3053和读写接口3054。
分组信息容器3051用于,对应网络用户组ID存储该组网络用户的网络业务优先级、用户分组优先级,以及该组网络用户的ID,其中,网络业务优先级和用户分组优先级可以用相应的标志变量表示。
用户分组优先级容器3052用于,对应网络用户组ID存储该组网络用户的用户分组类别和用户分组优先级,其中,用户分组类别和用户分组优先级可以用相应的标志变量表示。
网络业务优先级容器3053用于,对应网络用户组ID存储该组网络用户的网络业务类别和网络业务优先级,其中,网络业务类别和网络业务优先级可以用相应的标志变量表示。
读写接口3054用于,根据收到内容拉取策略生成器303发来的读取组ID及对应的优先级信息的请求后,根据该请求中携带的收到的网络用户ID或者网络用户组ID查询分组信息容器3051、或用户分组优先级容器3052、或网络业务优先级容器3053,向内容拉取策略生成器303返回查找到的优先级信息;读取或写入网络业务优先级和用户分组优先级将来自优先级生成器302的网络用户ID与网络用户组ID的对应关系、每组网络用户的优先级存入分组信息容器3051、或用户分组优先级容器3052、或网络业务优先级容器3053。
图6是用户分组优先级容器3052和网络业务优先级容器3053的存储结构示意图,如图6所示,在二维的存储空间中,横向存储空间为用户分组优先级容器3052,横坐标越大,该组网络用户优先级越高,纵向存储空间为网络业务优先级容器3053,纵坐标越大,该网络业务表示优先级越高,网络用户组ID挂接在用户分组优先级容器3052和网络业务优先级容器3053的交叉节点上。
图6中,网络用户组1与网络用户组2相比,前者的网络用户分组优先级较低,但二者的网络业务优先级相同;网络用户组1与网络用户组3相比,前者的网络业务优先级较低,但二者的用户分组优先级相同。
采用图6的结构存储网络业务优先级和用户分组优先级时,先初始化二维存储空间的各个存储节点,然后以网络用户组的网络业务优先级为纵坐标,以该网络用户组的用户分组优先级为横坐标,将该组网络用户的组ID存储到所述横坐标和所述纵坐标的交叉点上。
需要调整网络用户组的优先级时,只要调节该网络用户组ID所在节点位置即可:需要调节网络用户组的用户分组优先级时,保持该网络用户组ID所在的纵坐标不变,将该网络用户组ID的横坐标调整为表示调节后的用户分组优先级的横坐标;需要调节网络用户组的网络业务优先级时,保持该网络用户组ID所在的横坐标不变,将该网络用户组ID的纵坐标调整为表示调节后的网络业务优先级的纵坐标。
需要查找网络用户组的优先级时,只要查找该网络用户组ID所在节点位置即可:需要查找网络用户组的用户分组优先级时,提取该网络用户组ID的横坐标;需要查找网络用户组的网络业务优先级时,提取该网络用户组ID的纵坐标。
图7是内容拉取策略生成器303的结构图,如图7所示,内容拉取策略生成器303包括拉取事件检测模块3031、优先级信息拉取模块3032、策略生成模块3033和策略生成规则库3034。
拉取事件检测模块3031用于,检测到更新策略指示或者策略生成指示后,向优先级信息拉取模块3032发送拉取指示,或者定时向优先级信息拉取模块3032发送拉取指示;收到优先级信息拉取模块3032的拉取完毕指示后,向策略生成模块3033发送生成指示。
优先级信息拉取模块3032用于,收到拉取指示后,向优先级缓存305发送读取组ID及对应的优先级信息的请求,收到优先级缓存305返回的网络用户组ID及该组网络用户的网络业务优先级和用户分组优先级后,向拉取事件检测模块3031发送拉取完毕指示。
策略生成模块3033用于,收到生成指示后,按照策略生成规则库3034中的策略生成规则,根据优先级信息拉取模块3032拉取的网络业务优先级和用户分组优先级,为该组网络用户生成内容拉取策略。
策略生成规则库3034用于,存储内容拉取策略的生成规则。
策略生成规则库3034中的生成规则可由网络服务提供商预先设置,例如,对于写日志较多的缴费网络用户组(用户优先级较高、且写日志这一网络业务相比其他网络业务具有较高的优先级),除了指定该组网络用户的拉取服务器IP地址为某一网络带宽较高、且日志资源丰富的服务器的IP地址外,还可指定与写日志相关的包促销活动信息作为需要拉取的网络内容。
图8是内容拉取策略缓存306的结构图,如图8所示,内容拉取策略缓存306包括网络连接模块3061、策略查询模块3062、策略缓存内存模块3063、策略更新模块3064和策略管理模块3065。
网络连接模块3061用于,收到用户分组检测代理309的查询请求后,根据该查询请求携带的组ID向策略查询模块3062发送携带该组ID的查询指示,向用户分组检测代理309输出策略查询模块3062返回的内容拉取策略或查找失败消息;收到策略查询模块3062的更新请求后,向策略更新模块3064发送更新指示。
策略查询模块3062用于,收到携带组ID的查询指示后,从策略缓存内存模块3063中查找该组ID对应的内容拉取策略,若查找到,则向网络连接模块3061返回该内容拉取策略,否则,向网络连接模块3061返回查找失败消息和更新请求。
策略缓存内存模块3063用于,对应网络用户组ID存储该组网络用户的内容拉取策略。
策略更新模块3064用于,收到策略管理模块3065或网络连接模块3061的更新指示后,更新策略缓存内存模块3063中存储的内容拉取策略,向网络连接模块3061返回更新成功消息或更新失败消息。
策略管理模块3065用于,定时扫描策略缓存内存模块3063中的内容拉取策略,发现超时的策略后,向策略更新模块3064发送更新指示。
图9是网络内容拉取代理304的结构图,如图9所示,网络内容拉取代理304包括用户请求模块3041、内容拉取模块3042、网络连接模块3043、策略解析模块3044和内容输出模块3045。
内容拉取模块3042接收到用户请求模块3041发来的连接请求后,调用网络连接模块3043与用户分组检测代理309建立网络连接,通过网络连接模块3043向用户分组检测代理309发送携带有网络用户ID的查询请求,收到用户分组检测代理309返回的内容拉取策略后,将该内容拉取策略发给策略解析模块3044,根据策略解析模块3044解析出的拉取规则拉取网络内容,由内容输出模块3045输出拉取到的网络内容。
用户请求模块3041用于,根据用户的请求向内容拉取模块3042发送连接请求。
网络连接模块3043用于,收到内容拉取模块3042调用命令后,建立内容拉取模块3042与用户分组检测代理309的网络连接,向用户分组检测代理309转发携带有网络用户ID的查询请求。
策略解析模块3044用于,将收到的内容拉取策略解析成拉取规则,将解析出的拉取规则发给内容拉取模块3042。
内容输出模块3045用于,输出内容拉取模块3042拉取到的网络内容。
图10是用户分组检测代理309的结构图,如图10所示,用户分组检测代理309包括网络连接模块3091、用户分组查找模块3092、策略查找模块3093和策略更新触发模块3094。
网络连接模块3091用于,将网络内容拉取代理304发来的查询请求中携带的网络用户ID发给用户分组查找模块3092,将策略查找模块3093返回的内容拉取策略转发给网络内容拉取代理304。
用户分组查找模块3092用于,根据网络用户ID查询用户分组缓存308,将用户分组缓存308中所述网络用户ID对应的组ID发给策略查找模块3093。
策略查找模块3093用于,根据用户分组查找模块3092返回的组ID,查找内容拉取策略缓存306中该组ID对应的内容拉取策略,将找到的内容拉取策略通过网络连接模块3091返回给网络内容拉取代理304,若没找到该组ID对应的内容拉取策略,则向策略更新触发模块3094发送携带有该组ID的更新请求。
策略更新触发模块3094用于,将携带有组ID的更新请求发给内容拉取策略缓存306。
操作信息数据库301、优先级生成器302、内容拉取策略生成器303、优先级缓存305、内容拉取策略缓存306、用户分组数据库307、用户分组缓存308和用户分组检测代理309运行于网络服务提供商的服务器中。网络内容拉取代理304运行在客户端的网络浏览器中。
由上述方案可见,根据网络用户的操作信息为所述网络用户设置网络业务优先级、和/或用户分组优先级,生成与所述优先级对应的拉取策略,根据该拉取策略为所述网络用户拉取网络内容,具有以下优点:
从互联网用户角度讲,由于内容拉取策略以该网络用户以往的操作信息为依据,从而可以体现该网络用户对各种网络业务的关注程度,这样,针对不同的网络用户采用相应的拉取策略时,可使网络用户先得到自己关注的网络服务,提高用户体验,若为网络用户关注的网络业务分配较高的网络带宽等网络资源,可进一步提高用户体验。
从互联网服务提供商角度讲,由于内容拉取策略可依网络服务提供商的策略而定,因此,网络服务提供商可根据用户分组优先级、或网络业务优先级对网络用户进行区分,针对特定网络用户组制定相应内容拉取策略,便于部署业务、调整业务、为网络用户提供个性化网络内容推送等个性化服务。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围,凡在本发明的精神和原则之内所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (14)

1、一种网络内容拉取方法,其特征在于,该方法包括步骤:
记录网络用户的操作信息,根据网络用户的操作信息设置所述网络用户的网络业务优先级、和/或用户分组优先级,生成与所述优先级对应的内容拉取策略并存储;
需要为网络用户拉取网络内容时,获取与该网络用户的优先级对应的内容拉取策略,根据所述内容拉取策略拉取网络内容。
2、如权利要求1所述的方法,其特征在于,根据网络用户的操作信息设置所述网络用户的网络业务优先级、和/或用户分组优先级包括步骤:
根据网络用户的操作信息对网络用户分组,建立网络用户身份标识ID与组ID的对应关系,设置每组用户的网络业务优先级、和/或用户分组优先级,将网络用户身份标识ID与组ID的对应关系存储至用户分组缓存,将设置的优先级信息与所述组ID对应存储至优先级缓存。
3、如权利要求2所述的方法,其特征在于,生成与所述优先级对应的内容拉取策略包括:
从优先级缓存中读取组ID及对应的优先级信息,根据该优先级信息生成内容拉取策略,将所述组ID与所述内容拉取策略对应存储至内容拉取策略缓存;
获取与该网络用户的优先级对应的内容拉取策略包括:
查询用户分组缓存,获取该网络用户所在网络用户组的组ID,根据所述组ID从内容拉取策略缓存中读取该网络用户的内容拉取策略。
4、如权利要求2所述的方法,其特征在于,将设置的优先级信息与所述组ID对应存储至优先级缓存包括:
在优先级缓存中对应组ID存储该组网络用户的用户分组优先级和网络业务优先级,对应组ID存储该组网络用户的用户分组类别和用户分组优先级,对应组ID存储该组网络用户的网络业务类别和网络业务优先级。
5、如权利要求3所述的方法,其特征在于,
若优先级缓存中的优先级信息需要更新,则确定需要更新的优先级信息对应的网络用户,根据网络用户的操作信息设置所述网络用户的网络业务优先级、和/或用户分组优先级;
若内容拉取策略缓存中的内容拉取策略需要更新,则确定需要更新的内容拉取策略对应的网络用户,从优先级缓存中读取对应所述网络用户的优先级信息,生成与所述优先级对应的内容拉取策略,将该内容拉取策略存入内容拉取策略缓存。
6、如权利要求2所述的方法,其特征在于,所述记录网络用户的操作信息包括步骤:
将网络用户的操作信息与该网络用户的ID对应存储至操作信息数据库,定时从操作信息数据库中读取网络用户ID及对应的操作信息,存至缓存;
则,根据所述缓存中的网络用户操作信息,设置所述网络用户的网络业务优先级、和/或用户分组优先级。
7、如权利要求1至5任一权项所述的方法,其特征在于,根据所述内容拉取策略拉取网络内容包括:
根据所述内容拉取策略生成拉取规则,按照所述拉取规则拉取网络内容。
8、一种网络内容拉取系统,其特征在于,该系统包括操作信息数据库、优先级生成器、内容拉取策略生成器和网络内容拉取代理;
所述操作信息数据库用于,记录网络用户的操作信息;
所述优先级生成器用于,根据所述操作信息数据库中的操作信息设置网络用户的网络业务优先级、和/或用户分组优先级;
所述内容拉取策略生成器用于,生成与所述优先级生成器中的优先级对应的内容拉取策略并存储;
所述网络内容拉取代理用于,需要为网络用户拉取网络内容时,获取与该网络用户的优先级对应的内容拉取策略,根据所述内容拉取策略拉取网络内容。
9、如权利要求8所述的系统,其特征在于,该系统进一步包括优先级缓存、用户分组缓存;
所述优先级生成器用于,根据所述操作信息数据库中的操作信息对网络用户分组,建立网络用户ID与组ID的对应关系,设置每组用户的网络业务优先级、和/或用户分组优先级,将网络用户ID与组ID的对应关系存储至用户分组缓存,将设置的优先级信息与对应的组ID发给所述优先级缓存;
所述用户分组缓存用于,缓存网络用户ID与组ID的对应关系;
所述优先级缓存用于,对应存储组ID与该组网络用户的优先级信息;
所述内容拉取策略生成器用于,从优先级缓存中读取组ID及对应的优先级信息,根据该优先级信息生成对应的内容拉取策略。
10、如权利要求9所述的系统,其特征在于,该系统进一步包括用户分组检测代理和内容拉取策略缓存;
所述用户分组检测代理用于,收到所述网络内容拉取代理发来的查询请求后,根据该查询请求携带的网络用户ID查询用户分组缓存,获取所述网络用户ID对应的组ID,查询所述内容拉取策略缓存,将所述组ID对应的内容拉取策略返回给所述网络内容拉取代理;
所述内容拉取策略生成器进一步用于,将生成的内容拉取策略与该内容拉取策略对应的组ID发给内容拉取策略缓存;
所述内容拉取策略缓存用于,存储所述组ID与该组网络用户的内容拉取策略的对应关系;
所述网络内容拉取代理进一步用于,需要为网络用户拉取网络内容时,向用户分组检测代理发送查询请求,根据用户分组检测代理返回的内容拉取策略拉取网络内容。
11、如权利要求10所述的系统,其特征在于,所述优先级缓存包括分组信息容器、网络业务优先级容器和用户分组优先级容器;
所述分组信息容器用于,对应组ID存储该组网络用户的用户分组优先级和网络业务优先级;
所述网络业务优先级容器用于,对应组ID存储该组网络用户的用户分组类别和用户分组优先级;
所述用户分组优先级容器用于,对应组ID存储该组网络用户的网络业务类别和网络业务优先级。
12、如权利要求10所述的系统,其特征在于,
所述优先级缓存进一步用于,收到优先级更新指示或者存储的优先级过期后,将该更新指示对应的组ID或者该过期的优先级对应的组ID,以及优先级生成指示发给优先级生成器,根据所述优先级生成器发来优先级设置结果,对应存储组ID与该组网络用户的优先级信息;
所述优先级生成器进一步用于,收到优先级生成指示后,根据操作信息数据库中的操作信息为收到的组ID标识的该组用户重新分组,并设置网络业务优先级、和/或用户分组优先级,将重新分组结果存储至用户分组缓存,将优先级设置的结果发给优先级缓存。
13、如权利要求10或12所述的系统,其特征在于,
所述内容拉取策略缓存进一步用于,收到内容拉取策略更新指示或者存储的内容拉取策略过期后,将该更新指示对应的组ID或者该过期的内容拉取策略对应的组ID,以及内容拉取策略生成指示发给内容拉取策略生成器,收到内容拉取策略生成器返回的内容拉取策略后,对应存储所述组ID和所述内容拉取策略;
所述内容拉取策略生成器进一步用于,收到内容拉取策略生成指示后,根据收到的组ID从优先级缓存中读取对应的优先级信息,根据该优先级信息生成对应的内容拉取策略,将该内容拉取策略发给内容拉取策略缓存。
14、如权利要求8所述的系统,其特征在于,
所述优先级生成器进一步用于,定时从所述操作信息数据库中读取操作信息。
CN200810098354.9A 2008-05-30 2008-05-30 一种网络内容拉取方法与系统 Active CN101282342B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN200810098354.9A CN101282342B (zh) 2008-05-30 2008-05-30 一种网络内容拉取方法与系统
PCT/CN2009/071471 WO2009143733A1 (zh) 2008-05-30 2009-04-27 一种网络内容拉取方法与系统
US12/816,877 US20100257201A1 (en) 2008-05-30 2010-06-16 Method And System For Pulling Network Contents

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200810098354.9A CN101282342B (zh) 2008-05-30 2008-05-30 一种网络内容拉取方法与系统

Publications (2)

Publication Number Publication Date
CN101282342A true CN101282342A (zh) 2008-10-08
CN101282342B CN101282342B (zh) 2012-05-23

Family

ID=40014617

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200810098354.9A Active CN101282342B (zh) 2008-05-30 2008-05-30 一种网络内容拉取方法与系统

Country Status (3)

Country Link
US (1) US20100257201A1 (zh)
CN (1) CN101282342B (zh)
WO (1) WO2009143733A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009143733A1 (zh) * 2008-05-30 2009-12-03 腾讯科技(深圳)有限公司 一种网络内容拉取方法与系统
CN102263770A (zh) * 2010-05-25 2011-11-30 腾讯科技(北京)有限公司 一种数据的处理方法、系统和装置
CN106951464A (zh) * 2017-02-27 2017-07-14 江苏徐工信息技术股份有限公司 基于storm面向用户个性化预警机制大数据计算方法
CN107483522A (zh) * 2016-06-08 2017-12-15 华为技术有限公司 业务访问的方法和装置
CN107958289A (zh) * 2016-10-18 2018-04-24 深圳光启合众科技有限公司 用于机器人的数据处理方法和装置、机器人
CN108243235A (zh) * 2016-12-27 2018-07-03 腾讯科技(深圳)有限公司 服务点的接入调度方法和装置
CN109857577A (zh) * 2019-01-28 2019-06-07 北京三快在线科技有限公司 访问控制方法、装置、介质及电子设备

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103389990B (zh) * 2012-05-09 2018-07-27 腾讯科技(北京)有限公司 一种定向推送信息的方法及装置
CN104579753B (zh) * 2014-12-15 2018-03-23 腾讯科技(深圳)有限公司 用户数据统计方法、接入层服务器和统计服务器
US10146473B2 (en) * 2016-05-10 2018-12-04 Ge Aviation Systems Llc Systems and methods of subject state change notification
CN110557453B (zh) * 2019-09-05 2022-10-04 广州虎牙科技有限公司 一种数据分发方法、装置、设备和存储介质
CN112040260A (zh) * 2020-08-28 2020-12-04 咪咕视讯科技有限公司 一种截图方法、装置、设备及计算机可读存储介质

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6029195A (en) * 1994-11-29 2000-02-22 Herz; Frederick S. M. System for customized electronic identification of desirable objects
US7912856B2 (en) * 1998-06-29 2011-03-22 Sonicwall, Inc. Adaptive encryption
US20030093794A1 (en) * 2001-11-13 2003-05-15 Koninklijke Philips Electronics N.V. Method and system for personal information retrieval, update and presentation
NO20024840L (no) * 2002-05-31 2003-12-01 Telenor Asa Fremgangsmåte og apparat i et telekommunikasjonsnett
CN1217513C (zh) * 2002-12-27 2005-08-31 北京邮电大学 在多业务多用户业务平台中保证业务服务等级协议的方法
CN1527538A (zh) * 2003-03-05 2004-09-08 北京全向科技有限公司 动态用户优先级管理的方法
CN100365975C (zh) * 2004-06-25 2008-01-30 深圳市傲天通信有限公司 互联网网页信息推送系统
CN1756160A (zh) * 2004-09-27 2006-04-05 戴志军 方便用户上网的个性化网站
US8069422B2 (en) * 2005-01-10 2011-11-29 Samsung Electronics, Co., Ltd. Contextual task recommendation system and method for determining user's context and suggesting tasks
CN1848742A (zh) * 2005-01-10 2006-10-18 三星电子株式会社 确定用户上下文并建议任务的上下文任务推荐系统和方法
CN1932871A (zh) * 2005-09-13 2007-03-21 北京搜畅网络技术有限公司 用于创建用户个性化页面的方法
US8259566B2 (en) * 2005-09-20 2012-09-04 Qualcomm Incorporated Adaptive quality of service policy for dynamic networks
CN100596135C (zh) * 2006-06-09 2010-03-24 华为技术有限公司 一种确定内容提供商优先级的系统和方法
US8345691B2 (en) * 2008-05-15 2013-01-01 Cellco Partnership Scheduling with quality of service support in wireless system
CN101282342B (zh) * 2008-05-30 2012-05-23 腾讯科技(深圳)有限公司 一种网络内容拉取方法与系统

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009143733A1 (zh) * 2008-05-30 2009-12-03 腾讯科技(深圳)有限公司 一种网络内容拉取方法与系统
CN102263770A (zh) * 2010-05-25 2011-11-30 腾讯科技(北京)有限公司 一种数据的处理方法、系统和装置
CN107483522A (zh) * 2016-06-08 2017-12-15 华为技术有限公司 业务访问的方法和装置
CN107483522B (zh) * 2016-06-08 2020-09-08 华为技术有限公司 业务访问的方法和装置
CN107958289A (zh) * 2016-10-18 2018-04-24 深圳光启合众科技有限公司 用于机器人的数据处理方法和装置、机器人
CN108243235A (zh) * 2016-12-27 2018-07-03 腾讯科技(深圳)有限公司 服务点的接入调度方法和装置
CN108243235B (zh) * 2016-12-27 2019-12-20 腾讯科技(深圳)有限公司 服务点的接入调度方法和装置
CN106951464A (zh) * 2017-02-27 2017-07-14 江苏徐工信息技术股份有限公司 基于storm面向用户个性化预警机制大数据计算方法
CN109857577A (zh) * 2019-01-28 2019-06-07 北京三快在线科技有限公司 访问控制方法、装置、介质及电子设备

Also Published As

Publication number Publication date
CN101282342B (zh) 2012-05-23
US20100257201A1 (en) 2010-10-07
WO2009143733A1 (zh) 2009-12-03

Similar Documents

Publication Publication Date Title
CN101282342B (zh) 一种网络内容拉取方法与系统
CN101576918B (zh) 具备负载均衡功能的数据缓存系统
US7769740B2 (en) Systems and methods of ranking attention
US8745133B2 (en) System and method for optimizing the storage of data
US20030014483A1 (en) Dynamic networked content distribution
CN102609488B (zh) 客户端及其数据查询方法、服务端和数据查询系统
US20100082688A1 (en) System and method for reporting and analysis of media consumption data
WO2002042943A1 (en) Scalable distributed database system and method for linking codes to internet information
WO2009088664A1 (en) System and method for delivery of augmented messages
CN106294826B (zh) 一种集群数据实时查询方法及系统
JP2012510111A (ja) モバイル広告最適化アーキテクチャ
CN103914485A (zh) 一种远程收集和检索展示应用系统日志的系统及方法
US20100280903A1 (en) Domain classification and content delivery
CN105574051A (zh) 更新用户所满足的规则的方法及处理系统
CN100414869C (zh) 一种互联网上实现资讯订阅的方法及系统
CN101304392B (zh) 一种用于媒体资产管理的并行应用服务网关、系统及方法
JP2006277661A (ja) 情報配信装置及び情報配信方法
CN109618003A (zh) 一种服务器规划方法、服务器及存储介质
CN1695143A (zh) 用于使媒体文件可通过Web页访问的方法和装置
CN102024037B (zh) 一种网站运营系统海量图片数据的检索方法
US20020055959A1 (en) Information transmitting and receiving method, information transmitting apparatus and information receiving apparatus, in which layout information is used
CN101145936B (zh) 一种在Web页面中添加标签的方法及其系统
US9430301B2 (en) Distributed system for downloading internet information and a method thereof
CN106940715B (zh) 一种基于索引表的查询的方法及设备
CN103186553A (zh) 一种增值业务中业务产品的查询方法和系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant