CN105407005B - 内容分发方法及装置 - Google Patents

Abstract

本发明提供一种内容分发方法及装置，通过根据目标缓存服务器的日志，获取其对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型，日志记录有目标缓存服务器对应的用户请求的内容及内容对应的业务类型；根据全部缓存服务器的日志，对每一个目标业务类型对应的全部内容进行聚类处理，获得聚类结果；在聚类结果中，获取与目标缓存服务器的日志中的目标业务类型对应的内容属于同类的内容，作为预估内容；将预估内容存储到目标缓存服务器，以使目标缓存服务器对应的用户从目标缓存服务器获取预估内容。从而使用户可以直接从该缓存服务器中获取到需要的内容，提高了内容获取效率，减少了网络的平均响应时长。

Description

内容分发方法及装置

技术领域

本发明涉及数据存储技术，尤其涉及一种内容分发方法及装置。

背景技术

随着网络技术的不断发展，人们对网络资源的访问速度的需求越来越高。

现有技术中，通过内容分发网络(Content Delivery Network，简称：CDN)在网络各处放置节点服务器，为用户选择一台合适的节点服务器提供就近服务，若与用户邻近的节点服务器中没有用户需求的内容，则该邻近的节点服务器到其他节点服务器中获取用户需求的内容，或将用户引导到其他邻近的节点服务器处获取内容，导致内容获取效率低，网络的平均响应时间长。

发明内容

本发明的内容分发方法及装置，用以解决现有技术中用户从CDN网络中获取到其所需求内容的获取效率低，CDN网络的平均响应时间长的问题，提供一种内容分发方法及装置，通过分析目标缓存服务器的日志，预估出用户可能感兴趣的内容，提前将该内容预存到缓存服务器中，从而使用户可以直接从该缓存服务器中获取到需要的内容，提高了内容获取效率，减少了CDN网络的平均响应时长。

根据本发明实施例的第一方面，提供一种内容分发方法，包括：

根据目标缓存服务器的日志，获取所述目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型，所述日志记录有所述目标缓存服务器对应的用户请求的内容及所述内容对应的业务类型；

根据全部缓存服务器的日志，对每一个所述目标业务类型对应的全部内容进行聚类处理，获得聚类结果；

在所述聚类结果中，获取与所述目标缓存服务器的日志中的所述目标业务类型对应的内容属于同类的内容，作为预估内容；

将所述预估内容存储到所述目标缓存服务器，以使所述目标缓存服务器对应的用户从所述目标缓存服务器获取所述预估内容。

根据本发明实施例的第二方面，提供一种内容分发装置，包括：

获取模块，用于根据目标缓存服务器的日志，获取所述目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型，所述日志记录有所述目标缓存服务器对应的用户请求的内容及所述内容对应的业务类型；

处理模块，用于根据全部缓存服务器的日志，对每一个所述目标业务类型对应的全部内容进行聚类处理，获得聚类结果；

分析模块，用于在所述聚类结果中，获取与所述目标缓存服务器的日志中的所述目标业务类型对应的内容属于同类的内容，作为预估内容；

存储模块，用于将所述预估内容存储到所述目标缓存服务器，以使所述目标缓存服务器对应的用户从所述目标缓存服务器获取所述预估内容。

本发明的实施例所提供的技术方案可以包括以下有益效果：

通过根据目标缓存服务器的日志，获取目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型，日志记录有所述目标缓存服务器对应的用户请求的内容及所述内容对应的业务类型；根据全部缓存服务器的日志，对每一个目标业务类型对应的全部内容进行聚类处理，获得聚类结果；在聚类结果中，获取与目标缓存服务器的日志中的目标业务类型对应的内容属于同类的内容，作为预估内容；将预估内容存储到目标缓存服务器，以使目标缓存服务器对应的用户从目标缓存服务器获取预估内容。从而使用户可以直接从该缓存服务器中获取到需要的内容，提高了内容获取效率，减少了CDN网络的平均响应时长。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本发明。

附图说明

图1是根据一示例性实施例示出的一种内容分发方法的流程图；

图2是根据另一示例性实施例示出的一种内容分发方法的流程图；

图3是根据一示例性实施例示出的一种内容分发装置的框图；

图4是根据另一示例性实施例示出的一种内容分发装置的框图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1是根据一示例性实施例示出的一种内容分发方法的流程图。如图1所示，本实施例提供的内容分发方法具体包括如下步骤：

步骤101、根据目标缓存服务器的日志，获取目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型。

其中，日志记录有目标缓存服务器对应的用户请求的内容及内容对应的业务类型。

步骤102、根据全部缓存服务器的日志，对每一个目标业务类型对应的全部内容进行聚类处理，获得聚类结果。

步骤103、在聚类结果中，获取与目标缓存服务器的日志中的目标业务类型对应的内容属于同类的内容，作为预估内容。

步骤104、将预估内容存储到目标缓存服务器，以使目标缓存服务器对应的用户从目标缓存服务器获取预估内容。

综上所述，本实施例提供的内容分发方法，通过根据目标缓存服务器的日志，获取目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型，日志记录有所述目标缓存服务器对应的用户请求的内容及所述内容对应的业务类型；根据全部缓存服务器的日志，对每一个目标业务类型对应的全部内容进行聚类处理，获得聚类结果；在聚类结果中，获取与目标缓存服务器的日志中的目标业务类型对应的内容属于同类的内容，作为预估内容；将预估内容存储到目标缓存服务器，以使目标缓存服务器对应的用户从目标缓存服务器获取预估内容。从而使用户可以直接从该缓存服务器中获取到需要的内容，提高了内容获取效率，减少了CDN网络的平均响应时长。

图2是根据另一示例性实施例示出的一种内容分发方法的流程图。如图2所示，在上述实施例的基础上，本实施例提供的内容分发方法具体包括如下步骤：

步骤201、根据目标缓存服务器的日志，获取目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型。

其中，日志记录有目标缓存服务器对应的用户请求的内容及内容对应的业务类型。用户请求的内容可以为任意格式的电子数据，音频、视频、文档、图片等，例如用户请求的内容为以下电子资源，电影1、电影2、电影3、音乐1、音乐2；则该目标缓存器的日志中记录有用户获取上述5项内容的信息。业务类型指用户所获取的内容的归属类别，例如，上述内容中的电影1、电影2、电影3属于电影业务类型；上述内容中的音乐1、音乐2属于音乐业务类型；当然，上述例子只是一个基本的业务类型分类，本领域技术人员可以根据具体应用的需要进行业务类型的细化分类，本申请对此不作限制。

其中，该步骤201还可以通过以下步骤进行实现：

步骤一、根据目标缓存服务器的日志，获取用户请求的全部业务类型，作为词袋模型的词典。

具体的，分析目标缓存服务器中的日志，从中提取出用户所请求的内容的全部业务类型，根据获取到的业务类型，建立词袋模型的词典，该词典中包含有用户访问的所有业务类型，如{电影、电视剧、综艺、新闻、音乐、图像}。

步骤二、根据目标缓存服务器的日志和词典，获取每个用户对应的采用词典表示的用户行为特征向量，用户行为特征向量中的每一项表示一种业务类型对应的用户请求次数。

具体的，提取该目标缓存服务器中每个用户的行为特征向量，并以步骤一中得到的词典形式{电影、电视剧、综艺、新闻、音乐、图像}表示，例如：

用户A，请求过3次电影、2次新闻、5次图像业务，则用户A的行为特征向量为{3,0,0,2,0,5}；

用户B，请求过1次电影、2次电视剧、3次音乐业务，则用户B的行为特征向量为{1,2,0,0,3,0}。

步骤三、根据全部用户行为特征向量，统计每一业务类型的用户请求次数，按照用户请求次数由多至少排列业务类型，获取位于前列的预设个数的业务类型，作为目标业务类型。

具体的，将所有用户行为特征向量相加，并按照相加后每一业务类型的数值由大到小排序，根据预设业务类型获取个数的阈值，选取前N类业务类型，例如根据上述用户A和用户B的行为特征向量，得到排名前三位的业务类型为：请求次数为4的电影业务、请求次数为5的图像业务、请求次数为3的音乐业务，则目标业务类型为电影、图像、音乐。目标业务类型可用于后续步骤中通过对其内具体业务内容的分析预估出用户可能感兴趣的业务内容。

步骤202、根据全部缓存服务器的日志，对每一个目标业务类型对应的全部内容进行聚类处理，获得聚类结果。

例如，收集各个缓存服务器中的日志记录，对全部的日志进行大数据分析，得到所有被请求的电影业务数据，例如，得到用户请求的电影业务中的所有电影的名称。

具体的，步骤202可以包括：根据全部缓存服务器的日志，采用k均值算法对每一个目标业务类型对应的全部内容进行聚类处理，获得聚类结果。

k均值算法即k-means算法，可以实现对每一个目标业务类型对应的全部内容的聚类，将相近、相似的业务内容归为一类，从而通过用户当前所请求的内容预估、挖掘出用户未来可能感兴趣的、预获取的业务内容。例如，在电影业务中，有电影1(捉妖记)、电影2(大圣归来)、电影3(煎饼侠)、电影4(栀子花开)，电影5(左耳)、电影6(匆匆那年)通过聚类分析，得到电影1(捉妖记)和电影3(煎饼侠)归属于一个类别A(搞笑)的电影；电影4(栀子花开)，电影5(左耳)、电影6(匆匆那年)归属于类别B(爱情)的电影；还有可能根据类别C(最新上映影片)而将电影1(捉妖记)、电影2(大圣归来)、电影3(煎饼侠)、电影4(栀子花开)，电影5(左耳)、电影6(匆匆那年)一起归为一类。

步骤203、在聚类结果中，获取与目标缓存服务器的日志中的目标业务类型对应的内容属于同类的内容，作为预估内容。

继续采用步骤202中的例子，从目标缓存服务器的日志中获取到用户请求了电影4(栀子花开)，根据聚类结果发现，与电影4(栀子花开)同类的还有其他电影如电影5(左耳)、电影6(匆匆那年)，则将电影5(左耳)、电影6(匆匆那年)的电影数据作为预估内容提前缓存至缓存服务器。

步骤204、对预估内容进行去重处理，以使去重处理后的预估内容中包含各不相同的内容。

具体的，为了节省网络资源，避免数据重复，可以在向目标缓存服务器发送预估内容之前，对预估内容进行去重处理，重复出现的预估内容仅保留一份内容。例如：当前存储内容的列表中有电影4(栀子花开)、电影1(捉妖记)；根据聚类结果的类别A得到预估内容为：电影3(煎饼侠)；根据聚类结果的类别C得到预估内容为：电影2(大圣归来)、电影3(煎饼侠)、电影5(左耳)、电影6(匆匆那年)；则将其中重复出现的预估内容电影3(煎饼侠)仅保留一份电影资源。

步骤205、将去重处理后的预估内容存储到目标缓存服务器中。

将上述去重后的电影资源电影2(大圣归来)、电影3(煎饼侠)、电影5(左耳)、电影6(匆匆那年)存储到目标缓存服务器中，从而避免将电影3(煎饼侠)两次存储在目标缓存服务器中。

进一步地，在上述获取目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型之前还可以包括：

获取目标缓冲服务器内用户的源IP地址；判断目标缓存服务器是否是距离用户最近的缓存服务器，若不是，将用户的日志转发给与其距离最近的缓存服务器。

具体的，由于现有技术中，CDN的工作模式是将用户引导到邻近的、存储有用户所请求的数据的节点服务器中，但该节点服务器不一定是距离用户最近的节点服务器，因此，通过获取目标缓冲服务器内用户的源IP地址，可以判断出当前的目标缓存服务器是否是距离用户最近的缓存服务器，若该目标缓存服务器不是距离用户最近的服务器，则可以将该用户感兴趣的内容预先存储到距离该用户最近的缓存服务器中，具体通过首先将该用户的日志转发给与其距离最近的缓存服务器。由该离用户最近的缓存服务器进行上述步骤201到步骤205的分析后，将用户感兴趣的预估内容进行预存储。从而实现预先将用户感兴趣的内容存储到距离其较近的服务器中的目的。

相应的，该获取目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型的步骤中的用户可以为，距离该用户的源IP地址最近的缓存服务器为该目标缓存服务器的用户。

图3是根据一示例性实施例示出的一种内容分发装置的框图。如图4所示，该内容分发装置可以通过软件、硬件或者两者的结合实现成为电子设备的部分或者全部。本实施例提供的内容分发装置具体可以应用在内容分发网络中，以实现上述内容分发方法的各个步骤，其具体实现过程在此不再赘述。

该内容分发装置可以包括：

获取模块31，用于根据目标缓存服务器的日志，获取目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型，日志记录有目标缓存服务器对应的用户请求的内容及内容对应的业务类型。

处理模块32，用于根据全部缓存服务器的日志，对每一个目标业务类型对应的全部内容进行聚类处理，获得聚类结果。

分析模块33，用于在聚类结果中，获取与目标缓存服务器的日志中的目标业务类型对应的内容属于同类的内容，作为预估内容。

存储模块34，用于将预估内容存储到目标缓存服务器，以使目标缓存服务器对应的用户从目标缓存服务器获取预估内容。

综上所述，本实施例提供的内容分发装置，通过根据目标缓存服务器的日志，获取目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型，日志记录有所述目标缓存服务器对应的用户请求的内容及所述内容对应的业务类型；用于根据全部缓存服务器的日志，对每一个目标业务类型对应的全部内容进行聚类处理，获得聚类结果；在聚类结果中，获取与目标缓存服务器的日志中的目标业务类型对应的内容属于同类的内容，作为预估内容；将预估内容存储到目标缓存服务器，以使目标缓存服务器对应的用户从目标缓存服务器获取预估内容。从而使用户可以直接从该缓存服务器中获取到需要的内容，提高了内容获取效率，减少了CDN网络的平均响应时长。

图4是根据另一示例性实施例示出的一种内容分发装置的框图。如图4所示，在上述实施例的基础上，所述获取模块31包括：

词典子模块311，用于根据目标缓存服务器的日志，获取用户请求的全部业务类型，作为词袋模型的词典。

向量子模块312，用于根据目标缓存服务器的日志和词典，获取每个用户对应的采用词典表示的用户行为特征向量，用户行为特征向量中的每一项表示一种业务类型对应的用户请求次数。

统计子模块313，用于根据全部用户行为特征向量，统计每一业务类型的用户请求次数，按照用户请求次数由多至少排列业务类型，获取位于前列的预设个数的业务类型，作为目标业务类型。

进一步地，处理模块32，具体用于根据全部缓存服务器的日志，采用k均值算法对每一个目标业务类型对应的全部内容进行聚类处理，获得聚类结果。

进一步地，装置还包括：

去重模块35，用于对预估内容进行去重处理，以使去重处理后的预估内容中包含各不相同的内容。

相应的，存储模块34，具体用于将去重处理后的预估内容存储到目标缓存服务器中。

进一步地，获取模块31，还用于获取目标缓冲服务器内用户的源IP地址；

该装置还包括：

判断模块36，用于根据源IP地址，判断目标缓存服务器是否是距离用户最近的缓存服务器。

发送模块37，用于当目标缓存服务器不是距离用户最近的缓存服务器时，将用户的日志转发给与其距离最近的缓存服务器。

相应的，获取模块31中，获取目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型步骤中的用户为距离用户的源IP地址最近的缓存服务器是目标缓存服务器的用户。

本实施例的装置，可用于执行图2所示方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。

本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种内容分发方法，其特征在于，包括：

根据目标缓存服务器的日志，获取所述目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型，所述日志记录有所述目标缓存服务器对应的用户请求的内容及所述内容对应的业务类型；

根据全部缓存服务器的日志，对每一个所述目标业务类型对应的全部内容进行聚类处理，获得聚类结果；

在所述聚类结果中，获取与所述目标缓存服务器的日志中的所述目标业务类型对应的内容属于同类的内容，作为预估内容；

将所述预估内容存储到所述目标缓存服务器，以使所述目标缓存服务器对应的用户从所述目标缓存服务器获取所述预估内容。

2.根据权利要求1所述的方法，其特征在于，所述根据目标缓存服务器的日志，获取所述目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型包括：

根据所述目标缓存服务器的日志，获取用户请求的全部业务类型，作为词袋模型的词典；

根据所述目标缓存服务器的日志和所述词典，获取每个用户对应的采用所述词典表示的用户行为特征向量，所述用户行为特征向量中的每一项表示一种业务类型对应的用户请求次数；

根据全部所述用户行为特征向量，统计每一业务类型的用户请求次数，按照用户请求次数由多至少排列业务类型，获取位于前列的预设个数的业务类型，作为目标业务类型。

3.根据权利要求1所述的方法，其特征在于，所述根据全部缓存服务器的日志，对每一个所述目标业务类型对应的全部内容进行聚类处理，获得聚类结果，包括：

根据全部缓存服务器的日志，采用k均值算法对每一个所述目标业务类型对应的全部内容进行聚类处理，获得聚类结果。

4.根据权利要求1所述的方法，其特征在于，所述将所述预估内容存储到所述目标缓存服务器之前，还包括：

对所述预估内容进行去重处理，以使去重处理后的预估内容中包含各不相同的内容；

相应的，所述将所述预估内容存储到所述目标缓存服务器包括：将所述去重处理后的预估内容存储到所述目标缓存服务器中。

5.根据权利要求1所述的方法，其特征在于，所述获取所述目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型之前，还包括：

获取所述目标缓冲服务器内用户的源IP地址；根据所述源IP地址判断所述目标缓存服务器是否是距离所述用户最近的缓存服务器，若不是，将所述用户的日志转发给与其距离最近的缓存服务器；

相应的，所述获取所述目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型步骤中的所述用户为距离所述用户的源IP地址最近的缓存服务器是所述目标缓存服务器的用户。

6.一种内容分发装置，其特征在于，包括：

获取模块，用于根据目标缓存服务器的日志，获取所述目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型，作为目标业务类型，所述日志记录有所述目标缓存服务器对应的用户请求的内容及所述内容对应的业务类型；

处理模块，用于根据全部缓存服务器的日志，对每一个所述目标业务类型对应的全部内容进行聚类处理，获得聚类结果；

分析模块，用于在所述聚类结果中，获取与所述目标缓存服务器的日志中的所述目标业务类型对应的内容属于同类的内容，作为预估内容；

存储模块，用于将所述预估内容存储到所述目标缓存服务器，以使所述目标缓存服务器对应的用户从所述目标缓存服务器获取所述预估内容。

7.根据权利要求6所述的装置，其特征在于，所述获取模块包括：

词典子模块，用于根据所述目标缓存服务器的日志，获取用户请求的全部业务类型，作为词袋模型的词典；

向量子模块，用于根据所述目标缓存服务器的日志和所述词典，获取每个用户对应的采用所述词典表示的用户行为特征向量，所述用户行为特征向量中的每一项表示一种业务类型对应的用户请求次数；

统计子模块，用于根据全部所述用户行为特征向量，统计每一业务类型的用户请求次数，按照用户请求次数由多至少排列业务类型，获取位于前列的预设个数的业务类型，作为目标业务类型。

8.根据权利要求6所述的装置，其特征在于，

所述处理模块，具体用于根据全部缓存服务器的日志，采用k均值算法对每一个所述目标业务类型对应的全部内容进行聚类处理，获得聚类结果。

9.根据权利要求6所述的装置，其特征在于，所述装置还包括：

去重模块，用于对所述预估内容进行去重处理，以使去重处理后的预估内容中包含各不相同的内容；

相应的，所述存储模块，具体用于将所述去重处理后的预估内容存储到所述目标缓存服务器中。

10.根据权利要求6所述的装置，其特征在于，

所述获取模块，还用于获取所述目标缓冲服务器内用户的源IP地址；

所述装置还包括：

判断模块，用于根据所述源IP地址，判断所述目标缓存服务器是否是距离所述用户最近的缓存服务器；

发送模块，用于当所述目标缓存服务器不是距离所述用户最近的缓存服务器时，将所述用户的日志转发给与其距离最近的缓存服务器；

相应的，所述获取模块中，获取所述目标缓存服务器对应的按照用户请求次数由多至少排序时位于前列的预设个数的业务类型步骤中的所述用户为距离所述用户的源IP地址最近的缓存服务器是所述目标缓存服务器的用户。