CN105677824B - 内容流生成及发布系统及其抓取方法 - Google Patents

Abstract

本发明的示例性实施例涉及一种内容流生成及发布系统及其抓取方法，其包括内容流抓取部、内容库、设计策略部、编辑平台、发布平台以及输入/输出接口，其中所述内容流抓取部通过所述输入/输出接口从多个不同类型的内容平台抓取多种不同类型的内容，所述设计策略平台预置不同的策略，所述内容库根据所述设计策略平台中预置的策略对所述内容流抓取部抓取的多种不同类型的内容进行存储，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库中存储的内容进行编辑从而生成内容流，所述发布平台根据所述设计策略平台中预置的策略将生成的内容流通过所述输入/输出接口发布至发布界面，从而可根据预置的策略实现对不同类型内容的抓取，生成并发布内容流。

Description

内容流生成及发布系统及其抓取方法

技术领域

本发明的示例性实施例涉及一种内容流生成及发布系统。

背景技术

本部分旨在向读者介绍可能与本申请的各个方面有关的本领域的各个方面的技术，相信本部分有助于向读者提供背景信息，以便更好地理解本申请的各个方面。因此，应当理解，应该从这个角度来进行解读，而不是将其视为是对现有技术的承认。

当今大众主要的信息来源是互联网，包括各大型媒体的网站，而以微博、微信为代表的社交媒体，以及手机端的大量App正在迅速崛起，此类多种多样的信息交互形式组成了新媒体。与报刊、广播、电视等传统媒体不同，新媒体的特征是具有交互性与即时性、海量性与共享性，而多媒体与超文本日趋个性化与社群化。随着科技的飞速发展，新媒体越来越受到人们的关注，成为创新的热门领域。

传统的内容发布大多只是单一的品牌和产品的重复。这种内容发布面临难于被大众接受的困境，其信息很难被潜在客户信任。当今消费者越来越聪明，他们不希望其购买行为被操纵，而只要为他们提供优质的信息。而所有广告商都需要靠内容致胜，且企业需要创建针对性强、价值高、易被关注的信息，因此提供一种高效、便捷的内容流生成及发布系统以及相应的方法成为迫切的需要。

发明内容

根据本发明示例性实施例的一种内容流生成及发布系统，其包括内容流抓取部、内容库、设计策略部、编辑平台、发布平台以及输入/输出接口，其中所述内容流抓取部通过所述输入/输出接口从多个不同类型的内容平台抓取多种不同类型的内容，所述设计策略平台预置不同的策略和计划，所述内容库根据所述设计策略平台中预置的策略对所述内容流抓取部抓取的多种不同类型的内容进行存储，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库中存储的内容进行编辑从而生成内容流，所述发布平台根据所述设计策略平台中预置的策略将生成的内容流通过所述输入/输出接口发布至发布界面，其中，所述设计策略平台能够设置内容流发布时间表，和/或根据预设的时间、关键词、社交媒体账号、发布渠道中的至少一个设置手动或自动发布内容流。

进一步地，所述内容流生成及发布系统还包括素材库，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库中存储的内容以及素材库中的内容进行编辑，从而生成内容流。

进一步地，所述内容流抓取部将抓取的不同类型的内容分段为不同类型的数据结构，所述内容库对所述不同类型的数据结构进行存储并生成相应的数据结构清单。

进一步地，所述内容库中至少存储第一类型的数据结构以及第二类型的数据结构，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库中存储的内容进行编辑从而生成包括根据所述第一类型的数据结构生成第一内容流，并在固定的位置以及预置的时间在所述第一内容流中插入所述第二类型的数据结构从而生成第二内容流。

进一步地，所述第二内容基于与客户端平台相关的一个或者多个特性和/或基于之前提供的内容的一个或者多个特性而选择。

进一步地，所述设计策略平台预置不同的策略包括以下至少一种：

a)划分不同的发布频道，并为不同的发布频道设置发布容量；

b)划分不同的发布频道，并为不同的发布频道设置收费标准；以及

c)划分不同的发布频道，并为不同的发布频道设置发布时间；

其中所述发布平台将生成的内容流分发到不同的发布频道，并最终通过所述输入/输出接口发布至发布界面。

进一步地，所述内容流生成及发布系统还包括加密平台，所述加密平台根据不同发布频道对应的频道号以及所述发布平台提供的加密密钥生成发布频道加密密钥，以便对不同的发布频道上的内容流进行加密。

进一步地，所述设计策略平台预置不同的策略还包括分别为不同类型的内容和不同的发布频道指定不同的优先级。

进一步地，所述内容流生成及发布系统还包括优化单元，所述优化单元对所述内容库中存储的相同的内容进行合并，并且提高合并后内容的优先级。

进一步地，所述内容流生成及发布系统还包括分析单元，所述分析单元根据记录点击率、停留时间、地域分布、浏览器的类型、跳入和跳出URL链接、最感兴趣的内容、评价和转发率以及客户转化率中的至少一个确定内容的受欢迎程度，从而帮助发布者改进和优化未来的内容发布策略和方向。

本发明的内容流生成及发布系统的抓取方法，其中包括如下步骤：

STEP 1、所述内容流抓取部抓取数据，同时将待抓取库的内容进行筛选，将重复内容进行标记；

STEP 2、所述内容流抓取部抓取未被标记的数据。

本发明采用上述方法可有效地减少计算机内部的资源占用，实现最快速地抓取。

进一步地，内容流生成及发布系统的抓取方法，其中包括如下步骤：

STEP 1、内容流抓取部抓取数据；

STEP 2、内容流抓取部将抓取到的数据进行筛选，并删除重复数据。

进一步地，内容流生成及发布系统的抓取方法，其中包括如下步骤：

STEP 1、内容流抓取部缓存数据；

STEP 2、内容流抓取部将缓存到的数据与其它待抓取的数据进行对比，

若缓存到的数据与其它待抓取的数据相同，则结束；

若缓存到的数据与其他待抓取的数据不同，则抓取。

进一步地，内容流生成及发布系统的抓取方法，其中筛选包括如下步骤：

所述内容流抓取部将所述将同一域名下的重复网页URL中query部分进行比较，查找query部分中赋值不同的参量作为无效参量，并去除所述无效参量。

进一步地，内容流生成及发布系统的抓取方法，其中筛选包括如下步骤：

以缓存到的数据的字符串中的一大写字母至另一大写字母之前为字符，以字符为关键字搜索其它待抓取数据。

根据本发明的示例性实施例，可根据预置的策略实现对不同类型内容的抓取，生成并发布内容流。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例的附图作简单地介绍，显而易见地，下面描述中的附图仅仅涉及本发明的一些实施例，而非对本发明的限制。

图1为根据本发明示例性实施例的内容流生成及发布系统的结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他的实施例，都属于本发明保护的范围。

在本发明的描述中，需要说明的是，术语“上”、“下”、“顶”、“底”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。

此外，在本发明的描述中，除非另有说明，“多个”的含义是两个或更多。

如图1所示，根据本发明示例性实施例，提供了一种内容流生成及发布系统，其包括内容流抓取部、内容库、素材库、设计策略部、编辑平台、发布平台以及输入/输出接口，其中所述内容流抓取部通过所述输入/输出接口从多个不同类型的内容平台抓取多种不同类型的内容，其中所述多个不同类型的内容平台包括但不限于网页、搜索引擎、微博/微信/facebook/twitter、优酷/土豆、QQ空间、淘宝/天猫/京东、视频、音频、直播等，所述设计策略平台预置不同的策略，所述内容库以及所述素材库均可根据所述设计策略平台中预置的策略对所述内容流抓取部抓取的多种不同类型的内容进行存储，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库以及素材库中存储的内容进行编辑从而生成内容流，所述发布平台根据所述设计策略平台中预置的策略将生成的内容流通过所述输入/输出接口发布至发布界面，其中所述发布界面包括但不限于企业网站/APP、微博/微信/QQ/facebook/twitter、短信/彩信、群发邮件、电子显示屏/广告牌、合作伙伴API(例如，车载屏、广告屏等)等。

根据本发明一示例性实施例的所述内容流生成及发布系统主要包括以下的部件：

内容流抓取部，其可使用关键词搜索社交媒体和网页，搜索的结果可以是页面，图片，视频，音频，发布的消息和文章，用户可以选择感兴趣和需要的信息，抓取到内容库中，作为设计和发布的素材，并且根据抓取的内容的类型，所述内容流抓取部将抓取的不同类型的内容分段为不同类型的数据结构，以及所述内容库对不同类型的数据结构进行存储并生成相应的数据结构清单，以方便设计者进行选择；

内容库，其为一个存储了图片、文字、文件(word/pdf/文本等格式)、视频、音频、社交媒体发布/评论、内容流等各种形式信息的多媒体库，系统从各个渠道和媒体采集的信息都可存储在这个内容库里面，在特定实施例中，所述内容库中还至少存储第一类型的数据结构以及第二类型的数据结构；

素材库，其为存储设计者进行设计时使用的素材的数据库，可以拷贝内容库中的内容到素材库，作为设计的素材来源，如果内容库没有合适的内容，还可以从各种网络媒体搜索相关的内容，存储到素材库，供设计者使用；

设计策略部，其可预置不同的策略，例如，a)划分不同的发布频道，并为不同的发布频道设置发布容量；b)划分不同的发布频道，并为不同的发布频道设置收费标准；c)划分不同的发布频道，并为不同的发布频道设置发布时间；或者d)分别为不同类型的内容和不同的发布频道指定不同的优先级；值得注意的是，划分不同的发布频道时，即可依据发布内容的类型进行划分，还可依据发布对象进行划分；设计策略平台可以设置内容发布时间表，根据预设的时间/关键词/社交媒体账号/发布渠道等设置手动或自动发布内容，其还可以邀请外部撰写人员和设计人员共同参与内容设计/编辑/发布/主持。并且根据本发明的内容流生成及发布系统可以根据外部人员的工作量和事先协商好的费用，对外部人员付费。

编辑平台，其通过该平台选择想要发布的内容，在线进行图文文章设计，设计者可以从素材库里面方便的搜索和选择需要的元素，设计图文并茂的文章，在某些实施例中，选择的来源不止是系统内部的内容库或者素材库，也可以是外部社交媒体中的内容，具体地，负责编辑的人员可以任意的编排来自多个来源的内容，形成一个专题，为发布做好准备；而后，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库中存储的内容进行编辑从而生成包括根据所述第一类型的数据结构生成第一内容流，并在固定的位置以及预置的时间在所述第一内容流中插入所述第二类型的数据结构从而生成第二内容流，其中所述第二内容可基于与客户端平台相关的一个或者多个特性和/或基于之前提供的内容的一个或者多个特性而选择；可以对撰写和编辑的内容有审批流程的控制，例如撰写人提交给审核人，可以有多层级审核，审核通过后才设置为定稿。

发布平台，其对接多个媒体渠道，包括设计媒体(微信，微博，视频，音频、网站)，网站，论坛，合作伙伴系统(通过API)，物理显示屏等，对于编辑好的内容，或者设计的图文，可以通过发布平台方便的发布到上述的媒体中，从而大大缩短了发布时间，降低了手工的操作，发布的方式即可以实时发布，也可以预设发布时间和条件，系统根据设置的参数，自动发布内容流；也可以对待发布的内容配置审批流程的控制，例如内容需要通过发布审核人批准后(可以有多层级审核)才对外发布。

分析单元，其会跟踪并记录浏览者对内容的阅读情况，记录点击率，停留时间，地域情况，浏览器情况，跳入和跳出URL链接，最感兴趣的内容，评价和转发，客户转化率等信息，并分析这些信息，能够发现哪些内容最受观众欢迎，阅读时间最长，能够把潜在客户转化为客户，而哪些内容不受欢迎，点击率低，内容发布效果差，进而改进未来的内容设计，达到更好的效果；

优化单元：其对所述内容流生成及发布系统进行优化，例如，对所述内容库中存储的相同的内容进行合并，并且提高合并后内容的优先级；

加密平台：其根据不同发布频道对应的频道号以及所述发布平台提供的加密密钥生成发布频道加密密钥，以便对不同的发布频道上的内容流进行加密。

根据本发明另一示例性实施例的所述内容流生成及发布系统可提供以下的功能：

在素材搜集阶段，所述内容流生成及发布系统集成了多平台搜索功能，例如互联网搜索功能，可以直接从多个新媒体(包括微博，微信，视频，音频、网站，论坛，搜索引擎等)搜索关键字，获得相关内容的列表，如果想使用某项内容，可以直接勾选或者拖拽到编辑平台，进行修改和编辑；

所述内容流生成及发布系统建立了与微博，微信，各个论坛，多个手机App的接口，通过所述接口，可将生成的内容流(例如，文章，图片，视频，音频等)可以直接发布到各个新媒体系统中，设计者只需要选择发布的媒体名称和版面，设定发布时间(可以是立即发布、定时发布以及附条件发布等)；

发布界面还可以直接与某些新媒体(微博，微信，手机App，视频，音频、网站)绑定，例如可以绑定账号，主题和关键词，当绑定的内容有更新时，系统会自动读取内容，保存在内容库里，再发布到内容流里面，实现实时更新或者定期更新，例如，所述内容流生成及发布系统可以自动绑定某个信息源，例如微博/微信/facebook/twitter/QQ空间的一个帐号/话题，或者一个网页，当信息源有新的内容时，系统会自动抓取新的内容，存到素材库，并按照系统设置发送到多个媒体渠道中(微博/微信/facebook/twitter/QQ空间/客户网站等)；

系统还可以管控内容流的发布界面，例如，发布界面的展现形式是可以配置，其展示方式有时间线，照片墙，幻灯片等多种方式。

根据本发明的示例性实施例可以应用于企业内容发布，网络社区交流，原创作品设计和发布，互联网内容的分享和交易，企业和社会新闻的编写和发布，赛事和发布会的信息传播，产品和服务的市场宣传和营销等。

所述内容流生成及发布系统除了具备内容流和各种数字资料(图片，文章，视频，音频等)之外，还可以包括一个数字资产交易平台，设计者可以通过该数字资产交易平台对自己的作品定价，其它用户可以有偿使用数字资产，即降低了自己的制作成本，又达到了最佳的资源配置。

本发明内容流生成及发布系统的抓取方法，其中包括如下步骤：

STEP 1、所述内容流抓取部抓取数据，同时将待抓取库的内容进行筛选，将重复内容进行标记；

STEP 2、所述内容流抓取部抓取未被标记的数据。

本发明采用上述方法可有效地减少计算机内部的资源占用，实现最快速地抓取。

当然，本发明内容流生成及发布系统的另一种抓取方法，其中包括如下步骤：

STEP 1、内容流抓取部抓取数据；

STEP 2、内容流抓取部将抓取到的数据进行筛选，并删除重复数据。

其中筛选包括如下步骤：

所述内容流抓取部将所述将同一域名下的重复网页URL中query部分进行比较，查找query部分中赋值不同的参量作为无效参量，并去除所述无效参量。

当然，本发明内容流生成及发布系统的另一种抓取方法，其中包括如下步骤：

STEP 1、内容流抓取部缓存数据；

STEP 2、内容流抓取部将缓存到的数据与其它待抓取的数据进行对比，

若缓存到的数据与其它待抓取的数据相同，则结束；

若缓存到的数据与其他待抓取的数据不同，则抓取。

其中筛选包括如下步骤：

以缓存到的数据的字符串中的一大写字母至另一大写字母之前为字符，以字符为关键字搜索其它待抓取数据。

以上所述，仅为本发明的具体实施方式，但是，本发明的保护范围不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替代，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (13)

1.一种内容流生成及发布系统，其包括内容流抓取部、内容库、设计策略部、编辑平台、发布平台以及输入/输出接口，其中所述内容流抓取部通过所述输入/输出接口从多个不同类型的内容平台抓取多种不同类型的内容，所述设计策略平台预置不同的策略和计划，所述内容库根据所述设计策略平台中预置的策略对所述内容流抓取部抓取的多种不同类型的内容进行存储，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库中存储的内容进行编辑从而生成内容流，所述发布平台根据所述设计策略平台中预置的策略将生成的内容流通过所述输入/输出接口发布至发布界面，其中，所述设计策略平台能够设置内容流发布时间表，和/或根据预设的时间、关键词、社交媒体账号、发布渠道中的至少一个设置手动或自动发布内容流；

所述内容流抓取部将抓取的不同类型的内容分段为不同类型的数据结构，所述内容库对所述不同类型的数据结构进行存储并生成相应的数据结构清单；

所述内容库中至少存储第一类型的数据结构以及第二类型的数据结构，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库中存储的内容进行编辑从而生成包括根据所述第一类型的数据结构生成第一内容流，并在固定的位置以及预置的时间在所述第一内容流中插入所述第二类型的数据结构从而生成第二内容流。

2.根据权利要求1所述的内容流生成及发布系统，其还包括素材库，所述编辑平台根据所述设计策略平台中预置的策略对所述内容库中存储的内容以及素材库中的内容进行编辑，从而生成内容流。

3.根据权利要求1所述的内容流生成及发布系统，其中所述第二内容基于与客户端平台相关的一个或者多个特性和/或基于之前提供的内容的一个或者多个特性而选择。

4.根据权利要求1所述的内容流生成及发布系统，其中所述设计策略平台预置不同的策略包括以下至少一种：

a)划分不同的发布频道，并为不同的发布频道设置发布容量；

b)划分不同的发布频道，并为不同的发布频道设置收费标准；以及

c)划分不同的发布频道，并为不同的发布频道设置发布时间；

其中所述发布平台将生成的内容流分发到不同的发布频道，并最终通过所述输入/输出接口发布至发布界面。

5.根据权利要求4所述的内容流生成及发布系统，其还包括加密平台，所述加密平台根据不同发布频道对应的频道号以及所述发布平台提供的加密密钥生成发布频道加密密钥，以便对不同的发布频道上的内容流进行加密。

6.根据权利要求4所述的内容流生成及发布系统，所述设计策略平台预置不同的策略还包括分别为不同类型的内容和不同的发布频道指定不同的优先级。

7.根据权利要求6所述的内容流生成及发布系统，其还包括优化单元，所述优化单元对所述内容库中存储的相同的内容进行合并，并且提高合并后内容的优先级。

8.根据权利要求1所述的内容流生成及发布系统，其还包括分析单元，所述分析单元根据记录点击率、停留时间、地域分布、浏览器的类型、跳入和跳出URL链接、最感兴趣的内容、评价和转发率以及客户转化率中的至少一个确定内容的受欢迎程度。

9.根据权利要求1-8任意一项所述的内容流生成及发布系统的抓取方法，其中包括如下步骤：

STEP 1、所述内容流抓取部抓取数据，同时将待抓取库的内容进行筛选，将重复内容进行标记；

STEP 2、所述内容流抓取部抓取未被标记的数据。

10.根据权利要求1-8任意一项所述的内容流生成及发布系统的抓取方法，其中包括如下步骤：

STEP 1、内容流抓取部抓取数据；

STEP 2、内容流抓取部将抓取到的数据进行筛选，并删除重复数据。

11.根据权利要求1-8任意一项所述的内容流生成及发布系统的抓取方法，其中包括如下步骤：

STEP 1、内容流抓取部缓存数据；

STEP 2、内容流抓取部将缓存到的数据与其它待抓取的数据进行对比，

若缓存到的数据与其它待抓取的数据相同，则结束；

若缓存到的数据与其他待抓取的数据不同，则抓取。

12.根据权利要求10所述的内容流生成及发布系统的抓取方法，其中筛选包括如下步骤：

所述内容流抓取部将同一域名下的重复网页URL中query部分进行比较，查找query部分中赋值不同的参量作为无效参量，并去除所述无效参量。

13.根据权利要求11所述的内容流生成及发布系统的抓取方法，其中筛选包括如下步骤：

以缓存到的数据的字符串中的一大写字母至另一大写字母之前为字符，以字符为关键字搜索其它待抓取数据。