CN105812842A

CN105812842A - 一种检测网络视频地址的方法和系统

Info

Publication number: CN105812842A
Application number: CN201410843232.3A
Authority: CN
Inventors: 宋轲
Original assignee: TCL Corp
Current assignee: TCL Corp
Priority date: 2014-12-30
Filing date: 2014-12-30
Publication date: 2016-07-27
Anticipated expiration: 2034-12-30
Also published as: CN105812842B

Abstract

本发明提供一种检测网络视频地址的方法和系统，以及时准确地发现视频地址是否失效。所述方法包括：根据视频检索条件和检测时间值，定时触发从视频地址数据库获取N个视频地址，N为大于1的自然数；将N个视频地址按照每组N/n个视频地址的方式分成n组后分别分配给n个检测执行模块，所述n为小于或等于所述N的自然数；n个检测执行模块中的每个检测执行模块同时检测分配至各自名下的视频地址的有效性。一方面，本发明能够及时发现已经失效的网络视频地址，从视频地址数据库中删除相应的视频源，从而避免了用户点开链接却不能观看到视频而给用户带来的负面影响；另一方面，本发明提供的并发检测的方式能够提高视频地址有效性检测的效率。

Description

一种检测网络视频地址的方法和系统

技术领域

本发明属于计算机网络领域，尤其涉及一种检测网络视频地址的方法和系统。

背景技术

网络视频，是指由网络视频服务商提供的、以流媒体为播放格式的、可以在线直播或点播的声像文件。从狭义角度而言，只有网络电影、电视剧、新闻、综艺节目、广告等视频节目才能称为网络视频，而从广义角度，网络视频还包括自拍Dv短片、视频聊天和视频游戏等行为。

随着网络视频的兴起，各大视频网站都推出了丰富的网络视频内容。为了给用户提供更多的视频源，现有的一些视频网站将来自不同视频网站的视频聚合起来，提供其视频地址的链接。如此，用户只需要进到这样一个视频网站，打开其中的链接，就能方便地找到视频源。

然而，由于种种原因，上述从各个视频网站聚合起来的视频，过了一段时间后，其视频地址会失效，导致不能够播放。另一方面，视频地址数量庞大，也需要通过检测，及时发现失效的视频地址。

发明内容

本发明的目的在于提供一种检测网络视频地址的方法和系统，以及时准确地发现视频地址是否失效。

本发明是这样实现的，一种检测网络视频地址的方法，所述方法包括：

根据视频检索条件和检测时间值，定时触发从视频地址数据库获取N个视频地址，所述N为大于1的自然数；

将所述N个视频地址按照每组N/n个视频地址的方式分成n组后分别分配给n个检测执行模块，所述n为小于或等于所述N的自然数；

所述n个检测执行模块中的每个检测执行模块同时检测分配至各自名下的视频地址的有效性。

本发明的另一目的在于提供一种检测网络视频地址的系统，所述系统包括调度模块和分配模块，所述调度模块包括监听模块和n个检测执行模块，所述n为小于或等于N的自然数，所述N为大于1的自然数；

所述监听模块，用于根据视频检索条件和检测时间值，定时触发从视频地址数据库获取N个视频地址；

所述分配模块，用于将所述N个视频地址按照每组N/n个视频地址的方式分成n组后分别分配给所述n个检测执行模块；

所述n个检测执行模块中的每个检测执行模块，用于同时检测分配至各自名下的视频地址的有效性。

从上述本发明技术方案可知，与现有技术相比，一方面，由于是采取定时触发从视频地址数据库获取N个视频地址进行检测，因此，能够及时发现已经失效的网络视频地址，从视频地址数据库中删除相应的视频源，从而避免了用户点开链接却不能观看到视频而给用户带来的负面影响；另一方面，由于每个检测执行模块是同时检测分配至各自名下的视频地址的有效性，因此，这种并发检测的方式能够提高视频地址有效性检测的效率。

附图说明

图1是本发明实施例一提供的是本发明实施例一提供的检测网络视频地址的方法的实现流程示意图；

图2是本发明实施例二提供的以树形结构组织的配置文件示意图；

图3是本发明实施例三提供的检测网络视频地址的系统的结构示意图；

图4是本发明实施例四提供的检测网络视频地址的系统的结构示意图；

图5是本发明实施例五提供的检测网络视频地址的系统的结构示意图；

图6是本发明实施例六提供的检测网络视频地址的系统的结构示意图；

图7是本发明实施例七提供的检测网络视频地址的系统的结构示意图。

具体实施方式

为了使本发明的目的、技术方案及有益效果更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明实施例提供一种检测网络视频地址的方法，所述方法包括：根据视频检索条件和检测时间值，定时触发从视频地址数据库获取N个视频地址，所述N为大于1的自然数；将所述N个视频地址按照每组N/n个视频地址的方式分成n组后分别分配给n个检测执行模块，所述n为小于或等于所述N的自然数；所述n个检测执行模块中的每个检测执行模块同时检测分配至各自名下的视频地址的有效性。本发明实施例还提供相应的检测网络视频地址的系统。以下分别进行详细说明。

请参阅附图1，是本发明实施例一提供的检测网络视频地址的方法的实现流程，该方法可应用于收集各种网络视频地址的视频网站。附图1示例的检测网络视频地址的方法主要包括以下步骤S101至步骤S103：

S101，根据视频检索条件和检测时间值，定时触发从视频地址数据库获取N个视频地址，其中，N为大于1的自然数。

作为本发明一个实施例，根据视频检索条件和检测时间值，定时触发从视频地址数据库获取N个视频地址包括如下步骤S1011和步骤S1012：

S1011，分别从任务触发时间表和任务参数表读取检测时间值和视频检索条件。

在本发明实施例中，任务触发时间表存放任务名称和检测时间值即开始执行所述任务名称命名的任务的时间，具体地，在本发明实施例中，任务指的是检测一组视频地址有效性的完整执行过程。任务参数表存放执行任务名称命名的任务时所需参数即视频检索条件，主要包括视频网站编号、视频分类名、视频子分类名等属性。

需要说明的是，检测时间值和视频检索条件是每个配置文件的主要内容，而配置文件存储在文件配置模块。在本发明实施例中，文件配置模块存储有以树形结构将所述检测时间值和所述视频检索条件组织而成的配置文件。具体地，视频网站编号为根节点，检测时间值为叶子节点，任务参数表的内容即视频检索条件为非叶子节点。如此，只需要遍历叶子节点，就能够很快地获取检测时间值即开始执行一个任务名称命名的任务的时间；遍历根节点到叶子节点之间的非叶子节点，就能够获取一个任务执行时需要的参数即视频检索条件；以树形结构将所述检测时间值和所述视频检索条件组织而成的配置文件如附图2所示，以下是以xml描述的附图2所示树形结构的配置文件：

上述以xml描述的配置文件中，举例说明如下：site＝1表示为优酷网的视频网站，site＝2表示为搜狐视频的视频网站，site＝3表示为腾讯视频的视频网站；cate＝电影，表示视频分类为电影，cate＝电视剧，表示视频分类为电视剧；subcate＝爱情，表示视频子分类为爱情，subcate＝探索，表示视频子分类为探索；task-name表示任务名称；cron-time是以linux的cron表达式表示的任务调度时间，即开始执行一个任务名称命名的任务的时间。

由于对某个待检测视频网站即视频地址对应的视频网站，本发明均采用上述配置文件的形式引入，如此，每次新增一个待检测视频网站，只需要在上述配置文件中添加该新增待检测视频网站的相关信息即视频网站编号、视频分类名和视频子分类名等，而不需要的待检测网站，直接从配置文件中移除该待检测网站的相关信息即可。因此，不需要修改程序，减小了程序模块之间的耦合性，从而降低软件运维的成本。

在本发明实施例中，可以事先通过对树形结构的配置文件的遍历，将检测时间值和视频检索条件分别写入到任务触发时间表和任务参数表；在配置文件有更新时，将更新后的检测时间值和视频检索条件分别写入到任务触发时间表和任务参数表，无需停止应用程序的运行即可实现内容的更新。换言之，分别从任务触发时间表和任务参数表读取所述检测时间值和视频检索条件之前，还可以包括：从文件配置模块加载配置文件即以树形结构将检测时间值和视频检索条件组织而成的配置文件；将所述检测时间和视频检索条件分别写入所述任务触发时间表和所述任务参数表。

S1012，在检测时间值表示的时间到达时，触发n个检测执行模块从视频地址数据库获取N个视频地址。

在本发明实施例中，检测执行模块以线程实现，n个检测执行模块以n个并发的线程实现，所谓并发，指的是n个线程同时开始执行任务触发时间表中所存放一个任务名称命名的任务，也就是这n个线程同时开始检测分配至各自名下的视频地址的有效性。

S102，将N个视频地址按照每组N/n个视频地址的方式分成n组后分别分配给n个检测执行模块，其中，n为小于或等于N的自然数。

如前所述，n个检测执行模块以n个并发的线程实现。当将N个视频地址按照每组N/n个视频地址的方式分成n组后分别分配给n个检测执行模块时，相当于一个线程分配包含N/n个视频地址的一组视频地址。

S103，n个检测执行模块中的每个检测执行模块同时检测分配至各自名下的视频地址的有效性。

具体地，作为本发明一个实施例，n个检测执行模块中的每个检测执行模块同时检测分配至各自名下的视频地址的有效性包括如下步骤S1031至步骤S1033：

S1031，启动线程。

如前所述，检测执行模块以线程实现，启动线程，意味着检测执行模块开始执行任务；当n个线程同时启动，意味着n个线程或者n个检测执行模块开始执行任务即检测分配至各自名下的视频地址的有效性。

S1032，向分配至自身名下的其中一个视频地址A_url对应的视频源发送http请求。

S1033，根据所述视频地址A_url对应的视频源是否返回数据和返回的数据，判断所述视频地址A_url的有效性，直至所述每个检测执行模块名下分配的视频地址的有效性都检测完毕。

如前所述，n个检测执行模块中，每个检测执行模块分配有包含N/n个视频地址的一组视频地址。n个线程同时开始执行时，每个检测执行模块向分配至自身名下的其中一个视频地址A_url对应的视频源发送http请求。然后，根据视频地址A_url对应的视频源是否返回数据，判断所述视频地址A_url的有效性，直至每个检测执行模块名下分配的视频地址的有效性都检测完毕。

具体地，在本发明实施例中，根据视频地址A_url对应的视频源是否返回数据和返回的数据，判断所述视频地址A_url的有效性，直至每个检测执行模块名下分配的视频地址的有效性都检测完毕包括如下步骤S’1031至步骤S’1034：

S’1031，若首次或紧接所述首次之后再次向视频地址A_url对应的视频源发送http请求后，视频地址A_url对应的视频源返回数据，则根据返回的数据判断所述视频地址A_url是否为有效视频地址。

一般地，若向有效的视频地址对应的视频源发送http请求，其返回的数据的包头中主要包括宽度、高度和帧速率的属性信息。因此，在本发明实施例中，若视频地址A_url对应的视频源返回数据，判断所述视频地址A_url是否为有效视频地址的方法是：从返回的数据包中提取出包头信息，对包头信息进行解析。若包头信息中包括宽度、高度、帧速率等属性，则判断视频地址A_url是有效的视频地址，否则，判断视频地址A_url是无效的视频地址。

S’1032，若判断所述视频地址A_url为有效视频地址，则向分配至自身名下的另一个视频地址B_url对应的视频源发送http请求，直至每个检测执行模块名下分配的视频地址的有效性都检测完毕。

S’1033，若连续两次向视频地址A_url对应的视频源发送http请求后，视频地址A_url对应的视频源均没有返回数据，则验证网络是否发生故障。

为了防止错误地将有效的视频地址判断为无效的视频地址，若连续两次向视频地址A_url对应的视频源发送http请求后，视频地址A_url对应的视频源均没有返回数据，则应考虑是否网络出了问题，即，若连续两次向视频地址A_url对应的视频源发送http请求后，视频地址A_url对应的视频源均没有返回数据，则可以验证网络是否发生故障。在本发明实施例中，一种验证网络是否发生故障的办法是去ping网络，若网络能够ping通，则验证网络没有发生故障，否则，验证网络发生故障。

S’1034，若验证所述网络没有发生故障，则判断所述视频地址A_url为无效视频地址，否则，对所述视频地址A_url进行其他处理。

若连续两次向视频地址A_url对应的视频源发送http请求后均没有返回数据，并且，经过步骤S’1033的验证，网络没有发生故障，则可以判断所述视频地址A_url为无效视频地址。若连续两次向视频地址A_url对应的视频源发送http请求后，视频地址A_url对应的视频源均没有返回数据，但经过步骤S’1033的验证，网络发生故障，则无法判断所述视频地址A_url是否有效，可以对所述视频地址A_url进行其他处理，例如，将所述视频地址A_url存入无法判断的数据表中。

从上述附图1示例的检测网络视频地址的方法可知，与现有技术相比，一方面，由于是采取定时触发从视频地址数据库获取N个视频地址进行检测，因此，能够及时发现已经失效的网络视频地址，从视频地址数据库中删除相应的视频源，从而避免了用户点开链接却不能观看到视频而给用户带来的负面影响；另一方面，由于每个检测执行模块是同时检测分配至各自名下的视频地址的有效性，因此，这种并发检测的方式能够提高视频地址有效性检测的效率。

请参阅附图3，是本发明实施例三提供的检测网络视频地址的系统的结构示意图。为了便于说明，附图3仅示出了与本发明实施例相关的部分。附图3示例的检测网络视频地址的系统主要包括调度模块301和分配模块302，所述调度模块301包括监听模块303和n个检测执行模块3041至304n，所述n为小于或等于N的自然数，所述N为大于1的自然数，其中：

监听模块303，用于根据视频检索条件和检测时间值，定时触发从视频地址数据库获取N个视频地址。

分配模块302，用于将所述获取的N个视频地址按照每组N/n个视频地址的方式分成n组后分别分配给所述n个检测执行模块。

如前所述，n个检测执行模块以n个并发的线程实现；当分配模块302将N个视频地址按照每组N/n个视频地址的方式分成n组后分别分配给n个检测执行模块3041至304n时，相当于一个线程分配包含N/n个视频地址的一组视频地址。

n个检测执行模块3041至304n中的每个检测执行模块，用于同时检测分配至各自名下的视频地址的有效性。

需要说明的是，以上附图3示例的检测网络视频地址的系统的实施方式中，各功能模块的划分仅是举例说明，实际应用中可以根据需要，例如相应硬件的配置要求或者软件的实现的便利考虑，而将上述功能分配由不同的功能模块完成，即将所述检测网络视频地址的系统的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。而且，实际应用中，本实施例中的相应的功能模块可以是由相应的硬件实现，也可以由相应的硬件执行相应的软件完成，例如，前述的监听模块，可以是具有执行前述根据视频检索条件和检测时间值，定时触发从视频地址数据库获取N个视频地址的硬件，例如监听器，也可以是能够执行相应计算机程序从而完成前述功能的一般处理器或者其他硬件设备；再如前述的分配模块，可以是执行将所述N个视频地址按照每组N/n个视频地址的方式分成n组后分别分配给所述n个检测执行模块的硬件，例如分配器，也可以是能够执行相应计算机程序从而完成前述功能的一般处理器或者其他硬件设备(本说明书提供的各个实施例都可应用上述描述原则)。

附图3示例的监听模块303可以包括读取单元401和触发单元402，如附图4所示本发明实施例四提供的检测网络视频地址的系统，其中：

读取单元401，用于分别从任务触发时间表和任务参数表读取所述检测时间值和视频检索条件；

触发单元402，用于在所述检测时间值表示的时间到达时，触发所述n个检测执行模块3041至304n从所述视频地址数据库获取所述N个视频地址。

在本发明实施例中，检测执行模块以线程实现，n个检测执行模块3041至304n以n个并发的线程实现，所谓并发，指的是n个线程同时开始执行任务触发时间表中所存放一个任务名称命名的任务，也就是这n个线程同时开始检测分配至各自名下的视频地址的有效性。

附图4示例的检测网络视频地址的系统还可以包括文件配置模块501，调度模块301还可以包括配置加载模块502，如附图5所示本发明实施例五提供的检测网络视频地址的系统，其中：

配置加载模块502，用于从文件配置模块加载配置文件，将所述检测时间和视频检索条件分别写入所述任务触发时间表和所述任务参数表；

文件配置模块501，用于存储有以树形结构将所述检测时间值和所述视频检索条件组织而成的配置文件。

附图3示例的n个检测执行模块3041至304n中的每个检测执行模块可以包括线程启动单元601、第一发送单元602和第一判断单元603，如附图6所示本发明实施例六提供的检测网络视频地址的系统，为了表示方便，图中以检测执行模块304i表示n个检测执行模块3041至304n中的每个检测执行模块，i为1至n中的任意一个自然数，其中：

线程启动单元601，用于启动线程；

第一发送单元602，用于向所述分配至自身名下的其中一个视频地址A_url对应的视频源发送http请求；

第一判断单元603，用于根据所述视频地址Aurl对应的视频源是否返回数据，判断所述视频地址Aurl的有效性，直至所述每个检测执行模块名下分配的视频地址的有效性都检测完毕。

附图6示例的第一判断单元603可以包括第二判断单元701、第二发送单元702、验证单元703和处理单元704，如附图7所示本发明实施例七提供的检测网络视频地址的系统，其中：

第二判断单元701，用于若第一发送单元602首次或紧接所述首次之后再次向所述视频地址A_url对应的视频源发送http请求后，所述视频地址A_url对应的视频源返回数据，则根据所述返回的数据判断所述视频地址A_url是否为有效视频地址；

第二发送单元702，用于若第二判断单元701判断所述视频地址A_url为有效视频地址，则向所述分配至自身名下的另一个视频地址B_url对应的视频源发送http请求，直至所述每个检测执行模块名下分配的视频地址的有效性都检测完毕；

验证单元703，用于若第一发送单元602连续两次向所述视频地址A_url对应的视频源发送http请求后，视频地址A_url对应的视频源均没有返回数据，则验证网络是否发生故障；

处理单元704，用于若验证单元703验证所述网络没有发生故障，则判断所述视频地址A_url为无效视频地址，否则，对所述视频地址A_url进行其他处理。

需要说明的是，上述装置各模块/单元之间的信息交互、执行过程等内容，由于与本发明方法实施例基于同一构思，其带来的技术效果与本发明方法实施例相同，具体内容可参见本发明方法实施例中的叙述，此处不再赘述。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：只读存储器(ROM，ReadOnlyMemory)、随机存取存储器(RAM，RandomAccessMemory)、磁盘或光盘等。

以上对本发明实施例所提供的一种检测网络视频地址的方法和系统进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims

1.一种检测网络视频地址的方法，其特征在于，所述方法包括：

2.如权利要求1所述的方法，其特征在于，所述根据视频检索条件和检测时间值，定时触发从视频地址数据库获取N个视频地址，包括：

分别从任务触发时间表和任务参数表读取所述检测时间值和视频检索条件；

在所述检测时间值表示的时间到达时，触发所述n个检测执行模块从所述视频地址数据库获取所述N个视频地址。

3.如权利要求2所述的方法，其特征在于，所述分别从任务触发时间表和任务参数表读取所述检测时间值和视频检索条件之前，所述方法还包括：

从文件配置模块加载配置文件，所述文件配置模块存储有以树形结构将所述检测时间值和所述视频检索条件组织而成的配置文件；

将所述检测时间和视频检索条件分别写入所述任务触发时间表和所述任务参数表。

4.如权利要求1所述的方法，其特征在于，所述n个检测执行模块中的每个检测执行模块同时检测分配至各自名下的视频地址的有效性，包括：

启动线程；

向所述分配至自身名下的其中一个视频地址Aurl对应的视频源发送http请求；

根据所述视频地址Aurl对应的视频源是否返回数据，判断所述视频地址Aurl的有效性，直至所述每个检测执行模块名下分配的视频地址的有效性都检测完毕。

5.如权利要求4所述的方法，其特征在于，所述根据所述视频地址Aurl对应的视频源是否返回数据，判断所述视频地址Aurl的有效性，直至所述每个检测执行模块名下分配的视频地址的有效性都检测完毕，包括：

若首次或紧接所述首次之后再次向所述视频地址Aurl对应的视频源发送http请求后，所述视频地址Aurl对应的视频源返回数据，则根据所述返回的数据判断所述视频地址Aurl是否为有效视频地址；

若判断所述视频地址Aurl为有效视频地址，则向所述分配至自身名下的另一个视频地址Burl对应的视频源发送http请求，直至所述每个检测执行模块名下分配的视频地址的有效性都检测完毕；

若连续两次向所述视频地址Aurl对应的视频源发送http请求后，视频地址Aurl对应的视频源均没有返回数据，则验证网络是否发生故障；

若验证所述网络没有发生故障，则判断所述视频地址Aurl为无效视频地址，否则，对所述视频地址Aurl进行其他处理。

6.一种检测网络视频地址的系统，其特征在于，所述系统包括调度模块和分配模块，所述调度模块包括监听模块和n个检测执行模块，所述n为小于或等于N的自然数，所述N为大于1的自然数；

7.如权利要求6所述的系统，其特征在于，所述监听模块包括：

读取单元，用于分别从任务触发时间表和任务参数表读取所述检测时间值和视频检索条件；

触发单元，用于在所述检测时间值表示的时间到达时，触发所述n个检测执行模块从所述视频地址数据库获取所述N个视频地址。

8.如权利要求7所述的系统，其特征在于，所述系统还包括文件配置模块，所述调度模块还包括配置加载模块；

所述配置加载模块，用于从文件配置模块加载配置文件，将所述检测时间和视频检索条件分别写入所述任务触发时间表和所述任务参数表；

所述文件配置模块，用于存储有以树形结构将所述检测时间值和所述视频检索条件组织而成的配置文件。

9.如权利要求6所述的系统，其特征在于，所述n个检测执行模块中的每个检测执行模块包括：

线程启动单元，用于启动线程；

第一发送单元，用于向所述分配至自身名下的其中一个视频地址Aurl对应的视频源发送http请求；

第一判断单元，用于根据所述视频地址Aurl对应的视频源是否返回数据，判断所述视频地址Aurl的有效性，直至所述每个检测执行模块名下分配的视频地址的有效性都检测完毕。

10.如权利要求9所述的系统，其特征在于，所述第一判断单元包括：

第二判断单元，用于若所述第一发送单元首次或紧接所述首次之后再次向所述视频地址Aurl对应的视频源发送http请求后，所述视频地址Aurl对应的视频源返回数据，则根据所述返回的数据判断所述视频地址Aurl是否为有效视频地址；

第二发送单元，用于若所述第二判断单元判断所述视频地址Aurl为有效视频地址，则向所述分配至自身名下的另一个视频地址Burl对应的视频源发送http请求，直至所述每个检测执行模块名下分配的视频地址的有效性都检测完毕；

验证单元，用于若所述第一发送单元连续两次向所述视频地址Aurl对应的视频源发送http请求后，视频地址Aurl对应的视频源均没有返回数据，则验证网络是否发生故障；

处理单元，用于若所述验证单元验证所述网络没有发生故障，则判断所述视频地址Aurl为无效视频地址，否则，对所述视频地址Aurl进行其他处理。