CN102195928A - 一种新媒体节目数据完整性校验的系统 - Google Patents

Abstract

本发明提供了一种新媒体节目数据完整性校验的系统，包括校验服务器和多个校验线程；其中，所述校验服务器与外界的任务源系统相连，包括：接收组件，用于提供任务接口，并在该任务接口被所述任务源系统调用时，接收相应的校验任务，其中，所述校验任务的信息包括校验方式和校验类型；执行组件，用于启动所述校验线程，执行所接收的校验任务。本发明的系统可以灵活接入新媒体制播流程，且能够提高校验效率。

Description

一种新媒体节目数据完整性校验的系统

技术领域

本发明涉及新媒体节目校验技术领域，特别是涉及一种新媒体节目数据完整性校验的系统。

背景技术

随着信息技术的发展，数字电视、移动电视、手机媒体、IPTV(交互式网络电视，Internet Protocol Television)等电视台新媒体业务应运而生，且得到了飞速发展，进而导致新媒体节目的制作和发布播出量也随之增长迅速。

现有的新媒体制播系统一般包括新媒体平台和生产服务装置，电视台可根据需要在新媒体平台上定义制播流程，其中，所述生产流程往往包括多个流程节点，且每个流程节点具有对应的生产服务装置，例如，所述生产服务装置可以是转码系统、审核系统、发布系统等装置；这样，在执行所述制播流程时，每个流程节点都会去调用相应的生产服务装置。

由于在新媒体平台中，往往存在媒体数据文件以及元数据文件反复拷贝迁移的情况，例如，从制作系统迁移到播出系统，或是从转码系统迁移到播出系统，都需要文件位置的改变；通常，还可能会存在文件的合成转码等新文件的生成情形；因此，为减少错误文件的出现，降低制播风险，需要一种数据完整性的校验机制。

然而，在旧的新媒体制播系统中，文件的改变通常没有数据完整性的校验机制，或者，即使有校验机制，其也不能接入制播流程中，需要在中间进行人工校验，这样，只有校验通过才能执行下一个流程节点，故现有的校验机制很不灵活，不能在制播流程中自动化地一气呵成；此外，所述人工校验需要人工添加校验任务，并且同一时间只能执行一个任务，导致校验效率低下。

总之，需要本领域技术人员迫切解决的一个技术问题就是：如何能够提高现有校验机制的灵活性和校验效率。

发明内容

本发明所要解决的技术问题是提供一种新媒体节目数据完整性校验的系统，用以灵活接入新媒体制播流程，且提高校验效率。

为了解决上述问题，本发明公开了一种新媒体节目数据完整性校验的系统，其特征在于，包括校验服务器和多个校验线程；

其中，所述校验服务器与外界的任务源系统相连，包括：

接收组件，用于提供任务接口，并在该任务接口被所述任务源系统调用时，接收相应的校验任务，其中，所述校验任务的信息包括校验方式和校验类型；

执行组件，用于启动所述校验线程，执行所接收的校验任务。

优选的，所述接收组件包括：

定义模块，用于针对校验任务，定义Web Service的任务接口；

添加模块，用于在该任务接口被所述任务源系统调用时，添加相应的校验任务。

优选的，所述校验服务器还包括：

数据库，用于存储所接收的校验任务；

扫描引擎组件，用于扫描所述数据库，并在发现有校验任务时，触发所述执行组件。

优选的，所述校验任务的信息还包括任务优先级和时间期限信息；

所述执行组件，用于根据所述任务优先级和时间期限信息，执行扫描得到的校验任务。

优选的，所述校验服务器还包括：

校验进度汇报组件，用于向任务源系统汇报所述校验任务的执行进度。

优选的，所述校验服务器还包括：

校验结果汇报组件，用于向任务源系统汇报所述校验任务的执行结果。

优选的，在执行校验任务时，所述执行组件动态调整需要读取的新媒体节目数据文件的块大小。

优选的，所述任务源系统为新媒体平台；

所述新媒体平台负责配置校验任务相关流程节点，并在执行所述校验任务相关流程节点时，调用所述任务接口，并通过该任务接口进行校验任务信息的传递，由所述执行组件进行新媒体节目数据文件的校验。

优选的，所述校验类型包括生成新校验码类型和已存在文件校验类型。

优选的，所述校验方式包括消息摘要算法、安全散列算法和循环冗余校验算法。

与现有技术相比，本发明具有以下优点：

本发明在校验系统中设置校验服务器和多个校验线程，并在校验服务器中进一步设置接收组件和执行组件；由于所述接收组件提供任务接口，以接收外界任务源系统的校验任务，这样，作为所述任务源系统，新媒体平台可以在新媒体制播流程中定义与校验任务相关的流程节点后，调用所述任务接口，以执行该流程节点；因此，本发明可以在新媒体制播流程的任意流程节点处，完成任意新媒体节目数据文件的校验任务，从而本发明的校验系统可以灵活接入新媒体制播流程；

其次，除新媒体平台外，本发明的任务接口还可以供其它系统调用，如媒资系统、播出系统等，以执行独立的校验任务，故本发明可以满足多系统调用的需求；

再次，一旦接收到校验任务，执行组件即可启动所述校验线程进行任务的执行；由于本发明具有多个校验线程，故相对于现有技术，需要人工添加校验任务，并且同一时间只能执行一个任务，本发明可以自动添加任务，且可同时执行多个任务，因而具有校验效率高、方便的优点；

最后，由于接收到的校验任务中包括有校验方式和校验类型等校验任务信息，因此，本发明可以支持MD5、CRC32、SHA-32等多种校验方式，可以支持生成新校验码和已存在文件校验类型等校验类型。

附图说明

图1是本发明一种新媒体节目数据完整性校验的系统实施例1的结构图；

图2是本发明一种在新媒体制播流程的应用示例；

图3是本发明一种新媒体节目数据完整性校验的系统实施例2的结构图；

图4是本发明一种新媒体节目数据完整性校验的系统实施例3的结构图。

具体实施方式

为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。

本发明实施例的核心构思之一在于，在校验系统中提供任务接口，供外界系统调用以发起校验任务；这样，如果在新媒体制播流程中定义与校验任务相关的流程节点，那么，在执行所述流程节点时，只需调用校验系统所提供的任务接口；因此，可以在新媒体制播流程的任意流程节点处，完成任意新媒体节目数据文件的校验任务，从而本发明的校验系统可以灵活接入新媒体制播流程。

参照图1，示出了本发明一种新媒体节目数据完整性校验的系统实施例1的结构图，具体可以包括校验服务器11和多个校验线程12；

其中，所述校验服务器11与外界的任务源系统相连，具体可以包括：

接收组件111，用于提供任务接口，并在该任务接口被所述任务源系统调用时，接收相应的校验任务，其中，所述校验任务的信息可以包括校验方式和校验类型；

执行组件112，用于启动所述校验线程12，执行所接收的校验任务。

在具体实现中，所述任务源系统可以是新媒体平台，也可以是其它需要校验的系统，如媒资系统、播出系统等，本发明可以满足多系统调用的需求。

接收组件111、

在实际中，本发明校验系统可提供对外的Web Service接口以添加校验任务，同时采用XML Schema规范约束校验任务的参数，并在该参数中严格约定校验方式、校验类型等校验任务信息。

例如，所述任务源系统可将校验任务以XML文件的形式传输到接收组件111，然后，由接收组件111根据XML Schema规范，将校验任务的参数转换成自己的任务参数。

上述情况下，所述接收组件111的结构可以包括：

定义模块A1，用于针对校验任务，定义Web Service的任务接口；

添加模块A2，用于在该任务接口被所述任务源系统调用时，添加相应的校验任务。

另外，本发明支持的校验方式可以包括消息摘要算法、安全散列算法和循环冗余校验算法；例如，MD5(消息摘要算法第五版，Message DigestAlgorithm 5)、SHA-32(安全散列算法第32版，Secure Hash Algorithm 32)和CRC32(循环冗余校验算法第32版，CyclicRedundancyCheck32)等检验方式。

在新媒体制播系统中，文件的操作比较多，如合成文件会生成新文件，同时需要伴随校验码；转码需要对源文件校验，对生成新文件生成新的校验码；迁移后也需要验证迁移前后的文件是否一致；因此，应当在校验任务的信息中设置校验类型信息，其中，所述校验类型可以包括生成新校验码和已存在文件校验类型两种类型。

在实际应用中，除了校验方式、校验类型外，所述校验任务信息还可以包括其它信息，例如，结果方式信息，也即，任务源系统可以在校验任务中约束校验任务执行结果的展示方式或者存储方式；又如，文件相关信息(如文件大小信息)等，这些校验任务信息均可在任务参数中予以约定，本发明对此不加以限制。

执行组件112、用于启动所述校验线程，执行所接收的校验任务。

以下通过以下两种校验类型对校验任务的执行进行详细说明：

1、生成新校验码类型；

本类型校验任务一般适用于新生成的新媒体节目数据文件，目标是为其生成新的校验码；在实际中，一个校验任务可能是针对一个文件组的校验，该文件组可以包括若干个新媒体节目数据文件，且以文件列表的形式出现；另外，假设该校验任务的执行类型为生成新校验码，校验方式为MD5，那么，在执行时，校验线程12可根据该校验任务中的文件列表计算出每个文件的校验码，然后根据校验任务参数中的约定，生成校验码文件，如5f0c9836c554d5f6fb1f8e0178f54e3e.md5。

2、已存在文件校验类型。

本类型校验任务一般适用于迁移后的新媒体节目数据文件，目标是验证迁移前后的文件是否一致，也即，本类型校验任务的执行结果可以包括校验成功、失败、出错等情形；以MD5校验方式为例，在执行校验任务时，校验线程12一般首先根据新媒体节目数据文件计算该文件的MD5码，然后与原始的MD5码进行对比以确认文件是否被更改。

在实际中，无论执行哪一种类型的校验任务，都需要耗费一定的时间，因此，如何在尽可能短的时间内完成校验任务校验服务效率的最大体现。

在本发明的一种优选实施例中，可以通过以下两方面来提高校验效率：

一是采用高效的校验算法，例如，可以采用成熟的Java MD5、CRC32等校验算法；

二是采用相对高效的大文件校验策略，也即，在执行校验任务时，所述执行组件112可以动态调整需要读取的新媒体节目数据文件的块(buffer)大小，以达到最快读取文件的目的。

由于校验机制的固有特性和文件读取在内存中存在矛盾，如果没有大文件策略可能导致读取文件较慢，并且会造成内存溢出的灾难性错误，进而导致校验值的计算速度慢，因而，本发明可以提高读取文件的速度，从而提高校验效率。

本发明可以应用于新媒体制播流程，此时，所述任务源系统可以为新媒体平台；所述新媒体平台负责配置校验任务相关流程节点，并在执行所述校验任务相关流程节点时，调用所述任务接口，并通过该任务接口进行校验任务信息的传递，由所述执行组件进行新媒体节目数据文件的校验。

为使本领域技术人员更好地理解本发明，参考图2，示出了本发明一种在新媒体制播流程的应用示例，图中该制播流程可以包括多个流程节点，其中，“文件校验”节点22在“文件迁移”节点21后，因此，在执行该“文件校验”节点22时，可调用本发明的任务接口，并通过该任务接口传递校验任务信息，例如，所述校验任务信息中的校验类型可以为已存在文件校验类型等；“生成文件校验码”节点25在“平台转码”节点23和“审查”节点24之后，因此，在执行该“生成文件校验码”节点25时，可调用本发明的任务接口，并通过该任务接口传递校验任务信息，如所述校验任务信息中的校验类型可以为生成新校验码类型等。

可见，通过在新媒体平台上配置“文件校验”节点22和“生成文件校验码”节点25，可以做到文件移动则校验，新文件生成后通过审核再进行校验码生成，从而保证新媒体节目数据文件从制作系统出发后的数据完整性。

可以理解，本发明可以在新媒体制播流程的任意流程节点处，完成任意新媒体节目数据文件的校验任务，从而本发明的校验系统具有灵活性的特点。

参照图3，示出了本发明一种新媒体节目数据完整性校验的系统实施例2的结构图，具体可以包括校验服务器31和多个校验线程32；

其中，所述校验服务器31与外界的任务源系统相连，具体可以包括：

接收组件311，用于提供任务接口，并在该任务接口被所述任务源系统调用时，接收相应的校验任务，其中，所述校验任务的信息可以包括校验方式和校验类型；

数据库312，用于存储所接收的校验任务；

扫描引擎组件313，用于扫描所述数据库，并在发现有校验任务时，触发所述执行组件314；

执行组件314，用于启动所述校验线程32，执行所接收的校验任务。

本实施例与实施例1的区别在于，在校验服务器31中增加数据库312和扫描引擎组件313，由于所述数据库312存储了接收的校验任务，且一旦扫描发现有校验任务，所述扫描引擎组件313即可触发执行组件314，因而，本实施例可以提高校验任务执行的及时性，进而提高校验效率。

进一步，当扫描发现有多个校验任务时，为对这些校验任务进行合理地分配，所述校验任务的信息还可以包括任务优先级和时间期限信息；

此时，所述执行组件314，则可用于根据所述任务优先级和时间期限信息，执行扫描得到的校验任务。

在实际中，所述时间期限信息可以指任务源系统和校验系统约定的校验任务失效的时间，在该时间期限后，不管该校验任务是否执行，都将失去效力，从而应在数据库中删除。

例如，数据库中存在三个校验任务A、B、C，其任务优先级分别为1、2、2，时间期限分别是12:00:00、12:30:00和13:00:00，那么，可以首先使用数据库的查询排序方式列出优先级最高的校验任务B、C，然后，在优先级为2的校验任务B、C中，列出在12:30:00执行的校验任务B为最优先发给相应的校验线程32。

参照图4，示出了本发明一种新媒体节目数据完整性校验的系统实施例3的结构图，具体可以包括校验服务器41和多个校验线程42；

其中，所述校验服务器41与外界的任务源系统相连，具体可以包括：

接收组件411，用于提供任务接口，并在该任务接口被所述任务源系统调用时，接收相应的校验任务，其中，所述校验任务的信息可以包括校验方式和校验类型；

执行组件412，用于启动所述校验线程42，执行所接收的校验任务；

校验进度汇报组件413，用于向任务源系统汇报所述校验任务的执行进度；

校验结果汇报组件414，用于向任务源系统汇报所述校验任务的执行结果。

以任务源系统为新媒体平台为例，在执行流程节点时，新媒体平台作为调用方，本发明的校验系统作为被调用方，如果有一种汇报机制，能够使被调用方有了状态或结果时汇报给调用方，那么，在新媒体平台，每一个流程节点的执行状态都可以一目了然，从而，管理员可以对制播流程进行全盘的监控和了解。

综上，本实施例与实施例1的区别在于，可以在转码系统中增加校验进度汇报组件413和校验结果汇报组件414，分别用来实现任务状态和任务结果的汇报。

在具体实现中，可以采用配置时间间隔的汇报方式，由新媒体平台提供Web Service的第二任务接口。

例如，可以根据校验任务的主要生命周期，设置“正在配置”、“已排队”、“正在运行”、“已完成”和“失败”等任务状态；其中，“正在配置”可代表校验任务已位于数据库中，但还未提交到队列；“已排队”可以表示校验任务正在等待安排；“正在运行”可表示校验任务正在某个校验线程42上运行；“已完成”可表示校验任务已成功完成；“失败”则表示校验任务未能完成；这样，在固定的配置时间间隔内如果有任务状态变化，校验进度汇报组件413则可调用该第二任务接口进行汇报。

本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。

本发明可以应用于新媒体平台、媒资系统、播出系统等，用以在生成新数据或媒体文件时有伴随校验码，在已有文件位置变化时进行验证，从而保证新媒体节目数据的完整性，同时尽可能地提高校验效率。

以上对本发明所提供的一种新媒体节目数据完整性校验的系统，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种新媒体节目数据完整性校验的系统，其特征在于，包括校验服务器和多个校验线程；

其中，所述校验服务器与外界的任务源系统相连，包括：

接收组件，用于提供任务接口，并在该任务接口被所述任务源系统调用时，接收相应的校验任务，其中，所述校验任务的信息包括校验方式和校验类型；

执行组件，用于启动所述校验线程，执行所接收的校验任务。

2.如权利要求1所述的系统，其特征在于，所述接收组件包括：

定义模块，用于针对校验任务，定义Web Service的任务接口；

添加模块，用于在该任务接口被所述任务源系统调用时，添加相应的校验任务。

3.如权利要求1所述的系统，其特征在于，所述校验服务器还包括：

数据库，用于存储所接收的校验任务；

扫描引擎组件，用于扫描所述数据库，并在发现有校验任务时，触发所述执行组件。

4.如权利要求3所述的系统，其特征在于，所述校验任务的信息还包括任务优先级和时间期限信息；

所述执行组件，用于根据所述任务优先级和时间期限信息，执行扫描得到的校验任务。

5.如权利要求1所述的系统，其特征在于，所述校验服务器还包括：

校验进度汇报组件，用于向任务源系统汇报所述校验任务的执行进度。

6.如权利要求1所述的系统，其特征在于，所述校验服务器还包括：

校验结果汇报组件，用于向任务源系统汇报所述校验任务的执行结果。

7.如权利要求1所述的系统，其特征在于，在执行校验任务时，所述执行组件动态调整需要读取的新媒体节目数据文件的块大小。

8.如权利要求1所述的系统，其特征在于，所述任务源系统为新媒体平台；

所述新媒体平台负责配置校验任务相关流程节点，并在执行所述校验任务相关流程节点时，调用所述任务接口，并通过该任务接口进行校验任务信息的传递，由所述执行组件进行新媒体节目数据文件的校验。

9.如权利要求1所述的系统，其特征在于，所述校验类型包括生成新校验码类型和已存在文件校验类型。

10.如权利要求1所述的系统，其特征在于，所述校验方式包括消息摘要算法、安全散列算法和循环冗余校验算法。

Images