CN102682021B - 一种无侵入式数据统计方式的应用方法与系统 - Google Patents

Abstract

本发明公开了一种无侵入式数据统计方式的应用方法与系统。具体包括：监测统计数据并对数据有变化之处进行实时记录；对所述实时记录的变化情况，以命令形式进行记录，无需对变化的内容进行记录；根据实际情况对上述记录变化的命令进行数据统计缓存处理；根据需求对所述进行统计缓存的数据进行整体的刷新存储处理。通过本发明无侵入式的数据统计方式，使统计模块与业务流程处理完全解耦，增强了流程引擎的鲁棒性，也为统计数据的容错和数据重建提供了可能。

Description

一种无侵入式数据统计方式的应用方法与系统

技术领域

本发明涉及广电领域电视台的媒体资产管理系统技术领域，尤其涉及一种无侵入式数据统计方式的应用方法与系统。

背景技术

随着广电行业、数字媒体行业越来越快的发展，电视视频已经成为人们生活中重要内容之一，人们从电视视频节目中获取的信息也越来越多，所以对于电视台在信息采集、加工、发布的管理运营上和技术上都要实行革新。从某种角度上来讲，电视台在制作节目过程中的不同环节处理信息能力的高低，决定了其在社会上受关注和受欢迎的程度。

在媒体资产管理系统中存在着三种流程环节，分别是：上载编目流程、二次编目流程、下载流程。每种流程的不同环节均有不同的统计需求。例如，在上载编目流程中包含以下任务环节：上载、技审、转码、编目、归档、发布。其中上载和转码环节均会产生新的素材，而编目环节是人为编目著录信息环节，不会影响素材数量，但会改变元数据文件的内容。总之，他们具有不同的编目需求。

现有的媒体资产管理系统软件中的数据统计方式，通常采用流程参与式的统计信息产生机制，统计模块与业务流程处理是在一起的，既包括数据的统计也包括业务的统计，主要是按照流程处理，针对每个结点的所有数据信息都进行统计并存储，如果流程处理没有出现问题，则按照一个结点接着一个结点的方式进行统计存储，但是一旦出错则流程处理需要中断，并对原统计的数据需重新统计。

发明人在实现本发明的过程中，发现现有技术至少存在以下技术问题：

(1)数据统计内容复杂；

(2)数据统计过程不够灵活，出错则需要重新统计；

(3)稳定性差，耗费时间；

(4)流程参与式的数据统计方式影响业务流程。

发明内容

为了解决上述现有技术的缺点，本发明的主要目的是提供一种无侵入式数据统计的方式，能够在不影响正常业务逻辑流程的情况下进行相应的数据统计以解决现有技术中侵入式的数据统计方式影响业务流程的问题。

为了达到上述目的，本发明提供了一种无侵入式的数据统计方式的应用方法，以观察者模式对录入的数据进行数据统计，主要方法步骤为：

监测统计数据并对数据有变化之处进行实时记录；

对所述实时记录的变化情况，以命令形式进行记录，无需对变化的内容进行记录；

根据实际情况对上述记录变化的命令进行数据统计缓存处理；

根据需求对所述进行统计缓存的数据进行整体的刷新存储处理。

本发明的另一方面还提供了一种无侵入式数据统计方式的应用系统，具体为：

统计模块，用于媒体资产管理系统的数据统计管理；

业务处理模块，用于处理媒体资产管理系统中的业务处理。

通过本发明的实施方式，可以对媒体资产管理系统中的数据以观察者的模式进行数据统计，而对有变化的数据采用命令形式只进行记录而不处理，则在不影响正常的业务处理流程的情况下完成数据统计，而后续采用统计缓存和整体刷新的方法，则能对后续需要处理变化的数据能够很好的定位。并且使统计模块与业务流程处理完全解耦，增强了流程引擎的鲁棒性，也为统计数据的容错和数据重建提供了可能，通过本发明更能使数据统计灵活，减少统计时间，使系统更稳定。

附图说明

为了更清楚的说明本发明实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单的介绍，显而易见的，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例一种无侵入式数据统计方式的应用方法流程图；

图2为本发明实施例一种无侵入式数据统计方式应用具体方法步骤图；

图3为本发明实施例一种无侵入式数据统计方式的应用系统。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的描述，显然所描述的实施例仅是本发明的一部分实施例，不是全部的实施例，基于本发明中的实施例，本领域普通技术人员在没有付出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例一方面以一种无侵入式数据统计方式在媒体资产管理系统中的应用为例更加详细的说明本发明的技术方案，当然并不引以为限。如图2所示为本发明实施例中一种无侵入式数据统计方式在媒体资产管理系统中应用的具体实施方式，具体为：

步骤S1：上载编目流程所需的数据素材。在上载编目流程中包含以下任务环节：上载、技审、转码、编目、归档、发布等，在每一个环节都有需要进行数据统计的统计数据。

步骤S2：监测所述统计数据并对数据有变化之处进行实时记录。对所述实时记录的变化情况，以命令形式进行记录，无需对变化的内容进行记录。此环节为观察者模式，不对具体数据执行具体的统计工作，使统计处理流程与业务流程处理完全解耦，可以大大降低业务流程处理与流程处理的耦合度。所述命令可依据不同需要存储不同的命令，比如需要重新统计的记录为命令1，不需要重新统计的记录为命令2，以此类推，不同需求对应不同的命令。

步骤S3：流程提交的环节产生一个统计需求指令，该指令包含的信息除对应的媒体对象、参与的人以外还应包含其影响范畴。并且所述统计需求指令是存储在数据库中的。

步骤S4：根据实际情况对上述记录变化的命令以及有统计需求指令的数据进行数据统计缓存处理。所述数据统计缓存是根据数据特征进行分析的来的，而无需对变化的具体内容进行统计，还可以根据使用者的要求精度来进行统计缓存处理，即如果要求精度高则对统计缓存的时间间隔就相应的缩小，若要求精度不高，则适当将统计缓存的时间间隔相应的扩大。

步骤S5：对各个环节需要统计的数据进行具体的统计工作。具体的统计工作，将由独立的线程定时在统计需求队列中拉取，逐一执行。由于每一个指令均实现了相同的接口，因此统计线程可以使用同一种方式调用不同的处理逻辑，每种逻辑(由指令类型确定)将对不同的数据组进行统计。

例如，上载的流程环节提交时，触发一个素材统计指令，该指令在执行时仅对素材的数量、格式等信息进行同步统计。再比如，编目环节提交时，触发一个编目工作量统计指令，该指令执行时将对参与编目流程的编目人员的工作量、时长、素材类型等数据进行统计。

对于二次编目流程、下载流程流程处理方式基本类似，在此不再赘述。

步骤S6：根据需求对所述进行统计缓存的数据进行整体的刷新存储处理，刷新频率可自定。由于统计需求指令是存储在数据库中的，因此如果需要对全部数据进行统计刷新，只需要为每一个媒体对象类型都添加一个指令到数据库中，则统计线程会对这个类型的所有数据进行全部重新统计。

通过本发明的实施方式，可以对媒体资产管理系统中的数据以观察者的模式进行数据统计，而对有变化的数据采用命令形式只进行记录而不处理，则在不影响正常的业务处理流程的情况下完成数据统计，而后续采用统计缓存和整体刷新的方法，则能对后续需要处理变化的数据能够很好的定位。通过本发明更能使数据统计灵活，减少统计时间，使系统更稳定。

本发明的另一方面还提供了一种无侵入式数据统计方式的应用系统，如图3所示，具体为：

统计模块10，用于媒体资产管理系统的数据统计管理；

业务处理模块20，用于处理媒体资产管理系统中的业务处理。

统计模块与业务处理模块在进行相应对象处理的时候，统计处理流程与业务流程处理是完全解耦的。

其中，统计模块10还包括命令记录模块11，统计缓存模块12，以及刷新存储处理模块13，具体为：

命令记录模块11：用于记录统计数据变化的命令。

统计缓存模块12：用于存储根据数据特征分析需要进行统计缓存的数据。

刷新存储处理模块13：用于存储整体刷新处理的统计数据。

通过本发明实施例提供的一种无侵入式的数据统计方式在媒体资产管理系统中的应用，使统计模块与业务流程处理完全解耦，一方面增强了流程引擎的鲁棒性，另一方面也为统计数据的容错和数据重建提供了可能。统计模块解耦后，可大大增加其功能扩展的余地。业务上，可以完成系统管理员统计(为上载和系统交互数据验证提供报表)、流程管理员统计(下载统计、编目工作量统计等)、用户统计(统计自我业务数据等)。展现形式上，除提供传统上的统计信息明细外，还可实现表格、饼图、柱状图、折线图等多种数据展示方式。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本发明可以通过软件实现，也可以借助软件加必要的通用硬件平台的方式来实现。基于这样的理解，本发明的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

以上所述，仅为本发明的一个最佳具体实施例，但本发明的特征并不局限于此，任何熟悉该项技术的人在本发明领域内，可轻易想到的变化或修饰，都应涵盖在以下本发明的申请专利范围中。

Claims (5)

1.一种无侵入式数据统计方式的应用方法，其特征在于，具体为：

监测统计数据并对数据有变化之处进行实时记录；

对所述实时记录的变化情况，以命令形式进行记录，无需对变化的内容进行记录；

根据实际情况对上述记录变化的命令进行数据统计缓存处理；

根据需求对所述进行统计缓存的数据进行整体的刷新存储处理；

其中，根据实际情况对上述记录变化的命令进行数据统计缓存处理具体为：

所述数据统计缓存是根据数据特征进行分析得来的，而无需对变化的具体内容进行统计，或者根据使用者的要求精度来进行统计缓存处理；

统计时由独立的线程定时在统计需求队列中拉取，逐一执行；

统计线程使用同一种方式调用不同的处理逻辑，每种指令类型确定的处理逻辑将对不同的数据组进行统计。

2.如权利要求1所述的无侵入式数据统计方式的应用方法，其特征在于，所述对所述实时记录的变化情况，以命令形式进行记录，无需对变化的内容进行记录还包括：

所述命令形式可依据不同需要存储不同的命令。

3.如权利要求1所述的无侵入式数据统计方式的应用方法，其特征在于，所述根据实际情况对上述记录变化的命令进行数据统计缓存处理之前还包括：

在流程提交的环节产生一个统计需求指令，所述统计需求指令包含的信息包括对应的媒体对象、参与的人及其影响范畴。

4.如权利要求3所述的无侵入式数据统计方式的应用方法，其特征在于，所述统计需求指令是存储在数据库中的。

5.如权利要求1所述的无侵入式数据统计方式的应用方法，其特征在于，所述根据需求对所述进行统计缓存的数据进行整体的刷新存储处理具体为：

只需要为每一个媒体对象类型都添加一个指令到数据库中，则统计线程会对这个类型的所有数据进行全部重新统计。