CN107526747A - 一种多媒体编目方法及系统 - Google Patents

Abstract

本发明提供的一种多媒体编目方法及系统，该方法包括：对采集的原始媒体素材进行快速的编辑；对快速编辑生成的新的媒体文件进行节目层的预编目，并将该文件存入编目系统，并经过工作流引擎的产生新任务；将任务调度给自动编目集群的代理，代理将任务送给自动编目集群进行自动编目；对小部分自动编目产生的结果进行微调。采用本发明可实现多媒体编目的智能化，显著提高效率。

Description

一种多媒体编目方法及系统

技术领域

本发明涉及多媒体编目领域，具体地说，涉及一种快速、高效生成视频编目的多媒体编目方法及系统。

背景技术

电视台、通讯社、报社、网站等媒体单位，每天都要产生大量的视音频、视频等业务数据，伴随这些数据产生的，还有大量的编目标引、相关数据、内容简介、权限等附属信息。所有这些数据信息，都是媒体的重要无形资产，可以用于再次发布、作为素材制作新节目或者直接出售，具有极高的价值，经过多年的积累，这些视音频、文字和图片等内容成为宝贵的媒体资产，完好地保存和有效地管理这些媒体资产，并体现它们的巨大价值，是目前的数字媒体亟待解决的问题，建设可靠、高效的媒体资产管理系统势在必行。

媒体资产管理系统包括以下组成部分：媒体资料采集上载、媒体资料编目标引、媒体数据多级存储和媒体资料查询，其中存在两个非常重要的模块，即编目及检索模块。编目就是编制目录，它是建立在信息标引的基础上的。信息标引是指对信息资源的形式及内容特征进行分析、选择和记录，并赋予某种检索标识的过程，而将这些描述信息按照一定的规则有序化的组织起来的这个过程就是编目。编目是检索的基础，媒体资料编目系统是否完善直接关系到编导在查询节目时的准确性和方便性，而传统的编目系统往往采取的是人工编目，通过人工为媒体资料添加包括关键字描述、时长、资料来源等基本信息，由于视频信息的多维特性，使得视频信息标引的难度加大，加之随着视频等媒体资料数量的急剧增长以及用户在使用视频等媒体资料搜索时对搜索结果与自己希望得到的结果之间的相似度增加要求的普遍，传统的人工编目方式往往存在如下不足：

(1)人工编目所能够提供的如视频名称关键字、时长、分类等信息在描述视频内容方面全面性不足，进而在为用户搜索视频时提供的搜索结果无法满足 用户的高级搜索需要；(2)另外，视频数量的急剧增加也使人工编目在效率、人工耗费等方面处于劣势，存在效率低下、人工耗费高等缺点；(3)同时人工编目所提供的视频描述信息决定了用户在使用搜索功能时所使用的是依靠文字信息的搜索方式，过于单一的搜索方式不利于提高用户体验。

发明内容

为了解决由传统人工编目技术存在的对视频内容特征描述单一、效率低下、人工耗费高以及用户搜索方式单一、搜索结果准确性低等不足，本发明提供一种网络媒体智能编目技术，同时提供支持该技术的多媒体编目系统。

本发明提供的一种多媒体编目方法，包括如下步骤：

对采集的原始媒体素材进行快速的编辑；

对快速编辑生成的新的媒体文件进行节目层的预编目，并将该文件存入编目系统，并经过工作流引擎的产生新任务；

将任务调度给自动编目集群的代理，代理将任务送给自动编目集群进行自动编目；

对小部分自动编目产生的结果进行微调。

本发明还提供一种多媒体编目系统，包括：

采集整理单元，用来导入原始媒体文件，实现对原始媒体文件的预处理操作；

预编目单元，用来对采集整理系统形成的媒体文件进行处理，储存媒体文件编目信息并产生编目任务；

自动编目单元，用来对媒体文件进行自动的编目，产生并储存编目信息；

精编单元，在自动编目系统产生的编目信息基础上进行细化和完善，将最终的编目信息导入媒体编目数据库；

工作流调度单元，用于统筹调度整个媒体编目系统的工作流程；

编目信息发布单元，用于为不同的业务应用提供获取编目信息的统一接口。

为了上述以及相关的目的，一个或多个实施例包括后面将详细说明并在权利要求中特别指出的特征。下面的说明以及附图详细说明某些示例性方面，并 且其指示的仅仅是各个实施例的原则可以利用的各种方式中的一些方式。其它的益处和新颖性特征将随着下面的详细说明结合附图考虑而变得明显，所公开的实施例是要包括所有这些方面以及它们的等同。

附图说明

附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：

图1所示为本发明实施例提供的一种多媒体编目方法流程图；

图2所示为本发明实施例提供的一种多媒体编目系统架构图。

具体实施方式

以下描述和附图充分地示出本发明的具体实施方案，以使本领域的技术人员能够实践它们。其他实施方案可以包括结构的、逻辑的、电气的、过程的以及其他的改变。实施例仅代表可能的变化。除非明确要求，否则单独的组件和功能是可选的，并且操作的顺序可以变化。一些实施方案的部分和特征可以被包括在或替换其他实施方案的部分和特征。本发明的实施方案的范围包括权利要求书的整个范围，以及权利要求书的所有可获得的等同物。在本文中，本发明的这些实施方案可以被单独地或总地用术语“发明”来表示，这仅仅是为了方便，并且如果事实上公开了超过一个的发明，不是要自动地限制该应用的范围为任何单个发明或发明构思。

参照图1，本发明提供的一种多媒体编目方法，包括如下步骤：

S101，对采集的原始媒体素材进行快速的编辑；

S102，对快速编辑生成的新的媒体文件进行节目层的预编目，并将该文件存入编目系统，并经过工作流引擎的产生新任务；

S103，将任务调度给自动编目集群的代理，将任务送给自动编目集群进行自动编目；

S104，对小部分自动编目产生的结果进行微调。

参照图2，本发明还提供一种多媒体编目系统100，包括：

采集整理单元10，用来导入原始媒体文件，实现对原始媒体文件的预处理操作；

预编目单元20，用来对采集整理系统形成的媒体文件进行处理，储存媒体文件编目信息并产生编目任务；

自动编目单元30，用来对媒体文件进行自动的编目，产生并储存编目信息；

精编单元40，在自动编目系统产生的编目信息基础上进行细化和完善，将最终的编目信息导入媒体编目数据库；

工作流调度单元50，用于统筹调度整个媒体编目系统的工作流程；

编目信息发布单元60，用于为不同的业务应用提供获取编目信息的统一接口。

本发明提出的多媒体编目方法及系统，通过以下四个步骤实现了对媒体文件进行快速、高效的编目功能：

1.通过视频剪辑工作站对采集的原始媒体素材进行快速的编辑。

通过安装视频剪辑工作站客户端程序，用户使用视频剪辑工作站，将需要剪辑处理的媒体素材拖入素材窗口，素材窗口将会产生并显示出媒体的关键帧图片，将一个或多个图片图标拖入播放器窗口，可以进行对媒体素材的预览，接着将一个或多个图片图标拖入时间线编辑窗口，时间线窗口会显示媒体的图片和媒体的长度，同时在时间线控件的下方的情节预览窗显示相应的图片。之后用户可以通过调整时间线进行相应得拆分合并操作，产生出新的视频文件。

2.通过一次编目工作站对快速编辑生成的新的媒体文件进行节目层的一次编目，同时将该文件存入编目系统，并经过工作流引擎的产生新任务。

通过安装WEB浏览器程序，用户可以进入一次编目工作站对处理好的视频文件进行描述，然后进行将视频上传到编目系统，同时通过工作流引擎产生新的编目任务供工作流调度服务器调度。

3.通过工作流调度服务器将任务调度给自动编目集群的代理，代理将任务送给自动编目集群进行自动编目。

通过安装工作流调度服务器程序，在进行相应的参数配置并启动调度服务器后，调度服务器根据系统内服务器的情况以及相应的策略进行任务调度。具体表现为调度服务器将任务分别调度给人脸，字幕，台标，结构化，声音等分析服务器进行分析处理，各分析服务器分别进行自动的编目，产生片段、场景、 镜头、人脸、字幕、台标、声音等相应的编目信息结果。

4.通过人工精编工作站对小部分自动编目产生的结果进行微调。

完成自动编目的任务被工作流调度服务器调度给人工精编工作站，通过安装人工精编工作站客户端程序，人工精编工作站取得自动编目产生的编目信息进行进一步的分析和调整，最后将结构存入编目系统。

至此经过以上四步流程，多媒体编目系统对一个媒体文件进行快速编目。

为实现上述系统和功能，本发明所提供的多媒体编目系统，由采集整理系统、一次编目系统、自动编目系统、精编系统、工作流调度系统、编目信息发布系统组成，系统结构如图1所示：

1.采集整理系统

采集整理系统是多媒体编目系统的入口子系统，实现对原始媒体文件的分割、合并等预处理操作，具体包括以下功能：

(1)原始媒体文件导入功能：通过拖入将待处理的媒体文件导入系统的媒体文件库。

(2)媒体文件合并功能：对媒体文件库中的多个媒体文件进行合并操作。

(3)媒体文件分割功能：对媒体文件库中的一个媒体文件进行分割操作，去除多余片段。

(4)媒体文件预览功能：对正在处理的媒体文件提供预览功能。

(5)媒体文件生成功能：对处理完毕的媒体片段保存为完整的媒体文件。

2.一次编目系统

一次编目系统对采集整理系统形成的媒体文件进行处理，添加导演、演员、片长等必要的节目层信息。然后，将媒体文件迁移媒体存储服务器，将编目信息传入媒体编目数据库，同时，产生媒体编目任务。

本子系统包括以下主要功能模块：

(1)节目层信息编目模块：人工为媒体文件添加导演、演员、片长等节目层信息。

(2)媒体文件迁移模块：将媒体文件迁移到指定的位置。

(3)编目信息录入模块：将媒体文件的编目信息导入媒体编目数据库。

(4)编目任务产生模块：对经过一次编目的媒体文件产生新编目任务。

3.自动编目系统

自动编目系统对媒体文件进行视频结构化分析、人脸分析、字幕分析、台标分析、声音分析，形成相应的编目信息，并将编目信息导入媒体编目数据库。

本子系统主要包含以下功能模块：

(1)任务获取模块：从工作流调度系统获取新的媒体自动编目任务。

(2)媒体文件获取模块：从指定的位置获取编目任务相对应的媒体文件。

(3)视频结构化分析模块：对媒体文件进行视频解码、视频结构化分析，形成片段层、场景层、镜头层编目信息，并产生视频关键帧信息。

(4)人脸分析模块：对媒体文件进行视频解码、人脸分析，产生相应的人脸编目信息。

(5)字幕分析模块：对媒体文件进行视频解码、字幕分析，产生相应的字幕编目信息。

(6)台标分析模块：对媒体文件进行视频解码、台标分析，产生相应的台标编目信息。

(7)声音分析模块：对媒体文件进行音频解码、声音分析，产生相应的声音编目信息。

(8)编目信息导入模块：将之前产生的各部分媒体编目信息，导入媒体编目数据库。

4.精编系统

精编系统在自动编目系统的基础上，对形成的编目信息进行进一步的细化与完善，并将最终的媒体编目信息导入到媒体编目数据库。

本系统主要包括以下功能模块：

(1)编目任务获取模块：从工作流调度系统获取新的媒体精编任务。

(2)媒体文件获取模块：从指定的位置获取编目任务相对应的媒体文件。

(3)编目信息的编辑修改模块：对自动编目系统生成的编目信息分别提供添加、修改、删除等操作。

(4)关键帧预览模块：对自动编目系统生成的片段层、场景层、镜头层的 关键帧信息进行预览。

(5)编目信息导入模块：将媒体文件的最终编目信息导入媒体编目数据库。

5.工作流调度系统

工作流调度系统统筹调度整个多媒体编目系统的工作流程。本子系统包括以下主要功能模块：

(1)服务器状态信息采集模块：采集各个分析服务器实时的状态信息，包括CPU、内存、任务数、任务进度等。

(2)服务请求代理模块：使服务器功能模块化，代理模块协助服务器完成与工作流有关的各个请求。

(3)工作流引擎模块：使工作流程易于修改，同时实现任务的调度管理。

(4)策略产生模块：根据服务器状态以及工作流引擎，制定相应的任务分发策略。

(5)信息统计显示模块：实时统计显示各个服务器的状态信息，包括CPU、内存、任务数、任务进度等。

6.编目信息发布系统

为不同的业务应用提供了获取编目信息的统一接口。

以选取两段媒体素材进行剪辑，编目，发布的流程为例，示范性地说明本发明的步骤：

A.用户将待处理的两段媒体素材拖入视频剪辑工作站；

B.用户在视频剪辑工作站对两段媒体素材进行相应得处理，可能包括拆分、合并等一系列操作，得到了完整的媒体文件；

C.对完整的媒体文件进行预编目，得到了所示的一次编目信息；

D.系统取得新的媒体编目任务，经过自动分析，得到了E.表示的自动编目信息；

E.在编目信息的基础上进行进一步的完善与细化，得到了精编信息；

F.用户通过发布接口，进行各种业务应用。

纵观整个流程，实现了对媒体文件的快速、智能的编目过程，为各种业务应用提供了完整丰富的编目信息。

应该明白，公开的过程中的步骤的特定顺序或层次是示例性方法的实例。基于设计偏好，应该理解，过程中的步骤的特定顺序或层次可以在不脱离本公开的保护范围的情况下得到重新安排。所附的方法权利要求以示例性的顺序给出了各种步骤的要素，并且不是要限于所述的特定顺序或层次。

本领域技术人员还应当理解，结合本文的实施例描述的各种说明性的逻辑框、模块、电路和算法步骤均可以实现成电子硬件、计算机软件或其组合。为了清楚地说明硬件和软件之间的可交换性，上面对各种说明性的部件、框、模块、电路和步骤均围绕其功能进行了一般地描述。至于这种功能是实现成硬件还是实现成软件，取决于特定的应用和对整个系统所施加的设计约束条件。熟练的技术人员可以针对每个特定应用，以变通的方式实现所描述的功能，但是，这种实现决策不应解释为背离本公开的保护范围。

Claims (2)

1.一种多媒体编目方法，其特征在于，包括如下步骤：

对采集的原始媒体素材进行快速的编辑；

对快速编辑生成的新的媒体文件进行节目层的预编目，并将该文件存入编目系统，并经过工作流引擎的产生新任务；

将任务调度给自动编目集群的代理，代理将任务送给自动编目集群进行自动编目；

对小部分自动编目产生的结果进行微调。

2.一种多媒体编目系统，其特征在于，包括：

采集整理单元，用来导入原始媒体文件，实现对原始媒体文件的预处理操作；

预编目单元，用来对采集整理系统形成的媒体文件进行处理，储存媒体文件编目信息并产生编目任务；

自动编目单元，用来对媒体文件进行自动的编目，产生并储存编目信息；

精编单元，在自动编目系统产生的编目信息基础上进行细化和完善，将最终的编目信息导入媒体编目数据库；

工作流调度单元，用于统筹调度整个媒体编目系统的工作流程；

编目信息发布单元，用于为不同的业务应用提供获取编目信息的统一接口。