CN103514351A - 一种多媒体文件的编辑方法、装置和系统 - Google Patents

Abstract

本申请公开了多媒体文件的编辑方法，利用编辑描述脚本文件保存所述多媒体文件的编辑结果，所述编辑方法包括：a、位于终端设备上的编辑描述引擎根据所述终端设备的本地环境生成结构验证文件中的环境约束，用于保存所述本地环境对所述多媒体文件的编辑约束条件；b、所述编辑描述引擎利用所述结构验证文件中的环境约束对用户的编辑行为信息和用户编辑过程中引入的多媒体资源信息进行验证，在验证通过后，将编辑行为信息和多媒体资源的属性信息保存在编辑描述脚本文件中。进一步地，通过交互应用装置向终端用户界面提供编辑操作；通过编解码应用装置获取终端设备的本地多媒体支持方案和资源获取方案，制作目标多媒体文件。本申请还公开了多媒体文件的编辑装置和系统。应用本申请，能够为云终端提供多媒体编辑服务。

Description

一种多媒体文件的编辑方法、装置和系统

技术领域

本申请涉及多媒体处理技术，特别涉及一种多媒体文件的编辑方法、装置和系统。

背景技术

多媒体技术应用是当代信息化技术领域中发展最迅速最活跃的技术之一，随着信息商业化的不断推进，多媒体技术已经融入人们的日常生活，以多媒体内容服务为目标的产品比比皆是。随着技术的成熟与发展，多媒体娱乐已逐渐成为多媒体技术应用的主流导向，视频、音乐、照片等多媒体内容成为大众互动娱乐的焦点。其中，多媒体编辑制作技术旨在根据用户的编辑要求，对多媒体数据进行重新组合，从而制作出新的多媒体表达方式并分享，增强用户娱乐体验。已经提出的与多媒体编辑制作相关的装置，其主要是提供多媒体编辑制作过程中的用户交互界面，以文件或者数据库的形式记录下用户编辑的过程，方便用户使用从某一渠道获得的多媒体资源，利用装置提供的交互方式，组合生成指定需求的多媒体目标。编辑的过程作为再生形式，为装置提供持续编辑的存储介质。

已经提出的与多媒体编辑制作相关的装置，其技术重心主要集中于本地环境，对于编辑制作的过程采用相对固定的描述形式，所记录信息量的范围也是固定的，用户对于多媒体编辑制作的体验受限于信息量定义的范围。同时，当用户希望在多媒体性能有差异的终端之间进行交叉式的多媒体编辑与制作时，各终端均需要安装相同的应用以匹配相同的描述形式。

目前，提出一种实现多媒体编辑制作的云服务，希望能够允许用户在终端上对多媒体资源进行在线或离线的编辑制作，允许用户之间通过云端共享编辑结果并允许二次编辑。通过该云服务，用户在可以接入云端的本地终端设备上进行编辑，并且通过云端把创作分享给其他用户，同时也可以对其他用户的原创进行重现和再编辑。

但事实上，按照目前多媒体编辑制作的方式，终端设备可能是个人电脑，也可能是数字电视或移动设备，设备的图形支持性能与多媒体环境存在差异，此时若采用固定的编辑过程，会导致性能较低的终端设备不支持该娱乐项目，不能达到云终端服务的目的。

发明内容

本申请提供了一种多媒体文件的编辑方法、装置和系统，能够为云终端提供多媒体编辑服务。

一种多媒体文件的编辑方法，利用编辑描述脚本文件保存所述多媒体文件的编辑结果，所述编辑方法包括：

a、位于终端设备上的编辑描述引擎根据所述终端设备的本地环境生成结构验证文件中的环境约束，用于保存所述本地环境对所述多媒体文件的编辑约束条件；

b、所述编辑描述引擎利用所述结构验证文件中的环境约束对用户的编辑行为信息和用户编辑过程中引入的多媒体资源信息进行验证，在验证通过后，将所述编辑行为信息以预设的时间线信息的形式保存在所述编辑描述脚本文件中，并将所述多媒体资源的属性信息保存在所述编辑描述脚本文件中；

其中，所述时间线信息包括多个时间片信息，每个时间片信息包括在该时间片内播放的多媒体资源的标识和起止时间；所述多媒体资源的属性信息包括多媒体资源的类型、标识和保存位置。

较佳地，所述环境约束包括用户认证信息、资源媒体类型约束、资源位置类型约束、资源位置类型约束。

较佳地，该方法进一步包括：预先在所述编辑描述引擎中定义与编辑描述脚本文件中时间线信息形式结构相对应的数据结构，作为时间模型结构，并定义与编辑描述脚本文件中多媒体资源属性信息保存结构相对应的数据结构，作为资源模型结构。

较佳地，所述编辑描述引擎对用户的编辑行为信息进行验证包括：将所述编辑行为信息利用所述时间模型结构进行表示，形成时间模型数据，利用所述环境约束对所述时间模型数据进行验证；

所述将编辑行为信息以预设的时间线信息的形式保存在编辑描述脚本文件中包括：将所述时间模型数据加密后进行保存。

较佳地，所述编辑描述引擎对用户编辑过程中引入的多媒体资源进行验证包括：将所述多媒体资源的属性信息利用所述资源模型结构进行表示，形成资源模型数据，利用所述约束条件对所述资源模型数据进行验证；

将所述多媒体资源的属性信息保存在编辑描述脚本文件中包括：将所述资源模型数据加密后进行保存。

较佳地，当系统中的任一终端设备获取已经生成的所述编辑描述脚本文件后，在对所述编辑描述脚本文件保存的所述多媒体文件进行编辑前，该方法进一步包括：

所述任一终端设备上的编辑描述引擎根据所述结构验证文件中的结构约束对获取的所述编辑描述脚本文件的文本内容进行验证，当验证通过后，从获取的所述编辑描述脚本文件中导出其保存的时间线信息和多媒体资源的属性信息；

其中，所述结构验证文件中进一步包括所述任一终端设备上的编辑描述引擎本身对编辑的编辑描述脚本文件描述格式的结构约束。

较佳地，该方法进一步包括：预先在所述编辑描述引擎中定义与编辑描述脚本文件中时间线信息形式结构相对应的数据结构，作为时间模型结构，并定义与编辑描述脚本文件中多媒体资源属性信息保存结构相对应的数据结构，作为资源模型结构。

较佳地，所述从获取的所述编辑描述脚本文件中导出其保存的时间线信息和多媒体资源的属性信息包括：

从获取的所述编辑描述脚本文件中读取时间线信息，并利用所述时间模型结构进行表示，提供给上层应用；从获取的所述编辑描述脚本文件中读取多媒体资源的属性信息，并利用所述资源模型结构进行表示，提供给上层应用。

较佳地，所述编辑描述脚本文件进一步包括全局属性信息和目标属性信息，所述全局属性信息用于保存用户信息和加密信息，所述目标属性信息用于保存所述多媒体文件的属性。

较佳地，所述目标属性信息包括用于记录所述多媒体文件承载容器格式的媒体类型、用于记录所述多媒体文件生成后保存形式的位置类型、用于记录目标所述多媒体文件位置资源定位符的位置信息。

较佳地，在执行所述根据结构约束对编辑描述脚本文件进行验证的操作前，该方法进一步包括：

从所述编辑描述脚本文件的全局属性信息中读取用户信息，并根据所述环境约束中的用户认证信息进行验证，当验证通过后，继续执行所述根据结构约束对编辑描述脚本文件进行验证的操作。

较佳地，在所述导出保存的时间线信息和多媒体资源的属性信息的操作后、所述对多媒体文件进行编辑的操作前，该方法进一步包括：根据所述多媒体资源的属性信息获取相应的多媒体资源并进行解码，按照导出的时间线信息依次对各多媒体资源进行编码，生成目标多媒体文件。

一种编辑多媒体文件的编辑描述引擎，包括：接口单元、验证单元、脚本文件编辑单元；

所述接口单元，用于接收终端设备的本地环境对所述多媒体文件的编辑约束条件、用户的编辑行为信息、用户编辑过程中引入的多媒体资源信息；

所述模型结构单元，用于将所述接口单元接收的用户的编辑行为信息利用预设的时间模型结构进行表示，形成时间模型数据并发送给所述验证单元；还用于将所述接口单元接收的用户编辑过程中引入的多媒体资源的属性信息利用预设的资源模型结构进行表示，形成资源模型数据并发送给所述验证单元；还用于根据所述接口单元接收的所述本地环境对所述多媒体文件的编辑约束条件利用预设的验证模型结构进行表示，形成验证模型数据并发送给所述验证单元；

所述验证单元，用于根据所述模型结构单元发送的验证模型数据生成结构验证文件中的环境约束；还用于利用所述环境约束对所述时间模型数据和资源模型数据进行验证，在验证通过后通知所述脚本文件编辑单元；

所述脚本文件编辑单元，用于在接收所述验证单元的通知后，将所述时间模型数据以时间线信息的形式保存在编辑描述脚本文件中，并将所述资源模型数据保存在所述编辑描述脚本文件中；其中，所述编辑描述脚本文件用于保存所述多媒体文件的编辑结果。

较佳地，该装置进一步包括安全结构解析单元，用于在读取编辑描述脚本文件时，进行正文解密工作，在生成编辑描述脚本文件时生成随机加密信息，将正文部分加密。

较佳地，所述验证单元，进一步用于在读取终端设备获取的编辑描述脚本文件前，根据所述结构验证文件中的结构约束对所述编辑描述脚本文件进行验证，并在通过后通知所述脚本编辑单元；

所述脚本编辑单元，进一步用于在接收到所述验证单元发送的通过结构约束验证的通知后，从所述获取的编辑描述脚本文件中导出其保存的时间线信息和多媒体资源的属性信息给所述模型结构单元；

所述模型结构单元，进一步用于将所述脚本编辑文件中导出的所述时间线信息和多媒体属性信息转换为相应的时间模型结构和资源模型结构，并通过所述接口单元发送给所述终端设备的上层。

一种多媒体文件的编辑系统，所述系统位于终端设备中，包括编辑描述引擎、交互应用装置和编解码应用装置；

所述编辑描述引擎，用于根据所述本地编解码装置提供的本地环境生成结构验证文件中的环境约束，并根据所述环境约束对所述交互应用装置提供的用户的编辑行为信息和用户编辑过程中引入的多媒体资源信息进行验证，在验证通过后，将所述编辑行为信息以预设的时间线信息的形式保存在编辑描述脚本文件中，并将所述多媒体资源的属性信息保存在所述编辑描述脚本文件中；其中，所述编辑描述脚本文件用于保存所述多媒体文件的编辑结果；

所述交互应用装置，用于将所述编辑描述引擎支持的模型结构与用户界面操作的数据结构间进行相互转化，向所述编辑描述引擎导入用户的编辑行为信息和编辑过程中引入的多媒体资源信息，并向用户界面提供开放接口，用于进行多媒体资源管理、时间线信息管理和目标信息及用户信息的管理；

所述编解码应用装置，用于从上层接收本地编解码方案和多媒体资源获取方案，形成本地环境信息提供给所述编辑描述引擎；还用于根据所述编辑描述引擎提供的编辑脚本文件中的时间线信息和资源信息，生成所述多媒体文件。

由上述技术方案可见，本申请中，位于终端设备上的编辑描述引擎根据终端设备的本地环境生成结构验证文件中的环境约束，用于保存本地环境对多媒体文件的编辑约束条件；编辑描述引擎利用结构验证文件中的环境约束对用户的编辑行为信息和用户编辑过程中引入的多媒体资源进行验证，在验证通过后，将编辑行为信息以预设的时间线信息的形式保存在编辑描述脚本文件中，并将多媒体资源的属性信息保存在编辑描述脚本文件中。在上述过程中，编辑描述脚本文件保存的是用户编辑行为和引入的多媒体资源属性信息，不需要真正保存具体的资源内容和目标多媒体文件，因此其允许在各种不同的多媒体环境中再现和重新编辑，可以为云终端提供多媒体编辑服务。

附图说明

图1是本申请中多媒体文件编辑系统的基本结构示意图；

图2是表示编辑描述脚本文件正文的基本信息示意图；

图3是编辑描述引擎的内部结构框图；

图4是结构验证文件正文的基本信息示意图；

图5是由编辑描述引擎生成编辑描述脚本文件过程的流程图；

图6是由编辑描述引擎解析编辑描述脚本文件过程的流程图；

图7是交互应用装置的内部结构框图；

图8是由交互应用装置接收终端用户界面操作过程的流程图；

图9是编解码应用装置的内部结构配置框图；

图10是由编解码应用装置根据终端设备的本地性能支持方案制作目标多媒体文件过程的流程图；

图11是用户创作在终端设备之间进行重现的交互过程示意图。

具体实施方式

为了使本申请的目的、技术手段和优点更加清楚明白，以下结合附图对本申请做进一步详细说明。

首先介绍一下本申请多媒体编辑方法、装置和系统中，用于保存多媒体文件编辑结果的方式，即编辑描述脚本文件。该编辑描述脚本文件作为编辑过程的描述性载体，记录了用户的编辑行为和编辑过程中涉及的各个多媒体资源的相关信息。具体地，该编辑描述脚本文件中最基本地包括时间线信息和多媒体资源的属性信息。其中，时间线信息包括多个时间片信息，每个时间片信息包括在该时间片内播放的多媒体资源的标识和起止时间；多媒体资源的属性信息包括多媒体资源的类型、标识和保存位置。除上述基本信息外，还可以进一步包括全局属性信息、目标属性信息等。本申请中正是通过该多媒体文件编辑结果的保存形式，使得在云端间传输的文件与实际使用的资源多媒体数据和生产的目标多媒体数据没有关系，仅实现编辑行为的记录。

下面对基于编辑描述脚本文件的多媒体文件编辑方法、装置和系统的具体实现进行详细描述。

图1为本申请中多媒体文件编辑系统的基本结构示意图。如图1所示，该系统包括交互应用装置101、编解码应用装置102和编辑描述引擎装置103。在该系统中，由交互应用装置101和编解码应用装置102，通过调用编辑描述引擎装置103提供的接口，去操作编辑描述脚本文件。编辑描述引擎装置作为对编辑描述脚本文件的直接使用者，负责对编辑描述脚本文件进行生成和解析，同时提供接口给上层应用装置。交互应用装置负责将用户的界面操作转换成编辑描述引擎装置支持的数据模型，利用接口传递给编辑描述引擎；并向用户界面提供开放接口，用于进行多媒体资源管理、时间线信息管理和目标信息及用户信息的管理。编解码应用装置负责收集本地编解码方案和本地资源获取方案，利用接口将本地环境信息传递给编辑描述引擎；还用于根据所述编辑描述引擎提供的编辑脚本文件中的时间线信息和资源信息，生成目标多媒体文件。

图2显示了编辑描述脚本文件的正文的示例。在该实施例中，该正文信息由XML结构组成，图2中标明了各主要信息节点以及各子信息节点。其中，主要信息节点包括描述编辑交互环境的全局属性、描述编辑目标多媒体数据具体信息的目标属性、描述编辑过程所需要用到的全部资源信息的资源列表以及描述具体编辑行为的时间线。省略号部分表示正文信息可在基本信息之上进行扩展。

其中，全局属性信息节点，是编辑描述脚本文件中没有加密的部分，可以被自由获取，其中包括认证标识、加密信息以及描述信息等基本子信息节点。

认证标识所记录的信息由编辑描述引擎根据用户设定生成，记录了与用户身份相关的信息，该信息用于编辑描述引擎对编辑描述脚本文件进行用户身份权限识别，通过认证标识可以保护创作者生成的编辑描述脚本文件不被其他用户的编辑描述引擎读取，也可以在信息中记录指定授权的其他用户信息。

加密信息，记录的是编辑描述引擎在加密该编辑描述脚本文件时生成的密钥信息，一旦脚本文件授权通过了的用户认证，编辑引擎可以利用该信息对脚本文件的正文加密部分进行解密与解析。

描述信息，记录了用户对本次创作行为的评价，便于交互过程中的用户之间信息共享以及创作灵感的描述。

目标属性信息节点，用于描述用户编辑的目标多媒体文件的属性，包括文件标题、媒体类型、位置类型、位置信息以及播放时长等基本子信息节点。

媒体类型用来记录目标多媒体文件的承载容器格式，例如AVI、MP4等。

位置类型记录了该目标文件生成后的保存形式，例如本地存储或上传服务器存储。

位置信息记录了该目标文件的位置资源定位符。

资源列表信息节点，用于描述用户编辑行为中所涉及到的资源的信息，由一个资源数目子信息节点和多个资源片子信息节点组成，其中每一个资源片子信息节点都对应一个资源文件。

资源数目，记录了编辑行为中涉及到的资源文件的总数目。

资源片，用来记录某一资源文件的具体信息，包括资源标识、文件标题、文件尺寸、媒体类型、位置类型、位置信息等基本子信息节点。

资源标识，是在当前编辑描述脚本文件中对该资源分配的标识符，便于该资源片的查询。

媒体类型用来记录该多媒体资源文件的承载容器格式，例如AVI、MP4等。

所述位置类型记录了该多媒体资源文件的获取形式，例如本地获取或通过HTTP获取。

位置信息记录了该多媒体资源文件的位置资源定位符。

时间线信息节点，用于描述用户编辑行为的具体实施情况，由一个时间片数目子信息节点和多个时间片子信息节点组成。

时间片数目，记录了用户编辑的时间线被划分的时间片的总数目。

时间片，用来记录某一段时间内对多媒体资源的编辑情况，包括时间起始点、时间终止点以及多个资源子片等基本子信息节点。

资源子片，用来记录在该时间片内对某一资源的使用情况，包括资源标识、资源起始时间点以及资源终止时间点等基本子信息节点。

目标属性信息节点、资源列表信息节点以及时间线信息节点组成了具体的编辑描述结构，也是编辑描述脚本文件正文中的加密部分，只有当通过用户认证，这些信息才能被编辑描述引擎进行解密与解析。

本申请中编辑描述引擎103的基本结构包括：接口单元、验证单元和脚本文件编辑单元。

其中，接口单元，用于接收终端设备的本地环境对多媒体文件的编辑约束条件、用户的编辑行为信息、用户编辑过程中引入的多媒体资源；

模型结构单元，用于将接口单元接收的用户的编辑行为信息利用预设的时间模型结构进行表示，形成时间模型数据并发送给所述验证单元；还用于将所述接口单元接收的用户编辑过程中引入的多媒体资源的属性信息利用预设的资源模型结构进行表示，形成资源模型数据并发送给所述验证单元；还用于根据接口单元接收的本地环境对多媒体文件的编辑约束条件利用预设的验证模型结构进行表示，形成验证模型数据并发送给所述验证单元；

验证单元，用于根据模型结构单元发送的验证模型数据生成结构验证文件中的环境约束；还用于利用环境约束对时间模型数据和资源模型数据进行验证，在验证通过后通知脚本文件编辑单元；

脚本文件编辑单元，用于在接收验证单元的通知后，将时间模型数据以时间线信息的形式保存在编辑描述脚本文件中，并将所述资源模型数据保存在所述编辑描述脚本文件中。

在上述基本结构基础上，在具体实现编辑描述引擎时还可以将上述基本单元进行细致划分。图3是编辑描述引擎103的实现结构实例的示意图。其中，虚线部分表示其内部结构，编辑描述引擎开放接口301提供上层使用者可以操作的接口功能，开放接口301主要由时间模型接口302、资源模型接口303以及验证模型接口304统一封装组成。

通过时间模型接口302对时间模型驱动305进行时间线数据的操作，生成的时间模型数据保存于时间模型驱动305中。

通过资源模型接口303对资源模型驱动306进行资源数据的操作，生成的资源模型数据保存于资源模型驱动306中。

通过验证模型接口304对验证模型驱动307进行验证数据的操作，生成的验证模型数据保存于验证模型驱动307中。

时间模型数据、资源模型数据以及验证模型共同组成编辑描述结构，该结构与编辑描述脚本文件中的描述结构相对应，由编辑描述结构解析器308负责保存与维护，并调用安全结构解析器309进行加解密以及调用验证结构解析器310进行验证。其中，时间模型结构、资源模型结构是编辑描述引擎内部进行资源和时间线信息编辑时的数据结构。

安全结构解析器309，在编辑描述解析器308读取编辑描述脚本文件时，进行正文解密工作，在编辑描述解析器308生成编辑描述脚本文件时，负责生成随机加密信息，将正文部分加密。

验证结构解析器310，根据验证模型数据生成本地结构验证文件，并根据该结构验证文件对编辑描述结构进行验证。

结构验证文件，用于记录当前编辑引擎所支持的编辑描述结构的形式，以及本地环境所制约的一些工作条件，作为对编辑描述结构进行验证的依据。

图4显示了结构验证文件的正文基本信息，可以由XML Schema结构组成。根据图中的配置，由结构约束和环境约束两部分组成。

其中，结构约束，用来约束编辑描述结构中各个部分的结构形式，即应该包含哪些信息节点以及每个信息节点应该包含哪些子信息节点。包括全局属性结构约束、目标属性结构约束、资源列表结构约束、资源片结构约束、时间线结构约束、时间片结构约束以及资源子片结构约束等基本约束形式。在云端从系统中获取已存在的编辑描述脚本文件后，需要根据编辑描述引擎中的结构约束对获取的编辑描述脚本文件的结构进行验证，确定本编辑描述引擎是否支持相应编辑描述脚本文件的解析和编辑。

环境约束，用来记录用户认证信息和本地环境对编辑行为的约束条件，即允许哪些资源获取形式，以及允许哪些编解码形式。包括全局认证标识约束、资源媒体类型约束、资源位置类型约束、目标媒体类型约束以及目标位置类型约束等基本约束形式。

结构验证文件为编辑引擎内部保存的配置文件，其正文部分可以是非加密的。

基于上述多媒体文件编辑系统和编辑描述引擎，本申请的多媒体文件的最基本编辑方法包括：

a、位于终端设备上的编辑描述引擎根据终端设备的本地环境生成结构验证文件中的环境约束，用于保存所述本地环境对多媒体文件的编辑约束条件；

b、编辑描述引擎利用所述结构验证文件中的环境约束对用户的编辑行为信息和用户编辑过程中引入的多媒体资源信息进行验证，在验证通过后，将编辑行为信息以预设的时间线信息的形式保存在编辑描述脚本文件中，并将多媒体资源的属性信息保存在编辑描述脚本文件中。

其中，更具体地，可以预先在编辑描述引擎中定义与编辑描述脚本文件中时间线信息形式结构相对应的数据结构，作为时间模型结构，并定义与编辑描述脚本文件中多媒体资源属性信息保存结构相对应的数据结构，作为资源模型结构。这样，在对用户编辑行为信息进行验证的方式包括：将编辑行为信息利用时间模型结构进行表示，形成时间模型数据，利用环境约束对时间模型数据进行验证；在对多媒体资源信息进行验证的方式包括：编辑描述引擎将多媒体资源的属性信息利用资源模型结构进行表示，形成资源模型数据，利用约束条件对所述资源模型数据进行验证。这里，时间线信息形式以及时间模型结构是编辑描述引擎及编辑描述脚本文件中对于用户编辑行为的保存形式；而用户界面对于用户编辑行为信息的显示可以是多种多样的，可以根据实际需要和用户喜好进行自定义设置或由系统设置，不一定是按照编辑描述引擎中采用的时间线信息的形式或其对应的时间模型结构。

另外，在接收到系统中其他云端已经生成的编辑描述脚本文件后，在进行二次编辑前，为保证编辑描述引擎对该编辑描述脚本文件的正确解析和二次编辑，可以进一步包括：编辑描述引擎根据结构验证文件中的结构约束对获取的编辑描述脚本文件的文本内容进行验证，当验证通过后，从获取的编辑描述脚本文件中导出其保存的时间线信息和多媒体资源的属性信息。其中，结构验证文件中包括编辑描述引擎本身对要编辑的编辑描述脚本文件描述格式的结构约束。

下面，将对多媒体文件的编辑分为对编辑描述脚本文件的生成和解析两个过程进行详细描述。

图5是编辑描述引擎103生成编辑描述脚本文件过程的流程图。通过编辑描述引擎的开放接口将数据导入编辑描述引擎，生成编辑描述结构并通过验证后，生成加密的编辑描述脚本文件。具体描述如下：

步骤501，编辑描述引擎开放接口的使用者是交互应用装置101和编解码应用装置102，两个装置分别将各自数据导入。

步骤502，交互应用装置101将用户认证信息作为环境约束，通过开放接口导入编辑描述引擎。同时编解码应用装置102将本地多媒体支持类型和资源获取方式作为环境约束，导入编辑描述引擎。

步骤503，根据导入编辑描述引擎的环境约束，在验证模型驱动307中生成验证模型数据。

步骤504，验证结构解析器310根据更新的验证模型，更新编辑描述引擎内的结构验证文件，作为本地环境的验证配置。

步骤505，交互应用装置101将用户在编辑过程中加入的资源信息，通过开放接口导入编辑描述引擎，其导入资源信息的结构由已经生成的验证模型进行约束。

步骤506，根据导入的资源信息，在资源模型驱动306中生成资源模型数据。

步骤507，交互应用装置101将用户的编辑过程的编辑行为信息，通过开放接口导入编辑描述引擎，其导入编辑信息的结构由已经生成的验证模型进行约束。

步骤508，根据导入的编辑行为信息，在时间模型驱动305中生成时间模型数据。

步骤509，由已经生成的资源模型数据和时间模型数据，在编辑描述结构解析器308中生成编辑描述结构，该结构与编辑描述脚本文件中的描述相对应。

步骤510，根据结构验证文件中的约束条件，对编辑描述结构进行结构验证。

步骤511，验证出错，转入错误处理。

步骤512，验证通过，安全结构解析器309负责生成随机加密信息，并对编辑描述结构正文实施加密。

步骤513，将加密后的编辑描述结构与全局属性信息，生成与本次编辑相对应的编辑描述脚本文件。完成对本次编辑描述的保存。

图6是编辑描述引擎103解析编辑描述脚本文件过程的流程图。认证解密后分析脚本文件正文，抽取对应的资源模型数据、时间模型数据，通过编辑描述引擎开放接口向上层装置提供数据。具体描述如下：

步骤601，编辑描述引擎开放接口的使用者是交互应用装置101和编解码应用装置102，两个装置分别将各自数据导入。

步骤602，交互应用装置101将用户认证信息作为环境约束，通过开放接口导入编辑描述引擎。同时编解码应用装置102将本地多媒体支持类型和资源获取方式作为环境约束，导入编辑描述引擎。

步骤603，根据导入编辑描述引擎的环境约束，在验证模型驱动307中生成验证模型数据。

步骤604，验证结构解析器310根据更新的验证模型，更新编辑描述引擎内的结构验证文件，作为本地环境的验证配置。

步骤605，将需要解析的编辑描述脚本文件导入指定位置。

步骤606，编辑描述结构解析器308解析编辑描述脚本文件中未加密部分，读取用户认证信息，通过结构验证文件311中的全局认证标识约束进行用户认证。

步骤607，认证失败，说明当前编辑描述引擎未被授权解析该脚本文件，转入错误处理。

步骤608，通过认证，安全结构解析器309根据编辑描述脚本文件中的加密信息对正文加密部分进行解密。

步骤609，根据结构验证文件中的约束条件，对编辑描述结构进行结构验证。

步骤610，验证出错，转入错误处理。

步骤611，验证通过，编辑描述解析器308生成与脚本文件正文相对应的编辑描述结构。

步骤612，交互应用装置101通过开放接口从编辑描述引擎中导出资源信息与时间线信息。

步骤613，时间模型驱动305从编辑描述结构解析器308中抽取时间模型，资源模型驱动306从编辑描述结构解析器308中抽取资源模型。

图7是交互应用装置101的结构框图，虚线部分表示其内部结构，提供交互应用装置开放接口701方便与用户界面进行交流，同时向下调用编辑描述引擎开放接口，与编辑引擎进行数据传输。

所述交互应用开放接口701主要由资源管理模型接口702、编辑元素模型接口705以及管理信息模型接口708统一封装组成。

所述资源管理模型接口702为资源管理模型驱动703提供数据操作功能，接收从资源浏览界面导入的编辑过程所需要的资源信息，形成资源管理库，通过资源管理数据转换器704将数据传递给编辑描述引擎103。编辑过程中可能用到多种类型的多媒体文件，例如音频，视频，以及各种压缩格式的图片等，这些在编辑中使用到或将来使用的资源信息，通过702接口设置到703中，形成本次编辑过程中的资源数据模型，再通过704交由编辑描述引擎映射成编辑描述结构中的一部分。

所述编辑元素模型接口705为编辑元素模型驱动706提供数据操作功能，接收从编辑操作界面导入的编辑行为元素，形成编辑元素模型库，通过编辑元素数据转换器707将数据传递给编辑描述引擎103。实际编辑过程是：在某一时间线片段中，播放某个多媒体文件的某一片段。而整个编辑过程所输出的时间线，由不同的片段组合成，这些信息通过705设置到706中，形成本次编辑过程中的编辑元素数据模型，再通过707交由编辑描述引擎映射成编辑描述结构中的一部分。

所述管理信息模型接口708为管理信息模型驱动709提供数据操作功能，接收从用户信息管理界面导入的用户身份信息用户授权信息，通过管理信息数据转换器710将数据传递给编辑描述引擎103。考虑到用户之间的编辑交互，涉及信息管理和共享权限，用户将自己对本次编辑行为的描述和授权情况等信息，通过708设置到709中，形成本次编辑过程中的管理数据模型，再通过710交由编辑描述引擎映射成编辑描述结构中的一部分。

图8是交互应用装置101接收用户界面操作过程的流程图。具体描述如下：

步骤801，交互应用装置的使用者为用户界面，由于各种设备对用户界面的图形化支持性能不一致，用户界面可根据当前设备环境进行调整。

步骤802，用户在编辑过程开始之前或者进行时，随时可是对编辑环境中的多媒体资源进行添加或移除操作，即向交互应用装置中导入资源信息作为编辑材料以及导出资源信息在界面中填充。

步骤803，通过资源管理模型驱动703将从用户界面导入的资源信息整理成为编辑环境中的资源管理模型。资源信息的形式可根据终端设备本身获取能力而设定。

步骤804，通过资源管理数据转换器704将资源管理模型转换成为可以被编辑描述引擎103所认知的资源数据。

步骤805，用户在编辑过程中对多媒体资源所做的具体编辑行为，被描述成基于时间线变化的时间区域描述，这种描述信息导入或导出交互应用装置。

步骤806，通过编辑元素模型驱动706将从用户界面导入的基于时间线的编辑描述信息整理成为编辑元素模型。

步骤807，通过编辑元素数据转换器707将资源管理模型转换成为可以被编辑描述引擎103所认知的基于时间线的数据。

步骤808，编辑行为中的用户身份信息和授权认证信息，通过开放接口导入或导出交互应用装置。

步骤809，通过管理信息模型驱动709将用户相关信息整理为管理信息模型。

步骤810，通过管理信息数据转换器710将管理信息模型转换成为可以被编辑描述引擎103所认知的数据。

步骤811，通过调用编辑描述引擎开放接口，将交互应用装置101中生成的各模型数据导入导出编辑描述引擎。

图9是编解码应用装置102的结构框图，虚线部分表示其内部结构，提供编解码应用装置开放接口901与本地多媒体编解码方案和本地资源获取方案进行交互，同时向下调用编辑描述引擎开放接口，与编辑引擎进行数据传输。

提供多媒体编解码方案管理器902，统一分析由编辑数据转换器903抽取编辑描述引擎的描述数据，形成多媒体制作方案，主要包括资源工作与编解码工作两部分。

所述资源工作是利用多媒体资源管理器904从多媒体资源获取器905中收集制作过程中所需要的资源文件，放入多媒体资源模型驱动906。

所述编解码工作是利用多媒体解析器907进行多媒体容器处理，调用解码管理器908对资源文件进行解码，通过编码管理器909将解码后得到的数据编码成目标多媒体文件。

图10是编解码应用装置102根据终端设备的本地性能支持方案制作目标多媒体文件过程的流程图。具体描述如下：

步骤1001，编解码应用装置102的使用者是本地多媒体编解码方案与本地资源获取方案，通过编解码应用装置开放接口901进行方案设置。

步骤1002，设置本地多媒体编解码支持类型以及编解码实施例，该实施例链接至解码管理器908与编码管理器909。设置本地资源获取的支持类型以及获取实施例，该实施例链接至多媒体资源获取器905。

步骤1003，将本地多媒体支持类型以及本地资源获取支持类型，通过编辑描述引擎开放接口导入编辑描述引擎103，作为本地环境约束条件。

步骤1004，编辑描述引擎分析编辑描述脚本文件，并生成数据。

步骤1005，由编解码管理器902对从编辑描述引擎取到的数据进行分析，形成制作过程描述。

步骤1006，多媒体资源管理器904根据资源信息，利用已链接的本地资源获取实施例收集资源文件。

步骤1007，利用已链接的本地编解码实施例对资源进行解码，对目标多媒体进行编码。

步骤1008，生成用户指定的多媒体目标文件。

图11是用户的多媒体编辑创作在终端设备之间进行重现的交互过程示意图。本发明的系统实现可以部署于不同类型或不同型号的终端设备中，可以是个人电脑，智能数字电视，移动设备等。具体描述如下：

步骤1101，用户在终端A中进行编辑娱乐，生成自己的创作结果，将其授权其他用户允许编辑重现与二次编辑。

步骤1102，用户的创作反映为编辑描述脚本文件的形式，通过云端可以传递到其他终端设备中。

步骤1103，被授权的用户在终端B中对该编辑描述脚本文件进行解析，由编辑描述引擎再现当时的编辑情形，并支持二次编辑等相关操作。

上述即为本申请中多媒体文件编辑方法、装置和系统的具体实现。通过上述本申请的方法、装置和系统，提供一种编辑描述引擎记录终端设备的本地环境，通过描述引擎的开放接口，可以将用户对多媒体资源的编辑制作结果以描述性脚本文件的形式保存下来，同时可以根据需求对描述信息量进行调整。脚本文件中记录了详细的编辑资源和编辑场景，可以通过描述引擎的部署，在不同的性能的终端中进行重现和二次编辑。本申请提供了一种交互应用装置，该装置将编辑描述引擎提供的编辑描述结构转化成能够支持终端用户界面风格的数据类型，通过交互应用装置开放接口，为上层用户界面营造交互支持环境。本申请提供了一种编解码应用装置，通过编解码应用装置开放接口，接收本地多媒体编解码和资源获取方案，并将编辑描述引擎提供的用户编辑描述结构转化为编解码制作过程。

通过上述本申请，提供了面向云终端服务提供一种较为灵活的多媒体编辑制作方法，采用描述性的脚本文件对编辑环境及结果进行描述，使编辑过程实现本地终端设备的可配置化，以及在不同的多媒体环境之间实现描述重现与二次编辑的兼容性。本申请提供的多媒体文件编辑方法、装置和系统，不依赖于终端用户操作界面以及本地编解码方案，上层应用可根据本地图形化支持环境以及多媒体支持环境进行适应性调整。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。

Claims (16)

1.一种多媒体文件的编辑方法，其特征在于，利用编辑描述脚本文件保存所述多媒体文件的编辑结果，所述编辑方法包括：

a、位于终端设备上的编辑描述引擎根据所述终端设备的本地环境生成结构验证文件中的环境约束，用于保存所述本地环境对所述多媒体文件的编辑约束条件；

b、所述编辑描述引擎利用所述结构验证文件中的环境约束对用户的编辑行为信息和用户编辑过程中引入的多媒体资源信息进行验证，在验证通过后，将所述编辑行为信息以预设的时间线信息的形式保存在所述编辑描述脚本文件中，并将所述多媒体资源的属性信息保存在所述编辑描述脚本文件中；

其中，所述时间线信息包括多个时间片信息，每个时间片信息包括在该时间片内播放的多媒体资源的标识和起止时间；所述多媒体资源的属性信息包括多媒体资源的类型、标识和保存位置。

2.根据权利要求1所述的方法，其特征在于，所述环境约束包括用户认证信息、资源媒体类型约束、资源位置类型约束、资源位置类型约束。

3.根据权利要求1所述的方法，其特征在于，该方法进一步包括：预先在所述编辑描述引擎中定义与编辑描述脚本文件中时间线信息形式结构相对应的数据结构，作为时间模型结构，并定义与编辑描述脚本文件中多媒体资源属性信息保存结构相对应的数据结构，作为资源模型结构。

4.根据权利要求3所述的方法，其特征在于，所述编辑描述引擎对用户的编辑行为信息进行验证包括：将所述编辑行为信息利用所述时间模型结构进行表示，形成时间模型数据，利用所述环境约束对所述时间模型数据进行验证；

所述将编辑行为信息以预设的时间线信息的形式保存在编辑描述脚本文件中包括：将所述时间模型数据加密后进行保存。

5.根据权利要求3所述的方法，其特征在于，所述编辑描述引擎对用户编辑过程中引入的多媒体资源进行验证包括：将所述多媒体资源的属性信息利用所述资源模型结构进行表示，形成资源模型数据，利用所述约束条件对所述资源模型数据进行验证；

将所述多媒体资源的属性信息保存在编辑描述脚本文件中包括：将所述资源模型数据加密后进行保存。

6.根据权利要求2所述的方法，其特征在于，当系统中的任一终端设备获取已经生成的所述编辑描述脚本文件后，在对所述编辑描述脚本文件保存的所述多媒体文件进行编辑前，该方法进一步包括：

所述任一终端设备上的编辑描述引擎根据所述结构验证文件中的结构约束对获取的所述编辑描述脚本文件的文本内容进行验证，当验证通过后，从获取的所述编辑描述脚本文件中导出其保存的时间线信息和多媒体资源的属性信息；

其中，所述结构验证文件中进一步包括所述任一终端设备上的编辑描述引擎本身对编辑的编辑描述脚本文件描述格式的结构约束。

7.根据权利要求6所述的方法，其特征在于，该方法进一步包括：预先在所述编辑描述引擎中定义与编辑描述脚本文件中时间线信息形式结构相对应的数据结构，作为时间模型结构，并定义与编辑描述脚本文件中多媒体资源属性信息保存结构相对应的数据结构，作为资源模型结构。

8.根据权利要求7所述的方法，其特征在于，所述从获取的所述编辑描述脚本文件中导出其保存的时间线信息和多媒体资源的属性信息包括：

从获取的所述编辑描述脚本文件中读取时间线信息，并利用所述时间模型结构进行表示，提供给上层应用；从获取的所述编辑描述脚本文件中读取多媒体资源的属性信息，并利用所述资源模型结构进行表示，提供给上层应用。

9.根据权利要求6所述的方法，其特征在于，所述编辑描述脚本文件进一步包括全局属性信息和目标属性信息，所述全局属性信息用于保存用户信息和加密信息，所述目标属性信息用于保存所述多媒体文件的属性。

10.根据权利要求9所述的方法，其特征在于，所述目标属性信息包括用于记录所述多媒体文件承载容器格式的媒体类型、用于记录所述多媒体文件生成后保存形式的位置类型、用于记录目标所述多媒体文件位置资源定位符的位置信息。

11.根据权利要求9所述的方法，其特征在于，在执行所述根据结构约束对编辑描述脚本文件进行验证的操作前，该方法进一步包括：

从所述编辑描述脚本文件的全局属性信息中读取用户信息，并根据所述环境约束中的用户认证信息进行验证，当验证通过后，继续执行所述根据结构约束对编辑描述脚本文件进行验证的操作。

12.根据权利要求6所述的方法，其特征在于，在所述导出保存的时间线信息和多媒体资源的属性信息的操作后、所述对多媒体文件进行编辑的操作前，该方法进一步包括：根据所述多媒体资源的属性信息获取相应的多媒体资源并进行解码，按照导出的时间线信息依次对各多媒体资源进行编码，生成目标多媒体文件。

13.一种编辑多媒体文件的编辑描述引擎，其特征在于，该装置包括：接口单元、验证单元、脚本文件编辑单元；

所述接口单元，用于接收终端设备的本地环境对所述多媒体文件的编辑约束条件、用户的编辑行为信息、用户编辑过程中引入的多媒体资源信息；

所述模型结构单元，用于将所述接口单元接收的用户的编辑行为信息利用预设的时间模型结构进行表示，形成时间模型数据并发送给所述验证单元；还用于将所述接口单元接收的用户编辑过程中引入的多媒体资源的属性信息利用预设的资源模型结构进行表示，形成资源模型数据并发送给所述验证单元；还用于根据所述接口单元接收的所述本地环境对所述多媒体文件的编辑约束条件利用预设的验证模型结构进行表示，形成验证模型数据并发送给所述验证单元；

所述验证单元，用于根据所述模型结构单元发送的验证模型数据生成结构验证文件中的环境约束；还用于利用所述环境约束对所述时间模型数据和资源模型数据进行验证，在验证通过后通知所述脚本文件编辑单元；

所述脚本文件编辑单元，用于在接收所述验证单元的通知后，将所述时间模型数据以时间线信息的形式保存在编辑描述脚本文件中，并将所述资源模型数据保存在所述编辑描述脚本文件中；其中，所述编辑描述脚本文件用于保存所述多媒体文件的编辑结果。

14.根据权利要求13所述的装置，其特征在于，该装置进一步包括安全结构解析单元，用于在读取编辑描述脚本文件时，进行正文解密工作，在生成编辑描述脚本文件时生成随机加密信息，将正文部分加密。

15.根据权利要求13所述的装置，其特征在于，所述验证单元，进一步用于在读取终端设备获取的编辑描述脚本文件前，根据所述结构验证文件中的结构约束对所述编辑描述脚本文件进行验证，并在通过后通知所述脚本编辑单元；

所述脚本编辑单元，进一步用于在接收到所述验证单元发送的通过结构约束验证的通知后，从所述获取的编辑描述脚本文件中导出其保存的时间线信息和多媒体资源的属性信息给所述模型结构单元；

所述模型结构单元，进一步用于将所述脚本编辑文件中导出的所述时间线信息和多媒体属性信息转换为相应的时间模型结构和资源模型结构，并通过所述接口单元发送给所述终端设备的上层。

16.一种多媒体文件的编辑系统，其特征在于，所述系统位于终端设备中，包括编辑描述引擎、交互应用装置和编解码应用装置；

所述编辑描述引擎，用于根据所述本地编解码装置提供的本地环境生成结构验证文件中的环境约束，并根据所述环境约束对所述交互应用装置提供的用户的编辑行为信息和用户编辑过程中引入的多媒体资源信息进行验证，在验证通过后，将所述编辑行为信息以预设的时间线信息的形式保存在编辑描述脚本文件中，并将所述多媒体资源的属性信息保存在所述编辑描述脚本文件中；其中，所述编辑描述脚本文件用于保存所述多媒体文件的编辑结果；

所述交互应用装置，用于将所述编辑描述引擎支持的模型结构与用户界面操作的数据结构间进行相互转化，向所述编辑描述引擎导入用户的编辑行为信息和编辑过程中引入的多媒体资源信息，并向用户界面提供开放接口，用于进行多媒体资源管理、时间线信息管理和目标信息及用户信息的管理；

所述编解码应用装置，用于从上层接收本地编解码方案和多媒体资源获取方案，形成本地环境信息提供给所述编辑描述引擎；还用于根据所述编辑描述引擎提供的编辑脚本文件中的时间线信息和资源信息，生成所述多媒体文件。

Images