CN115914655B - 一种跨平台、泛工具融媒体业务交互方法及系统 - Google Patents

Abstract

本发明涉及一种跨平台、泛工具融媒体业务交互方法及系统，属于数字媒体技术领域，它包括融媒交互接口层：实现各个融媒体中心的虚拟用户管理、权限管理、资源存储管理和用户的时间线管理；融媒素材交换工具：用于完成用户登录、用户鉴权、用户权限管理和用户素材的检索处理，根据用户输入的查询条件构建统一的素材检索报文，并发送到融媒交互接口层；融媒插件工具：用于采集创作工具的时间线信息，并以协议的方式回传时间线信息到融媒交互接口层；后台合成组件：用于调用不同创作工具的SDK，将用户提交的时间线文件进行分布式渲染合成媒体文件。本发明可以和多个融媒体中心搭配使用，具有松耦合性的优点，从而方便以后的系统业务拓展。

Description

一种跨平台、泛工具融媒体业务交互方法及系统

技术领域

本发明涉及数字媒体技术领域，尤其涉及一种跨平台、泛工具融媒体业务交互方法及系统。

背景技术

近年来在全国各地已经建成了大量的融媒体中心，配套建设了大量融媒体中心业务支撑系统，用于日常的节目生产。融媒体时代，随着短视频、图文稿件、H5等多种富媒体呈现形式的出现，各种全新的应用场景层出不穷，创作人员会针对不同的应用场景选择不同的工具进行内容创作，如视频工具(剪映、Adobe Premiere、MacFinal Cut Pro等）、H5工具、音频工具等。

尽管各种创作工具能够针对不同的业务应用场景进行创作，但是仍然存在以下问题：由于融媒体中心众多，无法将素材用统一的方式提供给创作人员；现有的融媒体中心制作工具以及制作场景单一，无法满足创作人员多样化制作工具和多元化场景的需求；制作平台难以跨异构系统使用，无法满足创作人员在不同系统平台下创作的需求。

需要说明的是，在上述背景技术部分公开的信息只用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本发明的目的在于克服现有技术的缺点，提供了一种跨平台、泛工具融媒体业务交互方法及系统，解决了目前各种创作工具针对不同的业务应用场景进行创作时存在的问题。

本发明的目的通过以下技术方案来实现：一种跨平台、泛工具融媒体业务交互系统，它包括融媒交互接口层、融媒素材交换工具、融媒插件工具、融媒插件工具、后台合成组件和融媒入库组件；

所述融媒交互接口层：用于整合各个融媒体中心，形成统一的与多个融媒交互的接口，消除各个融媒体中心之间的差异性，并实现各个融媒体中心的虚拟用户管理、权限管理、资源存储管理和用户的时间线管理；

所述融媒素材交换工具：用于完成用户登录、用户鉴权、用户权限管理和用户素材的检索处理，并根据用户输入的查询条件构建统一的素材检索报文，并发送到融媒交互接口层；

所述融媒插件工具：用于采集创作工具的时间线信息，并以协议的方式回传时间线信息到融媒交互接口层；

所述后台合成组件：用于调用不同创作工具的SDK，将用户提交的时间线文件进行分布式渲染合成媒体文件；

所述融媒入库组件：用于将完成的成品发送到不同融媒体中心的发布流程。

所述融媒交互接口层包括虚拟用户管理、虚拟存储管理、虚拟权限管理、素材检索模块和时间线管理；

所述虚拟用户管理：用于通过采用虚拟用户ID的方式与各个融媒体中心进行用户登录和用户鉴权，并根据鉴权结果和本机信息判断是否为有效用户；

所述虚拟存储管理：用于根据用户的系统情况，将融媒体中心的资源按照用户的系统情况进行映射和分配；

所述虚拟权限管理：用于将同一用户在各个融媒体中心的权限归类为统一的操作权限；

所述素材检索模块：用于完成各个融媒体中心不同权限类型的素材检索和调用，并统一反馈到融媒素材交换工具；

所述时间线管理：用于接收并按照日期目录的方式保存相关的时间线压缩文件和信息，根据虚拟用户ID完成时间线和信息文件的分布式数据库保存，将反馈保存结果到融媒插件工具。

所述虚拟用户管理的判断为有效用户时，则取出存储在融媒交互接口层的用户账号和虚拟ID，完成用户虚拟ID和当前有效的本机设备的绑定，同时生成用户登录的token信息，并将用户的账号、用户虚拟ID和用户token信息发送到所述融媒素材交换工具，完成用户到多个融媒中心的完整鉴权。

所述虚拟存储管理的功能具体包括：

首先进行虚拟用户ID的有效性鉴权，如果是有效性用户，根据协议中的信息按照用户请求的情况构建素材反馈协议；

判断用户的机器信息，并由机器信息判断为局域网访问还是互联网访问，如果是互联网访问，存储信息反馈为流媒体服务器上的素材信息，如果是局域网访问，则继续判断机器操作系统信息，根据操作系统信息提供符合操作系统访问的素材的存储信息，并将存储信息和虚拟用户ID构建为统一的素材反馈协议，反馈给融媒插件工具。

所述虚拟权限管理的功能具体包括：

接收请求报文，根据虚拟用户ID的后台鉴权结果，查询用户对应的各个融媒体中心权限，结合配置的融媒体中心权限字典，根据各个融媒体中心的不同协议要求，重新组装权限查询协议，并依次发送到用户有权限的各个融媒体中心；

接收融媒体中心反馈的权限查询结果，查询配置的融媒体中心权限字典，将各个融媒体中心的不同协议统一转换为自身使用的权限协议，并将权限结果结合虚拟用户ID存储在分布式Redis和数据库中，以及将权限协议反馈给融媒素材交换工具。

所述素材检索模块的功能具体包括：

接收请求报文，根据虚拟用户ID的后台鉴权结果，查询用户对应的各个融媒体中心权限，通过虚拟用户ID调用虚拟权限管理存储的用户权限，按照各个融媒体中心的不同协议要求，重新组装各个融媒体中心的素材检索协议，并依次发送到用户有权限的各个融媒体中心；

接收融媒体中心反馈的素材检索结果，将不同融媒体中心的素材检索结果转换为业务需要的统一检索协议，以及将不同的素材检索结果统一规整为可分页的协议结果存储在分布式Redis和数据库中；

调用虚拟存储模块将不同融媒体中心的素材地址统一转换为当前用户系统使用的存储地址，并构建统一的素材检索权限协议反馈给融媒素材交换工具。

一种跨平台、泛工具融媒体业务交互方法，所述方法包括：

通过融媒素材交换工具对融媒体中心的用户登录、用户鉴权、用户权限管理和用户素材检索处理；

通过融媒插件工具对融媒体素材使用，以时间线信息进行压缩，生成符合统一时间线要求的用户工程文件，将用户工程文件发送到融媒交互接口层，实现节目信息和时间线的网络化保存；

将保存的用户工程文件通过后台合成组件进行分片式和分布式渲染合成媒体文件，将媒体文件入库到各个融媒体中心，并将所有媒体文件入库通知发送到融媒插件工具的客户端。

所述通过融媒素材交换工具对融媒体中心的用户登录、用户鉴权、用户权限管理和用户素材检索处理具体包括以下内容：

获取用户信息，通过用户信息提取本地机器信息，根据本地机器信息构建同一用户的json信息，并将json信息加密发送到融媒交互接口层；

融媒交互接口层接收json信息并解密，将解密后的信息通过虚拟用户体系进行用户体系转换，构建融媒体中心需要的协议报文，融媒体中心对解密后的信息进行用户鉴权并将用户鉴权结果反馈到融媒交互接口层；

融媒交互接口层判断用户鉴权结果是否为有效用户，如果是，融媒交互接口层生成新的用户虚拟ID并保存用户及其信息到分布式数据库中，同时生成用户token信息，将用户虚拟ID信息和用户token信息发送到客户端；

客户端根据虚拟用户ID和用户token信息构建心跳包协议并发送到融媒交互接口层，融媒交互接口层接收并解构心跳包协议，并进行用户鉴权，将用户鉴权结果反馈给客户端，客户端构建检索的请求报文方式，将请求报文发送到融媒交互接口层；

融媒交互接口层接收请求报文，根据各个融媒体中心的不同要求重新组装素材检索协议并发送到融媒体中心；

融媒体中心接收检索协议，通过融媒体中心检索后将检索结果反馈到融媒交互接口层，融媒交互交口处接收到检索结果后对存储虚拟信息进行转换，构造客户端使用的检索结果协议，并反馈到客户端；

客户端接收到检索结果并进行解构，将解构结果保存到本地缓存队列中，并根据系统和创作工具的不同构建符合创作工具需求的多类型素材拖拽协议。

所述通过融媒插件工具对融媒体素材使用，以时间线信息进行压缩，生成符合统一时间线要求的用户工程文件，将用户工程文件发送到融媒交互接口层，实现节目信息和时间线的网络化保存包括以下内容：

融媒插件工具根据创作人员登录请求想创作人员授权编辑权限，并通过QUIC协议通知融媒交互接口层，融媒交互接口层接收融媒插件工具发送的QUIC协议并进行协议转换，将创建业务的操作行为同步到融媒体中心；

融媒插件工具将创作人员编辑完成的作品以时间线信息进行压缩，生成符合同一时间线要求的压缩文件，并构建统一工程协议，融媒插件工具将压缩文件和统一工程协议发送给融媒交互接口层，融媒交互接口层验证用户工程文件的有效性并对压缩文件进行解压，将解压后的压缩文件保存到分布式数据库中；

融媒交互接口层想融媒体中心发送记录指令，融媒体中心接收记录指令并记录用户操作行为，同时关闭本地的用户工程文件，融媒交互接口层将节目信息发送到后台合成组件。

所述将保存的用户工程文件通过后台合成组件进行分片式和分布式渲染合成媒体文件，将媒体文件入库到各个融媒体中心，并将所有媒体文件入库通知发送到融媒插件工具的客户端包括以下内容：

融媒插件工具将时间线信息和节目信息打包并提交到融媒交互接口层，并下发到后台合成组件，后台合成组件调用创作工具对时间线信息和节目信息进行分片化处理并对用户工程文件进行渲染，生成YUV文件或者PCM数据；

后台合成组件将用户工程文件合成进度通知融媒交互接口层，融媒交互接口层根据用户的ID信息和token信息将合成进度通知在线的用户客户端，用户工程文件合成完毕后，后台合成组件将媒体文件信息、用户信息和节目相关信息入库到融媒体中心，并将入库结果反馈到融媒交互接口层。

本发明具有以下优点：一种跨平台、泛工具融媒体业务交互方法及系统，可以和多个融媒体中心搭配使用，具有松耦合性的优点，从而为方便以后的系统业务拓展；具有跨平台异构数据的优势，实现了在多样化的操作系统下实现对融媒体中心的用户登录、用户鉴权、用户权限管理和用户素材检索处理等一系列动作的统一化操作，避免了多个平台之间的差异化操作；具有更好的工具适应性，通过实施本方案，可以将编辑人员和其所需的工具紧密结合起来，大幅提升了人员工作效率；同时提高了融媒体中心的安全性，通过融媒插件工具对融媒体素材的使用并且完成用户工程文件的网络化保存，实现了网络化的节目生产，避免了单点故障；通过将保存的用户工程文件通过后台合成组件进行分片式和分布式渲染合成媒体文件，从而提高了系统整体的生产效率；通过自动化的流程将媒体文件入库到融媒体中心，从而实现了本方案和融媒体中心的深度融合；通过在各个环节埋点记录用户操作日志和心跳日志，为系统的业务数据安全性提供了良好的支撑。

附图说明

图1为本发明方法的流程示意图；

图2为本发明系统的结构示意图；

图3为本发明系统中融媒交互接口层的结构示意图；

图4为融媒插件工具的功能流程示意图；

图5为融媒交互接口层任务下发到后台合成组件的流程示意图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此，以下结合附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的保护范围，而是仅仅表示本申请的选定实施例。基于本申请的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。下面结合附图对本发明做进一步的描述。

如图1所示，本发明其中一种实施方式涉及一种跨平台、泛工具融媒体业务交互方法，通过融媒素材交换组件对融媒体中心的用户登录、用户鉴权、用户权限管理和用户素材检索处理；通过融媒插件工具对融媒体素材的使用并且完成用户工程文件的网络化保存，记录用户操作的流程进行处理；将保存的用户工程文件通过后台合成组件进行分片式和分布式渲染合成媒体文件；将媒体文件入库到融媒体中心，并将所述媒体文件入库通知发送到融媒插件工具客户端。

优选地，通过融媒素材交换组件完成融媒体中心的用户登录、用户鉴权、用户权限管理和用户素材检索处理，包括：

获取用户信息，通过用户信息提取本地机器信息；根据本地机器信息构建同一用户的json信息，将所述json信息加密并发送到融媒交互接口层；

融媒交互接口层接收所述json信息并解密，将解密后的信息通过虚拟用户体系进行用户体系转换；构建融媒体中心需要的协议报文；融媒体中心对所述解密后的信息进行用户鉴权并将用户鉴权结果反馈至所述融媒交互接口层。

优选地，融媒交互接口层判断是否为有效用户，若用户鉴权结果为有效用户，融媒交互接口层生成新的用户虚拟ID并保存用户机器信息到分布式数据库系统；同时生成用户token信息，将用户虚拟ID信息和用户token信息发送到客户端；

客户端根据虚拟用户ID信息和用户token信息构建心跳包协议并发送到融媒交互接口层；（采用QUIC方式发送给融媒交互接口层）融媒交互接口层接收并解构所述心跳包协议。

优选地，针对解构后的心跳包协议进行用户鉴权，将用户鉴权结果反馈给客户端，客户端构建检索的请求报文方式，并将请求报文发送到融媒交互接口层；

融媒交互接口层接收请求报文，根据各个融媒体中心的不同要求重新组装素材检索协议并发送到融媒体中心；

融媒体中心接收检索协议，通过融媒体中心检索后将检索结果反馈到融媒交互接口层；融媒交互接口层收到检索结果后，对存储虚拟信息进行转换，构造客户端使用的检索结果协议，将检索结果协议反馈到客户端；

客户端接收检索结果协议并进行解构，将解构结果保存到本地缓存队列中，客户端根据系统和创作工具不同，构建符合工具需求的XML、Json和文本等多类型素材拖拽协议。

优选地，通过融媒插件工具完成对融媒体素材的使用并且完成用户工程文件的网络化保存，记录用户操作的流程包括：

通过创作工具模块制定融媒插件工具；融媒插件工具根据创作人员登录请求向创作人员授权编辑权限；创作人员创建工程文件，融媒插件工具通过QUIC协议通知融媒交互接口层，所述融媒交互接口层接收所述融媒插件工具发送的QUIC协议并对协议进行转换，将创建业务的操作行为同步给融媒体中心。

优选地，融媒插件工具将创作人员编辑完成的作品将以时间线信息进行ZIP压缩方式压缩，生成符合同一时间线要求的ZIP文件，并构建统一工程协议；

融媒插件工具将所述ZIP文件和统一工程协议传回所述融媒交互接口层；融媒交互接口层验证工程文件的有效性并对ZIP文件进行解压，将解压后的ZIP文件保存到分布式数据库中。

优选地，融媒交互接口层向所述融媒体中心发送记录指令，融媒体中心接收所述记录指令并记录用户操作行为，同时关闭用户本地工程文件；融媒交互接口层将节目信息发送至后台合成组件。

优选地，将保存的用户工程文件通过后台合成组件进行分片式和分布式渲染合成媒体文件，将媒体文件入库到融媒体中心，并将媒体文件入库通知发送到融媒插件工具客户端，具体包括：

融媒插件工具将时间线信息和节目信息打包并通过http post的方式提交到融媒交互接口层，业务交互中间中层通过kafka下发到后台组件；后台合成组件调用创作工具对时间线信息和节目信息进行分片化处理并对工程文件进行渲染，生成YUV文件或PCM数据。

优选地，后台合成组件根据用户提交的合成文件格式将基带数据合成为融媒体中心要求的媒体文件格式；

后台合成组件将用户工程文件合成进度通知融媒交互接口层，融媒交互接口层根据用户的ID信息和token信息将合成进度通知在线的用户客户端系统；工程文件合成完毕后，后台合成组件将媒体文件信息、用户信息、节目相关信息入库到融媒体中心，并将入库结果反馈到融媒交互接口层。

如图2所示，本发明的另一种实施方式涉及一种跨平台、泛工具融媒体业务交互系统，它包括融媒交互接口层、融媒素材交换工具、融媒插件工具、后台合成组件和融媒入库组件。

融媒交互接口层主要实现了虚拟用户管理、虚拟存储管理、虚拟权限管理、素材检索模块、时间线管理等功能，实现了本方法到多个融媒体中心的用户管理、权限管理、资源存储管理和用户的时间线管理。

如图3所示，本实施例中，融媒交互接口层包括虚拟用户管理，用于根据采用一个虚拟用户ID的方式同各个融媒体中心进行用户登录、用户鉴权等操作；虚拟存储管理，用于根据用户的系统情况，将融媒体中心的资源按照用户的系统情况进行映射、分配；虚拟权限管理，用于将同一用户在各个融媒体中心的权限统一归类为统一的操作权限；素材检索模块，用于实现虚拟ID在各个融媒体中心的素材检索、素材基本信息的缓存；时间线管理模块，用于实现将用户创作的时间线进行网络化保存，并为后台合成提供业务支撑。

本实施例中，虚拟用户管理的后台配置中增加多个融媒体平台的用户鉴权接口、用户鉴权反馈接口、用户有效性管理模块；

具体来说，用户首次登录系统后，提示用户进行注册，用户输入在本系统的帐号和密码后，虚拟用户管理生成用户虚拟ID、保存用户的帐号、密码、虚拟id等信息，完成用户在本系统的用户创建；然后，用户完成本系统用户和多个融媒系统的用户、密码绑定，需用户挨个输入具有登录权限的多个融媒体系统的帐号和密码；虚拟用户管理依次调用对应的融媒体鉴权接口对上述帐号和密码进行鉴权，如鉴权成功，相应的帐号、密码、对应的融媒体中心会以国密SM4的方式存储在融媒交互接口层管理的后台数据库中，如鉴权失败则提醒用户重新输入或取消该次绑定操作；

进一步，注册完毕后，用户通过本系统的融媒素材交换工具进行登录，输入本系统相关帐号、密码进行登录；融媒素材交换工具获取用户帐号信息、密码、本机信息等一系列发送到融媒交互接口层的虚拟用户管理；虚拟用户管理通过该用户信息依次提取后台保存的各个融媒体的帐号、密码，并由融媒交互接口层构建对应融媒体中心的鉴权协议，自动调用对应的融媒体中心鉴权接口完成用户登录鉴权；

进一步的，虚拟用户管理根据鉴权结果和本机信息来判断是否为有效用户，若用户鉴权结果为有效用户，虚拟用户管理取出存储在融媒交互接口层的用户帐号和虚拟ID，完成用户虚拟ID和当前有效的本机设备的绑定，同时生成用户登录的token信息，将用户的帐号、用户虚拟ID和用户token信息发送到融媒素材交换工具；从而实现完成用户到多个融媒中心的完整鉴权。

本实施例中，虚拟存储管理的后台配置，增加多个融媒体平台和多种客户系统的素材资源存储管理模块；

具体来说，融媒插件工具根据系统信息（如MAC、WIN等）、虚拟用户ID、本机机器信息（如IP、DNS）、需请求的融媒体中心信息、素材唯一标识符等多种信息，构建素材请求协议发送到虚拟存储管理，虚拟存储管理首先进行虚拟用户ID的有效性鉴权，如果是有效性用户，根据协议中的信息按照用户请求的情况构建素材反馈协议，虚拟存储管理首先判断的是用户的机器信息，由机器信息判断是否为局域网访问还是互联网访问，如果是互联网访问，存储信息反馈为流媒体服务器上的素材信息，如果是局域网访问，进一步判断机器操作系统信息（如MAC、WIN等）的信息，根据操作信息提供素材符合操作系统能访问的如NFS、CIFS、UNC等存储信息，并将存储信息、虚拟用户ID等构建为统一的素材反馈协议，将协议报文反馈给融媒插件工具。

本实施例中，虚拟权限管理的后台配置中，增加多个融媒体中心的用户权限管理模块，模块主要完成多个融媒中心不同权限类型的统一反馈；

具体来说，由于融媒体中心承建方不同，采用的技术架构不同的原因，同样的权限在不同的融媒中心中有不同的表述方式，如资源下载的权限在不同的融媒体中心中,既可以表述为Resources_Download，也可以表述为Material- Download，或者通过1042数字的表达方式，本方法的虚拟权限管理模块用于将不同融媒体中心的权限表达方式进行统一类型的权限类型。

进一步，如融媒素材交换工具将权限请求要求通过统一的报文模式，发送到融媒交互接口层的虚拟权限管理；虚拟权限管理接收请求报文，首先根据虚拟用户ID的后台鉴权结果，查询用户对应的多个融媒中心权限（如融媒体中心1，融媒体中心2……），结合虚拟权限管理配置的融媒体中心权限字典，根据各个融媒体中心的不同协议要求，重新组装权限查询协议，并依次发送到用户有权限的多个融媒体中心；融媒体中心接收权限查询协议，将权限查询反馈到融媒交互接口层的虚拟权限管理；虚拟权限管理收到权限结果后，查询虚拟权限管理配置的融媒体中心权限字典，将各个融媒体中心的不同协议，统一转换为自身使用的权限协议，并将权限结果结合虚拟用户ID存储在分布式的Redis和数据库中，并将权限协议反馈给融媒交互接口层，融媒交互接口层再反馈给融媒素材交换工具；

本实施例中，素材检索模块的后台配置中，增加多个融媒体中心的素材检索调用管理模块，模块主要完成多个融媒中心不同权限类型的素材检索、调用、并统一反馈到融媒素材交换工具；

具体地，融媒素材交换工具根据用户输入的查询条件，构建统一的素材检索报文，向融媒交互接口层的素材检索模块；素材检索模块接收请求报文，首先根据虚拟用户ID的后台鉴权结果，查询用户对应的多个融媒中心平台权限（如融媒体中心1，融媒体中心2……），然后通过虚拟用户ID调用虚拟权限管理S101c存储的用户权限，根据上述两项的结果，按照各个融媒体中心的不同协议要求，重新组装各个融媒体中心的素材检索协议，并由素材检索模块依次发送到用户有权限的多个融媒体中心；融媒体中心接收素材检索协议后，将素材检索的结果反馈到融媒交互接口层的素材检索模块；素材检索模块收到素材检索结果后，此时要完成两个核心的内容，一是将不同融媒体中心的素材检索结果转换为业务所需的统一检索协议，二是将不同结果统一规整为可分页的协议结果存储在分布式Redis（远程字典服务）中；最后调用虚拟存储管理，将不同融媒中心的素材地址统一转换为可供当前用户系统使用的存储地址，最后由素材检索模块构建统一的素材检索权限协议反馈给融媒素材交换工具。

本实施例中，时间线管理模块为本方法提供了时间线存储的支撑，时间线的网络化存储不仅方便了客户在不同的机器上使用同一时间线进行创作的需求，也为后台合成组件在制作后台合成成品节目，提供了技术支撑；

具体地，融媒插件工具完成业务创作后，采集创作工具如PR、AE、AU和FCP的时间线信息，压缩并以QUIC协议的方式回传时间线信息到融媒交互接口层的时间线管理模块，时间线管理模块接收并按日期目录的方式保存相关的时间线压缩文件和相关信息（节目名称、提交时间、用户信息、节目简介等）; 时间线管理模块根据虚拟用户ID完成时间线和信息文件的分布式数据库保存；时间线管理模块反馈保存结果给融媒插件工具；后台合成组件合成的时候，请求时间线管理模块取得相关时间线进行后台合成;客户打开创作工具后，融媒插件工具根据虚拟用户ID、用户输入的查询条件，向时间线管理模块请求相关数据，时间线管理模块获取相关数据，打包为统一格式的时间线查询协议，反馈给融媒插件工具，融媒插件工具进行相关展示；用户选择下载时间线后，融媒插件工具向时间线管理模块请求响应的数据，时间线管理模块以QUIC协议提供时间线下载。

融媒素材交换工具主要完成了各个创作客户端上如Premiere、After Effects、Final Cut Pro、Photoshop、剪映、Audition、HTML5工具中完成用户注册、用户登录、用户鉴权、权限提取、素材展示、用户注销等操作。

具体来说，用户启动如Premiere、AfterEffects、Final Cut Pro、Photoshop、剪映、Audition、HTML5工具等创作工具，如果是注册流程，融媒素材交换工具让用户输入在本系统的帐号和密码后，按照统一的注册报文方式向虚拟用户管理生成用户虚拟ID、保存用户的帐号、密码、虚拟ID等信息，完成用户在本系统的用户创建；然后，进行用户完成本系统用户和多个融媒系统的用户、密码绑定，需用户挨个输入具有登录权限的多个融媒体系统的帐号和密码；虚拟用户管理通过该用户信息和融媒体系统的帐号、密码等信息，并由融媒交互接口层构建对应融媒体中心的鉴权协议，自动调用对应的融媒体中心鉴权接口完成用户和融媒体中心的绑定鉴权；

用户启动如Premiere、AfterEffects、Final Cut Pro、Photoshop、剪映、Audition、HTML5工具等创作工具，如果是登录流程，融媒素材交换工具让用户输入在本系统的帐号和密码后；融媒素材交换工具提取客户端的多种信息，如系统、浏览器类型、机器的UUID时间戳等信息，按照统一的登录报文方式发送虚拟用户管理，实现虚拟用户ID到绑定的多个融媒体中心的同时登录，如果某个融媒体中心登录失败，对用户进行提醒，用户可以选择忽略或者重新绑定；登录完成后，融媒素材交换工具本地缓存虚拟用户管理反馈的虚拟用户ID和用户有效性鉴权的token信息；

接着，融媒素材交换工具通过虚拟用户ID和用户有效性鉴权的token向虚拟权限管理请求用户在各种融媒体中心的权限，将用户权限缓冲在虚拟权限管理中和融媒素材交换工具的本地缓存中。

最后融媒素材交换工具通过虚拟用户ID、用户有效性鉴权的token、用户输入的检索条件等向素材检索模块请求的素材信息，并在融媒素材交换工具实现素材名称、时长、类型、创建人、创建时间等信息的展示。

融媒插件工具主要完成了各个创作客户端上如Premiere、After Effects、FinalCut Pro、Photoshop、剪映、Audition、HTML5工具中对融媒体中心的资源使用，将创作完成的用户时间线的进行网络化保存，同时记录用户操作；

具体来说，如图4所示，用户启动如Premiere、After Effects、Final Cut Pro、Photoshop、剪映、Audition、HTML5工具等创作工具，融媒插件工具根据不同的创作工具加载对应的插件。根据工具使用类型不同，融媒插件工具提供不同的素材调用方式。

启动插件后，创作人员登录，插件向融媒交互接口层通过REST API向虚拟用户管理发送用户鉴权授权请求，验证通过后，融媒交互接口层记录用户的行为。

创作人员创建工程文件，融媒插件工具通过QUIC协议通知融媒交互接口层，融媒交互接口层接收融媒插件工具发送的QUIC协议并对协议进行转换。根据创作工具使用类型不同，融媒插件工具提供不同的素材调用方式，具体实现为主要有以下3种方式：1、使用创作工具提供了SDK模式，如Premiere、Audition等，融媒插件工具根据SDK定制开发软件，通过SDK完成创作工具的业务接入后；2、创作工具未提供SDK，融媒插件工具以标准的系统文件交换协议的方式提供素材访问；3、创作工具如HTML5工具，融媒插件工具以结合vue+elementUI实现自适应素材选择组件，采用统一的数据协议，由html5工具注入并展示，通过组件与HTML5工具的消息和事件交互方式，为HTML5工具提供流媒体化的素材信息。

融媒插件工具将创作人员编辑完成的作品将以时间线信息进行ZIP压缩方式压缩，生成符合统一时间线要求的ZIP文件，并构建统一时间线协议；融媒插件工具将ZIP文件和统一工程协议传回融媒交互接口层；融媒交互接口层验证工程文件的有效性，记录相关的用户操作行为,将相关信息文件保存到分布式数据库中。融媒插件工具同时关闭用户本地时间线文件。

上述步骤主要完成了用户创作的各类型信息的管理，从而将用户单一的、本地化、无权限的工程管理，变为网络化、符合用户权限的工程化管理，从而实现了各类创作工具的工程网络化管理，从而方便用户实现随时随地的创作需求。

后台合成组件主要提供了将融媒插件工具上传的时间线文件进行后台的合成，采用分布式渲染方式合成媒体文件。

具体来说，如图5所示，融媒交互接口层通过kafka方式将任务下发到后台合成组件，后台合成组件接受任务，并反馈任务结果给融媒交互接口层；后台合成组件通过调用创作工具提供的sdk，调用对应操作系统下定制的融媒插件，完成对不同类型的创作工具的时间线的解析；后台合成组件对解析后时间线上的素材文件，通过调用虚拟存储管理模块进行转换为符合合成要求的路径地址；同时后台合成组件对时间线信息和节目信息进行分片化处理，并对时间线文件进行渲染，生成视音频编码所需的YUV文件或PCM数据，其中YUV数据支持色彩空间为REC.709或REC.2020的类型。后台合成组件根据融媒体中心的业务要求，将基带数据，通过编码引擎编码为客户所需的媒体文件格式。

融媒入库组件主要提供了将后台合成组件合成后的媒体文件入库到多个融媒体中心的功能，从而加快了发布到多个融媒体中心的效率。

具体做法为，后台合成组件将媒体文件合成完毕后，融媒入库组件根据不同的融媒体中心提供媒体入库的接口，融媒入库组件自动区分不同融媒体中心的类型，按照融媒体中心的协议类型，并将媒体文件入库到融媒体中心，并同时通知融媒插件工具。

具体地，后台合成组件将用户时间线文件合成完毕后，后台合成组件将媒体文件信息、用户信息、节目相关信息入库到融媒体中心，其中，融媒入库组件调用虚拟用户管理，将本方法内使用的虚拟用户ID转换为对端融媒体中心的所需的用户信息；然后再调用虚拟存储管理，将本方法内使用的存储地址转换为对端融媒体中心能够访问的地址（如NFS、CIFS、流媒体地址、FTP地址等）；接着融媒入库组件按照对端融媒体中心的要求构建入库协议报文，采用REST API的方式入库到融媒体中心，并将入库结果反馈到融媒插件工具。

融媒入库组件基于上述设计，可以实现同一媒体文件入库到多个融媒中心的问题，从而加快了成品节目到多个融媒体中心的发布效率，从而最大化的使用业务的计算资源，完成用户工程文件分布式的合成操作，从而加快了节目生产的整体流程。

本发明通过融媒素材交换组件，用于完成用户登录、用户鉴权、用户权限管理和用户素材检索处理，从而避免创作人员要在不同融媒中心操作的过程，能更加充分的利用不同融媒体中心提供的资源；融媒插件工具，用于提供创作工具使用融媒体中心的素材资源，并且完成用户时间线文件的提交，记录用户操作的流程进行处理，下载用户的时间线文件，并通过创作工具进行打开，从而实现了创作业务线的网络化管理；融媒交互接口层，用于提供虚拟用户权限管理、虚拟存储管理、虚拟权限管控模块、媒体检索模块、时间线管理模块等功能模块，完成将多个创作工具和多个融媒体中心能力紧密的融合在一起；后台合成组件，调用不同创作工具的SDK，将用户提交的时间线文件进行分布式渲染合成媒体文件，从而完成后台合成的流程，更好的利用了丰富的后台资源，避免单个机器资源有限的问题；融媒素材入库组件，完成了成品节目到不同融媒中心的发布流程，加快了业务发布的流程，避免了计算资源的浪费。整体方法不仅实现了多个融媒体中心为创作人员提供业务创作资源的业务需求，又满足了创作人员在多元化场景下使用不同创作工具生产的需求，解决了创作人员之前无法在异构操作系统平台下进行创作的难题，从而为创作人员专注于业务的创意、设计提供了一系列得心应手的工具，加快了融媒业务整体的生产效率。

以上所述仅是本发明的优选实施方式，应当理解本发明并非局限于本文所披露的形式，不应看作是对其他实施例的排除，而可用于各种其他组合、修改和环境，并能够在本文所述构想范围内，通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围，则都应在本发明所附权利要求的保护范围内。

Claims (8)

1.一种跨平台、泛工具融媒体业务交互系统，其特征在于：它包括融媒交互接口层、融媒素材交换工具、融媒插件工具、融媒插件工具、后台合成组件和融媒入库组件；

所述融媒交互接口层：用于整合各个融媒体中心，形成统一的与多个融媒交互的接口，消除各个融媒体中心之间的差异性，并实现各个融媒体中心的虚拟用户管理、虚拟权限管理、虚拟存储管理和用户的时间线管理；

所述融媒素材交换工具：用于完成用户登录、用户鉴权、用户权限管理和用户素材的检索处理，并根据用户输入的查询条件构建统一的素材检索报文，并发送到融媒交互接口层；

所述融媒插件工具：用于采集创作工具的时间线信息，并以协议的方式回传时间线信息到融媒交互接口层；

所述后台合成组件：用于调用不同创作工具的SDK，将用户提交的时间线文件进行分布式渲染合成媒体文件；

所述融媒入库组件：用于将完成的成品发送到不同融媒体中心的发布流程；

所述融媒交互接口层包括虚拟用户管理、虚拟存储管理、虚拟权限管理、素材检索模块和时间线管理；

所述虚拟用户管理：用于通过采用虚拟用户ID的方式与各个融媒体中心进行用户登录和用户鉴权，并根据鉴权结果和本机信息判断是否为有效用户；

所述虚拟存储管理：用于根据用户的系统情况，将融媒体中心的资源按照用户的系统情况进行映射和分配；

所述虚拟权限管理：用于将同一用户在各个融媒体中心的权限归类为统一的操作权限；

所述素材检索模块：用于完成各个融媒体中心不同权限类型的素材检索和调用，并统一反馈到融媒素材交换工具；

所述时间线管理：用于接收并按照日期目录的方式保存相关的时间线压缩文件和信息，根据虚拟用户ID完成时间线和信息文件的分布式数据库保存，将反馈保存结果到融媒插件工具。

2.根据权利要求1所述的一种跨平台、泛工具融媒体业务交互系统，其特征在于：所述虚拟用户管理的判断为有效用户时，则取出存储在融媒交互接口层的用户账号和虚拟ID，完成用户虚拟ID和当前有效的本机设备的绑定，同时生成用户登录的token信息，并将用户的账号、用户虚拟ID和用户token信息发送到所述融媒素材交换工具，完成用户到多个融媒中心的完整鉴权。

3.根据权利要求1所述的一种跨平台、泛工具融媒体业务交互系统，其特征在于：所述虚拟存储管理的功能具体包括：

首先进行虚拟用户ID的有效性鉴权，如果是有效性用户，根据协议中的信息按照用户请求的情况构建素材反馈协议；

判断用户的机器信息，并由机器信息判断为局域网访问还是互联网访问，如果是互联网访问，存储信息反馈为流媒体服务器上的素材信息，如果是局域网访问，则继续判断机器操作系统信息，根据操作系统信息提供符合操作系统访问的素材的存储信息，并将存储信息和虚拟用户ID构建为统一的素材反馈协议，反馈给融媒插件工具。

4.根据权利要求1所述的一种跨平台、泛工具融媒体业务交互系统，其特征在于：所述虚拟权限管理的功能具体包括：

接收请求报文，根据虚拟用户ID的后台鉴权结果，查询用户对应的各个融媒体中心权限，结合配置的融媒体中心权限字典，根据各个融媒体中心的不同协议要求，重新组装权限查询协议，并依次发送到用户有权限的各个融媒体中心；

接收融媒体中心反馈的权限查询结果，查询配置的融媒体中心权限字典，将各个融媒体中心的不同协议统一转换为自身使用的权限协议，并将权限结果结合虚拟用户ID存储在分布式Redis和数据库中，以及将权限协议反馈给融媒素材交换工具。

5.根据权利要求1所述的一种跨平台、泛工具融媒体业务交互系统，其特征在于：所述素材检索模块的功能具体包括：

接收请求报文，根据虚拟用户ID的后台鉴权结果，查询用户对应的各个融媒体中心权限，通过虚拟用户ID调用虚拟权限管理存储的用户权限，按照各个融媒体中心的不同协议要求，重新组装各个融媒体中心的素材检索协议，并依次发送到用户有权限的各个融媒体中心；

接收融媒体中心反馈的素材检索结果，将不同融媒体中心的素材检索结果转换为业务需要的统一检索协议，以及将不同的素材检索结果统一规整为可分页的协议结果存储在分布式Redis和数据库中；

调用虚拟存储模块将不同融媒体中心的素材地址统一转换为当前用户系统使用的存储地址，并构建统一的素材检索权限协议反馈给融媒素材交换工具。

6.一种跨平台、泛工具融媒体业务交互方法，其特征在于：所述方法包括：

通过融媒素材交换工具对融媒体中心的用户登录、用户鉴权、用户权限管理和用户素材检索处理；

通过融媒插件工具对融媒体素材使用，以时间线信息进行压缩，生成符合统一时间线要求的用户工程文件，将用户工程文件发送到融媒交互接口层，实现节目信息和时间线的网络化保存；

将保存的用户工程文件通过后台合成组件进行分片式和分布式渲染合成媒体文件，将媒体文件入库到各个融媒体中心，并将所有媒体文件入库通知发送到融媒插件工具的客户端；

所述通过融媒素材交换工具对融媒体中心的用户登录、用户鉴权、用户权限管理和用户素材检索处理具体包括以下内容：

获取用户信息，通过用户信息提取本地机器信息，根据本地机器信息构建同一用户的json信息，并将json信息加密发送到融媒交互接口层；

融媒交互接口层接收json信息并解密，将解密后的信息通过虚拟用户体系进行用户体系转换，构建融媒体中心需要的协议报文，融媒体中心对解密后的信息进行用户鉴权并将用户鉴权结果反馈到融媒交互接口层；

融媒交互接口层判断用户鉴权结果是否为有效用户，如果是，融媒交互接口层生成新的用户虚拟ID并保存用户及其信息到分布式数据库中，同时生成用户token信息，将用户虚拟ID信息和用户token信息发送到客户端；

客户端根据虚拟用户ID和用户token信息构建心跳包协议并发送到融媒交互接口层，融媒交互接口层接收并解构心跳包协议，并进行用户鉴权，将用户鉴权结果反馈给客户端，客户端构建检索的请求报文方式，将请求报文发送到融媒交互接口层；

融媒交互接口层接收请求报文，根据各个融媒体中心的不同要求重新组装素材检索协议并发送到融媒体中心；

融媒体中心接收检索协议，通过融媒体中心检索后将检索结果反馈到融媒交互接口层，融媒交互交口处接收到检索结果后对存储虚拟信息进行转换，构造客户端使用的检索结果协议，并反馈到客户端；

客户端接收到检索结果并进行解构，将解构结果保存到本地缓存队列中，并根据系统和创作工具的不同构建符合创作工具需求的多类型素材拖拽协议。

7.根据权利要求6所述的一种跨平台、泛工具融媒体业务交互方法，其特征在于：所述通过融媒插件工具对融媒体素材使用，以时间线信息进行压缩，生成符合统一时间线要求的用户工程文件，将用户工程文件发送到融媒交互接口层，实现节目信息和时间线的网络化保存包括以下内容：

融媒插件工具根据创作人员登录请求想创作人员授权编辑权限，并通过QUIC协议通知融媒交互接口层，融媒交互接口层接收融媒插件工具发送的QUIC协议并进行协议转换，将创建业务的操作行为同步到融媒体中心；

融媒插件工具将创作人员编辑完成的作品以时间线信息进行压缩，生成符合同一时间线要求的压缩文件，并构建统一工程协议，融媒插件工具将压缩文件和统一工程协议发送给融媒交互接口层，融媒交互接口层验证用户工程文件的有效性并对压缩文件进行解压，将解压后的压缩文件保存到分布式数据库中；

融媒交互接口层想融媒体中心发送记录指令，融媒体中心接收记录指令并记录用户操作行为，同时关闭本地的用户工程文件，融媒交互接口层将节目信息发送到后台合成组件。

8.根据权利要求6所述的一种跨平台、泛工具融媒体业务交互方法，其特征在于：所述将保存的用户工程文件通过后台合成组件进行分片式和分布式渲染合成媒体文件，将媒体文件入库到各个融媒体中心，并将所有媒体文件入库通知发送到融媒插件工具的客户端包括以下内容：

融媒插件工具将时间线信息和节目信息打包并提交到融媒交互接口层，并下发到后台合成组件，后台合成组件调用创作工具对时间线信息和节目信息进行分片化处理并对用户工程文件进行渲染，生成YUV文件或者PCM数据；

后台合成组件将用户工程文件合成进度通知融媒交互接口层，融媒交互接口层根据用户的ID信息和token信息将合成进度通知在线的用户客户端，用户工程文件合成完毕后，后台合成组件将媒体文件信息、用户信息和节目相关信息入库到融媒体中心，并将入库结果反馈到融媒交互接口层。

Images