CN115002358A

CN115002358A - 数字背景拍摄中的控制方法及系统

Info

Publication number: CN115002358A
Application number: CN202210284500.7A
Authority: CN
Inventors: 张中杰; 陈石平
Original assignee: Beijing Youku Technology Co Ltd
Current assignee: Shenli Vision Shenzhen Cultural Technology Co ltd
Priority date: 2022-03-22
Filing date: 2022-03-22
Publication date: 2022-09-02
Anticipated expiration: 2042-03-22
Also published as: CN115002358B

Abstract

本申请实施例公开了数字背景拍摄中的控制方法及系统，所述系统包括：第一客户端以及第二客户端；其中，所述第一客户端，运行在位于显示屏前的第一终端设备中，用于生成对所述显示屏中当前正在展示的图像素材进行控制的控制指令，并发送给所述第二客户端；所述显示屏用于对所述数字背景拍摄过程中所需的背景图像素材进行展示；所述第二客户端，运行在位于显示屏后的第二终端设备中，用于接收到所述控制指令后，通过执行所述控制指令对所述显示屏中当前正在展示的图像素材进行控制处理。通过本申请实施例，能够更方便、高效地进行图像素材的控制。

Description

数字背景拍摄中的控制方法及系统

技术领域

本申请涉及数字背景拍摄技术领域，特别是涉及数字背景拍摄中的控制方法及系统。

背景技术

在按照传统的方案拍摄影视作品时，经常要使用绿幕等纯色背景合成技术，也即，拍摄时使用绿色幕布作为背景，演员在绿幕前表演，由摄影机拍摄下来，后期处理时，抠掉背景的绿色，换上其他背景。但是，这种方式下，拍摄和合成是件耗时耗力的事。在这种情况下，数字背景拍摄方式(例如，LED(Light Emitting Diode，发光二极管)便应运而生了。所谓LED数字背景拍摄是指，在拍摄现场通过LED显示屏播放背景视频，演员可以在这种IED显示屏前进行表演，然后由摄像机进行拍摄。场景录制完成后工作人员仅需进行剪辑和调色等基础工作，大大减少了后期制作的工作量。这种数字背景拍摄方式不仅省去了拍摄差旅的时间和资金成本，而且后期制作周期也被大大缩短，同时成片又能实现非常自然逼真的效果。

但是，传统的数字背景拍摄方案中，通常需要PC端的LED播控软件对具体播放的视频进行控制。并且，PC设备一般是放置在屏幕后的隐藏位置，由屏幕后的工作人员进行操作。当需要对视频进行播放控制的时候，则需要屏幕前后操作人员通力配合。例如，屏幕前工作人员看到当前LED显示屏上显示的内容需要进行调整时，需要通过对讲机的方式告诉屏幕后工作人员，屏幕后的工作人员通过操作PC端的LED播控软件做出调整。比如需要调整视频画面的位置时，需要通过对讲机告诉视频往哪边移动。但是，屏幕前的工作人员可能又无法精确表达出需要移动什么位置才合适，所以往往需要多次来回频繁的沟通才能调整到合适的位置。可见，这样的方式非常不方便，效率非常低。

因此，如何在数字背景拍摄的过程中，更方便、高效地进行图像素材的控制，成为需要本领域技术人员解决的技术问题。

发明内容

本申请提供了数字背景拍摄中的控制方法及系统，能够更方便、高效地进行图像素材的控制。

本申请提供了如下方案：

一种数字背景拍摄中的控制系统，包括：

第一客户端以及第二客户端；其中，

所述第一客户端，运行在位于显示屏前的第一终端设备中，用于生成对所述显示屏中当前正在展示的图像素材进行控制的控制指令，并发送给所述第二客户端；所述显示屏用于对所述数字背景拍摄过程中所需的背景图像素材进行展示；

所述第二客户端，运行在位于显示屏后的第二终端设备中，用于接收到所述控制指令后，通过执行所述控制指令对所述显示屏中当前正在展示的图像素材进行控制处理。

其中，所述所述第一客户端具体用于，响应于针对所述显示屏中当前展示的图像素材的控制操作，生成所述控制指令。

其中，所述第二客户端还用于，将所述显示屏中当前正在展示的图像素材的代表图像帧提供给所述第一客户端；

所述第一客户端具体用于，通过操作界面展示所述代表图像帧，以便通过对所述代表图像帧执行操作的方式，发起对所述显示屏中当前正在展示的图像素材进行控制的操作。

其中，所述控制操作包括：用于改变所述代表图像帧的展示位置或大小的操作，以便通过所述第一客户端改变所述图像素材在所述显示屏中的展示位置或大小。

其中，所述控制操作包括：用于对所述代表图像帧的画面内容进行编辑的操作，以便通过所述第一客户端发起针对所述图像素材的画面内容进行编辑的操作，并通过所述第二客户端执行对应的编辑任务。

一种数字背景拍摄中的控制方法，包括：

通过第一客户端接收针对显示屏中当前正在展示的图像素材发出的控制操作；所述第一客户端运行在位于所述显示屏前的第一终端设备中，所述显示屏用于对所述数字背景拍摄过程中所需的背景图像素材进行展示；

根据所述控制操作生成控制指令；

将所述控制指令发送给第二客户端执行，所述第二客户端运行在位于显示屏后的第二终端设备中，用于通过执行所述控制指令对所述显示屏中当前正在展示的图像素材进行控制处理。

其中，还包括：

接收所述第二客户端提供的关于所述显示屏中当前正在展示的图像素材的代表图像帧；

在操作界面展示所述代表图像帧，以便通过对所述代表图像帧执行操作的方式，发起对所述显示屏中当前正在展示的图像素材进行控制的操作。

其中，还包括：

在所述操作界面中展示代表显示屏可视区域的矩形框，并根据所述图像素材在所述显示屏的当前展示位置及大小，对所述代表图像帧进行展示，以便通过对所述代表图像帧进行拖动或缩放的方式，改变所述代表图像帧与所述矩形框之间的相对位置或大小。

其中，还包括：

在所述操作界面中提供用于对所述代表图像帧的展示位置进行微调的操作选项，以便通过该操作选项，将所述图像素材在所述显示屏中的展示位置向目标方向进行像素级别的微调。

其中，如果当前在所述显示屏中展示的图像素材为多份，则所述方法还包括：

在所述操作界面中提供用于对所述多份图像素材对应的代表图像帧进行整体拖动的操作选项，以用于触发对所述多份图像素材的展示位置的同步调整。

其中，所述控制操作包括：用于对所述代表图像帧的画面内容进行编辑的操作，以便通过所述第一客户端发起对所述代表图像帧的画面内容进行编辑的操作，并通过所述第二客户端执行对应的编辑任务。

其中，还包括：

通过所述操作界面提供用于从整体上对所述代表图像帧的目标属性进行编辑的操作选项；

通过所述操作选项接收到用户操作后，提供对所述目标属性下的属性值进行选择或输入的操作选项。

其中，还包括：

接收到对所述代表图像帧中的目标位置执行的点选操作后，从所述代表图像帧中识别出与所述目标位置具有相同实体含义的多个像素点组成的至少一个目标区域，并提供用于对所述局部区域的目标属性进行编辑的操作选项；

所述根据所述用户操作生成控制指令，包括：

根据所述目标区域在所述代表图像帧中的相对位置信息，以及通过所述操作选项接收到的编辑后的属性值，生成所述控制指令。

其中，所述目标属性包括颜色、亮度、色阶或虚化程度。

其中，所述控制操作包括对所述图像素材进行播放控制的操作。

一种数字背景拍摄中的控制方法，包括：

通过第二客户端接收第一客户端发送的控制指令，所述第一客户端运行在位于显示屏前的第一终端设备中，所述显示屏用于对所述数字背景拍摄过程中所需的背景图像素材进行展示；所述第一客户端是在接收到针对所述显示屏中当前正在展示的图像素材的控制操作后，生成所述控制指令；

通过执行所述控制指令对所述显示屏中当前正在展示的图像素材进行控制处理。

一种数字背景拍摄中的控制装置，包括：

控制操作接收单元，用于通过第一客户端接收针对显示屏中当前正在展示的图像素材发出的控制操作；所述第一客户端运行在位于所述显示屏前的第一终端设备中，所述显示屏用于对所述数字背景拍摄过程中所需的背景图像素材进行展示；

控制指令生成单元，用于根据所述控制操作生成控制指令；

控制指令发送单元，用于将所述控制指令发送给第二客户端执行，所述第二客户端运行在位于显示屏后的第二终端设备中，用于通过执行所述控制指令对所述显示屏中当前正在展示的图像素材进行控制处理。

一种数字背景拍摄中的控制装置，包括：

控制指令接收单元，用于通过第二客户端接收第一客户端发送的控制指令，所述第一客户端运行在位于显示屏前的第一终端设备中，所述显示屏用于对所述数字背景拍摄过程中所需的背景图像素材进行展示；所述第一客户端是在接收到针对所述显示屏中当前正在展示的图像素材的控制操作后，生成所述控制指令；

控制指令执行单元，用于通过执行所述控制指令对所述显示屏中当前正在展示的图像素材进行控制处理。

一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述任一项所述的方法的步骤。

一种电子设备，包括：

一个或多个处理器；以及

与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行前述任一项所述的方法的步骤。

根据本申请提供的具体实施例，本申请公开了以下技术效果：

通过本申请实施例，可以将具体的播放控制软件划分为第一客户端以及第二客户端，并且，第一客户端可以运行在具有便携式等特点的终端设备中，这样，该便携式终端设备可以位于显示屏前。相应的，第一客户端还可以生成用于对显示屏中展示的图像素材进行控制的控制指令，通过与第二客户端之间的消息通道发送给第二客户端，由第二客户端执行具体的控制指令，从而完成对显示屏中展示的图像素材的控制。这样，可以在显示屏前进行实时的、所见即所得的对LED屏幕上图像素材的播控、素材位置、画面效果等进行调整，一般不再需要显示屏后工作人员和视频制作人员的介入，从而提升效率，节省人力及制作成本。

当然，实施本申请的任一产品并不一定需要同时达到以上所述的所有优点。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是现有技术中的播控方案示意图；

图2是本申请实施例提供的控制系统及应用场景的示意图；

图3是本申请实施例提供的信息格式的示意图；

图4是本申请实施例提供的第一客户端以及第二客户端中的模块方式的示意图；

图5是本申请实施例提供的第一方法的流程图；

图6是本申请实施例提供的第二方法的流程图；

图7是本申请实施例提供的第一装置的示意图；

图8是本申请实施例提供的第二装置的示意图；

图9是本申请实施例提供的电子设备的示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员所获得的所有其他实施例，都属于本申请保护的范围。

为了便于与本申请实施例提供的方案进行对比，首先结合图1，对现有技术中的播放控制方案进行介绍。具体的，如图1所示，现有技术中，在通过LED显示屏等对背景图像素材进行播放的过程中，通常通过位于显示屏后方的PC端设备对这种图像素材进行播放控制。其中，具体支持的播放控制操作主要包括快进、播放/暂停、画面缩放、画面位置调整等。但是，由于该PC设备位于显示屏后方，因此，设备的操作人员无法直接查看到拍摄过程中的情况。这就需要还需要在显示屏前方配置另一工作人员，该工作人员可以及时获取实际拍摄过程中的需求信息，然后通过对讲机等方式，告知显示屏后方的工作人员如何对图像素材进行播放控制。但是，如背景技术部分所示，这种方式存在效率低等问题。比如，假设需要对图像素材向左移动，此时，显示屏前方的工作人员通常比较难以直接表达出具体需要移动多远距离，只能在后方工作人员执行了移动操作后，前方工作人员根据显示屏上反馈的变化情况，确定是否移动到位，如果不到位，则还需要继续指示向左或向右移动，等等。

另外，在展示具体的图像素材的过程中，还可能存在某些画面效果不满足导演或摄影指导对画面效果的要求的情况，比如，背景中“天空”的颜色不够蓝，或者根据导演临时的一些创作意图需要对画面进行修改，等等。此时，在现有技术中，一般需要交由后期视频制作人员对视频的画面做进一步的调整，该调整的过程通常需要利用专门的视频制作软件等工具，包括选中某部分区域，并对具体的属性等进行编辑操作。调整完成后再重新加载到PC端的播放控制软件中，重新在IED显示屏上屏展示，然后再根据上屏效果决定是否继续调整。整个过程非常耗费人力，制作周期也会变长。

针对上述情况，在本申请实施例中，可以将具体的播放控制软件拆分为两部分，其中一部分(可以称为第一客户端)可以运行在便携式的终端设备中，例如，Pad、手机等。另一部分(可以称为第二客户端)则可以继续运行于位于显示屏后方的PC设备中。其中，第一客户端所在的终端设备由于可以是便携的，因此，可以由位于显示屏前面的工作人员进行操作，并且，可以直接通过该终端设备完成对图像素材的播放控制、位置调整等操作，相应的，第一客户端还可以将用户操作转换为操作指令，并发送给第二客户端执行。这样，通过两个设备之间的指令传递，可以避免屏幕前后不同工作人员之间来回沟通的效率问题。另外，在可选的实现方式下，还可以在第二客户端中实现对图像素材的画面等进行编辑的能力，这样，可以根据导演或摄影指导的需求，通过第一客户端发出对画面的效果进行调整的操作，具体的指令发送到第二客户端之后，可以通过执行对应的指令来完成对图像素材的编辑，而不需要将素材在导入到视频制作软件中重新制作，极大的优化了整体拍摄的流程。

下面对本申请实施例提供的具体实现方案进行详细介绍。

实施例一

首先，该实施例一提供了一种数字背景拍摄中的控制系统，参见图2，该系统具体可以包括：

第一客户端201以及第二客户端202；其中，

所述第一客户端201，运行在位于显示屏前的第一终端设备中，用于生成对所述显示屏中当前正在展示的图像素材进行控制的控制指令，并发送给所述第二客户端202；所述显示屏用于对所述数字背景拍摄过程中所需的背景图像素材进行展示；

所述第二客户端202，用于运行在位于显示屏后的第二终端设备中，接收到所述控制指令后，通过执行所述控制指令对所述显示屏中当前正在展示的图像素材进行控制处理。

也就是说，在本申请实施例，运行于显示屏后的PC端设备中的第二客户端，负责接收位于显示屏前的终端设备中的第一客户端发出的控制指令(该控制指令是根据第一客户端侧的用户执行的操作确定出具体的参数等信息后生成的，或者，也可以是通过算法等自动生成)，按照具体的指令对图像素材进行展示位置移动、缩放、播放控制或者画面调节等，并将图像素材显示到LED显示屏。

具体实现时，可以在第一客户端提供类似于“遥控器”的界面，并在界面中提供展示位置移动，颜色、亮度调节等操作选项，以便于用户(在本申请实施例中，具体的用户可以是指具体拍摄影视作品等过程中的工作人员，对于第一客户端而言，这里的用户主要指在显示屏前工作的工作人员)通过该第一客户端执行对LED显示屏中展示的图像素材的控制操作。或者，为了便于用户在第一客户端侧执行所见即所得的操作，第二客户端还可以用于，将显示屏中当前正在展示的图像素材的代表图像帧提供给所述第一客户端。例如，默认情况下，第二客户端可以将显示屏中展示的视频的第一帧提供给第二客户端。或者，在另一种方式下，也可以在第一客户端中提供用于对其他图像帧进行选择的操作选项，这样，如果在显示屏中展示图像素材的过程中，需要对其中某一帧图像进行调整，或者，从某帧开始执行调整，则可以通过该操作选项向第二客户端发送获取当前图像帧的指令，从而使得第二客户端将当前正在显示屏中展示的图像帧发送到第一客户端，以作为代表图像帧，等等。

第一客户端在收到代表图像帧之后，可以通过操作界面展示所述代表图像帧，这样，用户可以通过对所述代表图像帧执行操作的方式，发起对所述显示屏中当前正在展示的图像素材进行控制的用户操作。

其中，具体可以通过第一客户端发起的操作类型可以有多种，例如，具体的控制操作可以包括：用于改变所述图像素材的展示位置或大小的操作，这样，可以通过所述第一客户端改变所述图像素材在所述显示屏中的展示位置或大小。也就是说，图像素材的面积可能会大于显示屏可视窗口的范围，例如，图像素材可能是360度的全画幅视频，而显示屏可能只是一个矩形的屏幕，因此，一次上屏的图像可能只是全画幅视频的一部分。或者，假设需要将显示屏划分为多个区域，每个区域展示一个图像素材的画面的一部分，等等。在这种情况下，在拍摄之前或者过程中，可能需要根据实际显示屏中的上屏展示情况，对具体图像素材的展示位置进行调整。此时，就可以通过本申请实施例中提供的第一客户端来发起该调整操作。

具体的，为了进一步为用户提供所见即所得的调整效果，可以在第一客户端的操作界面中展示出代表显示屏可视区域的矩形框，并根据所述图像素材在所述显示屏的当前展示位置及大小，对所述代表图像帧进行展示。此时，可以通过拖动或缩放该代表图像帧的方式，改变所述代表图像帧与所述矩形框之间的相对位置或大小，进而改变所述图像素材在所述显示屏中的展示位置或大小。当然，在上述拖动或缩放具体代表图像帧的过程中，第一客户端中的相关处理模块可以确定出具体的控制类型、控制参数等，并生成对应的控制指令，该控制指令可以同步发送到第二客户端，由第二客户端对具体的图像素材的展示位置或大小进行调整后，上屏到显示屏中进行展示。

另外，在实际应用中，还可能存在对具体图像素材的展示位置进行微调的情况。例如，只需要将图像素材的展示位置向某个方向移动几个像素，等等。此时，如果仍然通过前述拖动代表图像帧，以改变其与矩形框之间的相对位置关系的方式来实现，则难以达到如此高精度的调整。因此，在可选的实施方式下，还可以在所述操作界面中提供用于对所述图像素材在所述显示屏中的展示位置进行微调的操作选项，以便通过该操作选项，将所述图像素材在所述显示屏中的展示位置向目标方向进行像素级别的微调。例如，具体需要将展示位置向某个方向进行微调时，可以点击该操作选项，之后，可以选择具体的方向，以及具体需要移动的像素数即可。相应的，第一客户端可以确定出对应的控制类型以及参数，并生成对应的控制指令。

再者，还可能存在将多份图像素材同时展示到LED显示屏的情况，此时，还可以在所述操作界面中提供用于对所述多份图像素材进行整体拖动的操作选项。也就是说，一般情况下，用户可以对单个代表图像帧执行拖动操作，以改变其在显示屏中的展示位置。而如果同一显示屏中同时展示多份图像素材，则可能存在对多份图像素材的展示位置进行同步调整的需求。为此，可以提供前述用于对多份图像素材进行整体拖动的操作选项，例如，具体实现时，当点击该操作选项之后，可以通过添加蒙层等方式，将多份图像素材对应的代表图像帧置为选中状态，之后，用户执行的拖动操作将会同时作用于多份图像素材。相应的，第一客户端在生成控制指令时，可以将多份图像素材都确定为控制对象，并根据拖动的方向、距离等，确定出具体的参数，然后再生成具体的控制指令。

除了前述改变展示位置或大小的操作之外，通过第一客户端执行的控制操作还可以包括：用于对所述图像素材的画面内容进行编辑的操作，以便通过所述第一客户端发起对所述图像素材的画面内容进行编辑的操作，并通过所述第二客户端执行对应的编辑任务。例如，具体的编辑操作可以是改变目标属性的属性值，其中，目标属性可以包括颜色、亮度、色阶、虚化程度，等等。具体的，可以通过所述操作界面提供用于从整体上对所述图像素材的目标属性进行编辑的操作选项，通过该操作选项接收到用户操作后，可以提供对目标属性的属性值进行选择或者输入的操作选项。也就是说，在这种情况下，如果用户需要对画面内容的颜色、亮度、色阶、虚化程度等进行调整，则可以默认为是对整个图像的颜色、亮度、色阶、虚化程度等进行调整。

或者，在另一种情况下，可能会仅需要对图像素材中的部分区域进行目标属性上的调整。例如，某图像素材中包括天空区域，需要将整个天空区域的颜色加深，等等。针对这种情况，本申请实施例还可以在第一客户端提供算法识别能力，具体的，如果用户在代表图像帧中点击某个像素位置，则该算法可以从所述代表图像帧中识别出与所述目标位置具有相同实体含义的多个像素点组成的至少一个目标区域，例如，点击的是“天空”所在位置，则通过算法可以将其他同具有“天空”这一实体含义的区域圈选出来。之后，可以提供用于对所述局部区域的目标属性进行编辑的操作选项，用户通过该选项来配置具体所需的属性值等参数即可。相应的，第一客户端可以根据所述目标区域在所述代表图像帧中的相对位置信息，以及通过所述操作选项接收到的编辑后的属性值，生成所述控制指令。这里的目标属性同样可以包括颜色、亮度、色阶、虚化程度等。

此外，具体的控制操作还可以包括对所述图像素材进行播放控制的操作，例如，暂停、播放、快进、慢放、画面缩放，等等。

总之，通过将具体的控制软件划分为第一客户端与第二客户端两部分，可以实现由显示屏前面的工作人员进行界面操作，然后在客户端之间传递控制指令，并完成对具体图像素材的控制。当然，由于第一客户端与第二客户端分别运行在不同的终端设备中，两者之间还需要进行指令等信息的传输，因此，具体实现时，还可以预先定义第一客户端与第二客户端之间的私有通信协议，以保证消息的可靠、安全传输以及后续的可扩展。

例如，在一种实现方式下，具体的协议格式可以如图3所示，其中包括：

消息头：定义消息的起始字节，标识消息的开始。

协议版本：协议的版本号，第一客户端与第二客户端的协议版本一致时才能通信。

命令长度：命令的长度

命令名：消息的名字，比如播放、暂停等。

命令内容长度：命令内容的长度。

命令内容：命令的内容，一般为该命令需要的一些参数。

其中，具体实现时，命令名、命令内容等还可以进行加密传输，保证消息传输的安全性。

另外，关于第一客户端与第二客户端的模块划分，在一种实现方式下，可以如图4所示，第一客户端可以包括操作控制模块、消息发送模块，另外，为了便于进行加密等处理，该第一客户端还可以包括消息控制模块、消息加密模块。第二客户端则可以包括进行素材加载模块、解码模块、消息接收模块、消息解码模块、消息分发模块、处理模块(包括位置调整、播控等)以及最终的LED上屏显示模块等。基于上述模块划分方式，具体的实现流程可以如下：

1.在需要进行数字背景拍摄时，预先在第二客户端侧加载预先制作好的图像素材，并输出到LED显示屏上进行展示，在此过程中，第二客户端还可以与第一客户端之间建立通信连接，在可选的方式下，第二客户端还可以将当前展示到LED显示屏中的图像素材的代表图像帧(例如，视频的第一帧，等等)提供给第一客户端，第一客户端则可以根据该代表图像帧展示出操作界面，以使得显示屏前的用户需要通过该第一客户端发起具体的操作时，可以基于该代表图像帧进行操作。

2.显示屏前的工作人员在Pad等终端设备上通过第一客户端进行操作，相应的，第一客户端可以存在操作控制模块，该操作控制模块可以包括多个子模块，分别用于支持调整素材位置、播放或者调整天空的亮度等操作。其中，如果存在前述代表图像帧，则用户可以基于该代表图像帧执行上述位置调整等操作，例如，对代表图像帧进行拖动操作，以进行展示位置调整等。

3.根据用户不同的操作，操作控制模块选择不同的子模块对用户操作进行处理，把需要调整的效果或格式等转换为具体的控制参数。为了保证消息传输的安全性，该第一客户端中还可以包括消息控制模块、消息加密模块等，这样，操作控制模块生成的控制参数可以首先提供该消息控制模块进行处理。

4.消息控制模块对消息进行归一化等处理后，调用消息加密模块。

5.消息加密模块对消息进行加密，以保证消息的安全传输，然后交由消息发送模块。

6.消息发送模块通过底层消息通道，把消息发送给第二客户端。

7.第二客户端接收第一客户端传递来的消息，对消息进行解密，并把解密后的消息交给消息分发模块。

8.消息分发模块根据不同的消息类型，把消息分发给具体的处理模块。

9.处理模块接收素材解码后的图像素材作为输入，根据不同的消息类型，调用画面调节、素材调整或者播控等子模块对输入的图像素材进行处理，并把处理后的画面交给LED上屏模块。

10.LED上屏模块把接收到的图像素材展示在LED显示屏上。

通过这种方式，位于显示屏前面的工作人员通过便携式Pad等终端设备控制第一客户端，可以在显示屏前进行实时的、所见即所得的对LED屏幕上图像素材的播控、素材位置、画面效果等进行调整，一般不再需要显示屏后工作人员和视频制作人员的介入，从而节省人力及制作成本。

在可选的实施方式下，如果第二客户端中实现了画面效果调整等能力，还可以快速响应导演或摄影指导对画面效果的调整，不需要将视频再进行后期软件的调整，降低拍摄延期的风险。

这里需要说明的是，以上所述主要以通过位于显示屏前的工作人员发出控制操作的方式为例进行的介绍，在实际应用中，也可能存在通过算法等方式自动产生具体的控制操作的情况。例如，通过第一客户端所在的终端设备的摄像头等组件采集显示屏中展示的图像，然后通过算法判断是否需要进行调整(可以预先在算法中设定调整的条件、规则等)，如果需要，则自动生成控制指令，等等。

实施例二

该实施例二是与实施例一相对应的，从第一客户端的角度，提供了一种数字背景拍摄中的控制方法，参见图5，该方法可以包括：

S501：通过第一客户端接收针对显示屏中当前正在展示的图像素材发出的控制操作；所述第一客户端运行在位于所述显示屏前的第一终端设备中，所述显示屏用于对所述数字背景拍摄过程中所需的背景图像素材进行展示；

S502：根据所述控制操作生成控制指令；

S503：将所述控制指令发送给第二客户端执行，所述第二客户端运行在位于显示屏后的第二终端设备中，用于通过执行所述控制指令对所述显示屏中当前正在展示的图像素材进行控制处理。

具体实现时，还可以接收所述第二客户端提供的关于所述显示屏中当前正在展示的图像素材的代表图像帧，然后，在操作界面展示所述代表图像帧，以便通过对所述代表图像帧执行操作的方式，发起对所述显示屏中当前正在展示的图像素材进行控制的用户操作。

其中，所述控制操作包括：用于改变所述图像素材的展示位置或大小的操作，以便通过所述第一客户端改变所述图像素材在所述显示屏中的展示位置或大小。此时，还可以在所述操作界面中展示代表显示屏可视区域的矩形框，并根据所述图像素材在所述显示屏的当前展示位置及大小，对所述代表图像帧进行展示，以便通过拖动或缩放所述代表图像帧的方式，改变所述代表图像帧与所述矩形框之间的相对位置或大小，进而改变所述图像素材在所述显示屏中的展示位置或大小。其中，如果当前在所述显示屏中展示的图像素材为多份，则还可以在所述操作界面中提供用于对所述多份图像素材进行整体拖动的操作选项。

另外，还可以在所述操作界面中提供用于对所述图像素材在所述显示屏中的展示位置进行微调的操作选项，以便通过该操作选项，将所述图像素材在所述显示屏中的展示位置向目标方向进行像素级别的微调。

除了上述展示位置或大小调整操作，具体的控制操作还可以包括：用于对所述图像素材的画面内容进行编辑的操作，以便通过所述第一客户端发起对所述图像素材的画面内容进行编辑的操作，并通过所述第二客户端执行对应的编辑任务。具体实现时，可以通过所述操作界面提供用于从整体上对所述图像素材的目标属性进行编辑的操作选项；通过该操作选项接收到用户操作后，提供对目标属性下的属性值进行选择或输入的操作选项。

或者，接收到对所述代表图像帧中的目标位置执行的点选操作后，还可以从所述代表图像帧中识别出与所述目标位置具有相同实体含义的多个像素点组成的至少一个目标区域，并提供用于对所述局部区域的目标属性进行编辑的操作选项；此时，具体在生成控制指令时，可以根据所述目标区域在所述代表图像帧中的相对位置信息，以及通过所述操作选项接收到的编辑后的属性值，生成所述控制指令。

其中，所述目标属性包括颜色、亮度、色阶或虚化程度。

另外，所述控制操作还可以包括对所述图像素材进行播放控制的操作。

实施例三

该实施例三也是与实施例一相对应的，从第二客户端的角度，提供了一种数字背景拍摄中的控制方法，参见图6，该方法可以包括：

S601：通过第二客户端接收第一客户端发送的控制指令，所述第一客户端运行在位于显示屏前的第一终端设备中，所述显示屏用于对所述数字背景拍摄过程中所需的背景图像素材进行展示；所述第一客户端是在接收到针对所述显示屏中当前正在展示的图像素材的控制操作后，生成所述控制指令；

S602：通过执行所述控制指令对所述显示屏中当前正在展示的图像素材进行控制。

关于前述实施例二、三中的未详述部分，可以参见实施例一以及本说明书其他部分的记载，这里不再赘述。

需要说明的是，本申请实施例中可能会涉及到对用户数据的使用，在实际应用中，可以在符合所在国的适用法律法规要求的情况下(例如，用户明确同意，对用户切实通知，等)，在适用法律法规允许的范围内在本文描述的方案中使用用户特定的个人数据。

与实施例二相对应，本申请实施例还提供了一种数字背景拍摄中的控制装置，参见图7，该装置可以包括：

控制操作接收单元701，用于通过第一客户端接收针对显示屏中当前正在展示的图像素材发出的控制操作；所述第一客户端运行在位于所述显示屏前的第一终端设备中，所述显示屏用于对所述数字背景拍摄过程中所需的背景图像素材进行展示；

控制指令生成单元702，用于根据所述控制操作生成控制指令；

控制指令发送单元703，用于将所述控制指令发送给第二客户端执行，所述第二客户端运行在位于显示屏后的第二终端设备中，用于通过执行所述控制指令对所述显示屏中当前正在展示的图像素材进行控制处理。

具体实现时，该装置还可以包括：

代表图像帧接收单元，用于接收所述第二客户端提供的关于所述显示屏中当前正在展示的图像素材的代表图像帧；

代表图像帧展示单元，用于在操作界面展示所述代表图像帧，以便通过对所述代表图像帧执行操作的方式，发起对所述显示屏中当前正在展示的图像素材进行控制的用户操作。

另外，该装置还可以包括：

微调选项提供单元，用于在所述操作界面中提供用于对所述图像素材在所述显示屏中的展示位置进行微调的操作选项，以便通过该操作选项，将所述图像素材在所述显示屏中的展示位置向目标方向进行像素级别的微调。

同步调整单元，用于如果当前在所述显示屏中展示的图像素材为多份，在所述操作界面中提供用于对所述多份图像素材对应的代表图像帧进行整体拖动的操作选项，以用于触发对所述多份图像素材的展示位置的同步调整。

除了上述展示位置或大小调整操作，具体的控制操作还可以包括：用于对所述图像素材的画面内容进行编辑的操作，以便通过所述第一客户端发起对所述图像素材的画面内容进行编辑的操作，并通过所述第二客户端执行对应的编辑任务。

具体实现时，该装置还可以包括：

整体编辑选项提供单元，用于通过所述操作界面提供用于从整体上对所述图像素材的目标属性进行编辑的操作选项；通过该操作选项接收到用户操作后，提供对目标属性下的属性值进行选择或输入的操作选项。

或者，该装置还可以包括：

算法识别单元，用于接收到对所述代表图像帧中的目标位置执行的点选操作后，还可以从所述代表图像帧中识别出与所述目标位置具有相同实体含义的多个像素点组成的至少一个目标区域，并提供用于对所述局部区域的目标属性进行编辑的操作选项；

此时所述控制指令生成单元具体可以用于：

其中，所述目标属性包括颜色、亮度、色阶或虚化程度。

与实施例三相对应，本申请实施例还提供了一种数字背景拍摄中的控制装置，参见图8，该装置可以包括：

控制指令接收单元801，用于通过第二客户端接收第一客户端发送的控制指令，所述第一客户端运行在位于显示屏前的第一终端设备中，所述显示屏用于对所述数字背景拍摄过程中所需的背景图像素材进行展示；所述第一客户端是在接收到针对所述显示屏中当前正在展示的图像素材的控制操作后，生成所述控制指令；

控制指令执行单元802，用于通过执行所述控制指令对所述显示屏中当前正在展示的图像素材进行控制处理。

另外，本申请实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述方法实施例中任一项所述的方法的步骤。

以及一种电子设备，包括：

一个或多个处理器；以及

与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行前述方法实施例中任一项所述的方法的步骤。

其中，图9示例性的展示出了电子设备的架构，具体可以包括处理器910，视频显示适配器911，磁盘驱动器912，输入/输出接口913，网络接口914，以及存储器920。上述处理器910、视频显示适配器911、磁盘驱动器912、输入/输出接口913、网络接口914，与存储器920之间可以通过通信总线930进行通信连接。

其中，处理器910可以采用通用的CPU(Central Processing Unit，处理器)、微处理器、应用专用集成电路(Application Specific Integrated Circuit，ASIC)、或者一个或多个集成电路等方式实现，用于执行相关程序，以实现本申请所提供的技术方案。

存储器920可以采用ROM(Read Only Memory，只读存储器)、RAM(Random AccessMemory，随机存取存储器)、静态存储设备，动态存储设备等形式实现。存储器920可以存储用于控制电子设备900运行的操作系统921，用于控制电子设备900的低级别操作的基本输入输出系统(BIOS)。另外，还可以存储网页浏览器923，数据存储管理系统924，以及数字背景控制处理系统925等等。上述数字背景控制处理系统925就可以是本申请实施例中具体实现前述各步骤操作的应用程序。总之，在通过软件或者固件来实现本申请所提供的技术方案时，相关的程序代码保存在存储器920中，并由处理器910来调用执行。

输入/输出接口913用于连接输入/输出模块，以实现信息输入及输出。输入输出/模块可以作为组件配置在设备中(图中未示出)，也可以外接于设备以提供相应功能。其中输入设备可以包括键盘、鼠标、触摸屏、麦克风、各类传感器等，输出设备可以包括显示器、扬声器、振动器、指示灯等。

网络接口914用于连接通信模块(图中未示出)，以实现本设备与其他设备的通信交互。其中通信模块可以通过有线方式(例如USB、网线等)实现通信，也可以通过无线方式(例如移动网络、WIFI、蓝牙等)实现通信。

总线930包括一通路，在设备的各个组件(例如处理器910、视频显示适配器911、磁盘驱动器912、输入/输出接口913、网络接口914，与存储器920)之间传输信息。

需要说明的是，尽管上述设备仅示出了处理器910、视频显示适配器911、磁盘驱动器912、输入/输出接口913、网络接口914，存储器920，总线930等，但是在具体实施过程中，该设备还可以包括实现正常运行所必需的其他组件。此外，本领域的技术人员可以理解的是，上述设备中也可以仅包含实现本申请方案所必需的组件，而不必包含图中所示的全部组件。

通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例或者实施例的某些部分所述的方法。

本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统或系统实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

以上对本申请所提供的数字背景拍摄中的控制方法及系统，进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处。综上所述，本说明书内容不应理解为对本申请的限制。

Claims

1.一种数字背景拍摄中的控制系统，其特征在于，包括：

第一客户端以及第二客户端；其中，

2.一种数字背景拍摄中的控制方法，其特征在于，包括：

根据所述控制操作生成控制指令；

3.根据权利要求2所述的方法，其特征在于，还包括：

4.根据权利要求3所述的方法，其特征在于，

所述控制操作包括：用于改变所述代表图像帧的展示位置或大小的操作，以便通过所述第一客户端改变所述图像素材在所述显示屏中的展示位置或大小。

5.根据权利要求4所述的方法，其特征在于，还包括：

6.根据权利要求4所述的方法，其特征在于，还包括：

7.根据权利要求4所述的方法，其特征在于，

如果当前在所述显示屏中展示的图像素材为多份，则所述方法还包括：

8.根据权利要求3所述的方法，其特征在于，

所述控制操作包括：用于对所述代表图像帧的画面内容进行编辑的操作，以便通过所述第一客户端发起对所述代表图像帧的画面内容进行编辑的操作，并通过所述第二客户端执行对应的编辑任务。

9.根据权利要求8所述的方法，其特征在于，还包括：

10.根据权利要求8所述的方法，其特征在于，还包括：

所述根据所述用户操作生成控制指令，包括：

11.根据权利要求2所述的方法，其特征在于，

所述控制操作包括对所述图像素材进行播放控制的操作。

12.一种数字背景拍摄中的控制方法，其特征在于，包括：

13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1至12任一项所述的方法的步骤。

14.一种电子设备，其特征在于，包括：

一个或多个处理器；以及

与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行权利要求1至12任一项所述的方法的步骤。