CN111050091A - 输出控制方法、装置及电子设备 - Google Patents

Abstract

本申请公开了一种输出控制方法、装置及电子设备，所述方法包括：对所述第一设备进行图像采集，得到第一图像和第二图像，其中，所述第一设备上具有显示界面，所述显示界面上显示有显示内容，所述第一图像为对所述第一设备进行实物成像所得到的图像，所述第二图像为对所述第一设备进行光成像所得到的图像；至少基于所述第一图像，获得所述第二图像中的第一实物图层；将所述第一实物图层发送到第二设备，以使得所述第二设备将所述第一设备发送的第一实物图层输出在所述第二设备的显示界面上，所述第二设备的显示界面上显示有所述显示内容。

Description

输出控制方法、装置及电子设备

技术领域

本申请涉及图像处理技术领域，尤其涉及一种输出控制方法、装置及电子设备。

背景技术

在远程协同办公的过程中，用户之间共享同一工作台，如投屏或显示器所实现的显示内容，而为了分享图纸和用户操作等实物，在当前用户一侧可以通过部署的摄像头将本地的实物影像连同工作台一起同步到对方用户。

如果在两侧用户同时提供工作台画面和实物的影像同步，会出现两侧摄像头重复采集两侧画面，造成画面回声的情况，协同办公体验较差。

发明内容

有鉴于此，本申请提供一种输出控制方法、装置及电子设备，如下：

一种输出控制方法，所述方法包括：

对所述第一设备进行图像采集，得到第一图像和第二图像，其中，所述第一设备上具有显示界面，所述显示界面上显示有显示内容，所述第一图像为对所述第一设备进行实物成像所得到的图像，所述第二图像为对所述第一设备进行光成像所得到的图像；

至少基于所述第一图像，获得所述第二图像中的第一实物图层；

将所述第一实物图层发送到第二设备，以使得所述第二设备将所述第一设备发送的第一实物图层输出在所述第二设备的显示界面上，所述第二设备的显示界面上显示有所述显示内容。

上述方法，优选的，还包括：

获得所述第二设备发送的第二实物图层；所述第二实物图层为在对所述第二设备进行光成像所得到的图像中，至少基于对所述第二设备进行实物成像所得到的图像所获得的实物图层；

将所述第二实物图层输出在所述第一设备的显示界面上。

上述方法，优选的，将所述第二实物图层输出在所述第一设备的显示界面上，包括：

获得所述第一设备的显示界面与所述第二设备的显示界面之间的界面比例关系；

将所述第二实物图层按照所述界面比例关系进行图层缩放；

将经过缩放的第二实物图层输出在所述第一设备的显示界面上。

上述方法，优选的，至少基于所述第一图像，获得所述第二图像中的第一实物图层，包括：

识别所述第一图像中的实物成像区域；

在所述第二图像中，确定与所述实物成像区域对应的目标图像区域；

基于所述目标图像区域，获得所述第二图像中的第一实物图层。

上述方法，优选的，所述第一图像为红外图像，所述第二图像为RGB图像。

上述方法，优选的，所述第一实物图层中至少包括：所述第一设备的显示界面上方的物体和/或用户操作体的实物图像。

一种输出控制装置，所述装置包括：

图像获得单元，用于对所述第一设备进行图像采集，得到第一图像和第二图像，其中，所述第一设备上具有显示界面，所述显示界面上显示有显示内容，所述第一图像为对所述第一设备进行实物成像所得到的图像，所述第二图像为对所述第一设备进行光成像所得到的图像；

图层获得单元，用于至少基于所述第一图像，获得所述第二图像中的第一实物图层；

图层发送单元，用于将所述第一实物图层发送到第二设备，以使得所述第二设备将所述第一设备发送的第一实物图层输出在所述第二设备的显示界面上，所述第二设备的显示界面上显示有所述显示内容。

上述装置，优选的，还包括：

图层接收单元，用于获得所述第二设备发送的第二实物图层；所述第二实物图层为在对所述第二设备进行光成像所得到的图像中，至少基于对所述第二设备进行实物成像所得到的图像所获得的实物图层；

图层输出单元，用于将所述第二实物图层输出在所述第一设备的显示界面上。

一种电子设备，包括：

显示器，用于输出显示界面，所述显示界面上显示有显示内容；

第一采集装置，用于对所述电子设备进行实物成像，得到第一图像；

第二采集装置，用于对所述电子设备进行光成像，得到第二图像；

处理器，用于至少基于所述第一图像，获得所述第二图像中的第一实物图层；

传输接口，用于将所述第一实物图层发送到其他设备，以使得所述其他设备将所述电子设备发送的第一实物图层输出在所述其他设备的显示界面上，所述其他设备的显示界面上显示有所述显示内容。

上述电子设备，优选的，其中：

所述传输接口，还用于获得所述第二设备发送的第二实物图层；所述第二实物图层为在对所述第二设备进行光成像所得到的图像中，至少基于对所述第二设备进行实物成像所得到的图像所获得的实物图层；

所述显示器，还用于将所述第二实物图层输出在所述第一设备的显示界面上。

从上述技术方案可以看出，本申请公开的一种输出控制方法、装置及电子设备，在采集到第一设备光成像的图像的同时，还采集第一设备实物成像的图像，进而可以根据实物成像的图像，在光成像的图像中获得第一设备的实物图层，进而将第一设备的实物图层发送到第二设备上，由此使得第二设备上能够将第一设备的实物图层输出在已经显示有显示内容的显示界面上，从而实现第一设备向第二设备的实物成像同步，无需再次同步第一设备上的显示内容，由此，本申请中在第一设备和第二设备之间将实物内容和显示界面中显示内容的虚拟内容分开同步，从而在第二设备上实现第一设备的完整同步的情况下，不会将第一设备上的显示内容重叠输出在第二设备的显示界面上，由此避免画面回声的情况，从而明显改善用户使用设备进行画面同步的体验。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例一提供的一种输出控制方法的流程图；

图2及图3分别为本申请实施例的应用示例图；

图4为本申请实施例一提供的一种输出控制方法的部分流程图；

图5为本申请实施例的另一应用示例图；

图6和图7分别为本申请实施例二提供的一种输出控制装置的结构示意图；

图8为本申请实施例三提供的一种电子设备的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

如图1所示，为本申请实施例一提供的一种输出控制方法的实现流程图，该方法可以适用于能够进行图像采集、处理及输出的电子设备中，如具有图像采集装置的计算机或服务器等。本实施例中的方法主要用于对实现显示内容和设备上的实物同时同步的第一设备和第二设备之间，避免显示内容的画面回声。

具体的，本实施例中的方法可以包括以下步骤：

步骤101：对第一设备进行图像采集，得到第一图像和第二图像。

其中，第一设备上具有显示界面，第一设备的显示界面上显示有显示内容，第一图像为对第一设备进行实物成像所得到的图像，第二图像为对第一设备进行光成像所得到的图像。

具体的，第一图像为利用能够对实物进行成像的图像采集装置所采集到的红外图像，该能够对实物进行成像的图像采集装置可以为红外成像装置，如红外摄像头等，该第一图像中具有第一设备所处环境中的各种实物对象的实物成像区域，如第一设备的用户手指，第一设备上放置的直尺等教学工具等，第二图像为RGB图像，该第二图像可以利用能够进行光成像的图像采集装置以与第一图像的相同的采集角度对第一设备所采集的图像，该能够进行光成像的图像采集装置可以为光成像装置，如光学摄像头等，如图2中所示，本实施例中可以在第一设备上分别部署红外摄像头和普通光学摄像头，同时对第一设备上空及周边进行图像采集，采集到第一图像和第二图像，第一图像中包含第一设备所在环境中的各种实物对象的实物成像区域，而第二图像中不仅包含第一设备所在环境中的实物对象的成像图层，还包含有第一设备的显示界面上显示内容的成像图层。

步骤102：至少基于第一图像，获得第二图像中的第一实物图层。

也就是说，本实施例中对于第二图像中与显示内容相关的图层或区域进行剔除，只保留与第一设备所在环境的实物对象相关的图层，即第一实物图层，此时，该第一实物图层中只包含对第一设备所在环境中的实物对象进行光成像的实物图层。

需要说明的是，第一实物图层中至少包括第一设备的显示界面上方的物体如直尺等教学工具和/或用户操作体如用户手指的事物图像。如图2中所示。

步骤103：将第一实物图层发送到第二设备，以使得第二设备将第一设备发送的第一实物图层输出在第二设备的显示界面上。

其中，第二设备的显示界面上显示有显示内容。第二设备的显示界面上的显示内容可以为第一设备预先传输到第二设备上的，也可以使第一设备在传输第一实物图层的同时同步传输到第二设备上的，如图3中所示，第二设备在其显示界面上输出第一设备所同步的显示内容的同时，还输出第一设备所在环境的实物对象的成像图层，由此，在第一设备和第二设备之间将实物内容和显示界面中显示内容的虚拟内容分开同步，从而在第二设备上实现第一设备上的完整同步的情况下，不会将第一设备上的显示内容重叠输出在第二设备的显示界面上。

需要说明的是，第一设备和第二设备可以为同一设备上的主显示屏和投影屏，相应的，第二设备的显示界面可以为第一设备的显示界面通过投屏的方式实现，或者，第一设备的显示界面可以为第二设备的显示界面通过投屏的方式实现；或者，第一设备和第二设备可以为互相独立的设备，相应的，第一设备的显示界面上显示的显示内容可以是第二设备通过内容同步实现，或者，第二设备的显示界面上显示的显示内容可以是第一设备通过内容同步实现。

由上述方案可知，本申请实施例一所公开的一种输出控制方法，在采集到第一设备光成像的图像的同时，还采集第一设备实物成像的图像，进而可以根据实物成像的图像，在光成像的图像中获得第一设备的实物图层，进而将第一设备的实物图层发送到第二设备上，由此使得第二设备上能够将第一设备的实物图层输出在已经显示有显示内容的显示界面上，从而实现第一设备向第二设备的实物成像同步，无需再次同步第一设备上的显示内容，由此，本实施例中在第一设备和第二设备之间将实物内容和显示界面中显示内容的虚拟内容分开同步，从而在第二设备上实现第一设备的完整同步的情况下，不会将第一设备上的显示内容重叠输出在第二设备的显示界面上，由此避免画面回声的情况，从而明显改善用户使用设备进行画面同步，即协同办公的体验。

在一种实现方式中，本实施例中还可以包括以下步骤，如图4中所示：

步骤104：获得第二设备发送的第二实物图层。

其中，第二实物图层为对第二设备进行光成像所采集的图像中，至少基于对第二设备进行实物成像所得到的图像所获得的实物图层。也就是说，在第二设备中同样执行如图1中所示的输出控制方案，即：在第二设备上，对第二设备进行图像采集，得到第三图像和第四图像，第三图像为对第二设备进行实物成像所得到的图像，第四图像为对第二设备进行光成像所得到的图像，再至少基于第三图像，获得第四图像中的第二实物图层，最后将第二实物图层发送到第一设备，由第一设备接收第二设备发送的第二实物图层。

步骤105：将第二实物图层输出在第一设备的显示界面上。

其中，在第一设备上，可以将第二实物图层叠加输出在第一设备的显示界面所显示的显示内容上，从而实现第二设备向第一设备的完整同步。

具体的，由于第一设备的显示界面和第二设备的显示界面之间的界面显示参数如区域大小和性状态等存在差别，因此，本实施例中在将第二实物图层输出在第一设备的显示界面上时，具体可以通过以下方式实现：

首先，获得第一设备的显示界面与第二设备的显示界面之间的界面比例关系，其中，界面比例关系可以包括有：第一设备的显示界面与第二设备的显示界面之间的界面长度之间的比例关系和界面宽度之间的比例关系；

之后，将第二实物图层按照界面比例关系进行图层缩放，例如，按照界面长度之间的比例关系，将第二实物图层的长度进行同比例缩放，并按照界面宽度之间的比例关系，将第二实物图层的宽度进行同比例缩放，进而将第二实物图层同比例缩放到与第一设备的显示界面的界面长度和宽度相一致；

最后，再将经过缩放的第二实物图层输出在第一设备的显示界面上。

进一步的，本实施例还可以获得第一设备的显示界面和第二设备的显示界面之间关于界面显示分辨率的对应关系，进而将第二实物图层按照界面显示分辨率的对应关系进行分辨率调整，如进行像素填充或者像素删除等，进而将第二实物图层的分辨率调整到与第一设备的显示界面上的显示分辨率相一致，最后再将经过分辨率调整的第二实物图层输出在第一设备的显示界面上。

在一种实现方式中，步骤102中在至少基于第一图像，获得第二图像中的第一实物图层时，具体可以通过以下方式实现：

首先，识别第一图像中的实物成像区域。

其中，本实施例中可以通过图像识别算法识别出第一图像中的实物成像区域，如图5中所示，这里的实物成像区域包含除第一设备的显示界面上的虚拟的显示内容之外的各种实物对象的图像区域。

其次，在第二图像中，确定与实物成像区域对应的目标图像区域。

其中，本实施例中可以通过AI人工智能(Artificial Intelligence)等相关算法，将识别出实物成像区域的第一图像和第二图像进行叠加采样，以得到第二图像中与第一图像中的实物成像区域相重叠的目标图像区域，该目标图像区域为第二图像中第一设备所处环境中的实物对象的光成像的图像区域，该目标图像区域中只包含有实物对象的区域图层。

最后，基于目标图像区域，获得第二图像中的第一实物图层。

具体的，本实施例中可以在第二图像中抽取与包含目标图像区域的像素，以组成第一实物图层，对于其他图像区域可以设置像素透明度为0％，由此得到第二图像中只包含实物对象的光成像的图像图层，而其他不适实物对象的成像区域均为透明。

参考图6，为本申请实施例二提供的一种输出控制装置的结构示意图，该装置可以适用于能够进行图像采集、处理及输出的电子设备中，如具有图像采集装置的计算机或服务器等。本实施例中的装置主要用于对实现显示内容和设备上的实物同时同步的第一设备和第二设备之间，避免显示内容的画面回声。

具体的，本实施例中的装置可以包括以下结构：

图像获得单元601，用于对所述第一设备进行图像采集，得到第一图像和第二图像。

其中，第一设备上具有显示界面，第一设备的显示界面上显示有显示内容，第一图像为对第一设备进行实物成像所得到的图像，第二图像为对第一设备进行光成像所得到的图像。

具体的，第一图像为利用红外摄像头所采集到的红外图像，该第一图像中具有第一设备所处环境中的各种实物对象的实物成像区域，如第一设备的用户手指，第一设备上放置的直尺等教学工具等，第二图像为RGB图像，该第二图像可以利用普通光学摄像头以与第一图像的相同的采集角度对第一设备所采集的图像，如图2中所示，本实施例中可以在第一设备上分别部署红外摄像头和普通光学摄像头，同时对第一设备上空及周边进行图像采集，采集到第一图像和第二图像，第一图像中包含第一设备所在环境中的各种实物对象的实物成像区域，而第二图像中不仅包含第一设备所在环境中的实物对象的成像图层，还包含有第一设备的显示界面上显示内容的成像图层。

图层获得单元602，用于至少基于所述第一图像，获得所述第二图像中的第一实物图层；

也就是说，本实施例中对于第二图像中与显示内容相关的图层或区域进行剔除，只保留与第一设备所在环境的实物对象相关的图层，即第一实物图层，此时，该第一实物图层中只包含对第一设备所在环境中的实物对象进行光成像的实物图层。

需要说明的是，第一实物图层中至少包括第一设备的显示界面上方的物体如直尺等教学工具和/或用户操作体如用户手指的事物图像。如图2中所示。

图层发送单元603，用于将所述第一实物图层发送到第二设备，以使得所述第二设备将所述第一设备发送的第一实物图层输出在所述第二设备的显示界面上。

其中，第二设备的显示界面上显示有显示内容。第二设备的显示界面上的显示内容可以为第一设备预先传输到第二设备上的，也可以使第一设备在传输第一实物图层的同时同步传输到第二设备上的，如图3中所示，第二设备在其显示界面上输出第一设备所同步的显示内容的同时，还输出第一设备所在环境的实物对象的成像图层，由此，在第一设备和第二设备之间将实物内容和显示界面中显示内容的虚拟内容分开同步，从而在第二设备上实现第一设备上的完整同步的情况下，不会将第一设备上的显示内容重叠输出在第二设备的显示界面上。

需要说明的是，第一设备和第二设备可以为同一设备上的主显示屏和投影屏，相应的，第二设备的显示界面可以为第一设备的显示界面通过投屏的方式实现，或者，第一设备的显示界面可以为第二设备的显示界面通过投屏的方式实现；或者，第一设备和第二设备可以为互相独立的设备，相应的，第一设备的显示界面上显示的显示内容可以是第二设备通过内容同步实现，或者，第二设备的显示界面上显示的显示内容可以是第一设备通过内容同步实现。

由上述方案可知，本申请实施例二所公开的一种输出控制装置，在采集到第一设备光成像的图像的同时，还采集第一设备实物成像的图像，进而可以根据实物成像的图像，在光成像的图像中获得第一设备的实物图层，进而将第一设备的实物图层发送到第二设备上，由此使得第二设备上能够将第一设备的实物图层输出在已经显示有显示内容的显示界面上，从而实现第一设备向第二设备的实物成像同步，无需再次同步第一设备上的显示内容，由此，本实施例中在第一设备和第二设备之间将实物内容和显示界面中显示内容的虚拟内容分开同步，从而在第二设备上实现第一设备的完整同步的情况下，不会将第一设备上的显示内容重叠输出在第二设备的显示界面上，由此避免画面回声的情况，从而明显改善用户使用设备进行画面同步即协同办公的体验。

在一种实现方式中，本实施例中的装置还可以包括以下单元，如图7中所示：

图层接收单元604，用于获得所述第二设备发送的第二实物图层。

其中，第二实物图层为对第二设备进行光成像所采集的图像中，至少基于对第二设备进行实物成像所得到的图像所获得的实物图层。也就是说，在第二设备中同样执行如图1中所示的输出控制方案，即：在第二设备上，对第二设备进行图像采集，得到第三图像和第四图像，第三图像为对第二设备进行实物成像所得到的图像，第四图像为对第二设备进行光成像所得到的图像，再至少基于第三图像，获得第四图像中的第二实物图层，最后将第二实物图层发送到第一设备，由第一设备接收第二设备发送的第二实物图层。

图层输出单元605，用于将所述第二实物图层输出在所述第一设备的显示界面上。

其中，在第一设备上，可以将第二实物图层叠加输出在第一设备的显示界面所显示的显示内容上，从而实现第二设备向第一设备的完整同步。

具体的，由于第一设备的显示界面和第二设备的显示界面之间的界面显示参数如区域大小和性状态等存在差别，因此，图层输出单元605在将第二实物图层输出在第一设备的显示界面上时，具体可以通过以下方式实现：

首先，获得第一设备的显示界面与第二设备的显示界面之间的界面比例关系，其中，界面比例关系可以包括有：第一设备的显示界面与第二设备的显示界面之间的界面长度之间的比例关系和界面宽度之间的比例关系；

之后，将第二实物图层按照界面比例关系进行图层缩放，例如，按照界面长度之间的比例关系，将第二实物图层的长度进行同比例缩放，并按照界面宽度之间的比例关系，将第二实物图层的宽度进行同比例缩放，进而将第二实物图层同比例缩放到与第一设备的显示界面的界面长度和宽度相一致；

最后，再将经过缩放的第二实物图层输出在第一设备的显示界面上。

在一种实现方式中，图层获得单元602在至少基于所述第一图像，获得所述第二图像中的第一实物图层时，可以通过以下方式实现：

识别所述第一图像中的实物成像区域；在所述第二图像中，确定与所述实物成像区域对应的目标图像区域；基于所述目标图像区域，获得所述第二图像中的第一实物图层。

参考图8，为本申请实施例三提供的一种电子设备的结构示意图，该电子设备可以为能够进行图像采集、处理及输出的电子设备，如具有图像采集装置的计算机或服务器等。本实施例中的电子设备能够在对实现显示内容和设备上的实物同时同步的第一设备和第二设备之间，避免显示内容的画面回声。

具体的，本实施例中的电子设备可以包括以下结构：

显示器801，用于输出显示界面，所述显示界面上显示有显示内容。

其中，显示器801可以独立的显示屏实现，可以为投影屏实现，用于输出显示内容。

第一采集装置802，用于对所述电子设备进行实物成像，得到第一图像。

其中，第一采集装置802可以为能够对实物进行成像的图像采集装置实现，如红外成像装置的IR摄像头等。

第二采集装置803，用于对所述电子设备进行光成像，得到第二图像。

其中，第二采集装置803可以为能够进行光成像的图像采集装置实现，如光成像装置的RGB摄像头。所述第二采集装置803和第一采集装置802的图像采集相一致，在附图上呈重叠状态。

处理器804，用于至少基于所述第一图像，获得所述第二图像中的第一实物图层；

传输接口805，用于将所述第一实物图层发送到其他设备，以使得所述其他设备将所述电子设备发送的第一实物图层输出在所述其他设备的显示界面上，所述其他设备的显示界面上显示有所述显示内容。

其中，传输接口805可以为WiFi、蓝牙或串口等接口，以实现与电子设备和其他设备之间的图层传输。

由上述方案可知，本申请实施例三所公开的一种电子设备，在采集到第一设备光成像的图像的同时，还采集第一设备实物成像的图像，进而可以根据实物成像的图像，在光成像的图像中获得第一设备的实物图层，进而将第一设备的实物图层发送到第二设备上，由此使得第二设备上能够将第一设备的实物图层输出在已经显示有显示内容的显示界面上，从而实现第一设备向第二设备的实物成像同步，无需再次同步第一设备上的显示内容，由此，本实施例中在第一设备和第二设备之间将实物内容和显示界面中显示内容的虚拟内容分开同步，从而在第二设备上实现第一设备的完整同步的情况下，不会将第一设备上的显示内容重叠输出在第二设备的显示界面上，由此避免画面回声的情况，从而明显改善用户使用设备进行画面同步即协同办公的体验。

在一种实现方式中，本实施例中的电子设备中，传输接口805还用于获得所述第二设备发送的第二实物图层；所述第二实物图层为在对所述第二设备进行光成像所得到的图像中，至少基于对所述第二设备进行实物成像所得到的图像所获得的实物图层；

所述显示器801，还用于将所述第二实物图层输出在所述第一设备的显示界面上。

以当前用户A和用户B在各自的工作台上进行产品设计讨论为例，采用本申请的技术方案实现A和B的工作台的远程同步，具体如下：

为了现场分享实物图纸和样品，用户A和用户B处的工作台上方均部署红外IR镜头和RGB摄像头，并且部署投影光机所搭建的系统，基于此：

1、用户A和用户B各自开启部署的系统后，系统投影仪或显示器开始工作，用户A的显示界面和用户B的显示界面显示同一个工作台背景；

2、用户A在工作台桌面上展示实物，如教学工具或用户操作等，此时RGB摄像头和IR摄像头开启工作：

在此期间的流程分为三步：

(1)对IR摄像头而言，实物(发出或反射红外光)是可以采集到的内容。而显示画面(由于无红外光)是无法被侦测到的内容。所以IR摄像头单独提取实物和用户操作(例如手势等)的图像。

(2)RGB摄像头提取所有内容，包括显示画面、用户操作和实物。

3、用户A侧使用AI技术，将前两个步骤中IR摄像头和RGB摄像头所提取的画面图层进行叠加采样处理，生成一个只显示用户操作和实物的2D图层，此时，该图层可以命名为Virtual Channel 1。

4、用户A一侧将AI所生成的2D图层Virtual Channel 1发送到用户B一侧，在用户B一侧的工作台上叠加Virtual Channel 1，此时实现用户A侧的实物和用户操作同步显示在用户B一侧的工作台上。

5、在用户B一侧按照以上方案，同步进行相应的操作，用户B一侧的RGB摄像头和IR摄像头同时开始工作，通过以上步骤3同理的处理后，生成一个只显示用户B操作和实物的2D图层，此时，该图层可以命名为Virtual Channel 2。

之后，Virtual Channel 2的图层将会发送到A处，A看到的画面是本地的工作台全貌(含工作台背景和实物)以及Virtual Channel 2的图层以在用户A一侧同步用户B一侧的用户操作和实物，此时，将用户A和用户B两侧分别实现实物和用户操作的同步，例如，在用户A一侧，可以看到用户B在自己的工作台上进行的画面标注或教学工具的使用图像，而在用户B一侧，同样会看到用户A在自己的工作台上进行图样修改等图像。

可见，通过本申请的技术方案，远程用户A和用户B的的工作台可以突破空间限制，所有的操作、实物、以及电子材料会反馈到每个用户的工作台上。虚实完美结合。由此，采用本申请的技术方案，能够实现联合工作台，以使得本地和远程用户可以同时分享操作(手势操作、实物或虚拟材料等)，同时均可以与对方进行互动。而且，本申请的技术方案中，双方摄像头可以同时工作，基于红外摄像头IR和AI技术处理后，双方看到的画面会剥除己方的画面，即用户眼中看到的画面是本地的所有实物与远方用户的操作叠加的场景，由此，解决摄像头‘画面回声’的缺陷。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种输出控制方法，所述方法包括：

对第一设备进行图像采集，得到第一图像和第二图像，其中，所述第一设备上具有显示界面，所述显示界面上显示有显示内容，所述第一图像为对所述第一设备进行实物成像所得到的图像，所述第二图像为对所述第一设备进行光成像所得到的图像；

至少基于所述第一图像，获得所述第二图像中的第一实物图层；

将所述第一实物图层发送到第二设备，以使得所述第二设备将所述第一设备发送的第一实物图层输出在所述第二设备的显示界面上，所述第二设备的显示界面上显示有所述显示内容。

2.根据权利要求1所述的方法，还包括：

获得所述第二设备发送的第二实物图层；所述第二实物图层为在对所述第二设备进行光成像所得到的图像中，至少基于对所述第二设备进行实物成像所得到的图像所获得的实物图层；

将所述第二实物图层输出在所述第一设备的显示界面上。

3.根据权利要求2所述的方法，将所述第二实物图层输出在所述第一设备的显示界面上，包括：

获得所述第一设备的显示界面与所述第二设备的显示界面之间的界面比例关系；

将所述第二实物图层按照所述界面比例关系进行图层缩放；

将经过缩放的第二实物图层输出在所述第一设备的显示界面上。

4.根据权利要求1或2所述的方法，至少基于所述第一图像，获得所述第二图像中的第一实物图层，包括：

识别所述第一图像中的实物成像区域；

在所述第二图像中，确定与所述实物成像区域对应的目标图像区域；

基于所述目标图像区域，获得所述第二图像中的第一实物图层。

5.根据权利要求1或2所述的方法，所述第一图像为红外图像，所述第二图像为RGB图像。

6.根据权利要求1或2所述的方法，所述第一实物图层中至少包括：所述第一设备的显示界面上方的物体和/或用户操作体的实物图像。

7.一种输出控制装置，所述装置包括：

图像获得单元，用于对所述第一设备进行图像采集，得到第一图像和第二图像，其中，所述第一设备上具有显示界面，所述显示界面上显示有显示内容，所述第一图像为对所述第一设备进行实物成像所得到的图像，所述第二图像为对所述第一设备进行光成像所得到的图像；

图层获得单元，用于至少基于所述第一图像，获得所述第二图像中的第一实物图层；

图层发送单元，用于将所述第一实物图层发送到第二设备，以使得所述第二设备将所述第一设备发送的第一实物图层输出在所述第二设备的显示界面上，所述第二设备的显示界面上显示有所述显示内容。

8.根据权利要求7所述的装置，还包括：

图层接收单元，用于获得所述第二设备发送的第二实物图层；所述第二实物图层为在对所述第二设备进行光成像所得到的图像中，至少基于对所述第二设备进行实物成像所得到的图像所获得的实物图层；

图层输出单元，用于将所述第二实物图层输出在所述第一设备的显示界面上。

9.一种电子设备，包括：

显示器，用于输出显示界面，所述显示界面上显示有显示内容；

第一采集装置，用于对所述电子设备进行实物成像，得到第一图像；

第二采集装置，用于对所述电子设备进行光成像，得到第二图像；

处理器，用于至少基于所述第一图像，获得所述第二图像中的第一实物图层；

传输接口，用于将所述第一实物图层发送到其他设备，以使得所述其他设备将所述电子设备发送的第一实物图层输出在所述其他设备的显示界面上，所述其他设备的显示界面上显示有所述显示内容。

10.根据权利要求9所述的电子设备，其中：

所述传输接口，还用于获得所述第二设备发送的第二实物图层；所述第二实物图层为在对所述第二设备进行光成像所得到的图像中，至少基于对所述第二设备进行实物成像所得到的图像所获得的实物图层；

所述显示器，还用于将所述第二实物图层输出在所述第一设备的显示界面上。

Images