CN115297309B - 投影画面显示方法及投影设备 - Google Patents

Abstract

本申请公开了一种投影画面显示方法及投影设备，属于投影技术领域。所述方法包括：检测摄像头是否处于拍摄状态，在摄像头处于拍摄状态的情况下，获取摄像头的位移信息，基于摄像头的位移信息，确定目标图像中的有效图像区域，基于该有效图像区域和位移信息，对目标图像进行修正，以得到目标修正图像，将目标修正图像进行投影，以在投影屏幕上显示摄像头的拍摄画面。本申请通过获取摄像头的位移信息，进而基于该位移信息对摄像头拍摄的图像进行修正，能够使最终在投影屏幕上显示的投影画面不发生抖动。因此，本申请实施例能够解决由于投影屏幕发声振动而导致投影画面模糊的问题，从而使投影设备同时具备屏幕发声和社交共享等功能。

Description

投影画面显示方法及投影设备

技术领域

本申请涉及投影技术领域，特别涉及一种投影画面显示方法及投影设备。

背景技术

随着科技的不断进步，具有屏幕发声功能的投影设备越来越多地走进人们的生活中。为了使人们的生活更加便捷，这些投影设备还可以包括摄像头，通过该摄像头可以进行社交功能。

在相关技术中，以屏幕发声的投影电视为例，由于投影电视包括的投影主机的放置位置较低，作为社交功能的摄像头通常被优先放置到投影屏幕上。然而，在屏幕发声的投影电视上使用社交功能时，由于屏幕发声会使投影屏幕产生振动，从而使摄像头拍摄的画面产生抖动。

发明内容

本申请提供了一种投影画面显示方法、装置及存储介质，可以解决相关技术中屏幕发声导致摄像头拍摄的画面产生抖动的问题。所述技术方案如下：

一方面，提供了一种投影画面显示方法，应用于投影设备，所述投影设备包括投影主机和投影屏幕，所述投影屏幕具有摄像头，所述投影屏幕为发声屏幕，所述方法包括：

检测所述摄像头是否处于拍摄状态；

在所述摄像头处于拍摄状态的情况下，获取所述摄像头的位移信息，所述摄像头的位移信息是由于所述投影屏幕的发声振动而产生的；

基于所述摄像头的位移信息，确定目标图像中的有效图像区域，所述目标图像是指所述摄像头拍摄的图像；

基于所述有效图像区域和所述位移信息，对所述目标图像进行修正，以得到目标修正图像；

将所述目标修正图像进行投影，以在所述投影屏幕上显示所述摄像头的拍摄画面。

另一方面，提供了一种投影设备，所述投影设备包括投影主机和投影屏幕，所述投影屏幕具有摄像头，所述投影屏幕为发声屏幕，所述投影设备包括处理器，所述处理器用于：

检测所述摄像头是否处于拍摄状态；

在所述摄像头处于拍摄状态的情况下，获取所述摄像头的位移信息，所述摄像头的位移信息是由于所述投影屏幕的发声振动而产生的；

基于所述摄像头的位移信息，确定目标图像中的有效图像区域，所述目标图像是指所述摄像头拍摄的图像；

基于所述有效图像区域和所述位移信息，对所述目标图像进行修正，以得到目标修正图像；

将所述目标修正图像进行投影，以在所述投影屏幕上显示所述摄像头的拍摄画面。

另一方面，提供了一种投影画面显示装置，所述装置包括：

检测模块，用于检测所述摄像头是否处于拍摄状态；

获取模块，用于在所述摄像头处于拍摄状态的情况下，获取所述摄像头的位移信息，所述摄像头的位移信息是由于所述投影屏幕的发声振动而产生的；

确定模块，用于基于所述摄像头的位移信息，确定目标图像中的有效图像区域，所述目标图像是指所述摄像头拍摄的图像；

修正模块，用于基于所述有效图像区域和所述位移信息，对所述目标图像进行修正，以得到目标修正图像；

投影模块，用于将所述目标修正图像进行投影，以在所述投影屏幕上显示所述摄像头的拍摄画面。

另一方面，提供了一种计算机可读存储介质，所述存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述所述投影画面显示方法的步骤。

另一方面，提供了一种包含指令的计算机程序产品，当所述指令在计算机上运行时，使得计算机执行上述所述的投影画面显示方法的步骤。

本申请提供的技术方案至少可以带来以下有益效果：

当摄像头处于拍摄状态时，用户在使用社交功能的过程中所产生的声音会使摄像头产生抖动，摄像头的抖动会导致摄像头的位置发生变化，因此，本申请实施例通过获取摄像头的位移信息，进而基于该位移信息对摄像头拍摄的图像进行修正，能够使最终在投影屏幕上显示的投影画面不发生抖动。因此，本申请实施例能够解决由于投影屏幕发声振动而导致投影画面模糊的问题，从而使投影设备同时具备屏幕发声和社交共享等功能。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的一种投影设备的示意图；

图2是本申请实施例提供的另一种投影设备的示意图；

图3是本申请实施例提供的一种投影画面的示意图；

图4是本申请实施例提供的另一种投影画面的示意图；

图5是本申请实施例提供的一种投影画面显示方法的流程图；

图6是本申请实施例提供的一种摄像头产生抖动的示意图；

图7是本申请实施例提供的一种第一有效区域的示意图；

图8是本申请实施例提供的一种第二有效区域的示意图；

图9是本申请实施例提供的一种有效图像区域的示意图；

图10是本申请实施例提供的一种目标修正图像的示意图；

图11是本申请实施例提供的另一种投影画面显示方法的流程图；

图12是本申请实施例提供的一种投影画面显示装置的结构示意图；

图13是本申请实施例提供的一种投影设备的结构示意图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。

在对本申请实施例提供的投影画面显示方法进行详细地解释说明之前，先对本申请实施例涉及的投影设备进行介绍。

请参考图1，图1是根据一示例性实施例示出的一种投影设备的示意图。该投影设备包括投影主机101和投影屏幕102，投影屏幕102具有摄像头。投影主机101可以与投影屏幕102进行通信连接。该通信连接可以为有线或者无线连接，本申请实施例对此不做限定。

其中，投影主机101通常采用桌面安装的方式被安装在桌面上，或者采用吊装的方式被安装在天花板上，投影屏幕102通常安装在墙面上。在显示画面时，投影主机101用于将待显示的画面投影至投影屏幕102上，投影屏幕102用于对待显示的画面进行显示。请参考图2，在播放音频信号时，投影主机101用于将待播放的音频信号发送给投影屏幕102，投影屏幕102基于内置的发声单元播放该音频信号，以实现屏幕发声功能。

在投影设备启用社交功能时，可以打开该摄像头，并通过该摄像头拍摄图像后发送给投影主机101，投影主机101能够接收摄像头拍摄的图像，并将该图像通过网络发送出去，还能够将该摄像头拍摄的图像投影至投影屏幕102上，以在投影屏幕102上显示摄像头的拍摄画面。但是在投影屏幕102播放音频信号的过程中，发声单元振动可能会导致投影屏幕102在发声时产生较大幅度的抖动，此时，投影屏幕102上的摄像头也会发生抖动，进而导致摄像头拍摄到的图像产生晃动或模糊，这样，在投影屏幕102上所显示的摄像头的拍摄画面也会晃动或模糊。

作为一种示例，请参考图3，在投影屏幕102未抖动时，投影屏幕102不会产生位移时，投影画面能够在投影屏幕102上满版显示。在投影屏幕102产生抖动时，投影屏幕102会产生位移，由于投影主机101投影的位置不变，此时，会导致投影画面的部分区域投影至投影屏幕102之外的区域。并且，请参考图4，由于投影屏幕102上的摄像头也产生了位移，从而导致该摄像头在拍摄图像时，该图像的主体内容也相应的在该拍摄图像中产生了位移。因此当投影屏幕抖动时，设置于投影屏幕上的摄像头在进行拍摄时会产生一次位移，当拍摄画面投射到投影屏幕时，由于投影屏幕的位置产生改变，此时又会产生一次位移。由于人眼的视觉暂留效应，当图像快速播放时，如果两帧之间的主体内容产生位移，会使得最终看到的画面出现模糊、拖影的情况。

但是，用户在进行投影画面的观看时，通常以投影屏幕所在的平面为参照物进行观看，这个参照物可以是投影屏幕所在的墙壁，即用户观看投影画面是否抖动是以投影面为准的，该投影面通常为墙壁，因此，在拍摄画面投射到投影屏幕产生的那次位移，对于用户来说是可以忽视的，只要投影画面相对于投影面(墙壁)的位置不变即可。因此，本申请实施例提供了一种投影画面显示方法，当摄像头在X轴方向上或者Y方向上移动时，可以对摄像头拍摄的图像补偿摄像头所产生位移，从而解决上述由于投影屏幕发声振动而导致投影画面模糊的问题。

上述描述的社交功能可以是视频聊天、网络直播、交流音乐等功能。社交功能可以在用户足不出户的情况下，满足用户的社交需求，为用户实现最真实的视听效果。

本领域技术人员应能理解上述投影主机101和投影屏幕102的功能仅为举例，其他现有的或今后可能出现的其他功能如可适用于本申请实施例，也应包含在本申请实施例保护范围以内，并在此以引用方式包含于此。

需要说明的是，本申请实施例描述的激光投影设备是为了更加清楚的说明本申请实施例的技术方案，并不构成对于本申请实施例提供的技术方案的限定，本领域普通技术人员可知，随着技术的演变，本申请实施例提供的技术方案对于类似的技术问题，同样适用。

接下来对本申请实施例提供的投影画面显示方法进行详细地解释说明。

图5是本申请实施例提供的一种投影画面显示方法的流程图，该方法应用于投影设备，该投影设备包括投影主机和投影屏幕，该投影屏幕具有摄像头，该投影屏幕为发声屏幕。请参考图5，该方法包括如下步骤。

步骤501：检测摄像头是否处于拍摄状态。

投影设备的投影主机与摄像头进行通信，投影主机可以获知摄像头是否处于拍摄状态。

例如，在具有社交功能的屏幕发声的投影电视中，投影电视的投影主机与摄像头进行通信，投影主机可以获知摄像头是否处于拍摄状态。

步骤502：在摄像头处于拍摄状态的情况下，获取该摄像头的位移信息，该摄像头的位移信息是由于投影屏幕的发声振动而产生的。

在摄像头处于拍摄状态的情况下，说明投影设备开启了社交功能，在投影屏幕播放音频信号的过程中，发声单元振动可能会导致投影屏幕在发声时产生较大幅度的抖动，此时，投影屏幕上的摄像头也会发生抖动。

在一些实施例中，投影屏幕上的摄像头可以包括位移传感器，在摄像头发生抖动时，该位移传感器能够感知摄像头产生的位移，进而确定摄像头的位移信息。此时，位移传感器能够将摄像头的位移信息发送给投影主机，进而投影主机能够获取该摄像头的位移信息。

步骤503：基于摄像头的位移信息，确定目标图像中的有效图像区域，该目标图像是指摄像头拍摄的图像。

在投影屏幕发声振动而摄像头产生抖动的过程中，投影主机的位置是不变的，因此投影主机的投射区域也是不变的，但投影主机所投影的画面实质上是摄像头所拍摄的图像，即目标图像，由于摄像头抖动会导致拍摄的图像的主体内容相应的产生位移，若此时，投影主机对该主体内容产生位移的目标图像进行投影，该目标图像的主体内容相比于摄像头未产生抖动时，该目标图像的主体内容在投影主机的投射区域内产生了位移。

摄像头产生的位移信息能够分解为两个方向，即X轴方向和Y轴方向上的位移信息。因此，在一些实施例中，摄像头的位移信息包括第一位移信息和第二位移信息，该第一位移信息是指摄像头在X轴方向上的位移信息，该第二位移信息是指摄像头在Y轴方向上的位移信息，此时，可以基于第一位移信息确定目标图像中的第一有效区域，基于第二位移信息确定目标图像中的第二有效区域，将第一有效区域和第二有效区域的重合区域，确定为目标图像中的有效图像区域。

由于X轴方向和Y轴方向分别具有正负两个方向，因此，第一位移信息包括第一位移大小和第一移动方向，第一位移大小是指摄像头在X轴上移动的距离，第一移动方向是指摄像头在X轴上移动的方向，该方向可能是X轴的正半轴的方向，也可能是X轴的负半轴的方向。第二位移信息包括第二位移大小和第二移动方向，第二位移大小是指摄像头在Y轴上移动的距离，第二移动方向是指摄像头在Y轴上移动的方向，该方向可能是Y轴的正半轴的方向，也可能是Y轴的负半轴的方向。这样，在一些实施例中，可以基于第一位移大小和第一移动方向，确定目标图像中的第一有效区域，基于第二位移大小和第二移动方向，确定目标图像中的第二有效区域。

如果第一移动方向为X轴的负半轴的方向，则将目标图像中与第一边界之间的距离为第一位移大小的区域之外的区域，确定为第一有效区域。如果第一移动方向为X轴的正半轴的方向，则将目标图像中与第二边界之间的距离为第一位移大小的区域之外的区域，确定为第一有效区域。其中，第一边界是指目标图像中垂直于X轴且X坐标最小的边界，第二边界是指目标图像中垂直于X轴且X坐标最大的边界。

如果第二移动方向为Y轴的负半轴的方向，则将目标图像中与第四边界之间的距离为第二位移大小的区域之外的区域，确定为第二有效区域。如果第二移动方向为Y轴的正半轴的方向，则将目标图像中与第三边界之间的距离为第二位移大小的区域之外的区域，确定为第二有效区域。其中，第三边界是指目标图像中垂直于Y轴且Y坐标最小的边界，第四边界是指目标图像中垂直于Y轴且Y坐标最大的边界。

在实际应用中，摄像头的移动方向与摄像头拍摄的图像的移动方向是相反的。比如，若摄像头的移动方向为X轴的正半轴的方向，那么摄像头拍摄到的图像会向X轴的负半轴的方向移动。同理，若摄像头的移动方向为X轴的负半轴的方向，那么摄像头拍摄到的图像会向X轴的正半轴的方向移动。若摄像头的移动方向为Y轴的正半轴的方向，那么摄像头拍摄到的图像会向Y轴的负半轴的方向移动。若摄像头的移动方向为Y轴的负半轴的方向，那么摄像头拍摄到的图像会向Y轴的正半轴的方向移动。

作为一种示例，若面向投影屏幕的正面，可以将摄像头向X轴的负半轴方向上的移动称为摄像头向左移动。请参考图6，图6中摄像头向左移动一个像素，此时，以投影画面为参照物时，该摄像头所拍摄的图像主体的位置相比于摄像头产生抖动之前向右移动了一个像素。也可以看到，以投影屏幕为参照物时，该摄像头所拍摄的图像主体的位置相比于摄像头产生抖动之前向右移动了两个像素。而需要对以投影画面为参照物时产生的像素位移量进行补偿。

所以，在第一移动方向为X轴的负半轴的方向的情况下，将目标图像靠近X轴的正半轴方向的区域确定为第一有效区域。在第一移动方向为X轴的正半轴的方向的情况下，将目标图像中靠近X轴的负半轴方向的区域确定为第一有效区域。在第二移动方向为Y轴的负半轴的方向的情况下，将目标图像中靠近Y轴的正半轴方向的区域确定为第二有效区域。在第二移动方向为Y轴的正半轴的方向的情况下，将目标图像中靠近Y轴的负半轴方向的区域确定为第二有效区域。

例如，请参考图7，若摄像头产生抖动，第一位移大小为1且第一移动方向为X轴的负半轴的方向，因此，可以将目标图像中与第一边界之间的距离为1的区域之外的区域，确定为第一有效区域。请参考图8，若摄像头产生抖动，第二位移大小为1且第二移动方向为Y轴的正半轴的方向，因此，可以将目标图像中与第三边界之间的距离为1的区域之外的区域，确定为第二有效区域。请参考图9，可以将第一有效区域和第二有效区域重合的区域确定为目标图像中的有效图像区域。

基于上文描述，第一位移信息和第二位移信息可以包括位移大小和移动方向。为了指示位移大小和移动方向，可以采用多种形式来表示第一位移信息和第二位移信息。作为一种示例，第一位移信息和第二位移信息通过矢量的方式来表示，该矢量的符号代表摄像头的移动方向，该矢量的绝对值代表摄像头在该方向上的位移大小。例如，第一位移信息为-1，-1为一个矢量，其中，该矢量的符号为负号，说明摄像头在X轴上的移动方向为X轴的负半轴的方向，该矢量的绝对值为1，说明摄像头在X轴的负半轴的方向上的位移大小为1。作为另一种示例，第一位移信息和第二位移信息通过文本的形式来表示。例如，第一位移信息为：向X轴的正半轴的方向移动，位移大小为1。

在第一位移信息和第二位移信息通过矢量的方式来表示的情况下，将第一位移信息的绝对值确定为第一位移大小，将第二位移信息的绝对值确定为第二位移大小。如果第一位移信息小于0，说明摄像头的移动方向为X轴的负半轴的方向，确定第一移动方向为X轴的负半轴的方向。如果第一位移信息大于0，说明摄像头的移动方向为X轴的正半轴的方向，确定第一移动方向为X轴的正半轴的方向。同理，如果第二位移信息小于0，说明摄像头的移动方向为Y轴的负半轴的方向，确定第二移动方向为Y轴的负半轴的方向。如果第二位移信息大于0，说明摄像头的移动方向为Y轴的正半轴的方向，确定第二移动方向为Y轴的负半轴的方向。

在实际应用中，该摄像头除了能够在平面内产生位移，即在X轴方向和/或Y轴方向上产生位移之外，还能够在空间内产生位移，也即是，在Z轴方向上产生位移。此时，摄像头在Z轴方向上产生的位移会对摄像头拍摄的画面的大小产生影响，需要在后续步骤中对画面整体进行放大或者缩小，不需要确定在Z轴方向上所对应的有效区域，或者说该有效区域实质上是整个目标图像。因此，在摄像头在Z轴方向上也产生位移的情况下，目标图像中的有效图像区域依旧为第一有效区域和第二有效区域的重合区域。

当然，在实际应用中，该摄像头可以只在Z轴方向上产生位移。因此，在一些实施例中，摄像头的位移信息只包括第三位移信息，该第三位移信息是指摄像头在Z轴方向上的位移信息，与上文同理，基于第三位移信息确定的有效区域实质上是整个目标图像，这样，可以直接将整个目标图像确定为目标图像中的有效图像区域。

步骤504：基于目标图像中的有效图像区域和摄像头的位移信息，对目标图像进行修正，以得到目标修正图像。

基于上文描述，摄像头的位移信息不仅包含摄像头在X轴方向和Y轴方向上的位移，还可能包含摄像头在Z轴方向上的位移，在该位移信息所包含的内容不同的情况下，基于目标图像中的有效图像区域和摄像头的位移信息，对目标图像进行修正，以得到目标修正图像的过程也有所不同。接下来将分别介绍。

第一种情况，摄像头的位移信息包括第一位移信息和第二位移信息，此时，可以基于第一位移信息和第二位移信息，将目标图像中的有效图像区域在目标图像内进行平移，以得到第一修正图像，对第一修正图像中除有效图像区域之外的区域进行修正，以得到第二修正图像，基于该第二修正图像确定目标修正图像。

在一些实施例中，沿着第一移动方向的反方向，将目标图像中的有效图像区域在目标图像内进行平移，并且平移的距离为第一位移大小。然后，沿着第二移动方向的反方向，将有效图像区域在目标图像内进行平移，并且平移的距离为第二位移大小。也即是，目标图像中的有效图像区域的平移方向与摄像头的移动方向相反，平移的距离与摄像头的位移大小一致。这样，经过对有效图像区域进行两次平移之后，即可得到第一修正图像。

基于上文描述，可以基于第一位移信息和第二位移信息对目标图像中的有效图像区域在X轴和Y轴上分别进行平移，以得到第一修正图像。当然，也可以基于第一位移信息和第二位移信息，对摄像头在X轴和Y轴上的位移大小按照相关算法进行合成，得到合成方向和合成距离，进而在合成方向的反方向上对有效图像区域在目标图像内进行平移，并且平移的距离为合成距离，以得到第一修正图像。

由于第一修正图像是将目标图像中的有效图像区域在目标图像内进行平移得到的，所以，目标图像和第一修正图像中都包括该有效图像区域，只是该有效图像区域在目标图像中的位置与其在第一修正图像中的位置不同。但是，对于第一修正图像中除有效图像区域之外的无效区域来说，该无效区域的画面内容可能与有效图像区域中的画面内容存在重叠、不连贯等情况，因此，在一些实施例中，可以将第一修正图像中除有效图像区域之外的区域填充为参考像素值，以得到第二修正图像，进而将该第二修正图像直接确定为目标修正图像。也即是，对无效区域填充一样的像素值，确保该无效区域不对整个画面产生影响，从而保证在后续步骤中显示的投影画面是一致、连贯的。

需要说明的是，参考像素值是事先设置的，比如，参考像素值可以设置为黑色所对应的像素值。而且在不同的情况下，还可以按照不同的需求进行调整。

作为一种示例，请参考图10，从图10中可以看出目标图像经过修正之后，该目标修正图像的图像主体与摄像头没有产生抖动时的位置是一致的。

第二种情况，摄像头的位移信息包括第一位移信息、第二位移信息和第三位移信息，此时，基于第一位移信息和第二位移信息，将目标图像中的有效图像区域在目标图像内进行平移，以得到第一修正图像，对第一修正图像中除有效图像区域之外的区域进行修正，以得到第二修正图像，基于第三位移信息，对第二修正图像进行缩放，以得到目标修正图像。

其中，基于第一位移信息和第二位移信息，将目标图像中的有效图像区域在目标图像内进行平移，以得到第一修正图像，对第一修正图像中除有效图像区域之外的区域进行修正，以得到第二修正图像的详细过程请参考上文中对应的内容，此处不再赘述。

由于Z轴方向也具有正负两个方向，因此，第三位移信息包括第三位移大小和第三移动方向，第三位移大小是指摄像头在Z轴上移动的距离，第三移动方向是指摄像头在Z轴上移动的方向，该方向可能是Z轴的正半轴的方向，也可能是Z轴的负半轴的方向。这样，在一些实施例中，可以基于第三位移大小和第三移动方向，确定修正距离，修正距离是指摄像头移动后与投影主机之间的距离，基于修正距离确定第一缩放参数以及第二缩放参数，第一缩放参数是摄像头产生位移后目标图像的主体内容的缩放倍率，第二缩放参数是投影屏幕产生位移后投影画面的缩放倍率。基于第一缩放参数和第二缩放参数确定修正缩放参数，基于该修正缩放参数对第二修正图像进行缩放，以得到目标修正图像。

如果第三移动方向为Z轴的负半轴的方向，则将参考距离加上第三位移大小的值确定为修正距离，如果第三移动方向为Z轴的正半轴的方向，则将投影距离减去第三位移大小的值确定为修正投影距离。其中，参考距离是指在投影屏幕未发生振动时，该摄像头与投影主机在Z轴上的距离。

如果第三移动方向为Z轴的负半轴的方向，说明摄像头与投影主机之间的距离增大，因此，需要将参考距离加上第三位移大小的值确定为修正距离，如果第三移动方向为Z轴的正半轴的方向，说明摄像头与投影主机之间的距离减小，因此，则将投影距离减去第三位移大小的值确定为修正投影距离。

在实际应用中，摄像头在Z轴上移动会导致目标图像的主体内容放大或缩小，并且投影屏幕在Z轴上移动也会导致投影画面放大或缩小，因此，需要分别确定第一缩放参数和第二缩放参数，也即是，分别确定摄像头对拍摄画面的缩放倍率以及投影屏幕对投影画面的缩放倍率。此外，摄像头位于投影屏幕上，并且摄像头产生的位移是由于投影屏幕发声振动所产生的，摄像头的位移情况也能够表征投影屏幕的位移情况，上述参考距离也能够表示在投影屏幕未发生振动时，该投影屏幕与投影主机之间的距离。这样，可以基于修正距离，按照相关算法，分别确定第一缩放参数和第二缩放参数。也就是说，可以基于同一个修正距离，分别确定摄像头对拍摄画面的缩放倍率以及投影屏幕对投影画面的缩放倍率。

在一些实施例中，可以将第一缩放参数乘以第二缩放参数的值的倒数，确定为修正缩放参数，基于该修正缩放参数对第二修正图像进行缩放，以得到目标修正图像。也即是，基于摄像头对拍摄画面的缩放倍率以及投影屏幕对投影画面的缩放倍率，确定在摄像头和投影屏幕的共同作用下对画面的最终的缩放倍率，进而将该缩放倍率的倒数确定为修正缩放参数。

例如，第一缩放参数为0.9，第二缩放参数为1.1，第一缩放参数乘以第二缩放参数的值为0.9×1.1＝0.99，也即是，在摄像头和投影屏幕的共同作用下对画面的最终的缩放倍率为0.99，此时，可以确定修正缩放参数为1÷0.99≈1.01。

第三种情况，该摄像头可以只在Z轴方向上产生位移。也即是，摄像头的位移信息只包括第三位移信息。此时，可以基于第三位移信息，对有效图像区域进行缩放，以得到目标修正图像。

基于上文描述，在摄像头的位移信息只包括第三位移信息的情况下，有效图像区域实质上就是整个目标图像，所以，可以直接基于第三位移信息，对目标图像进行缩放，以得到目标修正图像。

在一些实施例中，可以基于第三位移大小和第三移动方向，确定修正距离，基于修正距离确定第一缩放参数以及第二缩放参数，基于第一缩放参数和第二缩放参数确定修正缩放参数，基于该修正缩放参数对目标图像进行缩放，以得到目标修正图像。

其中，基于第三位移大小和第三移动方向，确定修正距离，基于修正距离确定第一缩放参数以及第二缩放参数，基于第一缩放参数和第二缩放参数确定修正缩放参数的详细过程请参考上文中对应的内容，此处不再赘述。

在一些实施例中，目标图像可以是RGB图像，该目标图像具有RGB三个通道，因此，可以按照上文描述的方式，对该三个通道分别进行修正，以得到目标修正图像。在另一些实施例中，也可以按照上文描述的方式，对目标图像的RGB三维向量矩阵进行修正，以得到目标修正图像。当然，目标图像还可以是其他类型的图像，本申请实施例对此不做限定。

步骤505：将目标修正图像进行投影，以在投影屏幕上显示摄像头的拍摄画面。

接下来以图11例，对本申请实施例提供的一种投影画面显示方法进行介绍。如图11所示，投影设备开机后，检测摄像头是否处于拍摄状态。在摄像头不处于拍摄状态的情况下，向投影屏幕投射图像。在摄像头处于拍摄状态的情况下，由于投影屏幕上发声单元的振动会导致摄像头发生抖动，因此可以获取摄像头的位移信息和摄像头拍摄的图像，即目标图像，进而基于摄像头的位移信息对目标图像进行修正，以得到目标修正图像，进而向投影屏幕投射目标修正图像，以在投影屏幕上显示摄像头的拍摄画面。

当摄像头处于拍摄状态时，用户在使用社交功能的过程中所产生的声音会使摄像头产生抖动，摄像头的抖动会导致摄像头的位置发生变化，因此，本申请实施例通过获取摄像头的位移信息，进而基于该位移信息对摄像头拍摄的图像进行修正，能够使最终在投影屏幕上显示的投影画面不发生抖动。因此，本申请实施例能够解决由于投影屏幕发声振动而导致投影画面模糊的问题，从而使投影设备同时具备屏幕发声和社交共享等功能。此外，本申请实施例所提供的方法还可以将第一修正图像中除有效图像区域之外的区域填充为参考像素值，从而保证最终显示的投影画面是一致、连贯的。

图12是本申请实施例提供的一种投影画面显示装置的结构示意图，该投影画面显示装置可以由软件、硬件或者两者的结合实现成为投影设备的部分或者全部。请参考图12，该装置包括：检测模块1201、获取模块1202、确定模块1203、修正模块1204和投影模块1205。

检测模块1201，用于检测摄像头是否处于拍摄状态。详细实现过程参考上述各个实施例中对应的内容，此处不再赘述。

获取模块1202，用于在摄像头处于拍摄状态的情况下，获取摄像头的位移信息，该摄像头的位移信息是由于投影屏幕的发声振动而产生的。详细实现过程参考上述各个实施例中对应的内容，此处不再赘述。

确定模块1203，用于基于摄像头的位移信息，确定目标图像中的有效图像区域，该目标图像是指摄像头拍摄的图像。详细实现过程参考上述各个实施例中对应的内容，此处不再赘述。

修正模块1204，用于基于有效图像区域和位移信息，对目标图像进行修正，以得到目标修正图像。详细实现过程参考上述各个实施例中对应的内容，此处不再赘述。

投影模块1205，用于将目标修正图像进行投影，以在投影屏幕上显示摄像头的拍摄画面。详细实现过程参考上述各个实施例中对应的内容，此处不再赘述。

可选地，摄像头的位移信息包括第一位移信息和第二位移信息，该第一位移信息是指摄像头在X轴方向上的位移信息，该第二位移信息是指摄像头在Y轴方向上的位移信息；

确定模块1203具体用于：

基于第一位移信息确定目标图像中的第一有效区域；

基于第二位移信息确定目标图像中的第二有效区域；

将第一有效区域和第二有效区域的重合区域，确定为目标图像中的有效图像区域。

可选地，摄像头的位移信息包括第一位移信息和第二位移信息，该第一位移信息是指摄像头在X轴方向上的位移信息，该第二位移信息是指摄像头在Y轴方向上的位移信息；

修正模块1204包括：

平移单元，用于基于第一位移信息和第二位移信息，将有效图像区域在目标图像内进行平移，以得到第一修正图像；

修正单元，用于对第一修正图像中除有效图像区域之外的区域进行修正，以得到第二修正图像；

确定单元，用于基于第二修正图像确定目标修正图像。

可选地，修正单元具体用于：

将第一修正图像中除有效图像区域之外的区域填充为参考像素值，以得到第二修正图像。

可选地，摄像头的位移信息还包括第三位移信息，该第三位移信息是指摄像头在Z轴方向上的位移信息；

确定单元具体用于：

基于第三位移信息，对第二修正图像进行缩放，以得到目标修正图像。

可选地，摄像头的位移信息包括第三位移信息，该第三位移信息是指摄像头在Z轴方向上的位移信息；

修正模块1204具体用于：

基于第三位移信息，对有效图像区域进行缩放，以得到目标修正图像。

当摄像头处于拍摄状态时，用户在使用社交功能的过程中所产生的声音会使摄像头产生抖动，摄像头的抖动会导致摄像头的位置发生变化，因此，本申请实施例通过获取摄像头的位移信息，进而基于该位移信息对摄像头拍摄的图像进行修正，能够使最终在投影屏幕上显示的投影画面不发生抖动。因此，本申请实施例能够解决由于投影屏幕发声振动而导致投影画面模糊的问题，从而使投影设备同时具备屏幕发声和社交共享等功能。此外，本申请实施例所提供的方法还可以将第一修正图像中除有效图像区域之外的区域填充为参考像素值，从而保证最终显示的投影画面是一致、连贯的。

需要说明的是：上述实施例提供的投影画面显示装置在进行投影画面显示时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的投影画面显示装置与投影画面显示方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。

图13是本申请实施例提供的一种投影设备1300的结构框图。该投影设备1300包括投影主机1301和投影屏幕1302。投影主机1301可以包括处理器13011和存储器13012，可选地，投影主机1301还可以包括远程拾音麦克，远程拾音麦克可用于语音助手及聊天功能的声音采集。投影屏幕1302用于显示图形、文本、图标、视频等信息。投影屏幕1302具有摄像头13021，而且，投影屏幕1302还包括发声单元13022。

处理器13011包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器13011可以采用DSP(Digital Signal Processing，数字信号处理)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)、PLA(Programmable Logic Array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器13011也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(Central ProcessingUnit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器13011可以在集成有GPU(Graphics Processing Unit，图像处理器)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器13011还可以包括AI(Artificial Intelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。

存储器13012可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器13012还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器13012中的非暂态的计算机可读存储介质用于存储至少一个指令，该至少一个指令用于被处理器13012所执行以实现本申请中方法实施例提供的音频播放方法。

摄像头13021用于采集图像或视频。可选地，摄像头13021设置在投影屏幕1302的前面。在一些实施例中，摄像头包括主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种，以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality，虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中，摄像头组件13021还可以包括闪光灯。闪光灯可以是单色温闪光灯，也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合，可以用于不同色温下的光线补偿。

本领域技术人员可以理解，图13中示出的结构并不构成对投影设备1300的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。

在一些实施例中，还提供了一种计算机可读存储介质，该存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述实施例中投影画面显示方法的步骤。例如，所述计算机可读存储介质可以是ROM、RAM、CD-ROM、磁带、软盘和光数据存储设备等。

值得注意的是，本申请实施例提到的计算机可读存储介质可以为非易失性存储介质，换句话说，可以是非瞬时性存储介质。

应当理解的是，实现上述实施例的全部或部分步骤可以通过软件、硬件、固件或者其任意结合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。所述计算机指令可以存储在上述计算机可读存储介质中。

也即是，在一些实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述所述的投影画面显示方法的步骤。

应当理解的是，本文提及的“至少一个”是指一个或多个，“多个”是指两个或两个以上。在本申请实施例的描述中，除非另有说明，“/”表示或的意思，例如，A/B可以表示A或B；本文中的“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，为了便于清楚描述本申请实施例的技术方案，在本申请的实施例中，采用了“第一”、“第二”等字样对功能和作用基本相同的相同项或相似项进行区分。本领域技术人员可以理解“第一”、“第二”等字样并不对数量和执行次序进行限定，并且“第一”、“第二”等字样也并不限定一定不同。

需要说明的是，本申请实施例所涉及的信息(包括但不限于用户设备信息、用户个人信息等)、数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)以及信号，均为经用户授权或者经过各方充分授权的，且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。例如，本申请实施例中涉及到的摄像头的位移信息和摄像头拍摄的图像都是在充分授权的情况下获取的。

以上所述为本申请提供的实施例，并不用以限制本申请，凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (7)

1.一种投影画面显示方法，其特征在于，应用于投影设备，所述投影设备包括投影主机和投影屏幕，所述投影屏幕具有摄像头，所述投影屏幕为发声屏幕，所述方法包括：

检测所述摄像头是否处于拍摄状态；

在所述摄像头处于拍摄状态的情况下，获取所述摄像头的位移信息，所述摄像头的位移信息是由于所述投影屏幕的发声振动而产生的，所述摄像头的位移信息包括第一位移信息和第二位移信息，所述第一位移信息包括第一位移大小和第一移动方向，所述第二位移信息包括第二位移大小和第二移动方向，所述第一位移大小是指所述摄像头在X轴上移动的距离，所述第一移动方向是指所述摄像头在X轴上移动的方向，所述第二位移大小是指所述摄像头在Y轴上移动的距离，所述第二移动方向是指所述摄像头在Y轴上移动的方向；

若所述第一移动方向为X轴的负半轴的方向，则将目标图像中与第一边界之间的距离为所述第一位移大小的区域之外的区域，确定为第一有效区域；若所述第一移动方向为X轴的正半轴的方向，则将所述目标图像中与第二边界之间的距离为所述第一位移大小的区域之外的区域，确定为所述第一有效区域；若所述第二移动方向为Y轴的负半轴的方向，则将所述目标图像中与第四边界之间的距离为所述第二位移大小的区域之外的区域，确定为第二有效区域；若所述第二移动方向为Y轴的正半轴的方向，则将所述目标图像中与第三边界之间的距离为所述第二位移大小的区域之外的区域，确定为所述第二有效区域；将所述第一有效区域和所述第二有效区域的重合区域，确定为所述目标图像中的有效图像区域，所述目标图像是指所述摄像头拍摄的图像，所述第一边界是指所述目标图像中垂直于X轴且X坐标最小的边界，所述第二边界是指所述目标图像中垂直于X轴且X坐标最大的边界，所述第三边界是指所述目标图像中垂直于Y轴且Y坐标最小的边界，所述第四边界是指所述目标图像中垂直于Y轴且Y坐标最大的边界；

基于所述有效图像区域和所述位移信息，对所述目标图像进行修正，以得到第一修正图像，对所述第一修正图像中除所述有效图像区域之外的区域进行修正，以得到第二修正图像，基于所述第二修正图像确定目标修正图像；

将所述目标修正图像进行投影，以在所述投影屏幕上显示所述摄像头的拍摄画面。

2.如权利要求1所述的方法，其特征在于，所述基于所述有效图像区域和所述位移信息，对所述目标图像进行修正，以得到第一修正图像，包括：

基于所述第一位移信息和所述第二位移信息，将所述有效图像区域在所述目标图像内进行平移，以得到所述第一修正图像。

3.如权利要求1所述的方法，其特征在于，所述对所述第一修正图像中除所述有效图像区域之外的区域进行修正，以得到第二修正图像，包括：

将所述第一修正图像中除所述有效图像区域之外的区域填充为参考像素值，以得到所述第二修正图像。

4.如权利要求1或3所述的方法，其特征在于，所述摄像头的位移信息还包括第三位移信息，所述第三位移信息是指所述摄像头在Z轴方向上的位移信息；

所述基于所述第二修正图像确定目标修正图像，包括：

基于所述第三位移信息，对所述第二修正图像进行缩放，以得到所述目标修正图像。

5.一种投影设备，其特征在于，所述投影设备包括投影主机和投影屏幕，所述投影屏幕具有摄像头，所述投影屏幕为发声屏幕，所述投影设备包括处理器，所述处理器用于：

检测所述摄像头是否处于拍摄状态；

在所述摄像头处于拍摄状态的情况下，获取所述摄像头的位移信息，所述摄像头的位移信息是由于所述投影屏幕的发声振动而产生的，所述摄像头的位移信息包括第一位移信息和第二位移信息，所述第一位移信息包括第一位移大小和第一移动方向，所述第二位移信息包括第二位移大小和第二移动方向，所述第一位移大小是指所述摄像头在X轴上移动的距离，所述第一移动方向是指所述摄像头在X轴上移动的方向，所述第二位移大小是指所述摄像头在Y轴上移动的距离，所述第二移动方向是指所述摄像头在Y轴上移动的方向；

若所述第一移动方向为X轴的负半轴的方向，则将目标图像中与第一边界之间的距离为所述第一位移大小的区域之外的区域，确定为第一有效区域；若所述第一移动方向为X轴的正半轴的方向，则将所述目标图像中与第二边界之间的距离为所述第一位移大小的区域之外的区域，确定为所述第一有效区域；若所述第二移动方向为Y轴的负半轴的方向，则将所述目标图像中与第四边界之间的距离为所述第二位移大小的区域之外的区域，确定为第二有效区域；若所述第二移动方向为Y轴的正半轴的方向，则将所述目标图像中与第三边界之间的距离为所述第二位移大小的区域之外的区域，确定为所述第二有效区域；将所述第一有效区域和所述第二有效区域的重合区域，确定目标图像中的有效图像区域，所述目标图像是指所述摄像头拍摄的图像，所述第一边界是指所述目标图像中垂直于X轴且X坐标最小的边界，所述第二边界是指所述目标图像中垂直于X轴且X坐标最大的边界，所述第三边界是指所述目标图像中垂直于Y轴且Y坐标最小的边界，所述第四边界是指所述目标图像中垂直于Y轴且Y坐标最大的边界；

基于所述有效图像区域和所述位移信息，对所述目标图像进行修正，以得到第一修正图像，对所述第一修正图像中除所述有效图像区域之外的区域进行修正，以得到第二修正图像，基于所述第二修正图像确定目标修正图像；

将所述目标修正图像进行投影，以在所述投影屏幕上显示所述摄像头的拍摄画面。

6.如权利要求5所述的投影设备，其特征在于，所述处理器用于：

基于所述第一位移信息和所述第二位移信息，将所述有效图像区域在所述目标图像内进行平移，以得到所述第一修正图像。

7.如权利要求5所述的投影设备，其特征在于，所述处理器用于：

将所述第一修正图像中除所述有效图像区域之外的区域填充为参考像素值，以得到所述第二修正图像。