CN105608715B - 一种在线合影方法及系统 - Google Patents

Abstract

本发明提供一种在线合影方法及系统，包括：生成合影模板，根据所述合影模板的特征信息接收用户的参与指令，确定参与用户，获取所述参与用户的图像，将所述参与用户的图像中的面部区域作为用户面部图层，以直播画面为背景将所述直播画面、所述合影模板和所述用户面部图层进行动态合成，生成第一合影图像通过使用以上方法，可以实现多用户与直播人员的动态合影，丰富了直播过程中的互动内容，提高了用户的参与体验。

Description

一种在线合影方法及系统

技术领域：

本发明涉及计算机互联网技术领域，特别是一种在线合影方法及系统。

背景技术：

随着科学技术的快速发展，越来越多的电子多媒体技术应用到人们的日常生活中。其中，在线直播技术就是一个新兴的应用。

在直播时，由主持人通过网络平台实时向广大的观众表演相应的技能或进行才艺展示，观众通过远端的接收平台观看相应的内容。观众在观看到主持人精彩的表演后，一般只能通过直播自带的实时文字聊天系统或语音系统对表演进行评价互动。尤其是对于热度较高的主持人，观众希望能够提供更加多元化的方式来与主持人亲近或表示自己的支持。而这恰恰是现有技术中所缺乏的。

因此，如何提供一种方法及系统可以实现更加丰富的视觉效果是本发明需要解决的问题。

发明内容：

本发明提供了一种在线合影方法及系统，解决了现有技术中直播方式单一、互动环节少的问题，提高了用户的参与体验。

一种在线合影方法，包括：

生成合影模板；

根据所述合影模板的特征信息接收用户的参与指令，确定参与用户；所述特征信息中包括所述合影模板中容纳的用户数量；

获取所述参与用户的图像，将所述参与用户的图像中的面部区域作为用户面部图层；

以直播画面为背景将所述直播画面、所述合影模板和所述用户面部图层进行动态合成，生成第一合影图像。

优选的，所述根据所述合影模板的特征信息接收用户的参与指令，确定参与用户；所述特征信息中包括所述合影模板中容纳的用户数量，具体为：

根据所述合影模板的特征信息确定互动用户数量；

根据所述互动用户数量生成参与界面；

接收用户的参与指令，选择不超过互动用户数量的用户，作为参与用户。

优选的，所述获取所述参与用户的图像，将所述参与用户的图像中的面部区域作为用户面部图层，具体为：

控制所述参与用户的摄像头获取用户图像或接收所述参与用户上传的图像；

根据人体面部特征，识别出所述参与用户的面部区域；

将所述面部区域与所述合影模板的缺口区域进行面积尺寸匹配；

将匹配后的所述面部区域作为所述用户面部图层。

优选的，以直播画面为背景将所述直播画面、所述合影模板和所述用户面部图层进行动态合成，具体为：

将所述直播画面作为背景图像；

将所述合影模板叠加放置在所述背景图像的上级图层上；

将获取到的所述用户面部图层叠加放置在所述背景图像的上级图层且在所述合影模板的下层图层；

根据合影模板的特征信息生成合影模板与用户面部图层的拼接位置；

将所述用户面部图层叠加放置在所述拼接位置；

截取所述背景图像、合影模板和用户面部图层的叠加图像作为第一合影图像。

优选的，还包括：

将所述第一合影图像发送给所述参与用户。

一种在线合影系统，包括：模板生成单元、参与用户选择单元、面部图层获取单元和合影生成单元；

所述模板生成单元，用于生成合影模板；

所述参与用户选择单元，用于根据所述合影模板的特征信息接收用户的参与指令，确定参与用户；所述特征信息中包括所述合影模板中容纳的用户数量；

所述面部图层获取单元，用于获取所述参与用户的图像，将所述参与用户的图像中的面部区域作为用户面部图层；

所述合影生成单元，用于以直播画面为背景将所述直播画面、所述合影模板和所述用户面部图层进行动态合成，生成第一合影图像。

优选的，所述参与用户选择单元，包括：参与数量计算子单元、参与界面生成子单元和参与用户确定子单元；

所述参与数量计算子单元，用于根据所述合影模板的特征信息确定互动用户数量；

所述参与界面生成子单元，用于根据所述互动用户数量生成参与界面；

所述参与用户确定子单元，用于接收用户的参与指令，选择不超过互动用户数量的用户，作为参与用户。

优选的，所述面部图层获取单元，包括：图像获取子单元、面部识别子单元、尺寸匹配子单元和用户面部图层生成子单元；

所述图像获取子单元，用于控制所述参与用户的摄像头获取用户图像或接收所述参与用户上传的图像；

所述面部识别子单元，用于根据人体面部特征，识别出所述参与用户的面部区域；

所述尺寸匹配子单元，用于将所述面部区域与所述合影模板的缺口区域进行面积尺寸匹配；

所述用户面部图层生成子单元，用于将匹配后的所述面部区域作为所述用户面部图层。

优选的，所述合影生成单元，包括：图像叠加处理子单元、图像拼接子单元和合成影像生成子单元；

所述图像叠加处理子单元，用于将所述直播画面作为背景图像；将所述合影模板叠加放置在所述背景图像的上级图层上；将获取到的所述用户面部图层叠加放置在所述背景图像的上级图层且在所述合影模板的下层图层；

所述图像拼接子单元，用于根据合影模板的特征信息生成合影模板与用户面部图层的拼接位置，将所述用户面部图层叠加放置在所述拼接位置；

所述合成影像生成子单元，用于截取所述背景图像、合影模板和用户图像的叠加图像作为第一合影图像。

优选的，还包括：图像推送单元；

所述图像推送单元，用于将所述第一合影图像发送给所述参与用户。

本发明具有以下优点：

通过使用以上方法，可以实现多用户与直播人员的动态合影，丰富了直播过程中的互动内容，提高了用户的参与体验。

附图说明：

图1为本发明提供的一种在线合影方法第一实施例的流程图；

图2为本发明提供的一种在线合影方法中的模板生成步骤效果图；

图3为本发明提供的一种在线合影方法中的获取用户图像步骤效果图；

图4为本发明提供的一种在线合影方法中的用户面部尺寸调整效果图；

图5为本发明提供的一种在线合影方法中的合影生成效果图；

图6为本发明提供的一种在线合影系统第一实施例的原理框图。

具体实施方式：

参见图1，该图为本发明提供的一种在线合影方法第一实施例的流程图。

在本实施例中，包括：

S101:生成合影模板。

S102:根据所述合影模板的特征信息接收用户的参与指令，确定参与用户；所述特征信息中包括所述合影模板中容纳的用户数量。

S103:获取所述参与用户的图像，将所述参与用户的图像中的面部区域作为用户面部图层。

S104:以直播画面为背景将所述直播画面、所述合影模板和所述用户面部图层进行动态合成，生成第一合影图像。

在本发明中，主持端即为在线直播的主持人端或受控制的计算机平台服务器端，而观看直播的用户为分布在其它位置的用户端。这里的服务器端和用户端通常为常用的PC设备或移动设备。如桌面电脑、平板电脑或手机终端等。

在实施本发明时，首先由主持人或控制人发起合影请求。在服务器端上存储有若干合影模板，由服务器端根据指令确定该模板，并在直播界面上生成相应的合影模板，参见图2。当然，如果权限允许，也可以由用户端发起合影请求并选择生成相应的合影模板。优选的，合影模板通过flash播放器加载模板到直播画面上。

在这里，每一个合影模板都会有相应的特征信息。在特征信息中包括有：合影模板适用的互动合影人员数量上限、互动合影用户头像的拼接位置、拼接位置的图像缺口区域尺寸信息，还可以包括合影模板的尺寸、在屏幕中的摆放位置等信息。在生成合影模板后，还可以基于该合影模板的特征信息确定参与互动合影的用户数量上限。例如，可以选择用户双人合影模板，两个用户分别设立在主持人的左右两边。则此模板的特征信息中记录有参与互动用户人数上限为2。

此时，可以通过直播系统在当前观看直播的用户中选择用户，也可以由主持人发起由观看的用户申请参与互动。例如，合影模板中为用户双人合影模板，则服务器端在直播画面上提供两个参与界面(如窗口或按钮)。希望参与合影的用户可以点击该界面发出“参与合影”指令。用户端将该指令发送到服务器端。这里可以选择不超过互动用户人数上限的用户数量。如可以选择1个用户，也可以选择2个用户。现实中，由于参与的用户较多，可以使用竞争机制来确定参与合影的用户。例如：将参与界面(窗口或按钮)设置为“抢合影”，则将收到的第一个用户端对应的用户作为合影参与用户。

在确定参与的用户后，获取所述参与用户的图像，将所述参与用户的图像中的面部区域作为用户面部图层。具体的，参见图3，控制所述参与用户的摄像头获取用户图像或接收所述参与用户上传的图像。这里所说的获取到的参与用户图像，可以为通过控制参与用户的摄像头捕获用户的面部图像。若用户不具备摄像头等工具，还可以接收参与用户上传的面部图像作为用户图像。

由于获取的用户图像用于合影，因此还需要在用户图像中识别出用户的面部区域。识别面部特征的技术可以使用人体面部特征进行判断，例如，现有的面部比例匹配方法等。

另外，获取的用户图像可能存在不同的尺寸，例如因用户与摄像头的距离远近造成获取到的用户面部图像过大小或过小等。因此，还需要针对不同的用户图像进行面积尺寸调整，参见图4。例如，根据所述合影模板缺口区域的大小调整获取到的所述参与用户的面部区域大小，使其能够匹配相应的拼接尺寸。这种方式可以通过计算机进行自动匹配，也可以提供人工手动调整功能，以使得匹配效果达到最佳。将匹配后的所述面部区域作为所述用户面部图层。

在得到以上素材后，以直播画面为背景将直播画面、所述合影模板和获取到的所述用户面部图层进行动态合成。具体的，将所述直播画面作为背景图像。这里的直播画面可以为当前直播画面的截屏，也可以为动态的直播画面。之后，将选择的合影模板叠加放置在所述背景图像的上级图层上。这里可以将不同的画面分成不同的层级，每个级别之间可以基于上级层级遮挡下级层级的关系进行叠加。例如，将背景图像作为最下层级，用户面部图层作为中间层级，合影模板作为最上层级。也可以将背景图像作为最下层级，合影模板作为中间层级，用户面部图层作为最上层级。

之后，根据合影模板的特征信息生成合影模板与用户图像的拼接位置，即获取到合影模板的缺口位置信息，将所述用户图像叠加放置在拼接位置。

最后，截取所述背景图像、合影模板和用户面部图层的叠加图像作为第一合影图像，参见图5。

另外，为了更好的提高用户的体验，还可以由服务器将生成的第一合影图像发送给用户端，使得用户可以存储该合影文件。

通过使用以上方法，可以实现多用户与直播人员的动态合影，丰富了直播过程中的互动内容，提高了用户的参与体验。

以上为本发明提供的一种特效显示方法，基于此原理，本发明还提供了一种特效显示装置。

参见图2，该图为本发明提供的一种在线合影系统第一实施例的原理框图。在本实施例中，包括：模板生成单元10、参与用户选择单元20、面部图层获取单元30和合影生成单元40。

所述模板生成单元10，用于生成合影模板。

所述参与用户选择单元20，用于根据所述合影模板的特征信息接收用户的参与指令，确定参与用户；所述特征信息中包括所述合影模板中容纳的用户数量。

所述面部图层获取单元30，用于获取所述参与用户的图像，将所述参与用户的图像中的面部区域作为用户面部图层。

所述合影生成单元40，用于以直播画面为背景将所述直播画面、所述合影模板和所述用户面部图层进行动态合成，生成第一合影图像。

在本发明中，服务器端即为在线直播的主持人端或受控制的计算机平台服务器端，而观看直播的用户为分布在其它位置的用户端。这里的服务器端和用户端通常为常用的PC设备或移动设备。如桌面电脑、平板电脑或手机终端等。

在实施本发明时，首先由主持人或控制人发起合影请求。在服务器端上存储有若干合影模板，由服务器端根据指令确定该模板，并由模板生成单元10在直播界面上生成相应的合影模板。当然，如果权限允许，也可以由用户端发起合影请求并选择生成相应的合影模板。优选的，合影模板通过flash播放器加载模板到直播画面上。

之后，参与用户选择单元20根据所述合影模板的特征信息接收用户的参与指令，确定参与用户；所述特征信息中包括所述合影模板中容纳的用户数量。在这里，每一个合影模板都会有相应的特征信息。在特征信息中包括有：合影模板适用的互动合影人员数量上限、互动合影用户头像的拼接位置、拼接位置的图像缺口区域尺寸信息，还可以包括合影模板的尺寸、在屏幕中的摆放位置等信息。在生成合影模板后，参与数量计算子单元可以基于该合影模板的特征信息确定参与互动合影的用户数量上限。例如，可以选择用户双人合影模板，两个用户分别设立在主持人的左右两边。则此模板的特征信息中记录有参与互动用户人数上限为2。

此时，可以通过直播系统在当前观看直播的用户中选择用户，也可以由主持人发起由观看的用户申请参与互动，即通过使用参与界面生成子单元来生成参与界面。例如，合影模板中为用户双人合影模板，则服务器端在直播画面上提供两个参与界面(如窗口或按钮)。希望参与合影的用户可以点击该界面发出“参与合影”指令。用户端将该指令发送到服务器端。这里由参与用户确定子单元选择不超过互动用户人数上限的用户数量。如可以选择1个用户，也可以选择2个用户。现实中，由于参与的用户较多，可以使用竞争机制来确定参与合影的用户。例如：将参与界面(窗口或按钮)设置为“抢合影”，则将收到的第一个用户端对应的用户作为合影参与用户。

在确定参与的用户后，由面部图层获取单元30获取所述参与用户的图像，将所述参与用户的图像中的面部区域作为用户面部图层。具体的，图像获取子单元控制所述参与用户的摄像头获取用户图像或接收所述参与用户上传的图像。这里所说的获取到的参与用户图像，可以为通过控制参与用户的摄像头捕获用户的面部图像。若用户不具备摄像头等工具，还可以接收参与用户上传的面部图像作为用户图像。

由于获取的用户图像用于合影，因此还需要使用面部识别子单元在用户图像中识别出用户的面部区域。识别面部特征的技术可以使用人体面部特征进行判断，例如，现有的面部比例匹配方法等。

另外，获取的用户图像可能存在不同的尺寸，例如因用户与摄像头的距离远近造成获取到的用户面部图像过大小或过小等。因此，还需要尺寸匹配子单元针对不同的用户图像进行面积尺寸调整。例如，根据所述合影模板缺口区域的大小调整获取到的所述参与用户的面部区域大小，使其能够匹配相应的拼接尺寸。这种方式可以通过计算机进行自动匹配，也可以提供人工手动调整功能，以使得匹配效果达到最佳。将匹配后的所述面部区域作为所述用户面部图层。

在得到以上素材后，合影生成单元以直播画面为背景将所述直播画面、所述合影模板和所述用户面部图层进行动态合成，生成第一合影图像。首先，图像叠加处理子单元以直播画面为背景将直播画面、所述合影模板和获取到的所述用户面部图层进行动态合成。具体的，将所述直播画面作为背景图像。这里的直播画面可以为当前直播画面的截屏，也可以为动态的直播画面。之后，将选择的合影模板叠加放置在所述背景图像的上级图层上。这里可以将不同的画面分成不同的层级，每个级别之间可以基于上级层级遮挡下级层级的关系进行叠加。例如，将背景图像作为最下层级，用户面部图层作为中间层级，合影模板作为最上层级。也可以将背景图像作为最下层级，合影模板作为中间层级，用户面部图层作为最上层级。

之后，图像拼接子单元根据合影模板的特征信息生成合影模板与用户面部图层的拼接位置，即获取到合影模板的缺口位置信息，将所述用户面部图层叠加放置在拼接位置。

最后，合成影像生成子单元截取所述背景图像、合影模板和用户面部图层的叠加图像作为第一合影图像。

另外，为了更好的提高用户的体验，在服务器端还可以包括：图像推送单元，将生成的第一合影图像发送给用户端，使得用户可以存储该合影文件。

通过使用以上系统，可以在网络直播时为观众提供更加丰富美观的互动方式，增加了直播时的视觉效果，提高了用户的使用体验。

以上所述，仅是本发明的较佳实施例而已，并非对本发明作任何形式上的限制。虽然本发明已以较佳实施例揭露如上，然而并非用以限定本发明。任何熟悉本领域的技术人员，在不脱离本发明技术方案范围情况下，都可利用上述揭示的方法和技术内容对本发明技术方案做出许多可能的变动和修饰，或修改为等同变化的等效实施例。因此，凡是未脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所做的任何简单修改、等同变化及修饰，均仍属于本发明技术方案保护的范围内。

Claims (8)

1.一种在线合影方法，其特征在于，包括：

在服务器端上存储有若干合影模板，由所述服务器端根据主持人或控制人发起合影请求的指令确定合影模板，并在直播界面上生成相应的合影模板；

通过直播系统在当前观看直播的用户中选择用户，或者由主持人发起以便观看直播的用户申请参与互动，并根据所述合影模板的特征信息接收用户的参与指令，确定参与用户；所述特征信息中包括所述合影模板中容纳的用户数量，其中，所述参与用户仅包括观众；

服务器端获取所述参与用户的图像，将所述参与用户的图像中的面部区域作为用户面部图层；

服务器端以直播画面为背景将所述直播画面、所述合影模板和所述用户面部图层进行动态合成，生成第一合影图像；

其中，所述根据所述合影模板的特征信息接收用户的参与指令，确定参与用户；所述特征信息中包括所述合影模板中容纳的用户数量，具体为：

根据所述合影模板的特征信息确定互动用户数量；

根据所述互动用户数量生成参与界面；

接收用户点击参与界面发出的参与指令，选择不超过互动用户数量的用户，作为参与用户。

2.根据权利要求1所述的方法，其特征在于，所述获取所述参与用户的图像，将所述参与用户的图像中的面部区域作为用户面部图层，具体为：

控制所述参与用户的摄像头获取用户图像或接收所述参与用户上传的图像；

根据人体面部特征，识别出所述参与用户的面部区域；

将所述面部区域与所述合影模板的缺口区域进行面积尺寸匹配；

将匹配后的所述面部区域作为所述用户面部图层。

3.根据权利要求1所述的方法，其特征在于，以直播画面为背景将所述直播画面、所述合影模板和所述用户面部图层进行动态合成，具体为：

将所述直播画面作为背景图像；

将所述合影模板叠加放置在所述背景图像的上级图层上；

将获取到的所述用户面部图层叠加放置在所述背景图像的上级图层且在所述合影模板的下层图层；

根据合影模板的特征信息生成合影模板与用户面部图层的拼接位置；

将所述用户面部图层叠加放置在所述拼接位置；

截取所述背景图像、合影模板和用户面部图层的叠加图像作为第一合影图像。

4.根据权利要求1所述的方法，其特征在于，还包括：

将所述第一合影图像发送给所述参与用户。

5.一种在线合影系统，其特征在于，包括：模板生成单元、参与用户选择单元、面部图层获取单元和合影生成单元；

所述模板生成单元，用于在服务器端上存储有若干合影模板，由所述服务器端根据主持人或控制人发起合影请求的指令确定合影模板，并在直播界面上生成相应的合影模板；

所述参与用户选择单元，用于通过直播系统在当前观看直播的用户中选择用户，或者由主持人发起以便观看直播的用户申请参与互动，并根据所述合影模板的特征信息接收用户的参与指令，确定参与用户；所述特征信息中包括所述合影模板中容纳的用户数量，其中，所述参与用户仅包括观众；

所述面部图层获取单元，用于获取所述参与用户的图像，将所述参与用户的图像中的面部区域作为用户面部图层；

所述合影生成单元，用于以直播画面为背景将所述直播画面、所述合影模板和所述用户面部图层进行动态合成，生成第一合影图像；

其中，所述参与用户选择单元，包括：参与数量计算子单元、参与界面生成子单元和参与用户确定子单元；

所述参与数量计算子单元，用于根据所述合影模板的特征信息确定互动用户数量；

所述参与界面生成子单元，用于根据所述互动用户数量生成参与界面；

所述参与用户确定子单元，用于接收用户点击参与界面发出的参与指令，选择不超过互动用户数量的用户，作为参与用户。

6.根据权利要求5所述的系统，其特征在于，所述面部图层获取单元，包括：图像获取子单元、面部识别子单元、尺寸匹配子单元和用户面部图层生成子单元；

所述图像获取子单元，用于控制所述参与用户的摄像头获取用户图像或接收所述参与用户上传的图像；

所述面部识别子单元，用于根据人体面部特征，识别出所述参与用户的面部区域；

所述尺寸匹配子单元，用于将所述面部区域与所述合影模板的缺口区域进行面积尺寸匹配；

所述用户面部图层生成子单元，用于将匹配后的所述面部区域作为所述用户面部图层。

7.根据权利要求5所述的系统，其特征在于，所述合影生成单元，包括：图像叠加处理子单元、图像拼接子单元和合成影像生成子单元；

所述图像叠加处理子单元，用于将所述直播画面作为背景图像；将所述合影模板叠加放置在所述背景图像的上级图层上；将获取到的所述用户面部图层叠加放置在所述背景图像的上级图层且在所述合影模板的下层图层；

所述图像拼接子单元，用于根据合影模板的特征信息生成合影模板与用户面部图层的拼接位置，将所述用户面部图层叠加放置在所述拼接位置；

所述合成影像生成子单元，用于截取所述背景图像、合影模板和用户图像的叠加图像作为第一合影图像。

8.根据权利要求5所述的系统，其特征在于，还包括：图像推送单元；

所述图像推送单元，用于将所述第一合影图像发送给所述参与用户。