CN109040647A - 媒体信息合成方法、装置、设备及存储介质 - Google Patents

媒体信息合成方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN109040647A
CN109040647A CN201811013975.2A CN201811013975A CN109040647A CN 109040647 A CN109040647 A CN 109040647A CN 201811013975 A CN201811013975 A CN 201811013975A CN 109040647 A CN109040647 A CN 109040647A
Authority
CN
China
Prior art keywords
media information
user
client
synthesis
video calling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811013975.2A
Other languages
English (en)
Inventor
陈剑峰
宋晨枫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Xiaodu Technology Co Ltd
Original Assignee
Beijing Fish In Home Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Fish In Home Technology Co Ltd filed Critical Beijing Fish In Home Technology Co Ltd
Priority to CN201811013975.2A priority Critical patent/CN109040647A/zh
Publication of CN109040647A publication Critical patent/CN109040647A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明实施例公开了一种媒体信息合成方法、装置、设备及存储介质。所述方法包括:服务器如果接收到视频通话组中的一个客户端发送的媒体信息合成指令,则将所述媒体信息合成指令转发至所述视频通话组中的其他客户端,所述媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;所述用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;所述服务器如果确定接收到所述视频通话组中至少两个参与客户端的用户媒体信息,则根据接收的所述用户媒体信息进行媒体信息合成,生成合成媒体信息。通过本发明的技术方案,能够提高媒体信息合成效率,简化视频通话时使用媒体信息合成功能的过程,提高用户体验。

Description

媒体信息合成方法、装置、设备及存储介质
技术领域
本发明实施例涉及信息处理技术,尤其涉及一种媒体信息合成方法、装置、设备及存储介质。
背景技术
随着媒体信息处理技术的不断发展,也越来越多地被使用到各个软件中,为用户带来了个性化服务享受。
目前,大多数的媒体信息合成功能一般只有专门的媒体信息合成软件才具有,因此,若用户想在进行视频通话的时候采集视频通话组里的所有成员的信息,并进行合成,需要先手动进行采集,并手动添加至专门的媒体信息合成软件中进行合成。例如,用户若想在进行视频通话的时候对视频通话组里的所有成员进行图像抓拍,并对抓拍的图像进行图像合成,只能通过人为手动进行分别截图并保存在本地后,手动线下将截图添加至专门的图像合成软件进行图像合成。又如,用户若想在进行视频通话的时候对视频通话组里的所有成员进行音频或视频录制,并对录制的音频或视频进行合成,只能通过人为手动分别进行录制并保存在本地后,手动线下将录制的音频或视频添加至专门的音视频合成软件进行合成。
现有技术中采用的媒体信息合成方式不仅效率低,而且使用过程繁琐,降低了用户体验。
发明内容
本发明实施例提供一种媒体信息合成方法、装置、设备及存储介质,以实现提高媒体信息合成效率,简化视频通话时使用媒体信息合成功能的过程,提高用户体验。
第一方面,本发明实施例提供了一种媒体信息合成方法,包括:
服务器如果接收到视频通话组中的一个客户端发送的媒体信息合成指令,则将所述媒体信息合成指令转发至所述视频通话组中的其他客户端,所述媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;
所述用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;
所述服务器如果确定接收到所述视频通话组中至少两个参与客户端的用户媒体信息,则根据接收的所述用户媒体信息进行媒体信息合成,生成合成媒体信息。
第二方面,本发明实施例还提供了一种媒体信息合成方法,该方法包括:
客户端如果检测到本机用户发送的媒体信息合成指令,则将所述媒体信息合成指令发送至所在视频通话组中的其他客户端,所述媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;
所述用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;
所述客户端获取本机的用户媒体信息;
所述客户端如果确定获取到所述视频通话组中至少两个参与客户端的用户媒体信息,则根据获取的所述用户媒体信息进行媒体信息合成,生成合成媒体信息。
第三方面,本发明实施例还提供了一种媒体信息合成装置,配置于服务器,该装置包括:
指令转发模块,用于如果接收到视频通话组中的一个客户端发送的媒体信息合成指令,则将所述媒体信息合成指令转发至所述视频通话组中的其他客户端,所述媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;
所述用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;
信息生成模块,用于如果确定接收到所述视频通话组中至少两个参与客户端的用户媒体信息,则根据接收的所述用户媒体信息进行媒体信息合成,生成合成媒体信息。
第四方面,本发明实施例还提供了一种媒体信息合成装置,配置于客户端,该装置包括:
指令发送模块,用于如果检测到本机用户发送的媒体信息合成指令,则将所述媒体信息合成指令发送至所在视频通话组中的其他客户端,所述媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;
所述用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;
信息获取模块,用于获取本机的用户媒体信息;
信息合成模块,用于如果确定获取到所述视频通话组中至少两个参与客户端的用户媒体信息,则根据获取的所述用户媒体信息进行媒体信息合成,生成合成媒体信息。
第五方面,本发明实施例还提供了一种计算机设备,该设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本发明实施例中任一所述的媒体信息合成方法。
本发明实施例通过服务器接收视频通话组中的一个客户端发送的媒体信息合成指令,并将媒体信息合成指令转发至视频通话组中的其他客户端,以使接收到的客户端获取用户媒体信息并反馈,当服务器确定接收到视频通话组中至少两个参与客户端的用户媒体信息时,根据接收的用户媒体信息进行媒体信息合成,生成合成媒体信息,利用一键完成媒体信息获取和媒体信息合成两个步骤,解决了现有技术中进行视频通话时,因需要手动获取媒体信息并手动添加至专门的媒体信息合成软件才能进行媒体信息合成,而导致的合成效率低、使用过程繁琐、用户体验不佳的问题,实现了提高媒体信息合成效率,简化视频通话时使用媒体信息合成功能的过程,提高用户体验的效果。
附图说明
图1a是本发明实施例一提供的一种媒体信息合成方法的流程示意图;
图1b是本发明实施例一适用的一种图像合成实例的示意图;
图1c是本发明实施例一适用的一种图像合成实例的示意图;
图2是本发明实施例二提供的一种媒体信息合成方法的流程示意图;
图3是本发明实施例三提供的一种媒体信息合成装置的结构示意图;
图4是本发明实施例四提供的一种媒体信息合成装置的结构示意图;
图5是本发明实施例五提供的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1a为本发明实施例一提供的一种媒体信息合成方法的流程示意图。该方法可适用于视频通话过程中服务器对用户媒体信息进行合成的情况,该方法可以由媒体信息合成装置来执行,该装置可由硬件和/或软件组成,并一般可集成在服务器以及所有包含媒体信息合成功能的计算机设备中。具体包括如下:
S110、服务器如果接收到视频通话组中的一个客户端发送的媒体信息合成指令,则将媒体信息合成指令转发至视频通话组中的其他客户端,媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈。
本实施例中,视频通话组中可关联有至少两个客户端,每个客户端可以分别位于不同硬件设备中,例如手机、平板、计算机等,各客户端之间通过一个服务器进行连接,用户可在设备上通过账号和密码登录客户端,邀请其他客户端的用户,或被其他客户端的用户邀请,加入视频通话组,以进行视频通话。
其中,媒体信息合成指令可以是用户在客户端触发媒体信息合成功能按键时所生成的指令。当服务器接收到视频通话组中任一客户端发送的媒体信息合成指令时,将该媒体信息合成指令转发给该视频通话组中的其他客户端,以获取包括发送媒体信息合成指令以及接收该媒体信息合成指令在内的所有客户端所采集的用户媒体信息。
具体的,用户媒体信息可以是客户端在检测到媒体信息合成指令时通过设备上的摄像头采集的媒体信息。为了提高采集媒体信息的质量,可在检测到媒体信息合成指令时,在客户端当前的显示界面中进行倒计时提示,倒计时完毕时再进行媒体信息采集,为用户预留出调整拍照角度和拍照姿势的时间。
为了防止服务器同时接收到多个客户端发送的媒体信息合成指令,导致服务器合成功能不稳定,可在服务器接收到视频通话组中的一个客户端发送的媒体信息合成指令时,预设时间段内不再接收媒体信息合成指令,或者不响应预设时间段内接收到的其他媒体信息合成指令。
其中,用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频。以用户图像为例,视频通话组中一个客户端的用户触发了其客户端界面上显示的图像合成功能按键,则该客户端会生成图像合成指令并发送给服务器,服务器收到该图像合成指令后,会转发至视频通话组中的其他客户端,以获取包括发送图像合成指令以及接收该图像合成指令在内的所有客户端所采集的用户图像。
S120、服务器如果确定接收到视频通话组中至少两个参与客户端的用户媒体信息,则根据接收的用户媒体信息进行媒体信息合成,生成合成媒体信息。
本实施例中,视频通话组中的至少两个参与客户端可以是视频通话组中所有的客户端,也可以是参与媒体信息合成的客户端,也即发送媒体信息合成指令的客户端以及放开合成权限的客户端,具体的,用户可通过在客户端中设置合成权限,以当客户端收到服务器发送的媒体信息合成指令时根据该合成权限确定是否参与媒体信息合成。其中,参与客户端在生成或接收到媒体信息合成指令时,都会将采集的用户媒体信息发送至服务器,以通过服务器对各客户端的用户媒体信息进行媒体信息合成。
由于媒体信息合成过程是直接在服务器中完成的,因此,无需用户人工获取媒体信息并人工添加至第三方媒体信息处理软件中进行媒体信息合成,即可完成媒体信息合成,实现了一键完成媒体信息获取和媒体信息合成两个步骤,提高了媒体信息合成的效率,简化了视频通话时使用媒体信息合成功能的操作过程,提高了用户体验。
另外,若至少两个参与客户端是视频通话组中所有的客户端,为了避免由于网络波动导致的媒体信息数据丢失,服务器可以在等待预设时间以后若还未接收到剩余的用户媒体信息,则向这些用户媒体信息对应的客户端再次发送媒体信息合成指令,以重新获取媒体信息;也可以直接向发送媒体信息合成指令给服务器的客户端,反馈媒体信息合成失败信息,这两种处理方式均可,在此不作限定。
可选的,用户媒体信息包括用户图像,相应的,服务器根据接收的用户媒体信息进行媒体信息合成,生成合成媒体信息,包括:服务器获取视频通话组中目标客户端发送的第一图像合成参数,并根据第一图像合成参数对用户图像进行图像合成,生成合成图像;或者服务器确定与参与客户端的数量,和/或用户图像匹配的第二图像合成参数,并根据第二图像合成参数对用户图像进行图像合成,生成合成图像。
具体的,第一图像合成参数或第二图像合成参数,可以是用于对用户图像进行合成时所需的参数,例如参与合成的各用户图像在合成图像中的位置排布、尺寸大小、分辨率等参数,又如预设模板库中存储的模板所对应的模板参数,在此不作限定。
在本实施例的一种实施方式中,第一图像合成参数可以是视频通话组中任一客户端上用户自定义设置的图像合成参数,或用户从预设模板库中选择的图像合成模板,服务器可通过接收该客户端发送的第一图像合成参数,对所有的用户图像进行合成,进而生成合成图像。
在本实施例的另一种实施方式中,第二图像合成参数可以是服务器依据参与客户端的数量和/或用户图像自动匹配的图像合成参数,或图像合成模板。例如,服务器可根据参与客户端的数量或接收的用户图像数量选择具有三个图像放置区域的模板,服务器还可根据各用户图像的宽高比从选择的具有三个图像放置区域的所有模板中,进一步选择符合相应比例的模板,其中,用户图像中有两个宽高比为3:4,一个宽高比为4:3,则选择的模板中需具备有两个图像放置区域的宽高比为3:4,一个图像放置区域的宽高比为4:3,然后将各用户图像按比例进行缩小或者放大后分别放入相应的图像放置区域,进而生成合成图像。
可选的,在服务器根据接收的用户媒体信息进行媒体信息合成,生成合成媒体信息之后,还包括下述至少一项:服务器将合成媒体信息发送至视频通话组中的客户端;服务器将合成媒体信息发送至设定云端服务器;以及服务器通过设定社交账号将合成媒体信息分享到社交平台中。
在本实施例的一种实施方式中,服务器将合成媒体信息发送至视频通话组中的客户端,其中,视频通话组中的客户端可以是上述参与客户端,也可以是视频通话组中的所有客户端。将合成媒体信息发送至视频通话组中的客户端的好处在于,可以使参与视频通话的客户端直接获得该合成媒体信息,以免需要发起媒体信息合成的客户端的用户手动进行合成媒体信息的群发,浪费不必要的数据流量。
当然,服务器还可将合成媒体信息发送至设定的云端服务器,以存储该合成媒体信息,避免需要用户手动存储,减少操作过程。另外,服务器还可将合成媒体信息通过设定社交账号分享至社交平台,例如,服务器通过预先获取视频通话组中参与客户端上登录的账号信息,将合成媒体信息直接分享至各账号信息对应的朋友圈、话题圈等社交平台上,以便于用户进行获取。
本实施例的技术方案,通过服务器接收视频通话组中的一个客户端发送的媒体信息合成指令,并将媒体信息合成指令转发至视频通话组中的其他客户端,以使接收到的客户端获取用户媒体信息并反馈,当服务器确定接收到视频通话组中至少两个参与客户端的用户媒体信息时,根据接收的用户媒体信息进行媒体信息合成,生成合成媒体信息,利用一键完成媒体信息获取和媒体信息合成两个步骤,解决了现有技术中进行视频通话时,因需要手动获取媒体信息并手动添加至专门的媒体信息合成软件才能进行媒体信息合成,而导致的合成效率低、使用过程繁琐、用户体验不佳的问题,实现了提高媒体信息合成效率,简化视频通话时使用媒体信息合成功能的过程,提高用户体验的效果。
在上述各实施例的基础上,以用户图像为例,如图1b所示,视频通话组中包括第一用户11以及第一用户11所使用的第一客户端21,第二用户12以及第二用户12所使用的第二客户端22,第三用户13以及第三用户13所使用的第二客户端23。若第一用户11在其所使用的第一客户端21的显示界面中点击用户图像合成功能按键211,则可生成图像合成指令,并发送给服务器,从而使服务器将从各客户端上获取的用户图像进行合成,并将合成图像发送给各客户端进行显示,如图1c所示,显示在第一用户11所使用的第一客户端21、第二用户12所使用的第二客户端22以及第三用户13所使用的第二客户端23中。
实施例二
图2为本发明实施例二提供的一种媒体信息合成方法的流程示意图。该方法可适用于视频通话过程中客户端对用户媒体信息进行合成的情况,该方法可以由媒体信息合成装置来执行,该装置可由硬件和/或软件组成,并一般可集成在客户端以及所有包含媒体信息合成功能的计算机设备中。具体包括如下:
S210、客户端如果检测到本机用户发送的媒体信息合成指令,则将媒体信息合成指令发送至所在视频通话组中的其他客户端,媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈。
与上述实施例中各客户端通过服务器相连的方式不同,本实施例中,各客户端之间可进行点对点连接,也即,每个客户端都能够与其他客户端建立直接连接。具体的,当客户端建立视频通话组时,添加至该视频通话组的所有客户端之间均已建立直接连接,以进行视频通话。
可选的,用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频。以用户图像为例,当用户在客户端上点击图像合成功能按键时,可生成图像合成指令,也即客户端此时能够检测到本机用户发送的图像合成指令。该客户端将该图像合成指令发送至其所在视频通话组中的其他客户端,以获取接收到该图像合成指令的所有客户端所采集的用户图像。
S220、客户端获取本机的用户媒体信息。
在获取视频通话组内其他客户端的用户媒体信息的同时,还需要获取本机的用户媒体信息,其中,获取本机的用户媒体信息可以是客户端检测到本机用户发送的媒体信息合成指令后立即采集的媒体信息,也可以是客户端检测到本机用户发送的媒体信息合成指令后等待预设时间之后采集的媒体信息。
可选的,媒体信息合成指令中包括倒计时时间,倒计时时间为接收到媒体信息合成指令的客户端的拍照等待时间。
为了提高采集媒体信息的质量,可在检测到媒体信息合成指令时,在客户端当前的显示界面中进行倒计时提示,倒计时完毕时再进行媒体信息采集,为用户预留出调整拍照角度和拍照姿势的时间。示例性的,若倒计时时间为5秒,则在视频组内的各个客户端接收到该媒体信息合成指令时,开始倒计时5秒,当5秒倒计时结束时,通过各客户端所在设备的摄像头进行媒体信息采集,作为用户媒体信息。
相应的,客户端获取本机的用户媒体信息,包括:客户端在确定到达倒计时时间时,获取本机的用户媒体信息。
示例性的,除了视频组内其他客户端可在接收到媒体信息合成指令时进行倒计时拍摄,检测到用户发送的媒体信息合成指令的客户端,也可以在检测到媒体信息合成指令时,开启倒计时,当到达倒计时时间时,例如5秒倒计时结束时,通过客户端自身所在设备的摄像头进行媒体信息采集,以获取本机的用户媒体信息。
S230、客户端如果确定获取到视频通话组中至少两个参与客户端的用户媒体信息,则根据获取的用户媒体信息进行媒体信息合成,生成合成媒体信息。
本实施例中,视频通话组中的至少两个参与客户端可以是视频通话组中除本客户端以外的其他所有客户端,也可以是参与媒体信息合成的客户端,也即放开合成权限的客户端。其中,参与客户端在接收到媒体信息合成指令时,都会将采集的用户媒体信息反馈给发送该媒体信息合成指令的客户端,以通过该客户端对视频通话组中至少两个参与客户端的用户媒体信息进行媒体信息合成。
其中,媒体信息合成过程可以是直接在发起媒体信息合成的客户端中完成的,也可以是通过发起媒体信息合成的客户端所在设备中,安装的第三方媒体信息处理软件中合成的,在此不作限定。由于第三方媒体信息处理软件直接提供接口给发起媒体信息合成的客户端,可以直接从客户端中获取到视频通话组内各客户端的用户媒体信息,或者客户端本身就具有该媒体信息合成功能,因此,无需用户人工进行媒体信息截取,并人工添加至第三方媒体信息处理软件中进行媒体信息合成,即可完成媒体信息合成,实现了一键完成媒体信息获取和媒体信息合成两个步骤,提高了媒体信息合成的效率,简化了视频通话时使用媒体信息合成功能的操作过程,提高了用户体验。
可选的,在客户端根据获取的用户媒体信息进行媒体信息合成,生成合成媒体信息之后,还包括下述至少一项:客户端将合成媒体信息发送至视频通话组中的其他客户端;客户端将合成媒体信息发送至设定云端服务器;以及客户端通过设定社交账号将合成媒体信息分享到社交平台中。
在本实施例的一种实施方式中,客户端将合成媒体信息发送至视频通话组中的其他客户端,其中,视频通话组中的其他客户端可以是上述参与客户端,也可以是视频通话组中除本客户端之外的所有客户端。将合成媒体信息发送至视频通话组中其他客户端的好处在于,可以使参与视频通话的各个客户端均可获得该合成媒体信息,以免需要发起媒体信息合成的客户端的用户手动进行媒体信息群发,浪费不必要的数据流量。
当然,客户端还可将合成媒体信息发送至设定的云端服务器,以存储该合成媒体信息,避免需要用户手动存储,减少操作过程。另外,客户端还可将合成媒体信息通过设定社交账号分享至社交平台,例如,客户端通过预先获取视频通话组中包括本客户端在内的参与客户端上登录的账号信息,将合成媒体信息直接分享至各账号信息对应的朋友圈、话题圈等社交平台上,以便于用户进行获取。
可选的,在客户端将媒体信息合成指令发送至所在视频通话组中的其他客户端之后,还包括:接收至少两个参与客户端针对媒体信息合成指令反馈的确认参与响应。
示例性的,用户可通过在客户端中设置合成权限,以当客户端收到其他客户端发送的媒体信息合成指令时根据该合成权限确定是否反馈确认参与响应,从而决定是否参与媒体信息合成。这样设置的好处在于,用户可以选择是否参与媒体信息合成,提高用户参与的自主性。
相应的,客户端确定获取到视频通话组中至少两个参与客户端的用户媒体信息,包括:客户端如果接收到与确认参与响应匹配的全部客户端发送的用户媒体信息,则确定获取到视频通话组中至少两个参与客户端的用户媒体信息。
示例性的,若视频通话组中的参与客户端向本客户端反馈了确认参与响应,则在该在接收到媒体信息合成指令时,会将采集的用户媒体信息发送至发起媒体信息合成的客户端,以通过该客户端对各客户端的用户媒体信息进行媒体信息合成。例如,当本客户端确定接收到的确认参与响应的数量与接收到的用户媒体信息的数量相同,即可确定已接收到与确认参与响应匹配的全部客户端发送的用户媒体信息。
可选的,用户媒体信息包括用户图像;客户端根据获取的用户媒体信息进行媒体信息合成,生成合成媒体信息包括:客户端获取本机用户输入的图像合成参数;客户端根据获取的用户图像以及图像合成参数进行图像合成,生成合成图像。
具体的,图像合成参数可以是用于对用户图像进行合成时所需的参数,例如参与合成的各用户图像在合成图像中的位置排布、尺寸大小、分辨率等参数,又如预设模板库中存储的模板所对应的模板参数,在此不作限定。
在本实施例的一种实施方式中,发起图像合成的用户可以在所使用的客户端上输入合成图像中各用户图像的位置排布、尺寸大小、分辨率等参数图像合成参数,也可以从客户端内的预设模板库中选择相对应的图像合成模板,其中,客户端可根据用户图像的数量值为用户推荐相应的模板,以便用户进行选择,在获取到用户选择的模板或用户输入的参数后,对所有接收的用户图像进行合成,进而生成合成图像。
本实施例的技术方案,通过客户端检测到用户发送的媒体信息合成指令时,将该媒体信息合成指令发送至所在视频通话组中的其他客户端,以指示接收到的客户端获取用户媒体信息并反馈,同时,获取客户端本机的用户媒体信息,根据视频通话组中至少两个参与客户端的用户媒体信息进行媒体信息合成,生成合成媒体信息,从而实现了提高媒体信息合成效率,简化视频通话时使用媒体信息合成功能的过程,提高用户体验的效果。
在上述各实施例的基础上,以用户图像为例,参考图1b,视频通话组中包括第一用户11以及第一用户11所使用的第一客户端21,第二用户12以及第二用户12所使用的第二客户端22,第三用户13以及第三用户13所使用的第二客户端23。其中,第一客户端21上配置有第一摄像头211,第二客户端22上配置有第二摄像头221,第三客户端23上配置有第三摄像头231,各客户端可通过自身配置的摄像头采集用户图像。若第一用户11在其所使用的第一客户端21的显示界面中点击用户图像合成功能按键212,则可生成图像合成指令,并发送给第二客户端22和第三客户端23,以获取用户图像进行合成,并将合成图像发送给第二客户端22和第三客户端23进行显示,参考图1c,合成图像显示在第一用户11所使用的第一客户端21、第二用户12所使用的第二客户端22以及第三用户13所使用的第二客户端23中。
实施例三
图3为本发明实施例三提供的一种媒体信息合成装置的结构示意图。参考图3,媒体信息合成装置,配置于服务器,包括:指令转发模块310以及信息生成模块320,下面对各模块进行具体说明。
指令转发模块310,用于如果接收到视频通话组中的一个客户端发送的媒体信息合成指令,则将所述媒体信息合成指令转发至所述视频通话组中的其他客户端,所述媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;
所述用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;
信息生成模块320,用于如果确定接收到所述视频通话组中至少两个参与客户端的用户媒体信息,则根据接收的所述用户媒体信息进行媒体信息合成,生成合成媒体信息。
本实施例提供的媒体信息合成装置,通过服务器接收视频通话组中的一个客户端发送的媒体信息合成指令,并将媒体信息合成指令转发至视频通话组中的其他客户端,以使接收到的客户端获取用户媒体信息并反馈,当服务器确定接收到视频通话组中至少两个参与客户端的用户媒体信息时,根据接收的用户媒体信息进行媒体信息合成,生成合成媒体信息,利用一键完成媒体信息获取和媒体信息合成两个步骤,解决了现有技术中进行视频通话时,因需要手动获取媒体信息并手动添加至专门的媒体信息合成软件才能进行媒体信息合成,而导致的合成效率低、使用过程繁琐、用户体验不佳的问题,实现了提高媒体信息合成效率,简化视频通话时使用媒体信息合成功能的过程,提高用户体验的效果。
可选的,媒体信息合成装置还可以包括下述至少一项:
客户端发送模块,用于在根据接收的所述用户媒体信息进行媒体信息合成,生成合成媒体信息之后,将所述合成媒体信息发送至所述视频通话组中的客户端;
远端发送模块,用于将所述合成媒体信息发送至设定云端服务器;
平台分享模块,用于通过设定社交账号将所述合成媒体信息分享到社交平台中。
可选的,所述用户媒体信息包括用户图像;
信息生成模块320,具体还可以用于:
获取所述视频通话组中目标客户端发送的第一图像合成参数,并根据所述第一图像合成参数对所述用户图像进行图像合成,生成合成图像;或者
确定与所述参与客户端的数量,和/或所述用户图像匹配的第二图像合成参数,并根据所述第二图像合成参数对所述用户图像进行图像合成,生成合成图像。
上述产品可执行本发明任意实施例所提供的方法,具备执行方法相应的功能模块和有益效果。
实施例四
图4为本发明实施例四提供的一种媒体信息合成装置的结构示意图。参考图4,媒体信息合成装置,配置于客户端,包括:指令发送模块410、信息获取模块420以及信息合成模块430,下面对各模块进行具体说明。
指令发送模块410,用于如果检测到本机用户发送的媒体信息合成指令,则将所述媒体信息合成指令发送至所在视频通话组中的其他客户端,所述媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;
所述用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;
信息获取模块420,用于获取本机的用户媒体信息;
信息合成模块430,用于如果确定获取到所述视频通话组中至少两个参与客户端的用户媒体信息,则根据获取的所述用户媒体信息进行媒体信息合成,生成合成媒体信息。
本实施例提供的媒体信息合成装置,通过客户端检测到用户发送的媒体信息合成指令时,将该媒体信息合成指令发送至所在视频通话组中的其他客户端,以指示接收到的客户端获取用户媒体信息并反馈,同时,获取客户端本机的用户媒体信息,根据视频通话组中至少两个参与客户端的用户媒体信息进行媒体信息合成,生成合成媒体信息,从而实现了提高媒体信息合成效率,简化视频通话时使用媒体信息合成功能的过程,提高用户体验的效果。
可选的,媒体信息合成装置还可以包括下述至少一项:
信息发送模块,用于在根据获取的所述用户媒体信息进行媒体信息合成,生成合成媒体信息之后,将所述合成媒体信息发送至所述视频通话组中的其他客户端;
云端上传模块,用于将所述合成媒体信息发送至设定云端服务器;以及
信息分享模块,用于通过设定社交账号将所述合成媒体信息分享到社交平台中。
可选的,媒体信息合成装置还可以包括:
响应接收模块,用于在将所述媒体信息合成指令发送至所在视频通话组中的其他客户端之后,接收至少两个参与客户端针对所述媒体信息合成指令反馈的确认参与响应。
相应的,信息合成模块430,具体可以用于:
如果接收到与确认参与响应匹配的全部客户端发送的用户媒体信息,则确定获取到所述视频通话组中至少两个参与客户端的用户媒体信息。
可选的,所述用户媒体信息包括用户图像;
信息合成模块430,具体还可以用于:
获取本机用户输入的图像合成参数;
根据获取的所述用户图像以及所述图像合成参数进行图像合成,生成合成图像。
上述产品可执行本发明任意实施例所提供的方法,具备执行方法相应的功能模块和有益效果。
实施例五
图5为本发明实施例五提供的一种计算机设备的结构示意图,如图5所示,本实施例提供的一种计算机设备,包括:处理器51和存储器52。该计算机设备中的处理器可以是一个或多个,图5中以一个处理器51为例,所述计算机设备中的处理器51和存储器52可以通过总线或其他方式连接,图5中以通过总线连接为例。
本实施例中计算机设备的处理器51中集成了上述实施例提供的媒体信息合成装置。此外,该计算机设备中的存储器52作为一种计算机可读存储介质,可用于存储一个或多个程序,所述程序可以是软件程序、计算机可执行程序以及模块,如本发明实施例中媒体信息合成方法对应的程序指令/模块(例如,附图3所示的媒体信息合成装置中的模块,包括:指令转发模块310以及信息生成模块320,又如,附图4所示的媒体信息合成装置中的模块,包括:指令发送模块410、信息获取模块420以及信息合成模块430)。处理器51通过运行存储在存储器52中的软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述方法实施例中媒体信息合成方法。
存储器52可包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据设备的使用所创建的数据等。此外,存储器52可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器52可进一步包括相对于处理器51远程设置的存储器,这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
处理器51通过运行存储在存储器52中的程序,从而执行各种功能应用以及数据处理,实现例如本发明实施例一所提供的媒体信息合成方法:
也即,处理器51执行所述程序时实现:服务器如果接收到视频通话组中的一个客户端发送的媒体信息合成指令,则将媒体信息合成指令转发至视频通话组中的其他客户端,媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;服务器如果确定接收到视频通话组中至少两个参与客户端的用户媒体信息,则根据接收的用户媒体信息进行媒体信息合成,生成合成媒体信息。
又例如,本发明实施例二所提供的媒体信息合成方法:
也即,处理器51执行所述程序时实现:客户端如果检测到本机用户发送的媒体信息合成指令,则将媒体信息合成指令发送至所在视频通话组中的其他客户端,媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;客户端获取本机的用户媒体信息;客户端如果确定获取到视频通话组中至少两个参与客户端的用户媒体信息,则根据获取的用户媒体信息进行媒体信息合成,生成合成媒体信息。
实施例六
本发明实施例六还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被媒体信息合成装置执行时实现如本发明实施例一提供的媒体信息合成方法,该方法包括:服务器如果接收到视频通话组中的一个客户端发送的媒体信息合成指令,则将媒体信息合成指令转发至视频通话组中的其他客户端,媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;服务器如果确定接收到视频通话组中至少两个参与客户端的用户媒体信息,则根据接收的用户媒体信息进行媒体信息合成,生成合成媒体信息。
又例如,本发明实施例二所提供的媒体信息合成方法,该方法包括:客户端如果检测到本机用户发送的媒体信息合成指令,则将媒体信息合成指令发送至所在视频通话组中的其他客户端,媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;客户端获取本机的用户媒体信息;客户端如果确定获取到视频通话组中至少两个参与客户端的用户媒体信息,则根据获取的用户媒体信息进行媒体信息合成,生成合成媒体信息。
当然,本发明实施例所提供的一种计算机可读存储介质,其上存储的计算机程序被执行时不限于实现如上所述的方法操作,还可以实现本发明任意实施例所提供的媒体信息合成方法中的相关操作。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是,上述媒体信息合成装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种媒体信息合成方法,其特征在于,包括:
服务器如果接收到视频通话组中的一个客户端发送的媒体信息合成指令,则将所述媒体信息合成指令转发至所述视频通话组中的其他客户端,所述媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;
所述用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;
所述服务器如果确定接收到所述视频通话组中至少两个参与客户端的用户媒体信息,则根据接收的所述用户媒体信息进行媒体信息合成,生成合成媒体信息。
2.根据权利要求1所述的方法,其特征在于,在所述服务器根据接收的所述用户媒体信息进行媒体信息合成,生成合成媒体信息之后,还包括下述至少一项:
所述服务器将所述合成媒体信息发送至所述视频通话组中的客户端;
所述服务器将所述合成媒体信息发送至设定云端服务器;以及
所述服务器通过设定社交账号将所述合成媒体信息分享到社交平台中。
3.根据权利要求1或2所述的方法,其特征在于,所述用户媒体信息包括用户图像;
所述服务器根据接收的所述用户媒体信息进行媒体信息合成,生成合成媒体信息,包括:
所述服务器获取所述视频通话组中目标客户端发送的第一图像合成参数,并根据所述第一图像合成参数对所述用户图像进行图像合成,生成合成图像;或者
所述服务器确定与所述参与客户端的数量,和/或所述用户图像匹配的第二图像合成参数,并根据所述第二图像合成参数对所述用户图像进行图像合成,生成合成图像。
4.一种媒体信息合成方法,其特征在于,包括:
客户端如果检测到本机用户发送的媒体信息合成指令,则将所述媒体信息合成指令发送至所在视频通话组中的其他客户端,所述媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;
所述用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;
所述客户端获取本机的用户媒体信息;
所述客户端如果确定获取到所述视频通话组中至少两个参与客户端的用户媒体信息,则根据获取的所述用户媒体信息进行媒体信息合成,生成合成媒体信息。
5.根据权利要求4所述的方法,其特征在于,在所述客户端根据获取的所述用户媒体信息进行媒体信息合成,生成合成媒体信息之后,还包括下述至少一项:
所述客户端将所述合成媒体信息发送至所述视频通话组中的其他客户端;
所述客户端将所述合成媒体信息发送至设定云端服务器;以及
所述客户端通过设定社交账号将所述合成媒体信息分享到社交平台中。
6.根据权利要求4或5所述的方法,其特征在于,在所述客户端将所述媒体信息合成指令发送至所在视频通话组中的其他客户端之后,还包括:
接收至少两个参与客户端针对所述媒体信息合成指令反馈的确认参与响应;
所述客户端确定获取到所述视频通话组中至少两个参与客户端的用户媒体信息,包括:
所述客户端如果接收到与确认参与响应匹配的全部客户端发送的用户媒体信息,则确定获取到所述视频通话组中至少两个参与客户端的用户媒体信息。
7.根据权利要求4或5任一项所述的方法,其特征在于,所述用户媒体信息包括用户图像;
所述客户端根据获取的所述用户媒体信息进行媒体信息合成,生成合成媒体信息包括:
所述客户端获取本机用户输入的图像合成参数;
所述客户端根据获取的所述用户图像以及所述图像合成参数进行图像合成,生成合成图像。
8.一种媒体信息合成装置,配置于服务器,其特征在于,包括:
指令转发模块,用于如果接收到视频通话组中的一个客户端发送的媒体信息合成指令,则将所述媒体信息合成指令转发至所述视频通话组中的其他客户端,所述媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;
所述用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;
信息生成模块,用于如果确定接收到所述视频通话组中至少两个参与客户端的用户媒体信息,则根据接收的所述用户媒体信息进行媒体信息合成,生成合成媒体信息。
9.一种媒体信息合成装置,配置于客户端,其特征在于,包括:
指令发送模块,用于如果检测到本机用户发送的媒体信息合成指令,则将所述媒体信息合成指令发送至所在视频通话组中的其他客户端,所述媒体信息合成指令用于指示接收到的客户端获取用户媒体信息并反馈;
所述用户媒体信息包括下述至少一项:用户语音、用户图像以及用户视频;
信息获取模块,用于获取本机的用户媒体信息;
信息合成模块,用于如果确定获取到所述视频通话组中至少两个参与客户端的用户媒体信息,则根据获取的所述用户媒体信息进行媒体信息合成,生成合成媒体信息。
10.一种计算机设备,其特征在于,所述设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-3或权利要求4-7中任一所述的媒体信息合成方法。
CN201811013975.2A 2018-08-31 2018-08-31 媒体信息合成方法、装置、设备及存储介质 Pending CN109040647A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811013975.2A CN109040647A (zh) 2018-08-31 2018-08-31 媒体信息合成方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811013975.2A CN109040647A (zh) 2018-08-31 2018-08-31 媒体信息合成方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN109040647A true CN109040647A (zh) 2018-12-18

Family

ID=64622680

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811013975.2A Pending CN109040647A (zh) 2018-08-31 2018-08-31 媒体信息合成方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN109040647A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111669662A (zh) * 2020-07-03 2020-09-15 海信视像科技股份有限公司 显示设备、视频通话方法及服务器
WO2021098151A1 (zh) * 2019-11-21 2021-05-27 深圳壹账通智能科技有限公司 特效视频合成方法、装置、计算机设备和存储介质
WO2022001635A1 (zh) * 2020-07-03 2022-01-06 海信视像科技股份有限公司 一种显示设备及显示方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101489087A (zh) * 2008-01-18 2009-07-22 德信智能手机技术(北京)有限公司 一种视频通话过程中图像的合成录制方法
CN105007448A (zh) * 2015-07-03 2015-10-28 苏州科达科技股份有限公司 一种视频会议的录像系统及方法
WO2017019911A1 (en) * 2015-07-28 2017-02-02 Mersive Technologies, Inc. Virtual video driver bridge system for multi-source collaboration within a web conferencing system
CN107194907A (zh) * 2017-05-24 2017-09-22 维沃移动通信有限公司 一种截图合成方法及移动终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101489087A (zh) * 2008-01-18 2009-07-22 德信智能手机技术(北京)有限公司 一种视频通话过程中图像的合成录制方法
CN105007448A (zh) * 2015-07-03 2015-10-28 苏州科达科技股份有限公司 一种视频会议的录像系统及方法
WO2017019911A1 (en) * 2015-07-28 2017-02-02 Mersive Technologies, Inc. Virtual video driver bridge system for multi-source collaboration within a web conferencing system
CN107194907A (zh) * 2017-05-24 2017-09-22 维沃移动通信有限公司 一种截图合成方法及移动终端

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021098151A1 (zh) * 2019-11-21 2021-05-27 深圳壹账通智能科技有限公司 特效视频合成方法、装置、计算机设备和存储介质
CN111669662A (zh) * 2020-07-03 2020-09-15 海信视像科技股份有限公司 显示设备、视频通话方法及服务器
WO2022001635A1 (zh) * 2020-07-03 2022-01-06 海信视像科技股份有限公司 一种显示设备及显示方法

Similar Documents

Publication Publication Date Title
CN109788236B (zh) 音视频会议控制方法、装置、设备以及存储介质
EP1592198B1 (en) Systems and methods for real-time audio-visual communication and data collaboration
US10511643B2 (en) Managing user immersion levels and notifications of conference activities
US7487211B2 (en) Interactive, computer network-based video conferencing system and process
CN112235121B (zh) 一种线上会议实现方法、装置、设备及存储介质
EP2055088B1 (en) Interaction based on facial recognition of conference participants
CN109040647A (zh) 媒体信息合成方法、装置、设备及存储介质
CN108933912A (zh) 一种使用多个移动通信装置建立视频通话的方法
US20110110505A1 (en) Mixed media conferencing
CN111866434A (zh) 一种视频合拍的方法、视频剪辑的方法、装置及电子设备
TW200939775A (en) Techniques to generate a visual composition for a multimedia conference event
CN106301811A (zh) 实现多媒体会议的方法及装置
US20160021254A1 (en) Methods, systems, and apparatus for conducting a conference session
US20120062689A1 (en) Personalized virtual video meeting rooms
CN111246150A (zh) 视频会议的控制方法、系统、服务器和可读存储介质
CN114640805A (zh) 一种合拍方法、电子设备及服务器
JP2015015632A (ja) 議事録生成装置、議事録生成方法、議事録生成プログラムおよび通信会議システム
JP7543029B2 (ja) サーバーシステム及びサーバーシステムの制御方法
EP2677729B1 (en) Transmission management system, transmission system, method of managing data transmission, and data transmission management carrier means
JP6135782B2 (ja) 会議サーバ、会議システム、制御方法、プログラム
EP4324191A1 (en) Systems and methods for immersive scenes
JP2005190317A (ja) ネットワーク会議サーバ、ネットワーク会議方法及びそのプログラム
KR20070056747A (ko) 웹을 이용한 화상회의 개설 및 제어 장치 및 그 방법과이를 구현하기 위한 프로그램을 기록한 기록매체
KR102590578B1 (ko) 화상 회의 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
KR20200117571A (ko) 메신저 배경화면 데이터 공유 시스템 및 그 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20210512

Address after: 201210 4 / F, building 1, 701 Naxian Road, Shanghai pilot Free Trade Zone, Pudong New Area, Shanghai, China

Applicant after: Shanghai Xiaodu Technology Co.,Ltd.

Address before: 100012 3rd floor, building 10, No.18 ziyue Road, Chaolai science and Technology Industrial Park, No.1, Laiguangying middle street, Chaoyang District, Beijing

Applicant before: AINEMO Inc.

TA01 Transfer of patent application right
RJ01 Rejection of invention patent application after publication

Application publication date: 20181218

RJ01 Rejection of invention patent application after publication