CN114449355B - 一种直播互动的方法、装置、设备及存储介质 - Google Patents

一种直播互动的方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN114449355B
CN114449355B CN202210098919.3A CN202210098919A CN114449355B CN 114449355 B CN114449355 B CN 114449355B CN 202210098919 A CN202210098919 A CN 202210098919A CN 114449355 B CN114449355 B CN 114449355B
Authority
CN
China
Prior art keywords
target
background
target virtual
live broadcast
live
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210098919.3A
Other languages
English (en)
Other versions
CN114449355A (zh
Inventor
周文君
高嘉俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202210098919.3A priority Critical patent/CN114449355B/zh
Publication of CN114449355A publication Critical patent/CN114449355A/zh
Application granted granted Critical
Publication of CN114449355B publication Critical patent/CN114449355B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations

Abstract

本申请涉及计算机领域,特别涉及人工智能领域,提供了一种直播互动的方法、装置、设备及存储介质。该方法包括:呈现直播界面,该直播界面包含主播直播画面和虚拟资源列表,主播直播画面包括背景区域;响应于针对虚拟资源列表中目标虚拟资源的赠送操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。本申请实施例采用虚拟背景替换技术,将观看直播的目标对象赠送的目标虚拟资源,以目标虚拟背景的形式呈现在背景区域中,增加了直播间背景多样性,提高了直播对象与目标对象之间的互动性,有利于提高直播间的观看热度与目标对象对直播平台的使用黏性。

Description

一种直播互动的方法、装置、设备及存储介质
技术领域
本申请涉及计算机领域,特别涉及人工智能领域,提供了一种直播互动的方法、装置、设备及存储介质。
背景技术
随着互联网技术的发展,视频直播逐渐取代了语音直播,成为了新的直播方式。
直播对象可通过终端设备上的直播类应用程序进行直播,但直播效果受限于灯光、幕墙等因素的影响,直播对象不能频繁更换直播场所,导致直播间背景单一,容易使观看直播的观看对象产生视觉疲劳,进而降低直播间的观看热度与观看对象对直播平台的使用黏性。
发明内容
本申请实施例提供了一种直播互动的方法、装置、设备及存储介质,以解决直播间背景单一与互动性差的问题。
第一方面,本申请实施例提供了一种直播互动的方法,包括:
呈现直播界面,所述直播界面包含主播直播画面和虚拟资源列表,述主播直播画面包括背景区域;
响应于针对所述虚拟资源列表中目标虚拟资源的赠送操作,在所述背景区域显示根据所述目标虚拟资源确定的目标虚拟背景。
第二方面,本申请实施例提供了一种直播互动的方法,应用于直播服务器,包括:
基于第二终端发送的虚拟背景直播指令,对所述第二终端下发的原始直播数据流进行虚拟背景替换操作,生成背景区域显示为初始虚拟背景的目标直播数据流,并将所述目标直播数据流实时推送至接入直播间的各第一终端;
接收目标第一终端发送的目标虚拟资源,所述目标第一终端为:接入直播间的各所述第一终端中的任意一个;
根据所述目标虚拟资源确定目标虚拟背景,生成所述背景区域显示为所述目标虚拟背景的目标直播数据流,并将所述目标直播数据流实时推送至接入直播间的各所述第一终端。
第三方面,本申请实施例还提供了一种直播互动的装置,包括:
第一呈现单元,用于呈现直播界面,所述直播界面包含主播直播画面和虚拟资源列表,所述主播直播画面包括背景区域;
第二呈现单元,用于响应于针对所述虚拟资源列表中目标虚拟资源的赠送操作,在所述背景区域显示根据所述目标虚拟资源确定的目标虚拟背景。
可选的,所述第二呈现单元通过执行以下任意一种方式,在所述背景区域显示根据所述目标虚拟资源确定的目标虚拟背景:
响应于目标对象针对所述虚拟资源列表中所述目标虚拟资源的手势操作,在所述背景区域显示根据所述目标虚拟资源确定的目标虚拟背景;
响应于所述目标对象针对所述虚拟资源列表中所述目标虚拟资源的拖拽操作,在所述背景区域显示根据所述目标虚拟资源确定的目标虚拟背景。
可选的,所述第二呈现单元通过以下任意一种方式,在所述背景区域显示根据所述目标虚拟资源确定的目标虚拟背景:
响应于所述目标对象针对所述虚拟资源列表中所述目标虚拟资源的点击操作,在所述背景区域显示根据所述目标虚拟资源确定的目标虚拟背景;
响应于所述目标对象针对所述虚拟资源列表中所述目标虚拟资源的长按操作,在所述背景区域显示根据所述目标虚拟资源确定的目标虚拟背景;
响应于所述目标对象针对所述虚拟资源列表中所述目标虚拟资源的长按及滑动操作,在所述背景区域显示根据所述目标虚拟资源确定的目标虚拟背景。
可选的,所述第二呈现单元用于:
响应于所述目标对象将所述目标虚拟资源,自所述虚拟资源列表中拖拽至所述背景区域的操作,在所述背景区域显示根据所述目标虚拟资源确定的目标虚拟背景。
可选的,所述第二呈现单元用于:
将所述目标虚拟资源发送给直播服务器,以使所述直播服务器根据所述目标虚拟资源确定所述目标虚拟背景,并生成所述背景区域显示为所述目标虚拟背景的目标直播数据流,将所述目标直播数据流实时推送至接入直播间的目标第一终端;
播放所述背景区域显示为所述目标虚拟背景的所述目标直播数据流。
可选的,所述目标虚拟资源包括:基于当前直播场景设置的预设虚拟资源,和所述目标对象自行上传的自定义虚拟资源;
所述第二呈现单元通过执行以下任意一种方式,在所述背景区域显示根据所述目标虚拟资源确定的目标虚拟背景:
在所述背景区域显示根据所述预设虚拟资源确定的目标虚拟背景;
在所述背景区域显示根据所述自定义虚拟资源确定的目标虚拟背景。
可选的,所述目标虚拟资源的图像格式包括:静态图像格式与动态图像格式。
第四方面,本申请实施例还提供了一种直播互动的装置,包括:
第一处理单元,用于基于第二终端发送的虚拟背景直播指令,对所述第二终端下发的原始直播数据流进行虚拟背景替换操作,生成背景区域显示为初始虚拟背景的目标直播数据流,并将所述目标直播数据流实时推送至接入直播间的各第一终端;
第二处理单元,用于接收目标第一终端发送的目标虚拟资源,所述目标第一终端为:接入直播间的各所述第一终端中的任意一个;
根据所述目标虚拟资源确定目标虚拟背景,生成所述背景区域显示为所述目标虚拟背景的目标直播数据流,并将所述目标直播数据流实时推送至接入直播间的各所述第一终端。
可选的,所述第二处理单元通过执行以下任意一种方式,生成所述背景区域显示为所述目标虚拟背景的目标直播数据流:
使用所述目标虚拟背景替换所述原始直播数据流中的实际直播背景,得到所述背景区域显示为所述目标虚拟背景的目标直播数据流;
将所述目标虚拟背景叠加在所述实际直播背景的上方,得到所述背景区域显示为所述目标虚拟背景的目标直播数据流。
可选的,所述使第二处理单元用于:
从收到所述目标虚拟资源的原始直播数据流中实时截取多个目标帧,其中,每截取一个目标帧,对所述一个目标帧进行人像抠图,获得显示在所述背景区域的实际直播背景,并使用所述目标虚拟背景替换所述实际直播背景,获得所述背景区域显示为所述目标虚拟背景的主播直播画面。
可选的,所述第二处理单元用于:
从收到所述目标虚拟资源的原始直播数据流中实时截取多个目标帧,其中,每截取一个目标帧,对所述一个目标帧进行人像抠图,获得显示在所述背景区域的实际直播背景,将所述目标虚拟背景叠加在所述实际直播背景的上方,以遮挡部分或全部的所述实际直播背景,获得所述背景区域显示为所述目标虚拟背景的主播直播画面。
可选的,所述第二处理单元通过执行以下任意一种方式,将所述目标虚拟背景叠加在所述实际直播背景的上方:
调整所述目标虚拟背景的透明度,并将调整后的目标虚拟背景叠加在所述实际直播背景的上方;
调整所述目标虚拟背景的图像尺寸,并将调整后的目标虚拟背景叠加在所述实际直播背景的任意位置上。
可选的,所述第二处理单元针对所述目标虚拟资源采用以下任意一种方式,获得所述目标虚拟背景:
当目标虚拟资源的图像格式为静态图像格式时,按照直播间的画面尺寸调整所述目标虚拟资源的图像尺寸,并将调整后的目标虚拟资源确定为所述目标虚拟背景;
当所述目标虚拟资源的图像格式为动态图像格式时,将所述目标虚拟资源解码为多张静态图像格式的目标虚拟子资源,并按照直播间的画面尺寸调整各目标虚拟子资源的图像尺寸,将调整后的各目标虚拟子资源确定为所述目标虚拟背景。
第五方面,本申请实施例还提供了一种计算机设备,包括处理器和存储器,其中,所述存储器存储有程序代码,当所述程序代码被所述处理器执行时,使得所述处理器执行上述任意一种直播互动的方法的步骤。
第六方面,本申请实施例还提供了一种计算机可读存储介质,其包括程序代码,当所述程序代码在计算机设备上运行时,所述程序代码用于使所述计算机设备执行上述任意一种直播互动的方法的步骤。
第七方面,本申请实施例还提供了一种计算机程序产品,包括计算机指令,所述计算机指令被处理器执行上述任意一种直播互动的方法的步骤。
本申请有益效果如下:
本申请实施例提供了一种直播互动的方法、装置、设备及存储介质,该方法包括:呈现直播界面,该直播界面包含主播直播画面和虚拟资源列表,主播直播画面包括背景区域;响应于针对虚拟资源列表中目标虚拟资源的赠送操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。本申请实施例采用虚拟背景替换技术,将观看直播的目标对象赠送的目标虚拟资源,以目标虚拟背景的形式呈现在背景区域中,灵活、有趣地直播间背景替换方案,不仅增加了直播间背景多样性,还提升了直播过程中的趣味性,以及直播对象与目标对象之间的互动性,实现了更为丰富的互动场景,有利于提高直播间的观看热度与目标对象对直播平台的使用黏性。
本申请的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本申请而了解。本申请的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1为本申请实施例中一种应用场景的一个可选的示意图;
图2a为本申请实施例提供的在目标第一终端上进行直播互动的流程示意图;
图2b为本申请实施例提供的第一种直播界面示意图;
图2c为本申请实施例提供的第二种直播界面示意图;
图2d为本申请实施例提供的自定义虚拟资源的设置页面示意图;
图2e为本申请实施例提供的第二种赠送目标虚拟资源的操作示意图;
图2f为本申请实施例提供的在背景区域显示目标虚拟背景的直播界面示意图;
图3a为本申请实施例提供的在直播服务器上进行直播互动的流程示意图;
图3b为本申请实施例提供的使用人体检测模型获得的人像区域;
图3c为本申请实施例提供的使用人像抠图算法获得的目标人像图像;
图4a为本申请实施例提供的生成包含目标虚拟背景的目标直播数据流的逻辑示意图;
图4b为本申请实施例提供的直播互动方法的整体流程示意图;
图5为本申请实施例提供的在游戏直播时,使用上述方法进行直播互动的流程示意图;
图6为本申请实施例提供的在唱歌直播时,使用上述方法进行直播互动的流程示意图;
图7为本申请实施例提供的一种应用于目标观看客户端的直播互动的装置的结构示意图;
图8为本申请实施例提供的一种应用于直播服务器的直播互动的装置的结构示意图;
图9为本申请实施例中提供的一种计算机设备的组成结构示意图;
图10为本申请实施例中的一个计算装置的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请技术方案的一部分实施例,而不是全部的实施例。基于本申请文件中记载的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请技术方案保护的范围。
以下对本申请实施例中的部分用语进行解释说明,以便于本领域技术人员理解。
1、人工智能(Artificial Intelligence,AI):
人工智能是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说,人工智能是计算机科学的一个综合技术,它企图了解智能的实质,并生产出一种新的能以人类智能相似的方式做出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法,使机器具有感知、推理与决策的功能。
人工智能技术是一门综合学科,涉及领域广泛,既有硬件层面的技术也有软件层面的技术。人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术;人工智能软件技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。随着人工智能技术研究和进步,人工智能在多个领域展开研究和应用,例如常见的智能家居、智能客服、虚拟助理、智能音箱、智能营销、无人驾驶、自动驾驶、机器人、智能医疗等,相信随着技术的发展,人工智能将在更多的领域得到应用,并发挥越来越重要的价值。
2、深度学习:
机器学习是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能。
机器学习是人工智能的核心,是使计算机具有智能的根本途径,那么深度学习则是机器学习的核心,是实现机器学习的一种技术。机器学习通常包括深度学习、强化学习、迁移学习、归纳学习等技术,深度学习则包括卷积神经网络(Convolutional NeuralNetworks,CNN)、深度置信网络、递归神经网络、自动编码器、生成对抗网络等技术。
3、直播间:原本是指电台、电视台向观众直播节目的房间,后衍生为网上直播节目的称谓。现在常指网络互动直播,是一种社交和商业的方式。
主播(即直播对象)使用电脑或手机同步直播自己正在做的事情,观众(即观看对象)通过网站或直播类应用程序观看直播,而且,观众还可以对喜欢的主播或直播内容进行打赏(如,金钱打赏、礼物打赏、道具打赏等),以激励主播创作出更好的作品,进而提高直播间的观看热度和观众对直播平台的使用黏性,提高直播平台的使用留存率。
4、虚拟资源:指的是直播间为观众提供的虚拟礼物、虚拟红包等资源,观众可通过选择相应的虚拟资源,对喜欢的主播或直播内容进行打赏,以激励主播创作出更好的作品,进而提高直播间的观看热度和观众对直播平台的使用黏性,提高直播平台的使用留存率。
下面对本申请实施例的设计思想进行简要介绍:
随着互联网技术的发展,视频直播逐渐取代了语音直播,成为了新的直播方式。
直播对象可通过终端设备上的直播类应用程序进行直播,但直播效果受限于灯光、幕墙等因素的影响,直播对象不能频繁更换直播场所,导致直播间背景单一,容易使观看直播的观看对象产生视觉疲劳,进而降低直播间的观看热度与观看对象对直播平台的使用黏性。
为了解决上述相关技术中存在的技术问题,本申请实施例提出了一种直播互动的方法。该方法包括:
呈现直播界面,该直播界面包含主播直播画面和虚拟资源列表,主播直播画面由主播账号提供,主播直播画面包括背景区域;响应于针对虚拟资源列表中目标虚拟资源的赠送操作,将目标虚拟资源下发至主播账号,并在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
本申请实施例采用虚拟背景替换技术,将观看直播的目标对象赠送的目标虚拟资源,以目标虚拟背景的形式呈现在背景区域中,灵活、有趣地直播间背景替换方案,不仅增加了直播间背景多样性,还提升了直播过程中的趣味性,以及直播对象与目标对象之间的互动性,实现了更为丰富的互动场景,有利于提高直播间的观看热度与目标对象对直播平台的使用黏性。
以下结合说明书附图对本申请的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本申请,并不用于限定本申请,并且在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
本申请实施例可应用于各种场景,包括但不限于云技术、人工智能、智慧交通、辅助驾驶等。图1示出了其中一种应用场景的示意图,该应用场景下包括作为观众端的物理终端设备110、作为主播端的物理终端设备130和直播服务器140。其中,两台物理终端设备均通过有线网络或者无线网络,与直播服务器140之间建立通信连接。
本申请实施例中的物理终端设备110和物理终端设备130均为用户使用的计算机设备。该计算机设备可以是个人计算机、手机、平板电脑、笔记本、电子书阅读器、智能家居等设备。
本申请实施例中的服务器140,可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(Content DeliveryNetwork,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器,本申请在此不做限制。
直播对象在物理终端设备130的直播客户端的访问界面120上登录主播账号,并发起直播,向直播服务器140实时推送原始直播数据流,当直播对象开启直播客户端的虚拟背景直播功能时,直播客户端通过物理终端设备130向直播服务器140发送虚拟背景直播指令;
直播服务器140接收直播客户端发送的虚拟背景直播指令,生成背景区域显示为初始虚拟背景的目标直播数据流,并将目标直播数据流实时推送至接入直播间的各第一终端;
目标对象通过物理终端设备110上运行的目标观看客户端观看直播,采用赠送目标虚拟资源的方式,向喜欢的直播对象或直播内容进行打赏,以激励对方创作出更好的作品。而物理终端设备110响应于上述赠送操作,将目标虚拟资源一边下发给主播账号,另一边下发至直播服务器,并在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
接下来,参阅图2a示出的流程示意图,介绍在接入直播间的目标第一终端上进行直播互动的过程。
S201:目标第一终端呈现直播界面,该直播界面包含主播直播画面和虚拟资源列表,主播直播画面包括背景区域。
目标对象登录目标观看客户端,从目标观看客户端呈现的直播间推荐页面中选择想观看的直播间时,目标观看客户端会在设备屏幕上呈现该直播间对应的直播界面;或者,
目标对象登录目标观看客户端,自行搜索相关直播对象的主播账号或者直播内容,从目标观看客户端呈现的搜索结果反馈页面中选择想观看的直播间时,目标观看客户端会在设备屏幕上呈现该直播间对应的直播界面。
如图2b所示,在直播界面的左侧区域显示了直播间的评论区,评论区内滚动显示各位观看对象发送的实时评论,方便直播对象与各观看对象之间的沟通交流,以及各观看对象之间的沟通交流。在直播间的右侧区域显示了主播直播画面,该主播直播画面包含直播对象的人像图像,及其身后的直播间背景。若直播对象未开启虚拟背景直播功能,则直播间背景为实际直播背景;若直播对象已开启虚拟背景直播功能,则直播间背景为初始虚拟背景(如,绿幕背景)。
在主播直播画面的右下方区域显示了评论栏,目标对象(即其中一个观看对象)在评论栏中输入相应的评论,点击发送按钮或敲击回车按键,将该条评论发送至左侧评论区中。在主播直播画面的右侧区域显示了点赞、打赏、分享、设置等多个功能按钮,目标对象点击打赏按钮,在直播界面中弹出相应的虚拟资源列表,虚拟资源列表包含基于当前直播场景设置的预设虚拟资源(如,游戏道具、纯色背景图像、红包等)及相应的购买价格,和自定义虚拟资源按钮。
直播界面支持同时显示双画面,如图2c所示,直播界面的大部分区域显示了游戏直播的直播画面,直播界面的左下方区域显示了主播直播画面,当目标对象点击打赏按钮,在直播界面中弹出相应的虚拟资源列表。
S202:目标第一终端响应于针对虚拟资源列表中目标虚拟资源的赠送操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
传统的打赏方式为,目标对象点击虚拟礼物列表中的任一虚拟礼物,通过支付相应的金额,将选中的虚拟礼物送给直播对象,并在直播界面中展示该虚拟礼物的特效页面。但是,传统的打赏方式缺少了直播对象与观看对象之间的有趣互动,往往在炫目的特效展示结束之后,反而降低了直播间的互动氛围,进而降低了直播间的观看热度和其他观看对象的打赏次数。
因此,为了克服上述问题,本申请实施例对赠送的目标虚拟资源、具体的赠送操作以及展示方式三方面做了改进,下面一一介绍各改进点。
首先,本申请实施例中的目标虚拟资源包括:基于当前直播场景设置的预设虚拟资源(如,游戏道具、虚拟礼物等),和目标对象自行上传的自定义虚拟资源(如,自定义纯色图像、自定义静态图像和自定义动态图像)。而目标虚拟资源的图像格式包括:静态图像格式和动态图像格式,丰富的虚拟资源类型,更能满足不同观看对象的打赏需求。
其次,本申请实施例还提供了以下多种赠送操作的触发方式,符合观看对象的使用习惯,降低学习难度,实现了更为丰富的互动场景,有利于提高直播间的观看热度与目标对象对直播平台的使用黏性。
(1)响应于目标对象针对虚拟资源列表中目标虚拟资源的手势操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
具体地,目标对象可采用以下任意一种手势操作,向直播对象赠送目标虚拟资源:
A、响应于目标对象针对虚拟资源列表中目标虚拟资源的点击操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
例如,目标对象单击或双击虚拟资源列表中的任一游戏道具,通过支付相应的虚拟货币购买这款游戏道具,向直播对象赠送该游戏道具;
与此同时,直播对象会收到相应的虚拟货币,而目标第一终端则响应于该赠送操作,将游戏道具作为目标虚拟资源发送至直播服务器中,以使直播服务器根据目标虚拟资源确定目标虚拟背景,并采用虚拟背景替换技术,生成背景区域显示为目标虚拟背景的目标直播数据流,将目标直播数据流实时推送至接入直播间的目标第一终端,目标第一终端再播放背景区域显示为目标虚拟背景的目标直播数据流。
B、响应于目标对象针对虚拟资源列表中目标虚拟资源的长按操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
例如,目标对象点击自定义虚拟资源按钮,在直播界面中弹出如图2d所示的设置页面中自行上传虚拟资源,长按上传到虚拟资源列表中的自定义虚拟资源,支付相应的虚拟货币购买自定义虚拟资源后,向直播对象赠送该自定义虚拟资源;
与此同时,直播对象会收到相应的虚拟货币,而目标第一终端则响应于该赠送操作,将选中的自定义虚拟资源作为目标虚拟资源发送至直播服务器中,以使直播服务器根据目标虚拟资源确定目标虚拟背景,并采用虚拟背景替换技术,生成背景区域显示为目标虚拟背景的目标直播数据流,将目标直播数据流实时推送至接入直播间的目标第一终端,目标第一终端再播放背景区域显示为目标虚拟背景的目标直播数据流。
其中,自定义虚拟资源包括自定义纯色图像,自定义静态图像以及自定义动态图像。下面分别介绍上传各类自定义虚拟资源的方式:
b.1、上传自定义纯色图像:
目标对象点击设置页面上的调色板按钮,在设置页面展示的调色板页面中,选择预设颜色或自己喜欢的其他颜色,之后再点击发送按钮,将基于所选颜色生成的自定义纯色图像上传至虚拟资源列表,目标对象长按已上传的自定义纯色图像,支付相应的虚拟货币购买自定义纯色图像后,向直播对象赠送这张自定义纯色图像;
与此同时,直播对象会收到相应的虚拟货币,而目标第一终端则响应于该赠送操作,将选中的自定义纯色图像作为目标虚拟资源发送至直播服务器中,以使直播服务器根据目标虚拟资源确定目标虚拟背景,并采用虚拟背景替换技术,生成背景区域显示为目标虚拟背景的目标直播数据流,将目标直播数据流实时推送至接入直播间的目标第一终端,目标第一终端再播放背景区域显示为目标虚拟背景的目标直播数据流。
b.2、上传自定义图像(即自定义静态图像或自定义动态图像):
目标对象点击设置页面上的图像上传按钮,从设置页面的系统文件弹窗内呈现的多张图像(包括静态图像和动态图像)中选择图像,点击发送按钮,将选中的自定义图像上传至虚拟资源列表,目标对象长按已上传的自定义图像,支付相应的虚拟货币购买自定义图像后,向直播对象赠送这张自定义图像;
与此同时,直播对象会收到相应的虚拟货币,而目标第一终端则响应于该赠送操作,将选中的自定义图像作为目标虚拟资源发送至直播服务器中,以使直播服务器根据目标虚拟资源确定目标虚拟背景,并采用虚拟背景替换技术,生成背景区域显示为目标虚拟背景的目标直播数据流,将目标直播数据流实时推送至接入直播间的目标第一终端,目标第一终端再播放背景区域显示为目标虚拟背景的目标直播数据流。
C、响应于目标对象针对虚拟资源列表中目标虚拟资源的长按及滑动操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
例如,目标对象长按虚拟资源列表中的任一虚拟礼物,并将选中的虚拟礼物滑向任意方向,支付相应的虚拟货币购买该虚拟礼物后,向直播对象赠送该虚拟礼物;
与此同时,直播对象会收到相应的虚拟货币,而目标第一终端则响应于该赠送操作,将选中的虚拟礼物作为目标虚拟资源发送至直播服务器中,以使直播服务器根据目标虚拟资源确定目标虚拟背景,并采用虚拟背景替换技术,生成背景区域显示为目标虚拟背景的目标直播数据流,将目标直播数据流实时推送至接入直播间的目标第一终端,目标第一终端再播放背景区域显示为目标虚拟背景的目标直播数据流。
(2)响应于目标对象针对虚拟资源列表中目标虚拟资源的拖拽操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
具体地,目标第一终端响应于目标对象将目标虚拟资源,自虚拟资源列表中拖拽至背景区域的操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
如图2e所示,目标对象将虚拟资源列表中的一个游戏道具,从虚拟资源列表中拖拽至背景区域中,支付相应的虚拟货币购买该游戏道具后,向直播对象赠送该游戏道具;
与此同时,直播对象会收到相应的虚拟货币,而目标第一终端则响应于该赠送操作,将选中的游戏道具作为目标虚拟资源发送至直播服务器中,以使直播服务器根据目标虚拟资源确定目标虚拟背景,并采用虚拟背景替换技术,生成背景区域显示为目标虚拟背景的目标直播数据流,将目标直播数据流实时推送至接入直播间的目标第一终端,目标第一终端再播放背景区域显示为目标虚拟背景的目标直播数据流。
最后,如图2f所示,本申请实施例可在背景区域显示根据预设虚拟资源确定的目标虚拟背景,或者,在背景区域显示根据自定义虚拟资源确定的目标虚拟背景。从只能选择直播平台提供的固定虚拟礼物,到由观看直播的目标对象自主决定虚拟资源的形态,从以特效展示的方式,在直播界面中短暂展示赠送的虚拟礼物,到在背景区域中显示根据目标虚拟资源确定的目标虚拟背景,经过多个维度的改进,增加了直播对象与目标对象之间的互动性,提升了直播过程中的趣味性,实现了更为丰富的互动场景,有利于提高直播间的观看热度与观看对象对直播平台的使用黏性。
接下来,参阅图3a示出的流程示意图,介绍一下在直播服务器上进行直播互动的具体过程。
S301:基于第二终端发送的虚拟背景直播指令,对第二终端下发的原始直播数据流进行虚拟背景替换操作,生成背景区域显示为初始虚拟背景的目标直播数据流,并将目标直播数据流实时推送至接入直播间的各第一终端。
在相关技术中,直播效果受限于灯光、幕墙等因素的影响,直播对象不能频繁更换直播场所,导致直播间背景单一,使观看直播的观看对象产生视觉疲劳,进而降低直播间的观看热度与观看对象对直播平台的使用黏性。
为了在不更换直播场所的情况下,向各观看对象展示不同的直播间背景,直播对象开启一键切换直播间背景的虚拟背景直播功能,向直播服务器发送虚拟背景直播指令,而直播服务器响应于该指令,为直播间更换不同的初始虚拟背景,并将背景区域显示为初始虚拟背景的目标直播数据流,实时推送至接入直播间的各第一终端。
S302:接收目标第一终端发送的目标虚拟资源,目标第一终端为:接入直播间的各第一终端中的任意一个。
S303:根据目标虚拟资源确定目标虚拟背景,生成背景区域显示为目标虚拟背景的目标直播数据流,并将目标直播数据流实时推送至接入直播间的各第一终端。
本申请实施例针对不同图像格式的目标虚拟资源,提供了相应的目标虚拟背景的生成方式,分别是:
(1)当目标虚拟资源的图像格式为静态图像格式时,按照直播间的画面尺寸调整目标虚拟资源的图像尺寸,并将调整后的目标虚拟资源作确定为目标虚拟背景。
例如,直播间的画面尺寸为15:7,自定义图像的图像尺寸为16:9,以自定义图像的中心点为中心,裁剪掉超过直播间画面的图像,并将图像尺寸为15:7的自定义图像确定为目标虚拟背景;
又例如,直播间的画面尺寸为15:7,自定义图像的图像尺寸为16:9,以自定义图像的中心点为中心,等比例缩放自定义图像,以使缩放后的自定义图像的图像尺寸不超过直播间的画面尺寸,并将缩放后的自定义图像确定为目标虚拟背景。
(2)当目标虚拟资源的图像格式为动态图像格式时,将目标虚拟资源解码为多张静态图像格式的目标虚拟子资源,并按照直播间的画面尺寸调整各目标虚拟子资源的图像尺寸,将调整后的各目标虚拟子资源确定为目标虚拟背景。
动态图像(dynamic image)是指当一组特定的静态图像以指定的频率切换而产生某种动态效果的图像。网络上常见的表现形式是Gif动画,它是通过对多图层的图像,按时间进行不同的切换,从而达到动画的效果。
因此,可通过解码操作,将动态图像格式的目标虚拟资源解码为多张静态图像格式的目标虚拟子资源,再按照直播间的画面尺寸,以裁剪图像、缩放图像等技术手段,调整各目标虚拟子资源的图像尺寸,将调整后的各目标虚拟子资源确定为目标虚拟背景。
在生成目标虚拟背景之后,本申请实施例再采用虚拟背景替换技术,生成包含目标虚拟背景的目标直播数据流,具体包括提以下多种实现方式:
(1)使用目标虚拟背景替换原始直播数据流中的实际直播背景,得到背景区域显示为目标虚拟背景的目标直播数据流。
从收到目标虚拟资源的原始直播数据流中实时截取多个目标帧,其中,每截取一个目标帧i,对目标帧i进行人像抠图,获得显示在背景区域的实际直播背景,并使用目标虚拟背景替换实际直播背景,获得背景区域显示为目标虚拟背景的主播直播画面。
具体地,先使用人体检测模型检测目标帧i中的人像区域,获得如图3b所示的人像区域图像,以区分人像区域与背景区域,达到缩小抠图区域,提高人像抠图算法效率与抠图准确率的目的。
再使用人像抠图算法对人像区域进行人像抠图,获得如图3c所示的目标人像图像。其中,目标人像图像中白色区域的像素透明度(alpha)为1,表示人体轮廓;黑色区域的alpha为0,表示初始虚拟背景。
最后,按照公式1所示的方式,将获得的目标人像图像与目标虚拟资源背景相叠加,实现了使用目标虚拟背景替换实际直播背景,获得背景区域显示为目标虚拟背景的主播直播画面的直播效果。其中,newImage表示包含目标虚拟背景的主播直播画面,srcImage表示目标人像图像,bgImage表示目标虚拟背景,alpha表示像素透明度。
newImage=srcImage*alpha+bgImage*(1-alpha) 公式1;
例如,从收到目标虚拟资源之后的原始直播数据流中,截取多个目标帧,依次对各目标帧进行人像抠图,每获得第n个目标帧的目标人像图像,按照公式1所示的方式,使用基于第n个目标虚拟子资源确定的目标虚拟背景替换原有的实际直播背景,获得目标人像图像叠加在目标虚拟背景上方的主播直播画面。
(2)将目标虚拟背景叠加在实际直播背景的上方,得到背景区域显示为目标虚拟背景的目标直播数据流。
从收到目标虚拟资源的原始直播数据流中实时截取多个目标帧,每截取目标帧i,对目标帧i进行人像抠图,获得显示在背景区域的实际直播背景,将目标虚拟背景叠加在实际直播背景的上方,以遮挡部分或全部的实际直播背景,获得背景区域显示为目标虚拟背景的主播直播画面。
因前文已经介绍过人像抠图的实现方式,在此便不再赘述了。下面将着重介绍本申请实施例提供的几种背景叠加方式,分别是:
(1)调整目标虚拟背景的透明度,并将调整后的目标虚拟背景叠加在实际直播背景的上方。
目标虚拟背景的透明度低,当其叠加在实际直播背景上方时,可以遮挡大部分或全部的实际直播背景;反之,目标虚拟背景的透明度高,当其叠加在实际直播背景上方时,遮挡下方实际直播背景的效果较弱,但二者之间的叠加融合效果会更好。
(2)调整目标虚拟背景的图像尺寸,并将调整后的目标虚拟背景叠加在实际直播背景的任意位置上。
除了按照直播间的画面尺寸,满屏展示目标虚拟背景外,还可以采用裁剪、缩放等技术手段调整目标虚拟背景的图像尺寸,将调整后的目标虚拟背景拖拽移动到实际直播背景的任意位置上,还可以在移动到该位置后,将调整后的目标虚拟背景旋转至任意角度、任意方向,以呈现更好的背景叠加效果。
在了解了在两端应用直播互动方法的实施过程之后,参阅图4a示出的逻辑示意图与图4b示出的流程示意图,介绍执行上述直播互动方法的整体过程。
S401:第二终端响应于直播对象触发的开启直播操作,将含有实际直播背景的原始直播数据流推送至直播服务器中;
S402:直播服务器将获得的原始直播数据流实时推送至接入直播间的各第一终端;
S403:第二终端响应于直播对象触发的虚拟背景直播功能,向直播服务器发送虚拟背景直播指令;
S404:直播服务器基于第二终端发送的虚拟背景直播指令,对第二终端下发的原始直播数据流进行虚拟背景替换操作,生成背景区域显示为初始虚拟背景的目标直播数据流,并将该目标直播数据流实时推送至各第一终端;
S405:目标对象点击虚拟资源列表中的自定义虚拟资源按钮,将一张动态图像上传至虚拟资源列表中,目标对象再将这张动态图像自虚拟资源列表中拖拽至背景区域中,支付相应的虚拟货币购买这张动态图像后将动态图像作为目标虚拟资源赠送给直播对象;
S406:目标第一终端(即目标对象使用的第一终端)响应于目标对象针对虚拟资源列表中目标虚拟资源的赠送操作,将动态图像下发至直播服务器;
S407:直播服务器对收到动态图像之后的原始直播数据流进行解封帧处理,获得视频流与音频流;
S408:直播服务器解码视频流,实时截取多个视频帧,每截取一个视频帧,对该视频帧进行AI抠图,获得目标人像图像与实际直播背景,使用根据动态图像确定的目标虚拟背景替换实际直播背景,或将目标虚拟背景叠加在实际直播背景的上方,获得背景区域显示为目标虚拟背景的主播直播画面;
S409:直播服务器每生成一张主播直播画面,对该画面进行编码,获得视频流,封装视频流与音频流,获得包含目标虚拟背景的目标直播数据流,并将目标直播数据流实时推送至各第一终端。
以游戏直播为例,参阅图5示出的流程示意图,介绍在游戏直播时,使用上述方法进行直播互动的实施过程。
S501:第二终端响应于游戏主播触发的开启直播操作,将含有实际直播背景的原始直播数据流推送至直播服务器中;
S502:直播服务器将获得的原始直播数据流实时推送至接入直播间的各第一终端;
S503:第二终端响应于游戏主播触发的绿幕直播功能,向直播服务器发送绿幕直播指令;
S504:直播服务器基于第二终端发送的绿幕直播指令,将原始直播数据流中的实际直播背景替换为绿幕背景,生成包含绿幕背景的目标直播数据流,并将该目标直播数据流实时推送至各第一终端;
S505:观众点击直播界面的打赏按钮,在弹出的虚拟礼物列表中点击其中一款游戏道具,在支付相应的虚拟货币购买这款游戏道具后,将游戏道具赠送给游戏主播;
S506:目标第一终端响应于观众的赠送操作,将这款游戏道具下发至直播服务器;
S507:直播服务器将游戏道具作为目标虚拟背景,替换自收到游戏道具之后的原始直播数据流中的实际直播背景,生成背景区域显示为游戏道具的目标直播数据流,并将目标直播数据流实时推送至各第一终端。
以唱歌直播为例,参阅图6示出的流程示意图,介绍在唱歌直播时,使用上述方法进行直播互动的实施过程。
S601:第二终端响应于主播触发的开启直播操作,将含有实际直播背景的原始直播数据流推送至直播服务器中;
S602:直播服务器将获得的原始直播数据流实时推送至接入直播间的各第一终端;
S603:第二终端响应于主播触发的绿幕直播功能,向直播服务器发送绿幕直播指令;
S604:直播服务器基于第二终端发送的绿幕直播指令,将原始直播数据流中的实际直播背景替换为绿幕背景,生成包含绿幕背景的目标直播数据流,并将该目标直播数据流实时推送至各第一终端;
S605:观众点击直播界面的打赏按钮,在弹出的虚拟礼物列表的调色板页面中选择粉色,在支付相应的虚拟货币购买粉色图像后,将粉色图像赠送给主播;
S606:目标第一终端响应于观众的赠送操作,将粉色图像下发至直播服务器;
S607:直播服务器将粉色图像作为目标虚拟背景,替换自收到粉色图像之后的原始直播数据流中的实际直播背景,使得目标直播数据流的背景区域的颜色由绿幕背景色更改为粉色,并将目标直播数据流实时推送至各第一终端。
与上述方法实施例基于同一发明构思,本申请实施例还提供了一种应用于目标第一终端的直播互动的装置。参阅图7示出的结构示意图,直播互动的装置700可以包括:
第一呈现单元701,用于呈现直播界面,直播界面包含主播直播画面和虚拟资源列表,主播直播画面包括背景区域;
第二呈现单元702,用于响应于针对虚拟资源列表中目标虚拟资源的赠送操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
可选的,第二呈现单元702通过执行以下任意一种方式,在背景区域显示根据目标虚拟资源确定的目标虚拟背景:
响应于目标对象针对虚拟资源列表中目标虚拟资源的手势操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景;
响应于目标对象针对虚拟资源列表中目标虚拟资源的拖拽操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
可选的,第二呈现单元702通过以下任意一种方式,在背景区域显示根据目标虚拟资源确定的目标虚拟背景:
响应于目标对象针对虚拟资源列表中目标虚拟资源的点击操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景;
响应于目标对象针对虚拟资源列表中目标虚拟资源的长按操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景;
响应于目标对象针对虚拟资源列表中目标虚拟资源的长按及滑动操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
可选的,第二呈现单元702用于:
响应于目标对象将目标虚拟资源,自虚拟资源列表中拖拽至背景区域的操作,在背景区域显示根据目标虚拟资源确定的目标虚拟背景。
可选的,第二呈现单元702用于:
将目标虚拟资源发送给直播服务器,以使直播服务器根据目标虚拟资源确定目标虚拟背景,并生成背景区域显示为目标虚拟背景的目标直播数据流,将目标直播数据流实时推送至接入直播间的目标第一终端;
播放背景区域显示为目标虚拟背景的目标直播数据流。
可选的,目标虚拟资源包括:基于当前直播场景设置的预设虚拟资源,和目标对象自行上传的自定义虚拟资源;
第二呈现单元702通过执行以下任意一种方式,在背景区域显示根据目标虚拟资源确定的目标虚拟背景:
在背景区域显示根据预设虚拟资源确定的目标虚拟背景;
在背景区域显示根据自定义虚拟资源确定的目标虚拟背景。
可选的,目标虚拟资源的图像格式包括:静态图像格式与动态图像格式。
与上述方法实施例基于同一发明构思,本申请实施例还提供了一种应用于直播服务器的直播互动的装置。参阅图8示出的结构示意图,直播互动的装置800可以包括:
第一处理单元801,用于基于第二终端发送的虚拟背景直播指令,对第二终端下发的原始直播数据流进行虚拟背景替换操作,生成背景区域显示为初始虚拟背景的目标直播数据流,并将目标直播数据流实时推送至接入直播间的各第一终端
第二处理单元802,用于接收目标第一终端发送的目标虚拟资源,目标第一终端为:接入直播间的各第一终端中的任意一个;
根据目标虚拟资源确定目标虚拟背景,生成背景区域显示为目标虚拟背景的目标直播数据流,并将目标直播数据流实时推送至接入直播间的各第一终端。
可选的,第二处理单元802通过执行以下任意一种方式,生成背景区域显示为目标虚拟背景的目标直播数据流:
使用目标虚拟背景替换原始直播数据流中的实际直播背景,得到背景区域显示为目标虚拟背景的目标直播数据流;
将目标虚拟背景叠加在实际直播背景的上方,得到背景区域显示为目标虚拟背景的目标直播数据流。
可选的,使第二处理单元802用于:
从收到目标虚拟资源的原始直播数据流中实时截取多个目标帧,其中,每截取一个目标帧,对一个目标帧进行人像抠图,获得显示在背景区域的实际直播背景,并使用目标虚拟背景替换实际直播背景,获得背景区域显示为目标虚拟背景的主播直播画面。
可选的,第二处理单元802用于:
从收到目标虚拟资源的原始直播数据流中实时截取多个目标帧,其中,每截取一个目标帧,对一个目标帧进行人像抠图,获得显示在背景区域的实际直播背景,将目标虚拟背景叠加在实际直播背景的上方,以遮挡部分或全部的实际直播背景,获得背景区域显示为目标虚拟背景的主播直播画面。
可选的,第二处理单元802通过执行以下任意一种方式,将目标虚拟背景叠加在实际直播背景的上方:
调整目标虚拟背景的透明度,并将调整后的目标虚拟背景叠加在实际直播背景的上方;
调整目标虚拟背景的图像尺寸,并将调整后的目标虚拟背景叠加在实际直播背景的任意位置上。
可选的,第二处理单元802针对目标虚拟资源采用以下任意一种方式,获得目标虚拟背景:
当目标虚拟资源的图像格式为静态图像格式时,按照直播间的画面尺寸调整目标虚拟资源的图像尺寸,并将调整后的目标虚拟资源确定为目标虚拟背景;
当目标虚拟资源的图像格式为动态图像格式时,将目标虚拟资源解码为多张静态图像格式的目标虚拟子资源,并按照直播间的画面尺寸调整各目标虚拟子资源的图像尺寸,将调整后的各目标虚拟子资源确定为目标虚拟背景。
为了描述的方便,以上各部分按照功能划分为各模块(或单元)分别描述。当然,在实施本申请时可以把各模块(或单元)的功能在同一个或多个软件或硬件中实现。
在介绍了本申请示例性实施方式的直播互动的方法和装置之后,接下来,介绍根据本申请的另一示例性实施方式的计算机设备。
所属技术领域的技术人员能够理解,本申请的各个方面可以实现为系统、方法或程序产品。因此,本申请的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。
与上述方法实施例基于同一发明构思,本申请实施例中还提供了一种计算机设备,参阅图9所示,计算机设备900可以至少包括处理器901、以及存储器902。其中,存储器902存储有程序代码,当程序代码被处理器901执行时,使得处理器901执行上述任意一种直播互动的方法的步骤。
在一些可能的实施方式中,根据本申请的计算装置可以至少包括至少一个处理器、以及至少一个存储器。其中,存储器存储有程序代码,当程序代码被处理器执行时,使得处理器执行本说明书上述描述的根据本申请各种示例性实施方式的直播互动的方法中的步骤。例如,处理器可以执行如图2a中所示的步骤。
下面参照图10来描述根据本申请的这种实施方式的计算装置1000。图6的计算装置1000仅仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图10所示,计算装置1000以通用计算装置的形式表现。计算装置1000的组件可以包括但不限于:上述至少一个处理单元1001、上述至少一个存储单元1002、连接不同系统组件(包括存储单元1002和处理单元1001)的总线1003。
总线1003表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器、外围总线、处理器或者使用多种总线结构中的任意总线结构的局域总线。
存储单元1002可以包括易失性存储器形式的可读介质,例如随机存取存储器(RAM)10021和/或高速缓存存储单元10022,还可以进一步包括只读存储器(ROM)10023。
存储单元1002还可以包括具有一组(至少一个)程序模块10024的程序/实用工具10025,这样的程序模块10024包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。
计算装置1000也可以与一个或多个外部设备1004(例如键盘、指向设备等)通信,还可与一个或者多个使得用户能与计算装置1000交互的设备通信,和/或与使得该计算装置1000能与一个或多个其它计算装置进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口1005进行。并且,计算装置1000还可以通过网络适配器1006与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器1006通过总线1003与用于计算装置1000的其它模块通信。应当理解,尽管图中未示出,可以结合计算装置1000使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理器、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
与上述方法实施例基于同一发明构思,本申请提供的直播互动的方法的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当程序代码在计算机设备上运行时,程序代码用于使计算机设备执行本说明书上述描述的根据本申请各种示例性实施方式的直播互动的方法中的步骤,例如,计算机设备可以执行如图2a中所示的步骤。
程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
尽管已描述了本申请的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。

Claims (16)

1.一种直播互动的方法,其特征在于,包括:
呈现直播界面,所述直播界面包含主播直播画面和虚拟资源列表,所述主播直播画面包括背景区域;
响应于针对所述虚拟资源列表中目标虚拟资源的触发操作,显示设置窗口;
响应于针对所述设置窗口中调色板按钮的触发操作,显示调色板页面,并基于所述调色板页面上传作为所述目标虚拟资源的自定义纯色图像;或者,响应于针对所述设置窗口中图像上传按钮的触发操作,显示系统文件弹窗,并基于所述系统文件弹窗内呈现的多张候选图像,确定作为所述目标虚拟资源的自定义格式图像;
响应于针对所述目标虚拟资源的赠送操作,在所述背景区域显示根据多媒体资源确定的目标虚拟背景。
2.如权利要求1所述的方法,其特征在于,所述响应于针对所述目标虚拟资源的赠送操作,在所述背景区域显示根据所述多媒体资源确定的目标虚拟背景,包括以下任意一种方式:
响应于目标对象针对所述目标虚拟资源的手势操作,在所述背景区域显示根据所述多媒体资源确定的目标虚拟背景;
响应于所述目标对象针对所述目标虚拟资源的拖拽操作,在所述背景区域显示根据所述多媒体资源确定的目标虚拟背景。
3.如权利要求2所述的方法,其特征在于,所述响应于目标对象针对所述目标虚拟资源的手势操作,在所述背景区域显示根据所述多媒体资源确定的目标虚拟背景,包括以下任意一种方式:
响应于所述目标对象针对所述目标虚拟资源的点击操作,在所述背景区域显示根据所述多媒体资源确定的目标虚拟背景;
响应于所述目标对象针对所述目标虚拟资源的长按操作,在所述背景区域显示根据所述多媒体资源确定的目标虚拟背景;
响应于所述目标对象针对所述目标虚拟资源的长按及滑动操作,在所述背景区域显示根据所述多媒体资源确定的目标虚拟背景。
4.如权利要求2所述的方法,其特征在于,所述响应于所述目标对象针对所述目标虚拟资源的拖拽操作,在所述背景区域显示根据所述多媒体资源确定的目标虚拟背景,包括:
响应于所述目标对象将所述目标虚拟资源,自所述虚拟资源列表中拖拽至所述背景区域的操作,在所述背景区域显示根据所述多媒体资源确定的目标虚拟背景。
5.如权利要求1所述的方法,其特征在于,所述在所述背景区域显示根据所述多媒体资源确定的目标虚拟背景,包括:
将所述多媒体资源发送给直播服务器,以使所述直播服务器根据所述多媒体资源确定所述目标虚拟背景,并生成所述背景区域显示为所述目标虚拟背景的目标直播数据流,将所述目标直播数据流实时推送至接入直播间的目标第一终端;
播放所述背景区域显示为所述目标虚拟背景的所述目标直播数据流。
6.如权利要求1所述的方法,其特征在于,所述目标虚拟资源的图像格式包括:静态图像格式与动态图像格式。
7.一种直播互动的方法,其特征在于,包括:
基于第二终端发送的虚拟背景直播指令,对所述第二终端下发的原始直播数据流进行虚拟背景替换操作,生成背景区域显示为初始虚拟背景的目标直播数据流,并将所述目标直播数据流实时推送至接入直播间的各第一终端;
接收目标第一终端发送的目标虚拟资源,所述目标第一终端为:接入直播间的各所述第一终端中的任意一个,所述目标虚拟资源是所述目标第一终端响应于针对虚拟资源列表中所述目标虚拟资源的触发操作,显示设置窗口,并通过执行以下任意一种操作,获得所述目标虚拟资源:响应于针对所述设置窗口中调色板按钮的触发操作,显示调色板页面,并基于所述调色板页面上传作为所述目标虚拟资源的自定义纯色图像;或者,响应于针对所述设置窗口中图像上传按钮的触发操作,显示系统文件弹窗,并基于所述系统文件弹窗内呈现的多张候选图像,确定作为所述目标虚拟资源的自定义格式图像;
根据所述目标虚拟资源确定目标虚拟背景,生成所述背景区域显示为所述目标虚拟背景的目标直播数据流,并将所述目标直播数据流实时推送至接入直播间的各所述第一终端。
8.如权利要求7所述的方法,其特征在于,所述生成所述背景区域显示为所述目标虚拟背景的目标直播数据流,包括以下任意一种方式:
使用所述目标虚拟背景替换所述原始直播数据流中的实际直播背景,得到所述背景区域显示为所述目标虚拟背景的目标直播数据流;
将所述目标虚拟背景叠加在所述实际直播背景的上方,得到所述背景区域显示为所述目标虚拟背景的目标直播数据流。
9.如权利要求8所述的方法,其特征在于,所述使用所述目标虚拟背景替换所述原始直播数据流中的实际直播背景,得到所述背景区域显示为所述目标虚拟背景的目标直播数据流,包括:
从收到所述目标虚拟资源的原始直播数据流中实时截取多个目标帧,其中,每截取一个目标帧,对所述一个目标帧进行人像抠图,获得显示在所述背景区域的实际直播背景,并使用所述目标虚拟背景替换所述实际直播背景,获得所述背景区域显示为所述目标虚拟背景的主播直播画面。
10.如权利要求8所述的方法,其特征在于,所述将所述目标虚拟背景叠加在所述实际直播背景的上方,得到所述背景区域显示为所述目标虚拟背景的目标直播数据流,包括:
从收到所述目标虚拟资源的原始直播数据流中实时截取多个目标帧,其中,每截取一个目标帧,对所述一个目标帧进行人像抠图,获得显示在所述背景区域的实际直播背景,将所述目标虚拟背景叠加在所述实际直播背景的上方,以遮挡部分或全部的所述实际直播背景,获得所述背景区域显示为所述目标虚拟背景的主播直播画面。
11.如权利要求10所述的方法,其特征在于,所述将所述目标虚拟背景叠加在所述实际直播背景的上方,包括以下任意一种方式:
调整所述目标虚拟背景的透明度,并将调整后的目标虚拟背景叠加在所述实际直播背景的上方;
调整所述目标虚拟背景的图像尺寸,并将调整后的目标虚拟背景叠加在所述实际直播背景的任意位置上。
12.如权利要求7~11任一项所述的方法,其特征在于,针对所述目标虚拟资源采用以下方式,获得所述目标虚拟背景:
当目标虚拟资源的图像格式为静态图像格式时,按照直播间的画面尺寸调整所述目标虚拟资源的图像尺寸,并将调整后的目标虚拟资源确定为所述目标虚拟背景;
当所述目标虚拟资源的图像格式为动态图像格式时,将所述目标虚拟资源解码为多张静态图像格式的目标虚拟子资源,并按照直播间的画面尺寸调整各目标虚拟子资源的图像尺寸,将调整后的各目标虚拟子资源确定为所述目标虚拟背景。
13.一种直播互动的装置,其特征在于,包括:
第一呈现单元,用于呈现直播界面,所述直播界面包含主播直播画面和虚拟资源列表,所述主播直播画面包括背景区域;
第二呈现单元,用于响应于针对所述虚拟资源列表中目标虚拟资源的触发操作,显示设置窗口;
响应于针对所述设置窗口中调色板按钮的触发操作,显示调色板页面,并基于所述调色板页面上传作为所述目标虚拟资源的自定义纯色图像;或者,响应于针对所述设置窗口中图像上传按钮的触发操作,显示系统文件弹窗,并基于所述系统文件弹窗内呈现的多张候选图像,确定作为所述目标虚拟资源的自定义格式图像;
响应于针对所述目标虚拟资源的赠送操作,在所述背景区域显示根据多媒体资源确定的目标虚拟背景。
14.一种直播互动的装置,其特征在于,包括:
第一处理单元,用于基于第二终端发送的虚拟背景直播指令,对所述第二终端下发的原始直播数据流进行虚拟背景替换操作,生成背景区域显示为初始虚拟背景的目标直播数据流,并将所述目标直播数据流实时推送至接入直播间的各第一终端;
第二处理单元,用于接收目标第一终端发送的自定义虚拟资源,所述目标第一终端为:接入直播间的各所述第一终端中的任意一个,目标虚拟资源是所述目标第一终端响应于针对虚拟资源列表中所述目标虚拟资源的触发操作,显示设置窗口,并通过执行以下任意一种操作,获得所述目标虚拟资源:响应于针对所述设置窗口中调色板按钮的触发操作,显示调色板页面,并基于所述调色板页面上传作为所述目标虚拟资源的自定义纯色图像;或者,响应于针对所述设置窗口中图像上传按钮的触发操作,显示系统文件弹窗,并基于所述系统文件弹窗内呈现的多张候选图像,确定作为所述目标虚拟资源的自定义格式图像;
根据所述目标虚拟资源确定目标虚拟背景,生成所述背景区域显示为所述目标虚拟背景的目标直播数据流,并将所述目标直播数据流实时推送至接入直播间的各所述第一终端。
15.一种计算机设备,其特征在于,其包括处理器和存储器,其中,所述存储器存储有程序代码,当所述程序代码被所述处理器执行时,使得所述处理器执行权利要求1~6或7~12中任一项所述方法的步骤。
16.一种计算机可读存储介质,其特征在于,其包括程序代码,当所述程序代码在计算机设备上运行时,所述程序代码用于使所述计算机设备执行权利要求1~6或7~12中任一项所述方法的步骤。
CN202210098919.3A 2022-01-24 2022-01-24 一种直播互动的方法、装置、设备及存储介质 Active CN114449355B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210098919.3A CN114449355B (zh) 2022-01-24 2022-01-24 一种直播互动的方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210098919.3A CN114449355B (zh) 2022-01-24 2022-01-24 一种直播互动的方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN114449355A CN114449355A (zh) 2022-05-06
CN114449355B true CN114449355B (zh) 2023-06-20

Family

ID=81369148

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210098919.3A Active CN114449355B (zh) 2022-01-24 2022-01-24 一种直播互动的方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN114449355B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115379250A (zh) * 2022-07-22 2022-11-22 广州博冠信息科技有限公司 视频处理方法、装置、计算机设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009001307A1 (en) * 2007-06-26 2008-12-31 Nds Limited Presenting content
CN107396197A (zh) * 2017-06-27 2017-11-24 腾讯科技(深圳)有限公司 实现虚拟资源自定义的方法及装置
CN107820132A (zh) * 2017-11-21 2018-03-20 广州华多网络科技有限公司 直播互动方法、装置及系统
CN108635863A (zh) * 2018-04-28 2018-10-12 网易(杭州)网络有限公司 一种网络直播的数据处理方法和装置
CN112770173A (zh) * 2021-01-28 2021-05-07 腾讯科技(深圳)有限公司 直播画面处理方法、装置、计算机设备及存储介质
CN113965665A (zh) * 2021-11-22 2022-01-21 上海掌门科技有限公司 一种用于确定虚拟直播图像的方法与设备

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012214902A1 (de) * 2012-08-22 2014-02-27 LivePoint GmbH Verfahren und System zur Live-Video-Beratung
WO2018027237A1 (en) * 2016-08-05 2018-02-08 Sportscastr.Live Llc Systems, apparatus, and methods for scalable low-latency viewing of broadcast digital content streams of live events
CN112218159B (zh) * 2020-10-10 2022-09-06 青岛海尔科技有限公司 多媒体信息播放方法、装置、存储介质及电子装置
CN113196785B (zh) * 2021-03-15 2024-03-26 百果园技术(新加坡)有限公司 直播视频交互方法、装置、设备及存储介质
CN113301384B (zh) * 2021-05-21 2023-03-24 苏州翼鸥时代科技有限公司 一种背景的替换方法、装置、电子设备及可读存储介质
CN113490063B (zh) * 2021-08-26 2023-06-23 上海盛付通电子支付服务有限公司 一种用于直播互动的方法、设备、介质及程序产品

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009001307A1 (en) * 2007-06-26 2008-12-31 Nds Limited Presenting content
CN107396197A (zh) * 2017-06-27 2017-11-24 腾讯科技(深圳)有限公司 实现虚拟资源自定义的方法及装置
CN107820132A (zh) * 2017-11-21 2018-03-20 广州华多网络科技有限公司 直播互动方法、装置及系统
CN108635863A (zh) * 2018-04-28 2018-10-12 网易(杭州)网络有限公司 一种网络直播的数据处理方法和装置
CN112770173A (zh) * 2021-01-28 2021-05-07 腾讯科技(深圳)有限公司 直播画面处理方法、装置、计算机设备及存储介质
CN113965665A (zh) * 2021-11-22 2022-01-21 上海掌门科技有限公司 一种用于确定虚拟直播图像的方法与设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
视频社交_关系视域下网络直播的人际交往研究;栾颖;中国优秀硕士毕业论文;全文 *

Also Published As

Publication number Publication date
CN114449355A (zh) 2022-05-06

Similar Documents

Publication Publication Date Title
CN107995536A (zh) 一种提取视频预览的方法、装置、设备和计算机存储介质
CN111277845B (zh) 游戏直播控制方法及装置、计算机存储介质及电子设备
CN107995535A (zh) 一种展示视频的方法、装置、设备和计算机存储介质
CN110166842B (zh) 一种视频文件操作方法、装置和存储介质
WO2021213067A1 (zh) 物品显示方法、装置、设备及存储介质
US9224156B2 (en) Personalizing video content for Internet video streaming
CN109803180A (zh) 视频预览图生成方法、装置、计算机设备及存储介质
EP3913924B1 (en) 360-degree panoramic video playing method, apparatus, and system
US20190230311A1 (en) Video interface display method and apparatus
CN113630615B (zh) 直播间虚拟礼物展示方法及装置
US20100177122A1 (en) Video-Associated Objects
CN111738769B (zh) 视频处理方法及装置
CN114449355B (zh) 一种直播互动的方法、装置、设备及存储介质
CN114697721B (zh) 弹幕显示方法及电子设备
CN112752132A (zh) 漫画图片弹幕显示方法、装置、介质及电子设备
CN110456901A (zh) 展会中对象展示的控制方法、系统、电子设备和存储介质
CN114143572A (zh) 直播交互方法、装置、存储介质、电子设备
CN113099285A (zh) 展示方法及装置
CN111667313A (zh) 广告展示方法、装置、客户端设备及存储介质
CN112929685B (zh) Vr直播间的互动方法、装置、电子设备和存储介质
WO2022183967A1 (zh) 视频画面的显示方法、装置、设备、介质及程序产品
US20230334791A1 (en) Interactive reality computing experience using multi-layer projections to create an illusion of depth
US11682101B2 (en) Overlaying displayed digital content transmitted over a communication network via graphics processing circuitry using a frame buffer
US20230334792A1 (en) Interactive reality computing experience using optical lenticular multi-perspective simulation
US20230326108A1 (en) Overlaying displayed digital content transmitted over a communication network via processing circuitry using a frame buffer

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant