CN111277853A - 直播信息的处理方法及装置 - Google Patents

直播信息的处理方法及装置 Download PDF

Info

Publication number
CN111277853A
CN111277853A CN202010131604.5A CN202010131604A CN111277853A CN 111277853 A CN111277853 A CN 111277853A CN 202010131604 A CN202010131604 A CN 202010131604A CN 111277853 A CN111277853 A CN 111277853A
Authority
CN
China
Prior art keywords
content
live broadcast
live
interference information
image interference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010131604.5A
Other languages
English (en)
Other versions
CN111277853B (zh
Inventor
符德恩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202010131604.5A priority Critical patent/CN111277853B/zh
Publication of CN111277853A publication Critical patent/CN111277853A/zh
Application granted granted Critical
Publication of CN111277853B publication Critical patent/CN111277853B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454Content or additional data filtering, e.g. blocking advertisements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4882Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供了一种直播信息的处理方法、装置、电子设备及存储介质;方法包括:获取主播端直播过程中对应主播用户的直播内容;当确定所述直播内容中包含干扰对象对应的图像干扰信息时,获取所述图像干扰信息在直播显示界面中所处的显示区域;确定对应所述显示区域的图像干扰信息过滤方式;基于确定的所述图像干扰信息过滤方式,对所述图像干扰信息进行过滤,得到对应所述主播用户的目标内容;发送所述目标内容至观众端,使得所述观众端的直播界面所呈现的直播内容中不包含所述图像干扰信息;通过本发明,能够在不中断直播的情况下,实现对直播内容中图像干扰信息的消除,提高用户体验。

Description

直播信息的处理方法及装置
技术领域
本发明涉及人工智能技术领域,尤其涉及一种直播信息的处理方法、装置、电子设备及存储介质。
背景技术
人工智能(Artificial Intelligence,AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说,人工智能是计算机科学的一个综合技术,它企图了解智能的实质,并生产出一种新的能以人类智能相似的方式做出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法,使机器具有感知、推理与决策的功能。
随着人工智能技术的不断发展,人工智能已经“悄悄”地应用于网络直播行业,比如人脸识别实现美颜、搞怪等功能,促使网络直播再次进入蓬勃发展期,越来越多的用户通过参与直播、观看直播等方式来丰富个人的娱乐生活。而在很多时候,由于主播个人沉醉于工作中,很可能会忽略直播环境中的变化(比如直播区域突发性闯入家人或室友等),导致直播在非正常场景下进行;而如果直播中意外出现裸露等不雅画面时,还会增加直播平台的风险。相关技术中,一般在发生突发性事件的情况下,会临时中断直播,但同时也会造成直播无法继续进行,影响用户体验,大大降低直播平台的用户粘性。
发明内容
本发明实施例提供一种直播信息的处理方法、装置、电子设备及存储介质,能够在不中断直播的情况下,实现对图像干扰信息的消除,提高用户体验。
本发明实施例的技术方案是这样实现的:
获取主播端直播过程中对应主播用户的直播内容;
当确定所述直播内容中包含干扰对象对应的图像干扰信息时,获取所述图像干扰信息在直播显示界面中所处的显示区域;
确定对应所述显示区域的图像干扰信息过滤方式;
基于确定的所述图像干扰信息过滤方式,对所述图像干扰信息进行过滤,得到对应所述主播用户的目标内容;
发送所述目标内容至观众端,使得所述观众端的直播界面所呈现的直播内容中不包含所述图像干扰信息。
上述方案中,所述方法还包括:
获取所述干扰信息呈现于所述直播显示界面中所对应的呈现时长;
当所述呈现时长达到目标呈现时长时,呈现对应所述干扰信息的提示信息。
上述方案中,所述方法还包括:
对所述直播显示界面中呈现的直播内容进行干扰信息检测,得到检测结果;
当所述检测结果表征所述直播内容中不再包含所述干扰信息时,取消所输出的所述提示信息。
本发明实施例提供一种直播信息的处理方法,包括:
在主播端的直播显示界面中,呈现对应主播用户的直播内容;
当确定所述直播内容中包含干扰对象对应的图像干扰信息时,对所述图像干扰信息进行过滤,得到对应所述主播用户的目标内容;
发送所述目标内容至观众端。
本发明实施例还提供一种直播信息的处理装置,包括:
获取模块,用于获取主播端直播过程中对应主播用户的直播内容;
第一过滤模块,用于当确定所述直播内容中包含干扰对象对应的图像干扰信息时,获取所述图像干扰信息在直播显示界面中所处的显示区域;确定对应所述显示区域的图像干扰信息过滤方式;基于确定的所述图像干扰信息过滤方式,对所述图像干扰信息进行过滤,得到对应所述主播用户的目标内容;
第一发送模块,用于发送所述目标内容至观众端,使得所述观众端的直播界面所呈现的直播内容中不包含所述图像干扰信息。
上述方案中,所述第一过滤模块,还用于当所述显示区域归属于对应所述主播用户面部的第一区域时,确定相应的图像干扰信息过滤方式为第一过滤方式;
当所述显示区域归属于第二区域时,确定相应的图像干扰信息过滤方式为第二过滤方式,所述第二过滤方式不同于所述第一过滤方式;
其中,所述第二区域为所述直播显示界面中区别于所述第一区域的区域。
上述方案中,所述第一过滤模块,还用于获取与所述直播内容关联的第一视频内容;
采用所述第一视频内容替换所述直播内容,以得到所述目标内容。
上述方案中,所述第一过滤模块,还用于获取与所述直播内容关联的第二视频内容;
确定对应所述第二区域的蒙版图;
基于所述直播内容、所述蒙版图及所述第二视频内容,进行观众端直播内容合成,得到所述目标内容。
上述方案中,所述第一过滤模块,还用于添加所述蒙版图至所述第二视频内容,得到所述第二视频内容中对应所述第二区域的视频子内容;
对所述视频子内容及所述直播内容进行合成,得到所述目标内容。
上述方案中,所述第二区域包括:第一子区域及第二子区域,所述第二子区域连接所述第一区域;所述装置还包括:
呈现模块,用于在直播显示界面中,呈现对应所述图像干扰信息的告警信息,所述告警信息用于指示所述图像干扰信息对应的处理优先级。
上述方案中,所述呈现模块,还用于输出对应所述图像干扰信息的提示信息,所述提示信息用于提示所述直播显示界面中存在所述图像干扰信息;
所述图像干扰信息的输出方式包括以下至少之一:文本输出方式、音频输出方式、图形输出方式。
上述方案中,所述呈现模块,还用于在所述直播显示界面中,呈现提示边框,所述提示边框具有目标形状,用于提示所述直播显示界面中存在所述图像干扰信息。
上述方案中,所述呈现模块,还用于获取所述图像干扰信息呈现于所述直播显示界面中所对应的呈现时长;
当所述呈现时长达到目标呈现时长时,呈现对应所述图像干扰信息的提示信息。
上述方案中,所述呈现模块,还用于在所述直播显示界面中,呈现对应所述提示信息的第一取消按键;
响应于针对所述第一取消按键的点击操作,取消所输出的所述提示信息。
上述方案中,所述呈现模块,还用于在所述直播显示界面中,实时呈现对应所述提示信息的剩余呈现时长;
当所述剩余呈现时长达到目标剩余时长时,取消所输出的所述提示信息。
上述方案中,所述装置还包括检测模块,用于对所述直播显示界面中呈现的直播内容进行图像干扰信息检测,得到检测结果;
当所述检测结果表征所述直播内容中不再包含所述图像干扰信息时,取消所输出的所述提示信息。
上述方案中,所述呈现模块,还用于呈现对应直播的干扰过滤功能项;
响应于针对所述干扰过滤功能项的开启指令,控制所述直播显示界面的显示模式为干扰消除模式,所述干扰消除模式用于当确定所述直播内容中包含图像干扰信息时,触发所述过滤操作。
上述方案中,所述呈现模块,还用于在所述直播显示界面中,呈现对应所述干扰过滤功能项的第二取消按键;
响应于针对所述第二取消按键的点击操作,控制所述直播显示界面的显示模式为缺省显示。
本发明实施例还提供一种直播信息的处理装置,包括:
呈现模块,用于在主播端的直播显示界面中,呈现对应主播用户的直播内容;
第二过滤模块,用于当确定所述直播内容中包含干扰对象对应的图像干扰信息时,对所述图像干扰信息进行过滤,得到对应所述主播用户的目标内容;
第二发送模块,用于发送所述目标内容至观众端。
本发明实施例还提供一种电子设备,包括:
存储器,用于存储可执行指令;
处理器,用于执行所述存储器中存储的可执行指令时,实现本发明实施例提供的直播信息的处理方法。
本发明实施例还提供一种计算机可读存储介质,存储有可执行指令,所述可执行指令被处理器执行时,实现本发明实施例提供的直播信息的处理方法。
本发明实施例具有以下有益效果:
在直播过程中,当主播端确定主播用户的直播内容中包含图像干扰信息时,对图像干扰信息进行过滤,得到对应主播用户的目标内容,将目标内容发送给观众端,以使观众端的直播界面所呈现的直播内容不包含图像干扰信息;如此,当主播端直播内容中存在图像干扰信息时,无需中断直播,则实现了观众端直播内容中图像干扰信息的消除,提高用户体验,增加了直播平台的用户粘性。
附图说明
图1是本发明实施例提供的直播信息的处理方法的流程示意图;
图2是本发明实施例提供的直播信息的处理的实施场景的架构示意图;
图3是本发明实施例提供的电子设备的结构示意图;
图4是本发明实施例提供的直播信息的处理方法的流程示意图;
图5A是本发明实施例提供的干扰消除模式的开启流程图一;
图5B是本发明实施例提供的干扰消除模式的开启流程图二;
图6是本发明实施例提供的控制直播显示模式为缺省显示的示意图;
图7是本发明实施例提供的直播显示界面的显示区域示意图;
图8是本发明实施例提供的蒙版图的示意图;
图9是本发明实施例提供的直播显示界面的区域示意图;
图10是本发明实施例提供的呈现告警信息的示意图;
图11是本发明实施例提供的提示信息输出方式的配置界面示意图;
图12A-C是本发明实施例提供的提示信息输出方式的示意图;
图13A是本发明实施例提供的提示信息取消输出的流程示意图;
图13B是本发明实施例提供的干扰消除模式快捷关闭的操作流程图;
图14是本发明实施例提供的取消提示信息的输出的流程示意图;
图15是本发明实施例提供的干扰消除模式下的主播端和观众端的直播示意图;
图16是本发明实施例提供的视频内容的预录制方法的流程示意图;
图17是本发明实施例提供的干扰消除模式启动示意图;
图18是本发明实施例提供的直播信息的处理方法的流程示意图;
图19是本发明实施例提供的直播信息的处理方法的流程示意图;
图20是本发明实施例提供的直播信息的处理方法的结构示意图;
图21是本发明实施例提供的直播信息的处理装置355的结构示意图;
图22是本发明实施例提供的直播信息的处理装置的结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,所描述的实施例不应视为对本发明的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
在以下的描述中,涉及到“一些实施例”,其描述了所有可能实施例的子集,但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。
在以下的描述中,所涉及的术语“第一\第二\第三”仅仅是是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一\第二\第三”在允许的情况下可以互换特定的顺序或先后次序,以使这里描述的本发明实施例能够以除了在这里图示或描述的以外的顺序实施。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本发明实施例的目的,不是旨在限制本发明。
对本发明实施例进行进一步详细说明之前,对本发明实施例中涉及的名词和术语进行说明,本发明实施例中涉及的名词和术语适用于如下的解释。
1)响应于,用于表示所执行的操作所依赖的条件或者状态,当满足所依赖的条件或状态时,所执行的一个或多个操作可以是实时的,也可以具有设定的延迟;在没有特别说明的情况下,所执行的多个操作不存在执行先后顺序的限制。
2)直播,在现场随着事件的发生、发展进程同步制作和发布信息,具有双向流通过程的信息网络发布方式。
3)主播用户,通过直播平台负责直播的人。
4)图像干扰信息,与位于直播区域的干扰对象对应,干扰对象包括闯入物和闯入人,其中闯入物是在主播直播时,突然进入直播画面的物体,比如动物等其他特殊情况的物体;闯入人是在主播直播时,突然进入直播画面的其他人,比如路人、朋友等,甚至有可能是由于不知情意外闯入的穿着私人化的家人或室友。
随着网络直播进入蓬勃发展期,越来越多的用户通过参与直播、观看直播等方式来丰富个人的娱乐生活。而在很多时候,由于主播个人沉醉于工作中,很可能会忽略直播环境中的变化,比如突然出现在直播画面的人或物,导致直播在非正常场景下进行。相关技术在解决直播中突发性事件的时候,通常采用临时中断直播的方式,参见图1,图1是相关技术中提供的直播信息的处理方法的流程示意图。这里,当检测到人或物突然闯入直播区域时,直接中断直播。虽然这种方式可以杜绝突发性事件带来的不良影响,但同时也会造成直播无法继续进行,影响用户体验,大大降低直播平台的用户粘性。虽然如今也存在一些通过修图去掉不必要的物体或人物的技术,但是仅能对图片进行编辑,无法对实时的视频进行调整。
基于此,本发明实施例提供一种直播信息的处理方法、装置、电子设备及存储介质,以至少解决上述存在的问题,接下来分别进行说明。
下面首先对本发明实施例提供的直播信息的处理的实施场景进行说明,参见图2,图2是本发明实施例提供的直播信息的处理的实施场景的架构示意图,为实现支撑一个示例性应用,终端200(包括终端200-1和终端200-2)上设置有应用客户端,比如直播客户端、即时通信客户端等社交客户端;其中,终端200-1为主播进行直播的主播端,终端200-2为用于观看直播的观众端。终端200通过网络300连接服务器100,网络300可以是广域网或者局域网,又或者是二者的组合,使用无线或有线链路实现数据传输。
终端200-1,用于在直播显示界面中,呈现对应主播用户的直播内容;发送直播内容至服务器100;
服务器100,用于当确定直播内容中包含干扰对象对应的图像干扰信息时,获取图像干扰信息在直播显示界面中所处的显示区域;确定对应所述显示区域的图像干扰信息过滤方式;基于确定的图像干扰信息过滤方式,对图像干扰信息进行过滤,将得到的目标内容发送至终端200-2;
终端200-2),用于接收到目标内容,在直播界面呈现不包含图像干扰信息的直播内容。
在实际应用中,服务器100既可以为单独配置的支持各种业务的一个服务器,亦可以配置为一个服务器集群;终端(如终端200-1)可以为智能手机、平板电脑、笔记本电脑等各种类型的用户终端,还可以为可穿戴计算设备、个人数字助理(PDA)、台式计算机、蜂窝电话、媒体播放器、导航设备、游戏机、电视机、或者这些数据处理设备或其他数据处理设备中任意两个或多个的组合。
下面对本发明实施例提供的直播信息的处理方法的电子设备的硬件结构做详细说明,参见图3,图3是本发明实施例提供的电子设备的结构示意图,图3所示的电子设备300包括:至少一个处理器310、存储器350、至少一个网络接口320和用户接口330。电子设备300中的各个组件通过总线系统340耦合在一起。可理解,总线系统340用于实现这些组件之间的连接通信。总线系统340除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图3中将各种总线都标为总线系统340。
处理器310可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
用户接口330包括使得能够呈现媒体内容的一个或多个输出装置331,包括一个或多个扬声器和/或一个或多个视觉显示屏。用户接口330还包括一个或多个输入装置332,包括有助于用户输入的用户接口部件,比如键盘、鼠标、麦克风、触屏显示屏、摄像头、其他输入按钮和控件。
存储器350可以是可移除的,不可移除的或其组合。示例性的硬件设备包括固态存储器,硬盘驱动器,光盘驱动器等。存储器350可选地包括在物理位置上远离处理器310的一个或多个存储设备。
存储器350包括易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。非易失性存储器可以是只读存储器(ROM,Read Only Me mory),易失性存储器可以是随机存取存储器(RAM,Random Access Memor y)。本发明实施例描述的存储器350旨在包括任意适合类型的存储器。
在一些实施例中,存储器350能够存储数据以支持各种操作,这些数据的示例包括程序、模块和数据结构或者其子集或超集,下面示例性说明。
操作系统351,包括用于处理各种基本系统服务和执行硬件相关任务的系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务;
网络通信模块352,用于经由一个或多个(有线或无线)网络接口320到达其他计算设备,示例性的网络接口320包括:蓝牙、无线相容性认证(WiFi)、和通用串行总线(USB,Universal Serial Bus)等;
呈现模块353,用于经由一个或多个与用户接口330相关联的输出装置331(例如,显示屏、扬声器等)使得能够呈现信息(例如,用于操作外围设备和显示内容和信息的用户接口);
输入处理模块354,用于对一个或多个来自一个或多个输入装置332之一的一个或多个用户输入或互动进行检测以及翻译所检测的输入或互动。
在一些实施例中,本发明实施例提供的直播信息的处理装置可以采用软件方式实现,图3示出了存储在存储器350中的直播信息的处理装置355,其可以是程序和插件等形式的软件,包括以下软件模块:获取模块3551、第一过滤模块3552和第一发送模块3553,这些模块是逻辑上的,因此根据所实现的功能可以进行任意的组合或进一步拆分,将在下文中说明各个模块的功能。
在另一些实施例中,本发明实施例提供的直播信息的处理装置可以采用软硬件结合的方式实现,作为示例,本发明实施例提供的直播信息的处理装置可以是采用硬件译码处理器形式的处理器,其被编程以执行本发明实施例提供的直播信息的处理方法,例如,硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路(ASIC,ApplicationSpecific Integrated Circuit)、DSP、可编程逻辑器件(PLD,Programmable LogicDevice)、复杂可编程逻辑器件(C PLD,Complex Programmable Logic Device)、现场可编程门阵列(FPGA,Fi eld-Programmable Gate Array)或其他电子元件。
基于上述对本发明实施例的直播信息的处理的实施场景及电子设备的说明,下面对本发明实施例提供的直播信息的处理方法进行详细说明。参见图4,图4是本发明实施例提供的直播信息的处理方法的流程示意图;在一些实施例中,该直播信息的处理方法可由服务器或终端单独实施,或由服务器及终端协同实施,本发明实施例提供的直播信息的处理方法包括:
步骤401:获取主播端在直播显示界面中呈现的对应主播用户的直播内容。
这里,在实际应用中,终端上设置有具备直播功能的应用客户端,比如直播客户端、即时通信客户端等;主播端可通过设置有应用客户端的终端进行直播,并将直播内容实时传输给后台服务器,由后台服务器转发至观众端,从而使观众端通过设置的应用客户端进行直播观看。
当主播进入直播间开始进行直播后,终端通过图像采集设备实时采集主播的视频画面,通过主播端的直播显示界面,呈现对应主播用户的直播内容。并将直播内容实时传输至后台服务器。服务器获取到主播端在直播显示界面中呈现的对应主播用户的直播内容后,将主播端的直播内容转发至观众端,实现主播端与观众端之间的直播内容的同步。
步骤402:当确定直播内容中包含干扰对象对应的图像干扰信息时,对图像干扰信息进行过滤,得到对应主播用户的目标内容。
这里,在实际应用中,针对终端上的应用客户端,配置对应直播的干扰消除模式,以实现对直播内容中的图像干扰信息的过滤。该干扰消除模式可以是默认开启的,也可以是主播用户自行开启的。在一些实施例中,终端可通如下方式开启干扰消除模式:呈现对应直播的干扰过滤功能项;响应于针对干扰过滤功能项的开启指令,控制直播显示界面的显示模式为干扰消除模式;该干扰消除模式用于当确定直播内容中包含图像干扰信息时,触发过滤操作。
在实际应用中,终端上的应用客户端设置有对应直播的干扰过滤功能项,该干扰过滤功能项用于控制干扰消除模式的开启与关闭。终端可通过应用客户端的直播配置界面呈现该干扰过滤功能项,参见图5A,图5A是本发明实施例提供的干扰消除模式的开启流程图一。这里,干扰消除模式并未开启,用户可通过在应用客户端的“我的”面板点击对应直播的干扰过滤功能项,触发针对干扰过滤功能项的开启指令;当终端接收到针对干扰过滤功能项的开启指令后,响应于该开启指令,将直播显示界面的显示模式调整为干扰消除模式,以用于当确定直播内容中存在图像干扰信息时,触发过滤图像干扰信息的操作。
在实际应用中,终端还可通过直播显示界面呈现干扰过滤功能项,参见图5B,图5B是本发明实施例提供的干扰消除模式的开启流程图二。这里,干扰消除模式并未开启,主播用户在进入直播间之后,可点击直播显示界面的“设置”按钮,以使直播显示界面呈现对应直播的干扰过滤功能项,为使主播可以正常直播,该包含干扰过滤功能项的显示界面可设置为部分透明显示。用户可通过点击该干扰过滤功能项,触发针对干扰过滤功能项的开启指令;当终端接收到针对干扰过滤功能项的开启指令后,响应于该开启指令,将直播显示界面的显示模式调整为干扰消除模式。
在一些实施例中,终端还可在直播显示界面中,呈现对应干扰过滤功能项的第二取消按键;响应于针对第二取消按键的点击操作,控制直播显示界面的显示模式为缺省显示。
这里,在实际应用中,当干扰过滤功能项开启之后,直播显示界面可能仍呈现有干扰过滤功能项的设置界面。为得到更好的直播体验,终端还可通过直播显示界面呈现第二取消按键,参见图6,图6是本发明实施例提供的控制直播显示模式为缺省显示的示意图。此时主播用户可点击呈现的对应干扰过滤功能项的第二取消按键;终端接收到针对第二取消按键的点击操作,控制直播显示界面的显示模式调整为缺省显示,即仅在直播显示界面呈现直播内容、评论内容、礼物特效等基础信息,如图6所示。
应用上述实施例,通过在主播端的直播配置界面和直播显示界面均呈现对应直播的干扰过滤功能项,使得开启干扰消除模式的方式更加多样化;如果主播在进入直播间之后才发现未开启干扰消除模式,则可直接在直播显示界面开启,不必退出直播间去设置,使用户得到更好的体验。
终端在确定主播端的直播显示界面的显示模式为干扰消除模式后,实时检测当前直播画面是否存在突然闯入的人或物,或者检测是否存在衣着不雅的人物等。在实际实施时,可通过以下方式识别闯入的人或物:识别当前直播画面内除主播用户外,是否还存在其他人或物,比如可通过检测物体的基础形态:是否具备人的基础形态、或者是否为圆形、正方形、三角形等;还可通过检测物体自身的运动:是否能检测到基本的肢体运动、关节运动、是否自己会动等。
当终端确定直播内容中包含闯入的人或物等图像干扰信息之后,对直播内容中的图像干扰信息进行过滤,从而得到对应直播内容、且不包含图像干扰信息的目标内容。在实际应用中,该针对图像干扰信息的过滤操作可通过终端执行,也可通过服务器执行,或者通过终端和服务器协同执行。以终端实施为例,在一些实施例中,终端可通过如下方式实现对图像干扰信息的过滤,以得到目标内容:获取图像干扰信息在直播显示界面中所处的显示区域;确定对应显示区域的图像干扰信息过滤方式;基于确定的图像干扰信息过滤方式,对图像干扰信息进行过滤,得到目标内容。
在实际应用中,针对处于不同显示区域的图像干扰信息,设置了不同的图像干扰信息过滤方式。因此,在对图像干扰信息进行过滤之前,首先需要获取图像干扰信息在直播显示界面中所处的显示区域,进而确定对应该显示区域的图像干扰信息过滤方式;从而基于确定的该图像干扰信息过滤方式,对图像干扰信息进行过滤,得到目标内容。
在一些实施例中,直播显示界面可划分为第一区域和第二区域,其中第一区域对应主播用户的面部,第二区域为直播显示界面中区别于第一区域的区域。在实际应用中,第一区域的形状可以长方形、椭圆形等,第一区域对应的宽度可以是主播用户的面部宽度。
在实际应用中,由于主播用户在直播过程中,头部会处于移动状态,因此第一区域和第二区域相对于直播显示界面的位置会实时的发生改变。因此在确定第一区域和第二区域时,需要实时识别主播用户的面部位置、面部宽度等。比如识别直播显示界面中的主播用户的面部,得到主播用户面部所在的区域,获取主播用户面部区域的宽度,从而确定第一区域的宽度与位置,进一步得到第二区域的位置与宽度。示例性地,参见图7,图7是本发明实施例提供的直播显示界面的显示区域示意图。这里,主播用户面部对应的区域为第一区域;其中,如图7中(1)所示,分别通过长方形来呈现第一区域和第二区域;如图7中(2)所示,通过椭圆形区域框来呈现第一区域;如图7中(3)所示,通过方形区域框来呈现第一区域。
进一步地,在一些实施例中,终端可通过如下方法确定对应显示区域的图像干扰信息过滤方式:当显示区域归属于对应主播用户面部的第一区域时,确定相应的图像干扰信息过滤方式为第一过滤方式;当显示区域归属于第二区域时,确定相应的图像干扰信息过滤方式为第二过滤方式,第二过滤方式不同于第一过滤方式;其中,第二区域为直播显示界面中区别于第一区域的区域。
当图像干扰信息位于第一区域,图像干扰信息过滤方式为第一过滤方式时,在一些实施例中,终端可通过如下方式基于第一过滤方式,对图像干扰信息进行过滤:获取与直播内容关联的第一视频内容;采用第一视频内容替换直播内容,以得到目标内容。
当通过第一过滤方式进行图像干扰信息过滤时,首先获取与直播内容关联的第一视频内容,这里,第一视频内容可以是在主播用户直播过程中预录制的,也可以是其他预设视频,且不包含图像干扰信息。将第一视频内容替换当前的直播内容,从而得到对应主播用户的目标内容。
当观众端基于该目标内容进行直播内容呈现时,如果第一视频内容的呈现时长小于图像干扰信息的存在时长,可以重复呈现该第一视频内容,比如可以先顺时针呈现,再逆时针呈现,依次循环,直到图像干扰信息消失。
在实际应用中,通过第一视频内容替换直播内容时,还可以识别直播内容的明暗度,基于识别的明暗度对第一视频内容进行明暗度适配调整,以使得在直播内容替换期间,观众端的直播内容衔接得更好,不易引起观众察觉,提升用户体验。
当图像干扰信息位于第二区域,图像干扰信息过滤方式为第二过滤方式时,在一些实施例中,终端可通过如下方式基于第二过滤方式,对图像干扰信息进行过滤:获取与直播内容关联的第二视频内容;确定对应第二区域的蒙版图;基于直播内容、蒙版图及第二视频内容,进行观众端直播内容合成,得到目标内容。
当通过第二过滤方式进行图像干扰信息过滤时,首先获取与直播内容关联的第二视频内容,这里,第二视频内容同样可以是在主播用户直播过程中预录制的,也可以其他预设视频,且不包含图像干扰信息。然后确定对应第二区域的蒙版图,进而对蒙版图、直播内容和第二视频内容进行合成,以得到目标内容。
在一些实施例中,终端可通过如下方式进行观众端直播内容的合成:添加蒙版图至第二视频内容,得到第二视频内容中对应第二区域的视频子内容;对视频子内容及直播内容进行合成,得到目标内容。
这里,添加蒙版图至第二视频内容,从而得到第二视频内容中对应第二区域的视频子内容,该视频子内容中不包含图像干扰信息;将视频子内容与直播内容进行合成,从而得到第一区域的直播内容不变、第二区域直播内容替换为不包含图像干扰信息的视频子内容的目标内容。
在实际应用中,蒙版图是针对第二区域设置的,当第二区域相对于直播显示界面的位置发生改变时,对应第二区域的蒙版图也会发生相应的改变,参见图8,图8是本发明实施例提供的蒙版图的示意图。如图8中(1)所示的对应第二区域的蒙版图,这里,蒙版图中对应第二区域的部分的位置和大小、与第二区域相对于直播显示界面的位置和大小是一样的,从而使得蒙版图刚好遮挡住第二视频内容中对应第二区域的视频子内容不被编辑。
在实际应用中,由于第二区域可以包含第一子区域和第二子区域,当图像干扰信息位于第一子区域时,还可以设置仅针对第一子区域的蒙版图,如图8中(2)所示。在合成时,可通过添加蒙版图至第二视频内容,得到第二视频内容中对应第一子区域的视频子内容;将该对应第一子区域的视频子内容与直播内容进行合成,得到目标内容。
应用上述实施例,在直播过程中,当确定直播内容中存在图像干扰信息时,采用预先录制的不包含图像干扰信息的视频内容,全部或者部分替换直播内容,从而得到不包含图像干扰信息的目标内容。
在一些实施例中,上述第一视频内容和第二视频内容可通过如下方式获取:确定当前包含图像干扰信息的直播内容所对应的目标时间点;获取在该目标时间点之前、且与该目标时间点相邻的目标时长的视频内容。
这里,该目标时长可以是5秒、10秒等。在实际应用中,当主播开启直播时,则可以录制目标时长的视频内容,以保证在直播的整个过程中,均可以通过上述过滤方式进行图像干扰信息的过滤。具体地,当检测到主播端开始直播时,实时录制目标时长的视频内容;当检测到在目标时长的范围内,录制的视频内容中包含图像干扰信息,则暂停录制视频内容,并对视频内容的图像干扰信息进行过滤,从而再次重新运行目标时长的视频内容的录制。
应用上述实施例,在主播直播过程中,录制目标时长的直播内容作为视频内容,当需要采用视频内容对包含图像干扰信息的直播内容进行全部或者部分替换时,则可以获取该直播内容对应的目标时间点之前、与目标时间点相邻的目标时长的视频内容,作为此次替换的视频内容;由于获取的视频内容与当前直播内容在时间上最为接近,那么两者之间的差异度则会相当小,从而使得替换后得到的直播内容不会引起观众端的注意,提高用户的体验。
在一些实施例中,第二区域包括第一子区域及第二子区域,第二子区域连接第一区域;当显示区域归属于第二子区域时,终端可在直播显示界面中,呈现对应图像干扰信息的告警信息,告警信息用于指示图像干扰信息对应的处理优先级。
在实际应用中,还可以将第二区域进一步划分为第一子区域和第二子区域,以提示主播用户图像干扰信息存在的紧急程度。比如可以按照预设的比例,比如第一子区域:第二子区域=0.6:0.4,将第二区域划分为第一子区域和第二子区域。
示例性地,参见图9,图9是本发明实施例提供的直播显示界面的区域示意图,这里,参见图9中(1),第一区域(即对应主播用户面部的区域)占直播显示界面的50%,且位于直播显示界面的中间,此时第二区域占剩余的50%,位于第一区域的左右两侧,按照第一子区域:第二子区域=0.6:0.4的比例,分别对左右两侧的第二区域进行划分,得到占30%的第一子区域,20%的第二子区域占,包括左右各占15%的第一子区域和左右各占10%的第二子区域。为提示主播用户图像干扰信息存在的紧急程度,将直播显示界面从主播用户的面部位置开始,依次向外划分为危险区、安全区和提示区,分别依次对应第一区域、第二子区域和第一子区域。参见图9中(2),这里,主播用户位于直播显示界面的右侧,此时,对应主播用户面部的第一区域靠右,占据80%,使得第二区域仅位于直播显示界面的左侧,此时将左侧剩余的20%,按照预设比例划分,得到占12%的第一子区域和占8%的第二子区域。
当确定图像干扰信息的显示区域归属于第二子区域时,可通过直播显示界面,呈现对应图像干扰信息的告警信息,以提示主播用户该图像干扰信息对应的紧急程度,即处理的优先级。比如当图像干扰信息的显示区域归属于第二子区域时,可认为图像干扰信息所在的显示区域较危险,此时主播应根据实际情况即刻采取措施。示例性地,参见图10,图10是本发明实施例提供的呈现告警信息的示意图,该告警信息可以在预设时长后取消呈现,也可以一直呈现直到图像干扰信息不再位于第二子区域。在实际实施时,当呈现告警信息的同时,还可以输出相应的提示音。
在一些实施例中,为使主播用户及时关注到直播画面中出现突然闯入的人或物,终端在确定直播中包含闯入的人或物等图像干扰信息之后,输出对应图像干扰信息的提示信息,提示信息用于提示直播显示界面中存在图像干扰信息;图像干扰信息的输出方式包括以下至少之一:文本输出方式、音频输出方式、图形输出方式。
在一些实施例中,当图像干扰信息的呈现方式包括图形输出方式时,终端可在直播显示界面中,呈现提示提示边框,提示边框具有目标形状,用于提示直播显示界面中存在图像干扰信息。
在实际应用中,终端在确定直播内容中存在图像干扰信息后,可通过输出对应图像干扰信息的提示信息的方式,提示主播用户直播显示界面中存在图像干扰信息。这里,图像干扰信息的输出方式可以包括文本输出方式、音频输出方式和图形输出方式。在实际实施时,直播显示配置界面中可包含对提示信息输出方式的配置功能项,参见图11,图11是本发明实施例提供的提示信息输出方式的配置界面示意图,这里,包括文本输出、音频输出和图形输出三种方式对应的管理功能项,主播用户可通过点击该管理功能项开启或关闭对应的提示信息输出方式,该三种提示信息输出方式可同时开启,也可部分开启,如图11所示,同时开启了文本输出方式和图形输出方式。
在实际应用中,当通过图形输出方式输出提示信息时,可在直播显示界面中,呈现具有目标颜色和目标形状的提示边框,同时提示边框的呈现模式还可以时闪烁呈现,以便更能引起主播用户的注意。为使主播用户能够通过提示边框看到直播内容,还可以设置提示边框的透明度,比如半透明呈现。
示例性地,参见图12A-C,图12A-C是本发明实施例提供的提示信息输出方式的示意图,其中图12A为文本输出方式,图12B为图形输出方式。如图12A所示,通过文本的方式“注意有闯入物\人进入直播画面”,提示主播用户直播内容中存在图像干扰信息;再如图12B所示,通过呈现半透明的、目标颜色的提示框,来提示主播用户直播内容中存在图像干扰信息。除了图12A-B所示的两种提示信息输出方式外,还可以通过音频输出的方式提示,比如播放一段具有警示性的音乐或铃声。当然,如果在进行提示信息输出方式选择时,同时开启了文本和图形输出方式,那么直播显示界面则可以通过呈现文本和图形该两种方式提示主播用户,如图12C所示,包括文本“注意有闯入物\人进入直播画面”和目标颜色的提示框。
在一些实施例中,终端可获取图像干扰信息呈现于直播显示界面中所对应的呈现时长;当呈现时长达到目标呈现时长时,呈现对应图像干扰信息的提示信息。
在实际应用中,直播显示界面中的图像干扰信息可能是一闪而过,比如突然闯入的人发现自己处于直播画面后立即退出,针对这种情形,则可以不用呈现对应图像干扰信息的提示信息。因此,在具体实施时,还可以针对图像干扰信息设置对应的目标呈现时长。终端在检测到直播画面中包含图像干扰信息后,获取图像干扰信息在直播显示界面的呈现时长,当该呈现时长达到目标呈现时长时,则呈现对应图像干扰信息的提示信息,以提示主播用户自行解决。
在一些实施例中,终端可在直播显示界面中,呈现对应提示信息的第一取消按键;响应于针对第一取消按键的点击操作,取消所输出的提示信息。
当呈现对应图像干扰信息的提示信息后,还可同时呈现对应提示信息的第一取消按键。如果主播用户认为闯入的人或物可以忽略不必关注时,则可以通过点击第一取消按键,取消提示信息的输出,即不再呈现提示信息。参见图13A,图13A是本发明实施例提供的提示信息取消输出的流程示意图,这里,终端通过直播显示界面,呈现“取消提示信息”的功能项,当接收到针对该功能项的点击操作时,则响应于该点击操作,取消所输出的提示信息。
在一些实施例中,如果主播用户主动加入一些物品作为直播所需物时,为防止将所需物当作图像干扰信息进行误消除,影响直播效果,当直播显示界面呈现对应图像干扰信息的提示信息时,终端还可在直播显示界面,呈现对应干扰消除模式的快捷关闭功能项;当接收到用户针对该快捷关闭功能项的点击操作,则关闭干扰消除模式。参见图13B,图13B是本发明实施例提供的干扰消除模式快捷关闭的操作流程图,这里,直播显示界面呈现有“取消消除功能”的快捷功能项,主播用户可点击该快捷功能项实现对干扰消除模式的快捷关闭。
在一些实施例中,终端可在直播显示界面中,实时呈现对应提示信息的剩余呈现时长;当剩余呈现时长达到目标剩余时长时,取消所输出的提示信息。
在实际应用中,可能存在闯入物或人使主播用户所允许的情况,此时如果一直呈现对应图像干扰信息的提示信息,则会影响主播用户的直播体验。因此,在实际应用中,还可以设置提示信息的呈现时长,并在提示信息的显示过程中,实时呈现提示信息的剩余呈现时长;当确定剩余呈现时长达到目标剩余时长时,取消所输出的提示信息。参见图14,图14是本发明实施例提供的取消提示信息的输出的流程示意图,这里,设置提示信息的呈现时长为5秒,目标剩余时长为0秒,实时呈现提示信息的剩余呈现时长3秒、0秒,直至取消输出的提示信息,如图14所示。
在一些实施例中,终端在输出对应图像干扰信息的提示信息之后,还可对直播显示界面中呈现的直播内容进行图像干扰信息检测,得到检测结果;当检测结果表征直播内容中不再包含图像干扰信息时,取消所输出的提示信息。
在实际应用中,终端在输出对应图像干扰信息的提示信息之后,还可对直播内容进行图像干扰信息的实时性检测、或者周期性检测,得到检测结果;当该检测结果表征直播内容中不再包含图像干扰信息时,即闯入物或人已经消失,则可以取消所输出的提示信息,比如不再呈现提示文本或者目标颜色的提示提示边框。
步骤403:发送目标内容至观众端,使得观众端的直播界面所呈现的直播内容中不包含图像干扰信息。
在通过上述实施例的方式对图像干扰信息进行过滤后,得到目标内容。在实际应用中,上述图像干扰信息的过滤操作可以是主播端执行的,也可以是服务器执行的。当由主播端基于图像干扰信息过滤操作得到目标内容时,对应主播端的终端将目标内容传输至服务器,由服务器转发至观众端;当由服务器基于图像干扰信息过滤操作得到目标内容时,由服务器直接发送至观众端。对应观众端的终端接收到目标内容后,通过直播界面呈现不包含图像干扰信息的直播内容。
示例性地,参见图15,图15是本发明实施例提供的干扰消除模式下的主播端和观众端的直播示意图。这里,主播端的直播显示界面的第二区域内出现了突然闯入的人,即直播内容中包含图像干扰信息,此时过滤直播内容中图像干扰信息,得到目标内容,并将目标内容发送给观众端;观众端基于接收的目标内容,通过直播界面呈现不包含图像干扰信息的直播内容,即呈现不包含闯入人的直播内容。
应用本发明上述实施例,在直播过程中,当主播端确定主播用户的直播内容中包含图像干扰信息时,对图像干扰信息进行过滤,得到对应主播用户的目标内容,将目标内容发送给观众端,以使观众端的直播界面所呈现的直播内容不包含图像干扰信息;如此,当主播端直播内容中存在图像干扰信息时,无需中断直播,则实现了观众端直播内容中图像干扰信息的消除,提高用户体验,增加了直播平台的用户粘性。
下面将说明本发明实施例在一个实际的应用场景中的示例性应用。以终端运行直播客户端、与服务器协同实施为例,对本发明实施例提供的视频内容的预录制方法进行说明,参见图16,图16是本发明实施例提供的视频内容的预录制方法的流程示意图,本发明实施例提供的视频内容的预录制方法包括:
步骤1601:终端运行直播客户端。
这里,终端位于主播端一侧。
步骤1602:响应于针对干扰过滤功能项的开启指令,控制直播显示界面的显示模式为干扰消除模式。
这里,终端设置有对应直播的干扰过滤功能项,该干扰过滤功能项用于控制干扰消除模式的开启与关闭。具体地,终端可通过直播客户端的直播配置界面呈现干扰过滤功能项(参见图5A),还可通过直播显示界面呈现干扰过滤功能项(参见图5B)。
步骤1603:确定主播用户开始直播后,呈现干扰消除模式正在启动的提示信息。
参见图17,图17是本发明实施例提供的干扰消除模式启动示意图。这里,在确定直播用户开始直播后,呈现干扰消除模式正在启动的提示信息,比如图17中的“系统正在构建智能消除能力”,同时,还可以呈现提示信息的呈现时长、及剩余呈现时长,比如“5秒后消失”。
步骤1604:通过直播显示界面呈现对应主播用户的直播内容。
这里,主播用户进入直播间开始直播后,终端通过图像采集设备实时采集主播的视频画面,通过直播显示界面,呈现对应主播用户的直播内容。
步骤1605:将对应主播的直播内容实时发送至服务器。
步骤1606:服务器接收到实时直播内容,开始实时录制目标时长的视频内容。
这里,可以设置录制视频内容的目标时长,比如录制10秒的视频内容。
步骤1607:当检测到在目标时长内,录制的视频内容包含图像干扰信息,则暂停录制视频内容。
这里,如果在视频内容录制期间,检测到主播端的直播内容存在闯入人/物等图像干扰信息,则暂停录制视频内容,以避免录制的视频内容中包含图像干扰信息。
步骤1608:对实时直播内容进行图像干扰信息过滤,得到目标内容并发送给观众端,以使观众端呈现的直播内容不包含图像干扰信息。
步骤1609:对主播端的直播内容进行检测,确定直播内容中不再存在图像干扰信息。
这里,可对直播内容进行图像干扰信息的实时性检测、或者周期性检测,得到检测结果;当该检测结果表征直播内容中不再包含图像干扰信息时,即闯入物或人已经消失,则确定直播内容不再存在图像干扰信息。
步骤1610:重启运行视频内容的录制。
这里,当确定直播内容中不再存在图像干扰信息后,继续录制视频内容,以用作图像干扰信息消除的替换资源。
接下来以终端运行直播客户端、与服务器协同实施为例,对本发明实施例提供的直播信息的处理方法进行说明,参见图18,图18是本发明实施例提供的直播信息的处理方法的流程示意图,本发明实施例提供的直播信息的处理方法包括:
步骤1801:终端运行直播客户端。
这里,终端位于主播端一侧。
步骤1802:响应于针对干扰过滤功能项的开启指令,控制直播显示界面的显示模式为干扰消除模式。
这里,终端设置有对应直播的干扰过滤功能项,该干扰过滤功能项用于控制干扰消除模式的开启与关闭。具体地,终端可通过直播客户端的直播配置界面呈现干扰过滤功能项(参见图5A),还可通过直播显示界面呈现干扰过滤功能项(参见图5B)。
步骤1803:通过直播显示界面呈现对应主播用户的直播内容。
这里,主播用户进入直播间开始直播后,终端通过图像采集设备实时采集主播的视频画面,通过直播显示界面,呈现对应主播用户的直播内容。
步骤1804:将对应主播用户的直播内容实时发送至服务器。
这里,由服务器将直播内容转发至观众端,以同步主播端和观众端的直播内容。
步骤1805:服务器对主播用户的实时直播内容进行检测,确定直播内容中是否存在图像干扰信息。
这里,图像干扰信息包括闯入物和闯入人,其中闯入物是在主播直播时,突然进入直播画面的物体,比如动物等其他特殊情况的物体;闯入人是在主播直播时,突然进入直播画面的其他人,比如路人、朋友等,甚至有可能是由于不知情意外闯入的穿着私人化的家人或室友。
在实际实施时,可通过以下方式识别闯入的人或物:识别当前直播画面内除主播用户外,是否还存在其他人或物,比如可通过检测物体的基础形态:是否具备人的基础形态、或者是否为圆形、正方形、三角形等;还可通过检测物体自身的运动:是否能检测到基本的肢体运动、关节运动、是否自己会动等。
步骤1806:当确定直播内容中存在图像干扰信息时,获取图像干扰信息在直播显示界面中所处的显示区域。
在实际应用中,针对处于不同显示区域的图像干扰信息,设置了不同的图像干扰信息过滤方式。因此,在对图像干扰信息进行过滤之前,首先需要获取图像干扰信息在直播显示界面中所处的显示区域,进而确定对应该显示区域的图像干扰信息过滤方式。
这里,直播显示界面可划分为第一区域和第二区域,其中第一区域对应主播用户的面部,第二区域为直播显示界面中区别于第一区域的区域。在实际应用中,第一区域的形状可以长方形、椭圆形等,第一区域对应的宽度可以是主播用户的面部宽度。
进一步地,第二区域还可按照预设比例(第一子区域:第二子区域=0.6:0.4)划分为第一子区域和第二子区域,参见图9,图9是本发明实施例提供的直播显示界面的区域示意图,这里,参见图9中(1),第一区域(即对应主播用户面部的区域)占直播显示界面的50%,且位于直播显示界面的中间,此时第二区域占剩余的50%,位于第一区域的左右两侧,按照第一子区域:第二子区域=0.6:0.4的比例,分别对左右两侧的第二区域进行划分,得到占30%的第一子区域,20%的第二子区域占,包括左右各占15%的第一子区域和左右各占10%的第二子区域。为提示主播用户图像干扰信息存在的紧急程度,将直播显示界面从主播用户的面部位置开始,依次向外划分为危险区、安全区和提示区,分别依次对应第一区域、第二子区域和第一子区域。参见图9中(2),这里,主播用户位于直播显示界面的右侧,此时,对应主播用户面部的第一区域靠右,占据80%,使得第二区域仅位于直播显示界面的左侧,此时将左侧剩余的20%,按照预设比例划分,得到占12%的第一子区域和占8%的第二子区域。
同时,终端在检测待直播内容中存在图像干扰信息时,呈现对应图像干扰信息的提示信息,比如文本提示信息、图形提示信息等,参见图12A-C。
步骤1807:当确定图像干扰信息位于第一区域时,确定图像干扰信息过滤方式为第一过滤方式。
这里,图像干扰信息位于对应主播面部的第一区域,此时相当于位于风险较高的危险区,因此采用对应第一区域的第一过滤方式来实现图像干扰信息的过滤。
步骤1808:获取与直播内容关联的第一视频内容。
这里,第一视频内容可以是在主播用户直播过程中预录制的,也可以是其他预设视频,且不包含图像干扰信息。
在本发明实施例中,将主播直播过程中所录制的目标时长的直播内容作为第一视频内容(参见图16)。当需要采用第一视频内容对包含图像干扰信息的直播内容进行全部替换时,则可以获取该直播内容对应的目标时间点之前、与目标时间点相邻的目标时长的视频内容,作为此次替换的第一视频内容;由于获取的第一视频内容与当前直播内容在时间上最为接近,那么两者之间的差异度则会相当小,从而使得替换后得到的直播内容不会引起观众端的注意,提高用户的体验。
步骤1809:采用第一视频内容替换直播内容,以得到目标内容。
在实际应用中,通过第一视频内容替换直播内容时,还可以识别直播内容的明暗度,基于识别的明暗度对第一视频内容进行明暗度适配调整,以使得在直播内容替换期间,观众端的直播内容衔接得更好,不易引起观众察觉,提升用户体验。
步骤1810:将目标内容发送至观众端,使得观众端的直播界面所呈现的直播内容中不包含图像干扰信息。
步骤1811:对主播端传输的实时直播内容进行图像干扰信息检测,当第一视频内容的呈现时长小于图像干扰信息的存在时长,重复发送目标内容,使观众端循环呈现第一视频内容。
在实际应用中,在重复呈现该第一视频内容时,可以先顺时针呈现,再逆时针呈现,依次循环,直到图像干扰信息消失。
步骤1812:确定主播端传输的实时直播内容中不再包含图像干扰信息。
这里,终端可以取消呈现的对应图像干扰信息的提示信息。
在确定主播端传输的实时直播内容中不再包含图像干扰信息后,回到正常直播流程,将主播端传输的直播内容实时转发至观众端,实现主播端与观众端的直播内容的同步。
接下来继续以终端运行直播客户端、与服务器协同实施为例,对本发明实施例提供的直播信息的处理方法进行说明,参见图19,图19是本发明实施例提供的直播信息的处理方法的流程示意图,本发明实施例提供的直播信息的处理方法包括:
步骤1901:终端运行直播客户端。
这里,终端位于主播端一侧。
步骤1902:响应于针对干扰过滤功能项的开启指令,控制直播显示界面的显示模式为干扰消除模式。
这里,终端设置有对应直播的干扰过滤功能项,该干扰过滤功能项用于控制干扰消除模式的开启与关闭。具体地,终端可通过直播客户端的直播配置界面呈现干扰过滤功能项(参见图5A),还可通过直播显示界面呈现干扰过滤功能项(参见图5B)。
步骤1903:通过直播显示界面呈现对应主播用户的直播内容。
这里,主播用户进入直播间开始直播后,终端通过图像采集设备实时采集主播的视频画面,通过直播显示界面,呈现对应主播用户的直播内容。
步骤1904:将对应主播用户的直播内容实时发送至服务器。
这里,由服务器将直播内容转发至观众端,以同步主播端和观众端的直播内容。
步骤1905:终端对直播内容进行实时检测,当确定直播内容中包含图像干扰信息时,输出对应图像干扰信息的提示信息。
这里,图像干扰信息的输出方式可以包括文本输出方式、音频输出方式和图形输出方式。在实际实施时,直播显示配置界面中可包含对提示信息输出方式的配置功能项,参见图11,图11是本发明实施例提供的提示信息输出方式的配置界面示意图,这里,包括文本输出、音频输出和图形输出三种方式对应的管理功能项,主播用户可通过点击该管理功能项开启或关闭对应的提示信息输出方式,该三种提示信息输出方式可同时开启,也可部分开启,如图11所示,同时开启了文本输出方式和图形输出方式。
在实际应用中,当通过图形输出方式输出提示信息时,可在直播显示界面中,呈现具有目标颜色和目标形状的提示边框,同时提示边框的呈现模式还可以时闪烁呈现,以便更能引起主播用户的注意。为使主播用户能够通过提示边框看到直播内容,还可以设置提示边框的透明度,比如半透明呈现。
示例性地,参见图12A-C,其中图12A为文本输出方式,图12B为图形输出方式。如图12A所示,通过文本的方式“注意有闯入物\人进入直播画面”,提示主播用户直播内容中存在图像干扰信息;再如图12B所示,通过呈现半透明的、目标颜色的提示框,来提示主播用户直播内容中存在图像干扰信息。除了图12A-B所示的两种提示信息输出方式外,还可以通过音频输出的方式提示,比如播放一段具有警示性的音乐或铃声。当然,如果在进行提示信息输出方式选择时,同时开启了文本和图形输出方式,那么直播显示界面则可以通过呈现文本和图形该两种方式提示主播用户,如图12C所示,包括文本“注意有闯入物\人进入直播画面”和目标颜色的提示框。
在一些实施例中,如果主播用户主动加入一些物品作为直播所需物时,为防止将所需物当作图像干扰信息进行误消除,影响直播效果,当直播显示界面呈现对应图像干扰信息的提示信息时,终端还可在直播显示界面,呈现对应干扰消除模式的快捷关闭功能项;当接收到用户针对该快捷关闭功能项的点击操作,则关闭干扰消除模式。参见图13B,这里,直播显示界面呈现有“取消消除功能”的快捷功能项,主播用户可点击该快捷功能项实现对干扰消除模式的快捷关闭。
步骤1906:服务器对主播用户的实时直播内容进行检测,确定直播内容中是否存在图像干扰信息。
这里,图像干扰信息包括闯入物和闯入人,其中闯入物是在主播直播时,突然进入直播画面的物体,比如动物等其他特殊情况的物体;闯入人是在主播直播时,突然进入直播画面的其他人,比如路人、朋友等,甚至有可能是由于不知情意外闯入的穿着私人化的家人或室友。
在实际实施时,可通过以下方式识别闯入的人或物:识别当前直播画面内除主播用户外,是否还存在其他人或物,比如可通过检测物体的基础形态:是否具备人的基础形态、或者是否为圆形、正方形、三角形等;还可通过检测物体自身的运动:是否能检测到基本的肢体运动、关节运动、是否自己会动等。
步骤1907:当确定直播内容中存在图像干扰信息时,获取图像干扰信息在直播显示界面中所处的显示区域。
在实际应用中,针对处于不同显示区域的图像干扰信息,设置了不同的图像干扰信息过滤方式。因此,在对图像干扰信息进行过滤之前,首先需要获取图像干扰信息在直播显示界面中所处的显示区域,进而确定对应该显示区域的图像干扰信息过滤方式。
这里,直播显示界面可划分为第一区域和第二区域,其中第一区域对应主播用户的面部,第二区域为直播显示界面中区别于第一区域的区域。在实际应用中,第一区域的形状可以长方形、椭圆形等,第一区域对应的宽度可以是主播用户的面部宽度。
进一步地,第二区域还可按照预设比例(第一子区域:第二子区域=0.6:0.4)划分为第一子区域和第二子区域,参见图9,图9是本发明实施例提供的直播显示界面的区域示意图,这里,参见图9中(1),第一区域(即对应主播用户面部的区域)占直播显示界面的50%,且位于直播显示界面的中间,此时第二区域占剩余的50%,位于第一区域的左右两侧,按照第一子区域:第二子区域=0.6:0.4的比例,分别对左右两侧的第二区域进行划分,得到占30%的第一子区域,20%的第二子区域占,包括左右各占15%的第一子区域和左右各占10%的第二子区域。为提示主播用户图像干扰信息存在的紧急程度,将直播显示界面从主播用户的面部位置开始,依次向外划分为危险区、安全区和提示区,分别依次对应第一区域、第二子区域和第一子区域。参见图9中(2),这里,主播用户位于直播显示界面的右侧,此时,对应主播用户面部的第一区域靠右,占据80%,使得第二区域仅位于直播显示界面的左侧,此时将左侧剩余的20%,按照预设比例划分,得到占12%的第一子区域和占8%的第二子区域。
步骤1908:当确定图像干扰信息位于第二区域时,确定图像干扰信息过滤方式为第二过滤方式。
这里,图像干扰信息位于对应非主播用户面部的第二区域,此时相当于位于风险低于第一区域的提示区或安全区。
步骤1909:获取与直播内容关联的第二视频内容。
这里,第二视频内容可以是在主播用户直播过程中预录制的,也可以是其他预设视频,且不包含图像干扰信息。
在本发明实施例中,将主播直播过程中所录制的目标时长的直播内容作为第二视频内容(参见图16)。当需要采用第二视频内容对包含图像干扰信息的直播内容进行部分替换时,则可以获取该直播内容对应的目标时间点之前、与目标时间点相邻的目标时长的视频内容,作为此次替换的第二视频内容;由于获取的第二视频内容与当前直播内容在时间上最为接近,那么两者之间的差异度则会相当小,从而使得替换后得到的直播内容不会引起观众端的注意,提高用户的体验。
步骤1910:确定对应第二区域的蒙版图。
在实际应用中,蒙版图是针对第二区域设置的,当第二区域相对于直播显示界面的位置发生改变时,对应第二区域的蒙版图也会发生相应的改变,参见图8。这里,蒙版图中对应第二区域的部分的位置和大小、与第二区域相对于直播显示界面的位置和大小是一样的,从而使得蒙版图刚好遮挡住第二视频内容中对应第二区域的视频子内容不被编辑。
步骤1911:添加蒙版图至第二视频内容,得到第二视频内容中对应第二区域的视频子内容。
这里,添加蒙版图至第二视频内容,从而得到第二视频内容中对应第二区域的视频子内容,该视频子内容中不包含图像干扰信息。
步骤1912:对视频子内容及直播内容进行合成,得到目标内容。
将视频子内容与直播内容进行合成,通过该视频子内容遮挡住直播内容中包含图像干扰信息的第二区域,从而得到第一区域的直播内容不变、第二区域直播内容替换为不包含图像干扰信息的视频子内容的目标内容。
在一些实施例中,由于第二区域包含第一子区域和第二子区域,当图像干扰信息位于第一子区域时,还可以设置仅针对第一子区域的蒙版图,如图8中(2)所示。在合成时,可通过添加蒙版图至第二视频内容,得到第二视频内容中对应第一子区域的视频子内容;将该对应第一子区域的视频子内容与直播内容进行合成,得到目标内容。
步骤1913:将目标内容发送至观众端,使得观众端的直播界面所呈现的直播内容中不包含图像干扰信息。
步骤1914:确定主播端传输的实时直播内容中不再包含图像干扰信息。
这里,终端可以取消呈现的对应图像干扰信息的提示信息。
在确定主播端传输的实时直播内容中不再包含图像干扰信息后,回到正常直播流程,将主播端传输的直播内容实时转发至观众端,实现主播端与观众端的直播内容的同步。
综上,参见图20,图20是本发明实施例提供的直播信息的处理方法的结构示意图。这里,当图像干扰信息位于第一区域(即对应主播面部的危险区)时,主播端异步进行界面提示,通过呈现红框的方式,提示主播用户直播内容中存在图像干扰信息;服务器直接采用第一过滤方式对图像干扰信息进行消除,得到目标内容,并发送给观众端,以使观众端呈现不包含图像干扰信息的直播内容。
当图像干扰信息位于第二区域(对应非主播面部区域的提示区和安全区)时,主播端同样异步进行界面提示,通过呈现红框的方式,提示主播用户直播内容中存在图像干扰信息,并呈现对应的文本提示信息“注意有闯入物\人进入直播画面”、呈现对应干扰消除模式的快捷关闭功能项、及提示信息的呈现时长等;服务器采用与第二区域对应的第二过滤方式对图像干扰信息进行消除,得到目标内容,并发送给观众端,以使观众端呈现不包含图像干扰信息的直播内容。
当直播内容不再包含图像干扰信息后,主播端的红框提示消失。如此,整个直播过程中,虽然直播内容出现了意外闯入的人/物等图像干扰信息,但是观众端通过接收图像干扰信息消除后的目标内容,呈现的直播内容并不包含图像干扰信息,处于正常直播状态,且不存在任何提示效果。实现了对主播用户的第一时间提示,减少了平台、主播用户等多方面的风险,而对于观众端来说,直播正常进行,无感知,提高了用户体验,从而增加了直播平台的用户粘性。
应用本发明上述实施例,通过对直播过程中出现的闯入人/物等图像干扰信息的智能消除,避免了因突然出现的图像干扰信息不得不进行中止直播的情况,也能很好地避免了一些不雅视频的直播,以及避免了穿着私人化的家人或室友意外出境等尴尬画面,从而以最低成本解决风控问题,降低平台风险。整个直播过程将不再出现临时中断的问题,提高了用户体验,从而增加了直播平台的用户粘性,使直播平台更具有竞争力。
下面继续说明本发明实施例提供的直播信息的处理装置355,在一些实施例中,直播信息的处理装置可采用软件模块的方式实现。参见图21,图21是本发明实施例提供的直播信息的处理装置355的结构示意图,本发明实施例提供的直播信息的处理装置355包括:
获取模块3551,用于获取主播端直播过程中对应主播用户的直播内容;
第一过滤模块3552,用于当确定所述直播内容中包含干扰对象对应的图像干扰信息时,获取所述图像干扰信息在直播显示界面中所处的显示区域;确定对应所述显示区域的图像干扰信息过滤方式;基于确定的所述图像干扰信息过滤方式,对所述图像干扰信息进行过滤,得到对应所述主播用户的目标内容;
第一发送模块3553,用于发送所述目标内容至观众端,使得所述观众端的直播界面所呈现的直播内容中不包含所述图像干扰信息。
在一些实施例中,所述第一过滤模块3552,还用于当所述显示区域归属于对应所述主播用户面部的第一区域时,确定相应的图像干扰信息过滤方式为第一过滤方式;
当所述显示区域归属于第二区域时,确定相应的图像干扰信息过滤方式为第二过滤方式,所述第二过滤方式不同于所述第一过滤方式;
其中,所述第二区域为所述直播显示界面中区别于所述第一区域的区域。
在一些实施例中,所述第一过滤模块3552,还用于获取与所述直播内容关联的第一视频内容;
采用所述第一视频内容替换所述直播内容,以得到所述目标内容。
在一些实施例中,所述第一过滤模块3552,还用于获取与所述直播内容关联的第二视频内容;
确定对应所述第二区域的蒙版图;
基于所述直播内容、所述蒙版图及所述第二视频内容,进行观众端直播内容合成,得到所述目标内容。
在一些实施例中,所述第一过滤模块3552,还用于添加所述蒙版图至所述第二视频内容,得到所述第二视频内容中对应所述第二区域的视频子内容;
对所述视频子内容及所述直播内容进行合成,得到所述目标内容。
在一些实施例中,所述第二区域包括:第一子区域及第二子区域,所述第二子区域连接所述第一区域;所述装置还包括:
呈现模块,用于发送通知信息至主播端,以通知所述主播端在直播显示界面中,呈现对应所述图像干扰信息的告警信息,所述告警信息用于指示所述图像干扰信息对应的处理优先级。
在一些实施例中,所述呈现模块,还用于输出对应所述图像干扰信息的提示信息,所述提示信息用于提示所述直播显示界面中存在所述图像干扰信息;
所述图像干扰信息的输出方式包括以下至少之一:文本输出方式、音频输出方式、图形输出方式。
在一些实施例中,所述呈现模块,还用于在所述直播显示界面中,呈现提示边框,所述提示边框具有目标形状,用于提示所述直播显示界面中存在所述图像干扰信息。
在一些实施例中,所述呈现模块,还用于获取所述图像干扰信息呈现于所述直播显示界面中所对应的呈现时长;
当所述呈现时长达到目标呈现时长时,呈现对应所述图像干扰信息的提示信息。
在一些实施例中,所述呈现模块,还用于在所述直播显示界面中,呈现对应所述提示信息的第一取消按键;
响应于针对所述第一取消按键的点击操作,取消所输出的所述提示信息。
在一些实施例中,所述呈现模块,还用于在所述直播显示界面中,实时呈现对应所述提示信息的剩余呈现时长;
当所述剩余呈现时长达到目标剩余时长时,取消所输出的所述提示信息。
在一些实施例中,所述装置还包括检测模块,用于对所述直播显示界面中呈现的直播内容进行图像干扰信息检测,得到检测结果;
当所述检测结果表征所述直播内容中不再包含所述图像干扰信息时,取消所输出的所述提示信息。
在一些实施例中,所述呈现模块,还用于呈现对应直播的干扰过滤功能项;
响应于针对所述干扰过滤功能项的开启指令,控制所述直播显示界面的显示模式为干扰消除模式,所述干扰消除模式用于当确定所述直播内容中包含图像干扰信息时,触发所述过滤操作。
在一些实施例中,所述呈现模块,还用于在所述直播显示界面中,呈现对应所述干扰过滤功能项的第二取消按键;
响应于针对所述第二取消按键的点击操作,控制所述直播显示界面的显示模式为缺省显示。
下面继续说明本发明实施例提供的直播信息的处理装置,在一些实施例中,直播信息的处理装置可采用软件模块的方式实现。参见图22,图22是本发明实施例提供的直播信息的处理装置的结构示意图,本发明实施例提供的直播信息的处理装置包括:
呈现模块2201,用于在主播端的直播显示界面中,呈现对应主播用户的直播内容;
第二过滤模块2202,用于当确定所述直播内容中包含干扰对象对应的图像干扰信息时,对所述图像干扰信息进行过滤,得到对应所述主播用户的目标内容;
第二发送模块2203,用于发送所述目标内容至观众端。
本发明实施例还提供一种电子设备,所述电子设备包括:
存储器,用于存储可执行指令;
处理器,用于执行所述存储器中存储的可执行指令时,实现本发明实施例提供的直播信息的处理方法。
本发明实施例还提供一种计算机可读存储介质,存储有可执行指令,所述可执行指令被处理器执行时,实现本发明实施例提供的直播信息的处理方法。
在一些实施例中,计算机可读存储介质可以是FRAM、ROM、PROM、EP ROM、EEPROM、闪存、磁表面存储器、光盘、或CD-ROM等存储器;也可以是包括上述存储器之一或任意组合的各种设备。计算机可以是包括智能终端和服务器在内的各种计算设备。
在一些实施例中,可执行指令可以采用程序、软件、软件模块、脚本或代码的形式,按任意形式的编程语言(包括编译或解释语言,或者声明性或过程性语言)来编写,并且其可按任意形式部署,包括被部署为独立的程序或者被部署为模块、组件、子例程或者适合在计算环境中使用的其它单元。
作为示例,可执行指令可以但不一定对应于文件系统中的文件,可以可被存储在保存其它程序或数据的文件的一部分,例如,存储在超文本标记语言(H TML,Hyper TextMarkup Language)文档中的一个或多个脚本中,存储在专用于所讨论的程序的单个文件中,或者,存储在多个协同文件(例如,存储一个或多个模块、子程序或代码部分的文件)中。
作为示例,可执行指令可被部署为在一个计算设备上执行,或者在位于一个地点的多个计算设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个计算设备上执行。
以上所述,仅为本发明的实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和范围之内所作的任何修改、等同替换和改进等,均包含在本发明的保护范围之内。

Claims (15)

1.一种直播信息的处理方法,其特征在于,所述方法包括:
获取主播端直播过程中对应主播用户的直播内容;
当确定所述直播内容中包含干扰对象对应的图像干扰信息时,获取所述图像干扰信息在直播显示界面中所处的显示区域;
确定对应所述显示区域的图像干扰信息过滤方式;
基于确定的所述图像干扰信息过滤方式,对所述图像干扰信息进行过滤,得到对应所述主播用户的目标内容;
发送所述目标内容至观众端,使得所述观众端的直播界面所呈现的直播内容中不包含所述图像干扰信息。
2.如权利要求1所述的方法,其特征在于,所述确定对应所述显示区域的图像干扰信息过滤方式,包括:
当所述显示区域归属于对应所述主播用户面部的第一区域时,确定相应的图像干扰信息过滤方式为第一过滤方式;
当所述显示区域归属于第二区域时,确定相应的图像干扰信息过滤方式为第二过滤方式,所述第二过滤方式不同于所述第一过滤方式;
其中,所述第二区域为所述直播显示界面中区别于所述第一区域的区域。
3.如权利要求2所述的方法,其特征在于,当所述图像干扰信息过滤方式为第一过滤方式时,所述基于确定的所述图像干扰信息过滤方式,对所述图像干扰信息进行过滤,得到所述目标内容,包括:
获取与所述直播内容关联的第一视频内容;
采用所述第一视频内容替换所述直播内容,以得到所述目标内容。
4.如权利要求2所述的方法,其特征在于,当所述图像干扰信息过滤方式为第二过滤方式时,所述基于确定的所述图像干扰信息过滤方式,对所述图像干扰信息进行过滤,得到所述目标内容,包括:
获取与所述直播内容关联的第二视频内容;
确定对应所述第二区域的蒙版图;
基于所述直播内容、所述蒙版图及所述第二视频内容,进行观众端直播内容合成,得到所述目标内容。
5.如权利要求4所述的方法,其特征在于,所述基于所述直播内容、所述蒙版图及所述第二视频内容,进行观众端直播内容合成,得到所述目标内容,包括:
添加所述蒙版图至所述第二视频内容,得到所述第二视频内容中对应所述第二区域的视频子内容;
对所述视频子内容及所述直播内容进行合成,得到所述目标内容。
6.如权利要求2所述的方法,其特征在于,所述第二区域包括:第一子区域及第二子区域,所述第二子区域连接所述第一区域;
当所述显示区域归属于所述第二子区域时,所述方法还包括:
在直播显示界面中,呈现对应所述图像干扰信息的告警信息,所述告警信息用于指示所述图像干扰信息对应的处理优先级。
7.如权利要求1所述的方法,其特征在于,所述方法还包括:
输出对应所述图像干扰信息的提示信息,所述提示信息用于提示所述直播显示界面中存在所述图像干扰信息;
所述图像干扰信息的输出方式包括以下至少之一:文本输出方式、音频输出方式、图形输出方式。
8.如权利要求7所述的方法,其特征在于,当所述图像干扰信息的输出方式包括所述图形输出方式时,所述输出对应所述图像干扰信息的提示信息,包括:
在所述直播显示界面中,呈现提示边框,所述提示边框具有目标形状,用于提示所述直播显示界面中存在所述图像干扰信息。
9.如权利要求7所述的方法,其特征在于,所述方法还包括:
在所述直播显示界面中,呈现对应所述提示信息的第一取消按键;
响应于针对所述第一取消按键的点击操作,取消所输出的所述提示信息。
10.如权利要求7所述的方法,其特征在于,所述方法还包括:
在所述直播显示界面中,实时呈现对应所述提示信息的剩余呈现时长;
当所述剩余呈现时长达到目标剩余时长时,取消所输出的所述提示信息。
11.如权利要求1所述的方法,其特征在于,对所述图像干扰信息进行过滤之前,所述方法还包括:
呈现对应直播的干扰过滤功能项;
响应于针对所述干扰过滤功能项的开启指令,控制所述直播显示界面的显示模式为干扰消除模式,所述干扰消除模式用于当确定所述直播内容中包含图像干扰信息时,触发所述过滤操作。
12.如权利要求11所述的方法,其特征在于,所述方法还包括:
在所述直播显示界面中,呈现对应所述干扰过滤功能项的第二取消按键;
响应于针对所述第二取消按键的点击操作,控制所述直播显示界面的显示模式为缺省显示。
13.一种直播信息的处理方法,其特征在于,所述方法包括:
在主播端的直播显示界面中,呈现对应主播用户的直播内容;
当确定所述直播内容中包含干扰对象对应的图像干扰信息时,对所述图像干扰信息进行过滤,得到对应所述主播用户的目标内容;
发送所述目标内容至观众端。
14.一种直播信息的处理装置,其特征在于,所述装置包括:
获取模块,用于获取主播端直播过程中对应主播用户的直播内容;
第一过滤模块,用于当确定所述直播内容中包含干扰对象对应的图像干扰信息时,获取所述图像干扰信息在直播显示界面中所处的显示区域;确定对应所述显示区域的图像干扰信息过滤方式;基于确定的所述图像干扰信息过滤方式,对所述图像干扰信息进行过滤,得到对应所述主播用户的目标内容;
第一发送模块,用于发送所述目标内容至观众端,使得所述观众端的直播界面所呈现的直播内容中不包含所述图像干扰信息。
15.一种直播信息的处理装置,其特征在于,所述装置包括:
呈现模块,用于在主播端的直播显示界面中,呈现对应主播用户的直播内容;
第二过滤模块,用于当确定所述直播内容中包含干扰对象对应的图像干扰信息时,对所述图像干扰信息进行过滤,得到对应所述主播用户的目标内容;
第二发送模块,用于发送所述目标内容至观众端。
CN202010131604.5A 2020-02-28 2020-02-28 直播信息的处理方法及装置 Active CN111277853B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010131604.5A CN111277853B (zh) 2020-02-28 2020-02-28 直播信息的处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010131604.5A CN111277853B (zh) 2020-02-28 2020-02-28 直播信息的处理方法及装置

Publications (2)

Publication Number Publication Date
CN111277853A true CN111277853A (zh) 2020-06-12
CN111277853B CN111277853B (zh) 2023-09-08

Family

ID=70999217

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010131604.5A Active CN111277853B (zh) 2020-02-28 2020-02-28 直播信息的处理方法及装置

Country Status (1)

Country Link
CN (1) CN111277853B (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150030314A1 (en) * 2012-12-11 2015-01-29 Unify Gmbh & Co. Kg Method of processing video data, device, computer program product, and data construct
CN105340263A (zh) * 2013-06-10 2016-02-17 思杰系统有限公司 向在线会议提供具有虚拟幕布的用户视频
CN105975228A (zh) * 2016-04-27 2016-09-28 努比亚技术有限公司 一种控制方法及电子设备
CN106791892A (zh) * 2016-11-10 2017-05-31 广州华多网络科技有限公司 一种轮麦直播的方法、装置和系统
US20170223080A1 (en) * 2016-01-29 2017-08-03 Viasat, Inc. Systems and methods for managing content distribution to an in-transit media system
CN108965982A (zh) * 2018-08-28 2018-12-07 百度在线网络技术(北京)有限公司 视频录制方法、装置、电子设备和可读存储介质
CN109040824A (zh) * 2018-08-28 2018-12-18 百度在线网络技术(北京)有限公司 视频处理方法、装置、电子设备和可读存储介质
CN109151489A (zh) * 2018-08-14 2019-01-04 广州虎牙信息科技有限公司 直播视频图像处理方法、装置、存储介质和计算机设备
CN109286824A (zh) * 2018-09-28 2019-01-29 武汉斗鱼网络科技有限公司 一种直播用户侧控制的方法、装置、设备及介质
CN109660853A (zh) * 2017-10-10 2019-04-19 腾讯科技(北京)有限公司 视频直播中的互动方法、装置及系统
CN110135195A (zh) * 2019-05-21 2019-08-16 司马大大(北京)智能系统有限公司 隐私保护方法、装置、设备及存储介质
CN110312169A (zh) * 2019-07-30 2019-10-08 腾讯科技(深圳)有限公司 视频数据处理方法、装置、终端及服务器

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150030314A1 (en) * 2012-12-11 2015-01-29 Unify Gmbh & Co. Kg Method of processing video data, device, computer program product, and data construct
CN105340263A (zh) * 2013-06-10 2016-02-17 思杰系统有限公司 向在线会议提供具有虚拟幕布的用户视频
US20170223080A1 (en) * 2016-01-29 2017-08-03 Viasat, Inc. Systems and methods for managing content distribution to an in-transit media system
CN105975228A (zh) * 2016-04-27 2016-09-28 努比亚技术有限公司 一种控制方法及电子设备
CN106791892A (zh) * 2016-11-10 2017-05-31 广州华多网络科技有限公司 一种轮麦直播的方法、装置和系统
CN109660853A (zh) * 2017-10-10 2019-04-19 腾讯科技(北京)有限公司 视频直播中的互动方法、装置及系统
CN109151489A (zh) * 2018-08-14 2019-01-04 广州虎牙信息科技有限公司 直播视频图像处理方法、装置、存储介质和计算机设备
CN108965982A (zh) * 2018-08-28 2018-12-07 百度在线网络技术(北京)有限公司 视频录制方法、装置、电子设备和可读存储介质
CN109040824A (zh) * 2018-08-28 2018-12-18 百度在线网络技术(北京)有限公司 视频处理方法、装置、电子设备和可读存储介质
CN109286824A (zh) * 2018-09-28 2019-01-29 武汉斗鱼网络科技有限公司 一种直播用户侧控制的方法、装置、设备及介质
CN110135195A (zh) * 2019-05-21 2019-08-16 司马大大(北京)智能系统有限公司 隐私保护方法、装置、设备及存储介质
CN110312169A (zh) * 2019-07-30 2019-10-08 腾讯科技(深圳)有限公司 视频数据处理方法、装置、终端及服务器

Also Published As

Publication number Publication date
CN111277853B (zh) 2023-09-08

Similar Documents

Publication Publication Date Title
CN110995929B (zh) 终端控制方法、装置、终端及存储介质
WO2020238385A1 (zh) 一种控制设备服务的方法、云服务器和智能家居系统
US20220091728A1 (en) Information processing device, display control method, and program
US20170092111A1 (en) Method and device for processing abnormality notification from a smart device
US20150350611A1 (en) Methods and systems for monitoring environments using smart devices
CN105474302B (zh) 头戴显示设备和图像显示方法
CN110494850B (zh) 信息处理装置、信息处理方法和记录介质
d'Ydewalle et al. Film perception: The processing of film cuts
EP3754959A1 (en) Quick access to an application in the lock screen
US20160035311A1 (en) Electronic device and image data output processing method
US20150288533A1 (en) Method and device for remote intelligent control
CN115097926B (zh) 投屏方法、装置、设备、系统及存储介质
CN111277853A (zh) 直播信息的处理方法及装置
CN112543365B (zh) 媒体信息的播放方法、装置、设备及计算机可读存储介质
CN111556198B (zh) 音效控制方法、终端设备及存储介质
KR102154432B1 (ko) 영상 촬영 기기 및 이의 동작 방법
CN114629989B (zh) 安卓应用管控方法、装置、智能终端及存储介质
WO2023138097A1 (zh) 用于控制空调的方法及装置、空调
WO2018000658A1 (zh) 一种信息处理方法和装置
Squires Class and productive avoidance in The Real Housewives reunions
CN112232897B (zh) 一种数据处理方法及装置
JP2022112917A (ja) 監視カメラおよび学習モデル設定支援システム
CN115129203A (zh) 应用程序的界面显示方法及装置
CN113986190A (zh) 应用的处理方法、装置和电子设备
CN109089165A (zh) 电视警报频道的切换方法、电视机及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40024400

Country of ref document: HK

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant