CN113709519A - 一种用于确定直播遮挡区域的方法与设备 - Google Patents

一种用于确定直播遮挡区域的方法与设备 Download PDF

Info

Publication number
CN113709519A
CN113709519A CN202110995234.4A CN202110995234A CN113709519A CN 113709519 A CN113709519 A CN 113709519A CN 202110995234 A CN202110995234 A CN 202110995234A CN 113709519 A CN113709519 A CN 113709519A
Authority
CN
China
Prior art keywords
information
live broadcast
real
portrait
anchor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110995234.4A
Other languages
English (en)
Other versions
CN113709519B (zh
Inventor
谭梁镌
侯永杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Zhangmen Science and Technology Co Ltd
Original Assignee
Shanghai Zhangmen Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Zhangmen Science and Technology Co Ltd filed Critical Shanghai Zhangmen Science and Technology Co Ltd
Priority to CN202110995234.4A priority Critical patent/CN113709519B/zh
Publication of CN113709519A publication Critical patent/CN113709519A/zh
Application granted granted Critical
Publication of CN113709519B publication Critical patent/CN113709519B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Image Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请的目的是提供一种用于确定直播遮挡区域的方法与设备，包括：接收主播的第一用户设备上传的、关于直播的实时图像信息；根据所述实时图像信息识别所述主播对应的直播人像区域；获取关于所述主播的直播遮挡指令；响应于所述直播遮挡指令，基于所述直播人像区域确定所述实时图像信息中的直播遮挡区域。本申请能够在直播过程中可以进行通过虚拟效果进行遮挡，能够保护主播的隐私同时，增强了用户交互的观感，提升了用户的使用体验。

Description

一种用于确定直播遮挡区域的方法与设备
技术领域
本申请涉及通信领域，尤其涉及一种用于确定直播遮挡区域的技术。
背景技术
直播是在现场架设独立的信号采集设备(音频+视频)导入导播端(导播设备或平台)，再通过网络上传至服务器，发布至网址供人观看。直播吸取和延续了互联网的优势，利用视讯方式进行网上现场直播，可以将产品展示、相关会议、背景介绍、方案测评、网上调查、对话访谈、在线培训等内容现场发布到互联网上，利用互联网的直观、快速，表现形式好、内容丰富、交互性强、地域不受限制、受众可划分等特点，加强活动现场的推广效果。现有的直播应用，如抖音、快手、淘宝直播等对应的带货主播，特别是卖衣服的主播在进行衣服展示时一般都是现场换装，尤其对于女装，主播需要穿打底的安全衣裤进行不间断地换装，主播需要不断离开当前屏幕拍摄的位置或者在现场直接换装，这些方式对于主播的直播互动性较差，且对于主播的隐私没有进行合理的保护，同时也会影响用户观感。
发明内容
本申请的一个目的是提供一种用于确定直播遮挡区域的方法与设备。
根据本申请的一个方面，提供了一种用于确定直播遮挡区域的方法，应用于网络设备，该方法包括：
接收主播的第一用户设备上传的、关于直播的实时图像信息；
根据所述实时图像信息识别所述主播对应的直播人像区域；
获取关于所述主播的直播遮挡指令；
响应于所述直播遮挡指令，基于所述直播人像区域确定所述实时图像信息中的直播遮挡区域。
根据本申请的另一个方面，提供了一种用于确定直播遮挡区域的方法，该方法包括：
通过摄像装置采集主播关于直播的实时图像信息；
将所述实时图像信息上传至对应的网络设备，其中，所述实时图像信息用于识别所述主播对应的直播人像区域，所述直播人像区域用于确定所述实时图像信息中的直播遮挡区域。
根据本申请的有一个方面，提供了一种用于确定直播遮挡区域的方法，其中，该方法包括：
第一用户设备通过摄像装置采集主播关于直播的实时图像信息，将所述实时图像信息上传至对应的网络设备；
所述网络设备接收主播的第一用户设备上传的、关于直播的实时图像信息，根据所述实时图像信息识别所述主播对应的直播人像区域，获取关于所述主播的直播遮挡指令；响应于所述直播遮挡指令，基于所述直播人像区域确定所述实时图像信息中的直播遮挡区域。
根据本申请的一个方面，提供了一种用于确定直播遮挡区域的网络设备，该设备包括：
一一模块，用于接收主播的第一用户设备上传的、关于直播的实时图像信息；
一二模块，用于根据所述实时图像信息识别所述主播对应的直播人像区域；
一三模块，用于获取关于所述主播的直播遮挡指令；
一四模块，用于响应于所述直播遮挡指令，基于所述直播人像区域确定所述实时图像信息中的直播遮挡区域。
根据本申请的另一个方面，提供了一种用于确定直播遮挡区域的第一用户设备，该设备包括：
通过摄像装置采集主播关于直播的实时图像信息；
将所述实时图像信息上传至对应的网络设备，其中，所述实时图像信息用于识别所述主播对应的直播人像区域，所述直播人像区域用于确定所述实时图像信息中的直播遮挡区域。
根据本申请的一个方面，提供了一种计算机设备，其中，该设备包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行如上所述任一方法的操作。
根据本申请的一个方面，提供了一种存储指令的计算机可读介质，所述指令在被执行时使得系统进行如上所述任一方法的操作。
与现有技术相比，本申请通过获取关于直播的实时图像信息，确定对应的直播人像区域，并通过直播遮挡指令确定直播遮挡区域，从而在主播的直播过程中可以进行通过虚拟效果进行遮挡，能够保护主播的隐私同时，增强了用户交互的观感，提升了用户的使用体验。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：
图1示出根据本申请一个实施例的一种用于确定直播遮挡区域的方法流程图；
图2示出根据本申请另一个实施例的一种用于确定直播遮挡区域的方法流程图；
图3示出根据本申请一个实施例的一种用于确定直播遮挡区域的系统方法的流程图；
图4示出根据本申请一个实施例的一种网络设备的功能模块；
图5示出根据本申请另一个实施例的一种第一用户设备的功能模块；
图6示出可被用于实施本申请中所述的各个实施例的示例性系统。
附图中相同或相似的附图标记代表相同或相似的部件。
具体实施方式
下面结合附图对本申请作进一步详细描述。
在本申请一个典型的配置中，终端、服务网络的设备和可信方均包括一个或多个处理器(例如，中央处理器(Central Processing Unit，CPU))、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RandomAccess Memory，RAM)和/或非易失性内存等形式，如只读存储器(Read Only Memory，ROM)或闪存(Flash Memory)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(Phase-Change Memory，PCM)、可编程随机存取存储器(Programmable Random Access Memory，PRAM)、静态随机存取存储器(Static Random-Access Memory，SRAM)、动态随机存取存储器(Dynamic Random AccessMemory，DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(Compact Disc Read-Only Memory，CD-ROM)、数字多功能光盘(Digital Versatile Disc,DVD)或其他光学存储、磁盒式磁带，磁带磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。
本申请所指设备包括但不限于用户设备、网络设备、或用户设备与网络设备通过网络相集成所构成的设备。所述用户设备包括但不限于任何一种可与用户进行人机交互(例如通过触摸板进行人机交互)的移动电子产品，例如智能手机、平板电脑等，所述移动电子产品可以采用任意操作系统，如Android操作系统、iOS操作系统等。其中，所述网络设备包括一种能够按照事先设定或存储的指令，自动进行数值计算和信息处理的电子设备，其硬件包括但不限于微处理器、专用集成电路(Application Specific IntegratedCircuit，ASIC)、可编程逻辑器件(Programmable Logic Device，PLD)、现场可编程门阵列(Field Programmable Gate Array，FPGA)、数字信号处理器(Digital Signal Processor，DSP)、嵌入式设备等。所述网络设备包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云；在此，云由基于云计算(Cloud Computing)的大量计算机或网络服务器构成，其中，云计算是分布式计算的一种，由一群松散耦合的计算机集组成的一个虚拟超级计算机。所述网络包括但不限于互联网、广域网、城域网、局域网、VPN网络、无线自组织网络(Ad Hoc网络)等。优选地，所述设备还可以是运行于所述用户设备、网络设备、或用户设备与网络设备、网络设备、触摸终端或网络设备与触摸终端通过网络相集成所构成的设备上的程序。
当然，本领域技术人员应能理解上述设备仅为举例，其他现有的或今后可能出现的设备如可适用于本申请，也应包含在本申请保护范围以内，并在此以引用方式包含于此。
在本申请的描述中，“多个”的含义是两个或者更多，除非另有明确具体的限定。
图1示出了根据本申请一个方面的一种用于确定直播遮挡区域的方法，该方法应用于网络设备，具体包括步骤S101、步骤S102、步骤S103以及步骤S104。在步骤S101中，网络设备接收主播的第一用户设备上传的、关于直播的实时图像信息；在步骤S102中，网络设备根据所述实时图像信息识别所述主播对应的直播人像区域；在步骤S103中，网络设备获取关于所述主播的直播遮挡指令；在步骤S104中，网络设备响应于所述直播遮挡指令，基于所述直播人像区域确定所述实时图像信息中的直播遮挡区域。在此，所述网络设备包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云。所述直播包括在现场随着事件的发生、发展进程同步制作和发布信息，具有双向流通过程的信息网络发布方式，具体包括现场直播、文字直播、图片直播、视频直播、视音频直播等，在此，本申请以视频直播为例阐述以下实施例，本领域技术人员应能理解，该等实施例同样适用于其他包含视频帧或者图像信息的直播方式。在此，在一些情形下，步骤S102与步骤S103并无明确的执行顺序的关联，在另一些情形下，可以先执行步骤S102，再执行步骤S103，在又一些情形下，步骤S102执行在步骤S103之后。
具体而言，在步骤S101中，网络设备接收主播的第一用户设备上传的、关于直播的实时图像信息。例如，主播持有第一用户设备，第一用户设备可以通过对应的摄像装置采集关于主播的当前的实时图像信息，其中，第一用户设备包括但不限于手机、pad、个人电脑或者摄像机等，摄像装置包括不限于摄像头、深度摄像机、红外摄像头或者设备的外接摄像头等。第一用户设备采集对应的实时视频流并通过与网络设备的通信连接上传至网络设备，网络设备接收视频流中的实时图像信息，其中，实时图像信息包括拍摄的关于主播的实时视频流中的当前时刻对应的视频帧。在一些实施方式中，所述直播包括关于服饰推广类型的直播。
在步骤S102中，网络设备根据所述实时图像信息识别所述主播对应的直播人像区域。例如，网络设备获取到对应的实时图像信息后，利用计算机视觉算法识别或跟踪实时图像信息中主播对应的直播人像区域，如利用对象实例分割算法、轮廓识别等。具体地，当所述实时图像信息为第一个需要识别直播人像区域的图像信息时，根据预设的主播特征信息识别出实时图像信息中主播所处的像素区域；或者，当所述实时图像信息为非首个需要识别直播人像区域的图像信息时，此时我们可以根据该实时图像信息的前序(如前一帧或多帧)实时图像信息的前序直播人像区域跟踪确定实时图像信息中的直播人像区域，例如，利用前序实时图像信息中的前序直播人像区域对实时图像信息中的直播人像区域进行估计确定估计像素区域，同时对直播人像区域进行识别确定对应的识别像素区域，从而综合估计像素区域和识别像素区域得到较为精确的直播人像区域。其中，所述直播人像区域包括主播在实时图像信息中对应的像素的像素位置，例如，以实时图像信息左上角为坐标原点建立对应的像素坐标系，则直播人像区域包括主播对应的像素在该坐标系中的坐标的集合。
在一些实施方式中，在步骤S102中，利用实例分割算法，根据所述实时图像信息识别对应的直播人像区域。例如，实例分割是一种在像素层面识别目标轮廓的计算机视觉算法，具体过程包括：利用预设的模板特征及神经网络模型，对实时图像信息做检测，找出图像中的感兴趣区域，对每一个感兴趣区域进行像素校正，然后对每一个感兴趣区域使用设计框架进行预测不同的实例所属分类，最终得到图像实例分割结果。在此，网络设备能够通过实例分割算法识别出主播的轮廓在实时图像信息中的位置，并基于该轮廓对应的像素位置确定对应的直播人像区域，例如，将轮廓及轮廓内包含的像素确定为直播人像区域。
在步骤S103中，网络设备获取关于所述主播的直播遮挡指令。例如，所述直播遮挡指令包括用于确定遮挡主播的部分或者全部身体部位的指示信息。该直播遮挡指令可以是基于主播的操作生成并发送至网络设备，可以是用户设备对实时图像信息进行简单处理后生成发送至网络设备，还可以是网络设备对实时图像信息进行处理后生成的，或者网络设备基于第一用户设备发送的关于主播的操作生成对应的直播遮挡指令。
在一些实施方式中，在步骤S103中，网络设备接收所述第一用户设备上传的、关于所述主播的直播遮挡指令。例如，主播持有第一用户设备，第一用户设备端设置有直播遮挡指令的指示信息，主播可以根据自己的需求输入相关操作，第一用户设备根据采集主播的操作，比将该操作与预设的指示信息相匹配；若匹配，则生成对应直播遮挡指令，并将该直播遮挡指令发送至网络设备。在一些实施方式中，所述直播遮挡指令基于所述主播的触发操作确定；其中，所述触发操作包括但不限于：语音信息；体态信息；触控信息；二维码信息。例如，所述主播的触发操作包括语音信息(如“开启遮挡”、“开启直播遮挡”等语音信息)，第一用户设备根据用户的输入的语音信息进行语音识别确定对应文本或者语义，将对应文本或者语义与预设的语音指令进行匹配，若匹配，则生成对应的直播遮挡指令。例如，所述主播的触发操作包括体态信息(如手势信息、手部动作、头部动作、腿部动作或者身体姿势等)，第一用户根据用户的输入的体态信息获取对应体态特征，并将体态特征与预设的姿态特征进行匹配，若匹配，则生成对应的直播遮挡指令。例如，所述主播的触发操作包括触控信息(如触控触摸板、触控触摸屏等)，第一用户根据用户的输入的触控信息，并将触控信息与预设的触控操作进行匹配，若匹配，则生成对应的直播遮挡指令。例如，例如，所述主播的触发操作包括二维码信息(如用于触发指令的二维码等)，第一用户识别扫描到的实时图像信息中的二维码，若存在某二维码的二维码链接包括遮挡指示信息，则生成对应的直播遮挡指令。在此，用于生成直播遮挡指令的触发操作可以包括前述一种或者多种的组合。当然，本领域技术人员应能理解上述触发操作仅为举例，其他现有的或今后可能出现的触发操作如可适用于本申请，也应包含在本申请保护范围以内，并在此以引用方式包含于此。在另一些情形下，第一用户设备可以在本地对实时图像信息进行图像处理，从而基于图像处理的结果确定是否需要进行遮挡。具体的图像处理过程如根据实时图像信息计算对应图像参数变化信息，若该图像参数变化信息大于或等于预设的图形参数变化阈值信息，则生成直播遮挡指令。
在步骤S104中，网络设备响应于所述直播遮挡指令，基于所述直播人像区域确定所述实时图像信息中的直播遮挡区域。例如，网络设备获取对应直播遮挡指令后，基于该指令根据直播人像区域在实时图像信息中确定对应的直播遮挡区域，其中，直播遮挡区域包括该实时图像信息中将要被遮挡的像素位置等。例如，直接将直播人像区域确定为对应的直播遮挡区域，或者，取直播人像区域的部分区域作为对应的直播遮挡区域等。
在一些实施方式中，网络设备确定对应直播遮挡区域后，根据直播遮挡区域包含的像素位置将实时图像信息进行遮挡处理。如所述方法还包括步骤S105(未示出)，在步骤S105中，网络设备根据所述直播遮挡区域对所述实时直播图像进行遮挡处理，以确定对应的遮挡直播图像；将所述遮挡直播图像下发至所述主播的观看用户的第二用户设备。例如，遮挡处理包括对实时图像信息中直播遮挡区域的像素位置进行处理从而屏蔽该直播遮挡区域原有图像等，具体的实现方式如将像素区域像素进行虚化，或者利用马赛克或者预设的遮挡图像替换直播遮挡区域的原有图像。对应预设遮挡图像可以是根据第一用户设备上传的关于图像信息，或者时服饰推广对应的服饰图像等。网络设备确定对应遮挡直播图像后，将该遮挡直播图像下发至直播对应的观看用户的第二用户设备；在一些实施方式中，网络设备还将该遮挡直播图像发送至第一用户设备，供主播查看对应遮挡效果等；或者网络设备先将遮挡直播图像下发至第一用户设备，第一用户设备呈现该直播遮挡图像，若获取到主播关于该直播遮挡图像的确认操作，则第一用户设备向网络设备发送遮挡确认信息，网络设备基于接收到的遮挡确认信息将该直播遮挡图像下发至一个或多个第二用户设备。在一些实施方式中，所述网络设备对实时视频流中后续视频帧基于直播遮挡区域跟踪估计后续视频帧的遮挡区域，从而实现精确的遮挡效果。
在一些实施方式中，所述方法还包括步骤S106(未示出)，在步骤S106中，网络设备基于遮挡取消指令，撤销所述实时直播图像的遮挡处理，将所述撤销后的实时直播图像下发至所述主播的观看用户的第二用户设备。例如，遮挡取消指令用于取消实时直播图像对应的遮挡效果，此时的实时直播图像为实时视频流中当前时刻的直播图像，可以是进行遮挡处理的直播图像，还可以是进行遮挡处理并在后续跟踪遮挡处理结果的后续直播图像等。例如，网络设备可以将遮挡直播图像下发至第一用户设备，第一用户设备呈现该直播遮挡图像，主播观看该直播遮挡图像后发现该直播遮挡指令为误触发的，则通过第一用户设备上传对应的遮挡取消指令，撤销实时图像信息对应的遮挡处理。还例如，网络设备基于对于实时图像信息的图像处理结果，并基于图像处理结果(如所述图像参数变化信息小于预设的图像参数变化阈值等)生成对应的遮挡撤销指令，从而基于遮挡撤销指令撤销当前的实时图像信息的遮挡处理。还如，遮挡直播指令存在预设的遮挡持续时间(如30秒等)，当遮挡处理的持续时间达到30s后，网络设备生成对应遮挡撤销指令，从而基于遮挡撤销指令撤销当前的实时图像信息的遮挡处理。
在一些实施方式中，网络设备对实时图像信息或者直播人像区域进行图像处理，并根据图像处理结果判断是否生成直播遮挡指令，从而能够根据图像处理结果进行直播遮挡的智能化管理。其中，图像处理包括计算对应图像参数变化信息，如所述方法还包括步骤S107(未示出)，在步骤S107中，获取所述主播对应的图像参数变化信息，其中，所述图像参数变化信息包括所述主播相关的图像参数的变化量信息；其中，在步骤S103中，若所述图像参数变化信息大于或等于预设的图像参数变化阈值，则生成关于所述主播的直播遮挡指令。例如，图像参数变化信息包括实时图像信息中全部或部分像素区域相对于其他实时图像信息相对应的像素区域的像素参数的变化量，可以通过具体数值差表示，也可以通过百分比形式表示，在一些实施方式中，所述其他实时图像信息包括该实时图像信息的前一帧或者前多帧实时图像信息等。网络设备获取所述实时图像信息的图像参数信息，并根据该实时图像信息确定前序实时图像信息的前序图像参数信息，从而根据图像参数信息和前序图像参数信息计算对应的图像参数变化信息，其中，前序实时图像信息包括实时视频流中该实时图像信息的前一帧或多帧直播图像信息。计算图像参数变化信息时，可以是基于实时图像信息的全部或者部分图像进行计算，其中，实时图像信息的部分可以根据前序实时图像信息的直播遮挡区域进行跟踪估计确定等，或者将直播人像区域确定为对应图像参数变化信息的计算区域。如在一些实施方式中，所述获取所述主播对应的图像参数变化信息，包括：根据所述实时图像信息及所述实时图像信息的前序图像信息确定所述实时图像信息的图像参数变化信息。例如，对应图像参数包括但不限于图像的颜色信息、饱和度信息、对比度信息等。网络设备计算出实时图像信息对应的图像参数变化信息后，与预设的图像参数变化阈值进行比较，若所述图像参数变化信息大于或等于预设的图像参数变化阈值，则确定主播存在换装或者准备换装等，网络设备生成对应的直播遮挡指令。
在一些实施方式中，所述获取所述主播对应的图像参数变化信息，包括：根据所述直播人像区域及所述实时图像信息的前序图像信息的前序直播人像区域确定所述直播人像区域的图像参数变化信息。例如，通过计算直播人像区域的图像参数变化信息，可以准确地获知主播当前是否处于换装状态等。网络设备可以根据实时图像信息确定对应的直播人像区域后，基于实时图像信息的直播人像区域与前序实时图像信息的前序直播人像区域计算对应的图像参数变化信息。网络设备计算出直播人像区域对应的图像参数变化信息后，与预设的图像参数变化阈值进行比较，若所述图像参数变化信息大于或等于预设的图像参数变化阈值，则确定主播存在换装或者准备换装等，网络设备生成对应的直播遮挡指令。
在一些实施方式中，所述图像参数包括不限于：颜色信息；饱和度信息；对比度信息。例如，颜色信息包括以由三原色(色光的三原色：红、绿、蓝，色料或颜料的三原色：黄、品红、青)组成的、不同的比例相加产生的多种多样的色光；通常通过对红(R)、绿(G)、蓝(B)三个颜色通道的变化(在0-255之间)以及它们相互之间的叠加来得到各式各样的颜色的，换言之，具体的颜色属性可以通过R、G、B的值来表示。网络设备可以识别出实时图像信息中每个像素对应的RGB值，并根据实时图像信息的部分或全部区域计算对应的图像参数变化信息。饱和度信息包括色彩的鲜艳程度，也称作纯度；在HSV(hue-saturation-value)色彩模型下，饱和度是色彩的3个属性之一，另外两个属性为色相(hue)和明度(value)；在此模型下色相的取值范围为0°到360°，饱和度和明度取值范围为0到100％。在色彩学中，原色饱和度最高，随着饱和度降低，色彩变得暗淡直至成为无彩色，即失去色相的色彩。网络设备可以识别出实时图像信息中每个像素对应的饱和度(S)值，并根据实时图像信息的部分或全部区域计算对应的图像参数变化信息。对比度信息包括一幅图像中明暗区域最亮的白和最暗的黑之间不同亮度层级的测量；差异范围越大代表对比越大，差异范围越小代表对比越小，好的对比率120:1就可容易地显示生动、丰富的色彩，当对比率高达300:1时，便可支持各阶的颜色。网络设备可以识别出实时图像信息对应像素区域的对比度，并根据实时图像信息的像素区域的对比度计算对应的图像参数变化信息。当然，本领域技术人员应能理解上述图像参数仅为举例，其他现有的或今后可能出现的图像参数如可适用于本申请，也应包含在本申请保护范围以内，并在此以引用方式包含于此。在一些情形下，所述图像参数可以包括上述参数中一种或者多种的组合。
在一些实施方式中，所述方法还包括步骤S108(未示出)，在步骤S108中，获取所述实时图像信息中全部或部分对应的第一图像属性的像素占比；其中，在步骤S103中，若所述像素占比的像素占比大于或等于第一像素占比阈值，则生成关于所述主播的直播遮挡指令。例如，除了根据实时图像信息中图像参数的变化来判断是否需要遮挡，如预设的第一图像属性在实时图像信息中出现，且该第一图像属性的占比超过一定阈值，则确定主播正在换装或者准备换装等，生成对应直播遮挡指令。所述第一图像属性包括预设的特定颜色、色调信息的具体数值或者数值区间等，该第一图像属性可以主播上传的预设的图像属性，还可以是网络设备根据大数据统计确定的图像属性等。网络设备根据实时图像信息中全部或者部分对应的第一图像属性的像素占比，如根据实时图像信息中全部或者部分像素区域作为对应的判断基准，确定该像素区域中第一图像属性的像素的数量，从而根据该第一图像属性的像素数量及该像素区域的像素数量确定第一像素占比等。若第一图像属性的像素占比大于或等于第一像素占比阈值，则生成对应的直播遮挡指令，其中，第一像素占比阈值可以基于网络设备的默认设置，还可以根据统计数据得到。
在一些实施方式中，所述实时图像信息的部分包括所述直播人像区域。例如，为了更准确的确定主播的当前状态，我们通过第一图像属性进行像素占比判定时，直接通过识别出的直播人像区域进行判断，若该直播人像区域的第一图像属性的像素占比大于或等于第一像素占比阈值，则确定该第一图像属性出现于当前实时直播图像的主播当前所处区域，确定主播可能正在换装或者准备换装等，从而生成对应的直播遮挡指令。
在一些实施方式中，所述方法还包括步骤S109(未示出)，在步骤S109中，网络设备获取所述实时图像信息中的遮挡部位信息；其中，所述基于所述直播人像区域确定对应的直播遮挡区域，包括：基于所述直播人像区域及所述遮挡部位信息确定对应的直播遮挡区域。例如，所述遮挡部位信息包括用于表征所述主播的被遮挡部位的部位标识信息，其中，该遮挡部位信息可以是第一用户设备基于主播的操作发送至网络设备，可以是第一用户设备基于实时图像信息确定并发送至网络设备的，还可以是网络设备根据实时图像信息或者直播人像区域确定。网络设备获取对应的遮挡部位信息后，基于直播人像区域及对应遮挡部位信息确定对应的直播遮挡区域，例如，网络设备识别直播人像区域中的人体部位信息，其中，人体部位信息包括直播人像区域中的各人体部位的部位标识信息及对应的部位像素区域；网络设备根据遮挡部位信息中包含的部位标识信息与各人体部位的部位标识信息匹配确定对应的被遮挡的部位对应的部位像素区域，从而确定实时图像信息中被遮挡的主播的人体部位的像素区域，将该主播的人体部位的像素区域确定为对应的被遮挡区域。或者，所述遮挡部位信息包括被遮挡部位的部位标识信息之外，还包括被遮挡部位在主播人像像素区域的区域分布信息，网络设备根据主播人像区域中像素位置自己对应区域分布信息可以直接确定对应的被遮挡部位的像素区域。
在一些实施方式中，所述基于所述直播人像区域及所述遮挡部位信息确定对应的直播遮挡区域，包括：基于所述直播人像区域识别所述主播的人像部位信息；根据所述人像部位信息及所述遮挡部位信息确定对应的直播遮挡区域。例如，所述人像部位信息包括直播人像区域中主播的各个实时人体部位(如头部、胸部、腰部、腿部等)的部位标识信息及实时人体部位的像素区域，像素区域包括对应区域的所有像素的像素坐标的合集。网络设备根据遮挡部位信息中包含的部位标识信息，与人像部位信息对应的部位标识信息相匹配，若匹配到某人像部位信息中的实时人体部位的部位标识信息与遮挡部位信息中的部位标识信息相同，则确定该实时人体部位对应的像素区域为被遮挡区域，将该实时人体部位对应的像素区域确定为直播遮挡区域。其中，所述遮挡部位信息包含的部位标识信息可以是一个也可以是多个，在此不做限制。
在一些实施方式中，所述获取所述实时图像信息中的遮挡部位信息，包括：接收所述第一用户设备上传的、关于所述主播的遮挡部位信息。例如，主播持有第一用户设备，第一用户设备通过采集装置(如摄像装置、触控装置等)采集关于主播的操作(如语音指令、体态信息或者触控操作等)，将主播的操作与预设的遮挡部位信息对应的操作相匹配，确定对应的遮挡部位信息。具体地，例如，第一用户设备采集到主播的“遮挡胸部和腰部”的语音指令信息，并对该语音指令进行语义分析，提取对应关键字“遮挡”、“胸部”、“腰部”，与对应指令的预设文本相匹配，如胸部遮挡信息的“遮挡”、“胸部”，以及腰部遮挡指令的“遮挡”、“腰部”等进行匹配，从而生成对应的遮挡部位信息，该遮挡部位信息包括遮挡部位的标识信息“腰部”、“胸部”等。第一用户设备确定该遮挡部位信息将该遮挡部位信息发送至网络设备，在一些情形下，该遮挡部位信息可以包含于遮挡指令信息一并发送至网络设备等。又例如，第一用户设备可以在本地对实时图像信息进行一定的图像处理，并根据图像处理结果确定对应的遮挡部位信息，在此，具体的图像处理过程与网络设备对实时图像信息进行处理获取遮挡部位信息的实施例相同或相似，在此不再赘述。
在一些实施方式中，所述获取所述实时图像信息中的遮挡部位信息，包括：基于所述直播人像区域识别所述主播的多个人像部位信息；根据所述多个人像部位信息确定对应的遮挡部位信息。例如，网络设备可以根据直播人像区域，利用计算机视觉算法进行人体部位识别，识别出当前直播人像区域中主播的多个人像部位信息，其中，每个人像部位信息包括对应的部位标识信息及部位分布信息，部位分布信息包括该人像部位信息在直播人像区域中的相对位置信息。网络设备可以根据多个人像部位信息获取对应的遮挡部位信息，如对多个人像部位信息的像素相关属性进行分析处理，从而判断出对应的遮挡部位信息；或者，网络设备将该多个人像部位信息返回至第一用户设备，第一用户设备接收并呈现该多个人像部位信息，随后，第一用户设备可以基于主播的选中操作确定其选中的至少一个人像部位信息，并将该至少一个人像部位信息返回至网络设备，网络设备将该至少一个人像部位信息确定为遮挡部位信息。
在一些实施方式中，所述根据所述多个人像部位信息确定对应的遮挡部位信息，包括：根据所述多个人像部位信息及所述实时直播图像的前序直播图像的多个前序人像部位信息确定所述多个人像部位信息的人像部位参数变化信息；若多个人像部位信息中存在某个人像部位信息的人像部位参数变化信息大于或等于人像部位参数变化阈值，则将该人像部位信息确定为对应的遮挡部位信息。例如，人像部位参数变化信息包括直播人像区域中全部或部分人像部位信息的像素区域相对于其他实时图像信息相对应的像素区域的像素参数的变化量，可以通过具体数值差表示，也可以通过百分比形式表示。在一些实施方式中，所述其他实时图像信息包括该实时图像信息的前一帧或者前多帧实时图像信息等。网络设备获取所述直播人像区域中各个人像部位信息对应的图像参数信息，并根据该实时图像信息确定前序实时图像信息的前序直播人像区域的各个前序人像部位信息图像参数信息，从而根据人像部位参数信息和前序人像部位参数信息计算各个人像部位信息对应的人像部位参数变化信息。图像参数包括但不限于图像的颜色信息、饱和度信息、对比度信息等。网络设备计算出各人像部位信息对应的人像部位参数变化信息后，与预设的人像部位参数变化阈值进行比较，若某人像部位信息的人像部位参数变化信息大于或等于预设的人像部位参数变化阈值，则确定主播的该部位可能存在换装或者准备换装等，网络设备生成对应的直播遮挡指令。
在一些实施方式中，所述多个人像部位信息包括至少一个目标人像部位信息；其中，所述获取关于所述主播的直播遮挡指令，包括：若所述至少一个目标人像部位信息中存在某一个目标人像部位的第二图像属性信息的像素占比大于或等于第二像素占比阈值，则生成关于所述主播的直播遮挡指令。例如，所述目标人像部位信息包括通过用于触发直播遮挡指令的预设的人体部位信息，如胸部、腰部比较不便于暴露的人体部位等。所述目标人像部位信息可以是主播提前预设的，也可以是网络设备默认设置等。网络设备根据多个人像部位信息对直播人像区域中各个人像部位信息的第二图像属性信息(如颜色、色度等)进行统计，若某人像部位信息的第二图像属性信息对应的像素占比(该人像部位信息的第二图像属性的像素数量与该人像部位信息的像素数量的比值等)大于或等于第二像素占比阈值，则确定主播的该人像部位信息存在暴露的可能，生成对应的遮挡指令信息。
图2示出根据本申请一个方面的一种用于确定直播遮挡区域的方法，应用于第一用户设备，该方法包括步骤S201、步骤S201。在步骤S201中，第一用户设备通过摄像装置采集主播关于直播的实时图像信息；在步骤S202中，将所述实时图像信息上传至对应的网络设备，其中，所述实时图像信息用于识别所述主播对应的直播人像区域，所述直播人像区域用于确定所述实时图像信息中的直播遮挡区域。例如，主播持有第一用户设备，第一用户设备可以通过对应的摄像装置采集关于主播的当前的实时图像信息，其中，第一用户设备包括但不限于手机、pad、个人电脑或者摄像机等，摄像装置包括不限于摄像头、深度摄像机、红外摄像头或者设备的外接摄像头等。第一用户设备采集对应的实时视频流并通过与网络设备的通信连接上传至网络设备，网络设备接收视频流中的实时图像信息，其中，实时图像信息包括拍摄的关于主播的实时视频流中的当前时刻对应的视频帧。在一些实施方式中，所述直播包括关于服饰推广类型的直播。网络设备获取到对应的实时图像信息后，利用计算机视觉算法识别或跟踪实时图像信息中主播对应的直播人像区域，如利用对象实例分割算法、轮廓识别等。网络设备获取关于所述主播的直播遮挡指令，基于所述直播人像区域确定所述实时图像信息中的直播遮挡区域。
在一些实施方式中，所述方法还包括步骤S203(未示出)，在步骤S203中，获取关于所述主播的直播遮挡指令；将所述直播遮挡指令发送至所述网络设备。例如，主播持有第一用户设备，第一用户设备端设置有直播遮挡指令的指示信息，主播可以根据自己的需求输入相关操作，第一用户设备根据采集主播的操作，比将该操作与预设的指示信息相匹配；若匹配，则生成对应直播遮挡指令，并将该直播遮挡指令发送至网络设备。在一些实施方式中，所述直播遮挡指令基于所述主播的触发操作确定；其中，所述触发操作包括但不限于：语音信息；体态信息；触控信息；二维码信息。例如，所述主播的触发操作包括语音信息(如“开启遮挡”、“开启直播遮挡”等语音信息)，第一用户设备根据用户的输入的语音信息进行语音识别确定对应文本或者语义，将对应文本或者语义与预设的语音指令进行匹配，若匹配，则生成对应的直播遮挡指令。例如，所述主播的触发操作包括体态信息(如手势信息、手部动作、头部动作、腿部动作或者身体姿势等)，第一用户根据用户的输入的体态信息获取对应体态特征，并将体态特征与预设的姿态特征进行匹配，若匹配，则生成对应的直播遮挡指令。例如，所述主播的触发操作包括触控信息(如触控触摸板、触控触摸屏等)，第一用户根据用户的输入的触控信息，并将触控信息与预设的触控操作进行匹配，若匹配，则生成对应的直播遮挡指令。例如，例如，所述主播的触发操作包括二维码信息(如用于触发指令的二维码等)，第一用户识别扫描到的实时图像信息中的二维码，若存在某二维码的二维码链接包括遮挡指示信息，则生成对应的直播遮挡指令。在此，用于生成直播遮挡指令的触发操作可以包括前述一种或者多种的组合。当然，本领域技术人员应能理解上述触发操作仅为举例，其他现有的或今后可能出现的触发操作如可适用于本申请，也应包含在本申请保护范围以内，并在此以引用方式包含于此。在另一些情形下，第一用户设备可以在本地对实时图像信息进行图像处理，从而基于图像处理的结果确定是否需要进行遮挡。具体的图像处理过程如根据实时图像信息计算对应图像参数变化信息，若该图像参数变化信息大于或等于预设的图形参数变化阈值信息，则生成直播遮挡指令。如在一些实施方式中，所述获取关于所述主播的直播遮挡指令，包括：根据所述实时图像信息获取所述主播对应的图像参数变化信息，其中，所述图像参数变化信息包括所述主播相关的图像参数的变化量信息；若所述图像参数变化信息大于或等于预设的图像参数变化阈值，则生成关于所述主播的直播遮挡指令。例如，图像参数变化信息包括实时图像信息中全部或部分像素区域相对于其他实时图像信息相对应的像素区域的像素参数的变化量，可以通过具体数值差表示，也可以通过百分比形式表示，在一些实施方式中，所述其他实时图像信息包括该实时图像信息的前一帧或者前多帧实时图像信息等。第一用户设备获取所述实时图像信息的图像参数信息，并根据该实时图像信息读取前序实时图像信息的前序图像参数信息，从而根据图像参数信息和前序图像参数信息计算对应的图像参数变化信息，其中，前序实时图像信息包括实时视频流中该实时图像信息的前一帧或多帧直播图像信息。计算图像参数变化信息时，可以是基于实时图像信息的全部或者部分图像进行计算，其中，实时图像信息的部分可以根据前序实时图像信息的直播遮挡区域进行跟踪估计确定等，或者将直播人像区域确定为对应图像参数变化信息的计算区域。例如，对应图像参数包括但不限于图像的颜色信息、饱和度信息、对比度信息等。第一用户设备计算出实时图像信息对应的图像参数变化信息后，与预设的图像参数变化阈值进行比较，若所述图像参数变化信息大于或等于预设的图像参数变化阈值，则确定主播存在换装或者准备换装等，生成对应的直播遮挡指令。第一用户设备将该直播遮挡指令发送至网络设备。
图3示出根据本申请的一个方面的一种用于确定直播遮挡区域的方法，其中，该方法包括：
第一用户设备通过摄像装置采集主播关于直播的实时图像信息，将所述实时图像信息上传至对应的网络设备；
所述网络设备接收主播的第一用户设备上传的、关于直播的实时图像信息，根据所述实时图像信息识别所述主播对应的直播人像区域，获取关于所述主播的直播遮挡指令；响应于所述直播遮挡指令，基于所述直播人像区域确定所述实时图像信息中的直播遮挡区域。
上文主要对本申请的一种用于确定直播遮挡区域的方法的各实施例进行了介绍，此外，本申请还提供了能够实施上述各实施例的具体设备，下面结合图4、图5进行介绍。
图4示出了根据本申请一个方面的一种用于确定直播遮挡区域的网络设备，具体包括一一模块101、一二模块102、一三模块103以及一四模块104。一一模块101，用于接收主播的第一用户设备上传的、关于直播的实时图像信息；一二模块102，用于根据所述实时图像信息识别所述主播对应的直播人像区域；一三模块103，用于获取关于所述主播的直播遮挡指令；一四模块104，用于响应于所述直播遮挡指令，基于所述直播人像区域确定所述实时图像信息中的直播遮挡区域。
在一些实施方式中，一二模块102，用于利用实例分割算法，根据所述实时图像信息识别对应的直播人像区域。
在一些实施方式中，一三模块103，用于接收所述第一用户设备上传的、关于所述主播的直播遮挡指令。在一些实施方式中，所述直播遮挡指令基于所述主播的触发操作确定；其中，所述触发操作包括但不限于：语音信息；体态信息；触控信息；二维码信息。
在此，所述图4示出的一一模块101、一二模块102、一三模块103以及一四模块104对应的具体实施方式与前述图1示出的步骤S101、步骤S102、步骤S103以及步骤S104的实施例相同或相似，因而不再赘述，以引用的方式包含于此。
在一些实施方式中，所述设备还包括一五模块(未示出)，用于根据所述直播遮挡区域对所述实时直播图像进行遮挡处理，以确定对应的遮挡直播图像；将所述遮挡直播图像下发至所述主播的观看用户的第二用户设备。
在一些实施方式中，所述设备还包括一六模块(未示出)，用于基于遮挡取消指令，撤销所述实时直播图像的遮挡处理，将所述撤销后的实时直播图像下发至所述主播的观看用户的第二用户设备。
在一些实施方式中，所述设备还包括一七模块(未示出)，用于获取所述主播对应的图像参数变化信息，其中，所述图像参数变化信息包括所述主播相关的图像参数的变化量信息；其中，一三模块103，若所述图像参数变化信息大于或等于预设的图像参数变化阈值，则用于生成关于所述主播的直播遮挡指令。如在一些实施方式中，所述获取所述主播对应的图像参数变化信息，包括：根据所述实时图像信息及所述实时图像信息的前序图像信息确定所述实时图像信息的图像参数变化信息。
在一些实施方式中，所述获取所述主播对应的图像参数变化信息，包括：根据所述直播人像区域及所述实时图像信息的前序图像信息的前序直播人像区域确定所述直播人像区域的图像参数变化信息。
在一些实施方式中，所述图像参数包括不限于：颜色信息；饱和度信息；对比度信息。
在一些实施方式中，所述设备还包括一八模块(未示出)，用于获取所述实时图像信息中全部或部分对应的第一图像属性的像素占比；其中，一三模块103，若所述像素占比的像素占比大于或等于第一像素占比阈值，则用于生成关于所述主播的直播遮挡指令。
在一些实施方式中，所述实时图像信息的部分包括所述直播人像区域。例如，为了更准确的确定主播的当前状态，我们通过第一图像属性进行像素占比判定时，直接通过识别出的直播人像区域进行判断，若该直播人像区域的第一图像属性的像素占比大于或等于第一像素占比阈值，则确定该第一图像属性出现于当前实时直播图像的主播当前所处区域，确定主播可能正在换装或者准备换装等，从而生成对应的直播遮挡指令。
在一些实施方式中，所述设备还包括一九模块(未示出)，用于获取所述实时图像信息中的遮挡部位信息；其中，所述基于所述直播人像区域确定对应的直播遮挡区域，包括：基于所述直播人像区域及所述遮挡部位信息确定对应的直播遮挡区域。
在一些实施方式中，所述基于所述直播人像区域及所述遮挡部位信息确定对应的直播遮挡区域，包括：基于所述直播人像区域识别所述主播的人像部位信息；根据所述人像部位信息及所述遮挡部位信息确定对应的直播遮挡区域。
在一些实施方式中，所述获取所述实时图像信息中的遮挡部位信息，包括：接收所述第一用户设备上传的、关于所述主播的遮挡部位信息。
在一些实施方式中，所述获取所述实时图像信息中的遮挡部位信息，包括：基于所述直播人像区域识别所述主播的多个人像部位信息；根据所述多个人像部位信息确定对应的遮挡部位信息。
在一些实施方式中，所述根据所述多个人像部位信息确定对应的遮挡部位信息，包括：根据所述多个人像部位信息及所述实时直播图像的前序直播图像的多个前序人像部位信息确定所述多个人像部位信息的人像部位参数变化信息；若多个人像部位信息中存在某个人像部位信息的人像部位参数变化信息大于或等于人像部位参数变化阈值，则将该人像部位信息确定为对应的遮挡部位信息。
在一些实施方式中，所述多个人像部位信息包括至少一个目标人像部位信息；其中，所述获取关于所述主播的直播遮挡指令，包括：若所述至少一个目标人像部位信息中存在某一个目标人像部位的第二图像属性信息的像素占比大于或等于第二像素占比阈值，则生成关于所述主播的直播遮挡指令。
在此，所述一五模块至一九模块对应的具体实施方式与前述步骤S105至步骤S109的实施例相同或相似，因而不再赘述，以引用的方式包含于此。
图5示出根据本申请一个方面的一种用于确定直播遮挡区域的第一用户设备，该设备包括二一模块201、二二模块201。二一模块201，用于通过摄像装置采集主播关于直播的实时图像信息；二二二模块202，用于将所述实时图像信息上传至对应的网络设备，其中，所述实时图像信息用于识别所述主播对应的直播人像区域，所述直播人像区域用于确定所述实时图像信息中的直播遮挡区域。
在此，所述图5示出的二一模块201、二二模块201对应的具体实施方式与前述图2示出的步骤S201、步骤S202的实施例相同或相似，因而不再赘述，以引用的方式包含于此。
在一些实施方式中，所述设备还包括二三模块(未示出)，用于获取关于所述主播的直播遮挡指令；将所述直播遮挡指令发送至所述网络设备。在一些实施方式中，所述获取关于所述主播的直播遮挡指令，包括：根据所述实时图像信息获取所述主播对应的图像参数变化信息，其中，所述图像参数变化信息包括所述主播相关的图像参数的变化量信息；若所述图像参数变化信息大于或等于预设的图像参数变化阈值，则生成关于所述主播的直播遮挡指令。
在此，所述二三模块对应的具体实施方式与前述步骤S203的实施例相同或相似，因而不再赘述，以引用的方式包含于此。
除上述各实施例介绍的方法和设备外，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机代码，当所述计算机代码被执行时，如前任一项所述的方法被执行。
本申请还提供了一种计算机程序产品，当所述计算机程序产品被计算机设备执行时，如前任一项所述的方法被执行。
本申请还提供了一种计算机设备，所述计算机设备包括：
一个或多个处理器；
存储器，用于存储一个或多个计算机程序；
当所述一个或多个计算机程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如前任一项所述的方法。
图6示出了可被用于实施本申请中所述的各个实施例的示例性系统；
如图6所示在一些实施例中，系统300能够作为各所述实施例中的任意一个上述设备。在一些实施例中，系统300可包括具有指令的一个或多个计算机可读介质(例如，系统存储器或NVM/存储设备320)以及与该一个或多个计算机可读介质耦合并被配置为执行指令以实现模块从而执行本申请中所述的动作的一个或多个处理器(例如，(一个或多个)处理器305)。
对于一个实施例，系统控制模块310可包括任意适当的接口控制器，以向(一个或多个)处理器305中的至少一个和/或与系统控制模块310通信的任意适当的设备或组件提供任意适当的接口。
系统控制模块310可包括存储器控制器模块330，以向系统存储器315提供接口。存储器控制器模块330可以是硬件模块、软件模块和/或固件模块。
系统存储器315可被用于例如为系统300加载和存储数据和/或指令。对于一个实施例，系统存储器315可包括任意适当的易失性存储器，例如，适当的DRAM。在一些实施例中，系统存储器315可包括双倍数据速率类型四同步动态随机存取存储器(DDR4SDRAM)。
对于一个实施例，系统控制模块310可包括一个或多个输入/输出(I/O)控制器，以向NVM/存储设备320及(一个或多个)通信接口325提供接口。
例如，NVM/存储设备320可被用于存储数据和/或指令。NVM/存储设备320可包括任意适当的非易失性存储器(例如，闪存)和/或可包括任意适当的(一个或多个)非易失性存储设备(例如，一个或多个硬盘驱动器(HDD)、一个或多个光盘(CD)驱动器和/或一个或多个数字通用光盘(DVD)驱动器)。
NVM/存储设备320可包括在物理上作为系统300被安装在其上的设备的一部分的存储资源，或者其可被该设备访问而不必作为该设备的一部分。例如，NVM/存储设备320可通过网络经由(一个或多个)通信接口325进行访问。
(一个或多个)通信接口325可为系统300提供接口以通过一个或多个网络和/或与任意其他适当的设备通信。系统300可根据一个或多个无线网络标准和/或协议中的任意标准和/或协议来与无线网络的一个或多个组件进行无线通信。
对于一个实施例，(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器(例如，存储器控制器模块330)的逻辑封装在一起。对于一个实施例，(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑封装在一起以形成系统级封装(SiP)。对于一个实施例，(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑集成在同一模具上。对于一个实施例，(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑集成在同一模具上以形成片上系统(SoC)。
在各个实施例中，系统300可以但不限于是：服务器、工作站、台式计算设备或移动计算设备(例如，膝上型计算设备、手持计算设备、平板电脑、上网本等)。在各个实施例中，系统300可具有更多或更少的组件和/或不同的架构。例如，在一些实施例中，系统300包括一个或多个摄像机、键盘、液晶显示器(LCD)屏幕(包括触屏显示器)、非易失性存储器端口、多个天线、图形芯片、专用集成电路(ASIC)和扬声器。
需要注意的是，本申请可在软件和/或软件与硬件的组合体中被实施，例如，可采用专用集成电路(ASIC)、通用目的计算机或任何其他类似硬件设备来实现。在一个实施例中，本申请的软件程序可以通过处理器执行以实现上文所述步骤或功能。同样地，本申请的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中，例如，RAM存储器，磁或光驱动器或软磁盘及类似设备。另外，本申请的一些步骤或功能可采用硬件来实现，例如，作为与处理器配合从而执行各个步骤或功能的电路。
另外，本申请的一部分可被应用为计算机程序产品，例如计算机程序指令，当其被计算机执行时，通过该计算机的操作，可以调用或提供根据本申请的方法和/或技术方案。本领域技术人员应能理解，计算机程序指令在计算机可读介质中的存在形式包括但不限于源文件、可执行文件、安装包文件等，相应地，计算机程序指令被计算机执行的方式包括但不限于：该计算机直接执行该指令，或者该计算机编译该指令后再执行对应的编译后程序，或者该计算机读取并执行该指令，或者该计算机读取并安装该指令后再执行对应的安装后程序。在此，计算机可读介质可以是可供计算机访问的任意可用的计算机可读存储介质或通信介质。
通信介质包括藉此包含例如计算机可读指令、数据结构、程序模块或其他数据的通信信号被从一个系统传送到另一系统的介质。通信介质可包括有导的传输介质(诸如电缆和线(例如，光纤、同轴等))和能传播能量波的无线(未有导的传输)介质，诸如声音、电磁、RF、微波和红外。计算机可读指令、数据结构、程序模块或其他数据可被体现为例如无线介质(诸如载波或诸如被体现为扩展频谱技术的一部分的类似机制)中的已调制数据信号。术语“已调制数据信号”指的是其一个或多个特征以在信号中编码信息的方式被更改或设定的信号。调制可以是模拟的、数字的或混合调制技术。
作为示例而非限制，计算机可读存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其它数据的信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动的介质。例如，计算机可读存储介质包括，但不限于，易失性存储器，诸如随机存储器(RAM,DRAM,SRAM)；以及非易失性存储器，诸如闪存、各种只读存储器(ROM,PROM,EPROM,EEPROM)、磁性和铁磁/铁电存储器(MRAM,FeRAM)；以及磁性和光学存储设备(硬盘、磁带、CD、DVD)；或其它现在已知的介质或今后开发的能够存储供计算机系统使用的计算机可读信息/数据。
在此，根据本申请的一个实施例包括一个装置，该装置包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器，其中，当该计算机程序指令被该处理器执行时，触发该装置运行基于前述根据本申请的多个实施例的方法和/或技术方案。
对于本领域技术人员而言，显然本申请不限于上述示范性实施例的细节，而且在不背离本申请的精神或基本特征的情况下，能够以其他的具体形式实现本申请。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本申请的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本申请内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外，显然“包括”一词不排除其他单元或步骤，单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一，第二等词语用来表示名称，而并不表示任何特定的顺序。

Claims (25)

1.一种用于确定直播遮挡区域的方法，应用于网络设备，其中，该方法包括：
接收主播的第一用户设备上传的、关于直播的实时图像信息；
根据所述实时图像信息识别所述主播对应的直播人像区域；
获取关于所述主播的直播遮挡指令；
响应于所述直播遮挡指令，基于所述直播人像区域确定所述实时图像信息中的直播遮挡区域。
2.根据权利要求1所述的方法，其中，所述获取关于所述主播的直播遮挡指令，包括：
接收所述第一用户设备上传的、关于所述主播的直播遮挡指令。
3.根据权利要求2所述的方法，其中，所述直播遮挡指令基于所述主播的触发操作确定；其中，所述触发操作包括以下至少任一项：
语音信息；
体态信息；
触控信息；
二维码信息。
4.根据权利要求1所述的方法，其中，所述方法还包括：
获取所述主播对应的图像参数变化信息，其中，所述图像参数变化信息包括所述主播相关的图像参数的变化量信息；
其中，所述获取关于所述主播的直播遮挡指令，包括：
若所述图像参数变化信息大于或等于预设的图像参数变化阈值，则生成关于所述主播的直播遮挡指令。
5.根据权利要求4所述的方法，其中，所述获取所述主播对应的图像参数变化信息，包括：
根据所述实时图像信息及所述实时图像信息的前序图像信息确定所述实时图像信息的图像参数变化信息。
6.根据权利要求4所述的方法，其中，所述获取所述主播对应的图像参数变化信息，包括：
根据所述直播人像区域及所述实时图像信息的前序图像信息的前序直播人像区域确定所述直播人像区域的图像参数变化信息。
7.根据权利要求4至8所述的方法，其中，所述图像参数包括以下至少任一项：
颜色信息；
饱和度信息；
对比度信息。
8.根据权利要求1所述的方法，其中，所述方法还包括：
获取所述实时图像信息中全部或部分对应的第一图像属性的像素占比；
其中，所述获取关，于所述主播的直播遮挡指令包括：
若所述像素占比的像素占比大于或等于第一像素占比阈值，则生成关于所述主播的直播遮挡指令。
9.根据权利要求8所述的方法，其中，所述实时图像信息的部分包括所述直播人像区域。
10.根据权利要求1所述的方法，其中，所述根据所述实时图像信息识别对应的直播人像区域，包括：
利用实例分割算法，根据所述实时图像信息识别对应的直播人像区域。
11.根据权利要求1所述的方法，其中，所述方法还包括：
根据所述直播遮挡区域对所述实时直播图像进行遮挡处理，以确定对应的遮挡直播图像；
将所述遮挡直播图像下发至所述主播的观看用户的第二用户设备。
12.根据权利要求11所述的方法，其中，所述方法还包括：
基于遮挡取消指令，撤销所述实时直播图像的遮挡处理，将所述撤销后的实时直播图像下发至所述主播的观看用户的第二用户设备。
13.根据权利要求1所述的方法，其中，所述方法还包括：
获取所述实时图像信息中的遮挡部位信息；
其中，所述基于所述直播人像区域确定对应的直播遮挡区域，包括：
基于所述直播人像区域及所述遮挡部位信息确定对应的直播遮挡区域。
14.根据权利要求13所述的方法，其中，所述基于所述直播人像区域及所述遮挡部位信息确定对应的直播遮挡区域，包括：
基于所述直播人像区域识别所述主播的人像部位信息；
根据所述人像部位信息及所述遮挡部位信息确定对应的直播遮挡区域。
15.根据权利要求13所述的方法，其中，所述获取所述实时图像信息中的遮挡部位信息，包括：
接收所述第一用户设备上传的、关于所述主播的遮挡部位信息。
16.根据权利要求13所述的方法，其中，所述获取所述实时图像信息中的遮挡部位信息，包括：
基于所述直播人像区域识别所述主播的多个人像部位信息；
根据所述多个人像部位信息确定对应的遮挡部位信息。
17.根据权利要求16所述的方法，其中，所述根据所述多个人像部位信息确定对应的遮挡部位信息，包括：
根据所述多个人像部位信息及所述实时直播图像的前序直播图像的多个前序人像部位信息确定所述多个人像部位信息的人像部位参数变化信息；
若多个人像部位信息中存在某个人像部位信息的人像部位参数变化信息大于或等于人像部位参数变化阈值，则将该人像部位信息确定为对应的遮挡部位信息。
18.根据权利要求16所述的方法，其中，所述多个人像部位信息包括至少一个目标人像部位信息；其中，所述获取关于所述主播的直播遮挡指令，包括：
若所述至少一个目标人像部位信息中存在某一个目标人像部位的第二图像属性信息的像素占比大于或等于第二像素占比阈值，则生成关于所述主播的直播遮挡指令。
19.一种用于确定直播遮挡区域的方法，应用于第一用户设备，其中，该方法包括：
通过摄像装置采集主播关于直播的实时图像信息；
将所述实时图像信息上传至对应的网络设备，其中，所述实时图像信息用于识别所述主播对应的直播人像区域，所述直播人像区域用于确定所述实时图像信息中的直播遮挡区域。
20.根据权利要求19所述的方法，其中，所述方法还包括：
获取关于所述主播的直播遮挡指令；
将所述直播遮挡指令发送至所述网络设备。
21.根据权利要求20所述的方法，其中，所述获取关于所述主播的直播遮挡指令，包括：
根据所述实时图像信息获取所述主播对应的图像参数变化信息，其中，所述图像参数变化信息包括所述主播相关的图像参数的变化量信息；
若所述图像参数变化信息大于或等于预设的图像参数变化阈值，则生成关于所述主播的直播遮挡指令。
22.一种用于确定直播遮挡区域的方法，其中，该方法包括：
第一用户设备通过摄像装置采集主播关于直播的实时图像信息，将所述实时图像信息上传至对应的网络设备；
所述网络设备接收主播的第一用户设备上传的、关于直播的实时图像信息，根据所述实时图像信息识别所述主播对应的直播人像区域，获取关于所述主播的直播遮挡指令；响应于所述直播遮挡指令，基于所述直播人像区域确定所述实时图像信息中的直播遮挡区域。
23.一种计算机设备，其中，该设备包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行如权利要求1至21中任一项所述方法的步骤。
24.一种计算机可读存储介质，其上存储有计算机程序/指令，其特征在于，该计算机程序/指令在被执行时使得系统进行执行如权利要求1至21中任一项所述方法的步骤。
25.一种计算机程序产品，包括计算机程序/指令，其特征在于，该计算机程序/指令被处理器执行时实现权利要求1至21中任一项所述方法的步骤。
CN202110995234.4A 2021-08-27 2021-08-27 一种用于确定直播遮挡区域的方法与设备 Active CN113709519B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110995234.4A CN113709519B (zh) 2021-08-27 2021-08-27 一种用于确定直播遮挡区域的方法与设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110995234.4A CN113709519B (zh) 2021-08-27 2021-08-27 一种用于确定直播遮挡区域的方法与设备

Publications (2)

Publication Number Publication Date
CN113709519A true CN113709519A (zh) 2021-11-26
CN113709519B CN113709519B (zh) 2023-11-17

Family

ID=78655953

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110995234.4A Active CN113709519B (zh) 2021-08-27 2021-08-27 一种用于确定直播遮挡区域的方法与设备

Country Status (1)

Country Link
CN (1) CN113709519B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114268813A (zh) * 2021-12-31 2022-04-01 广州方硅信息技术有限公司 直播画面调整方法、装置及计算机设备
CN116030411A (zh) * 2022-12-28 2023-04-28 宁波星巡智能科技有限公司 基于姿态识别的人形隐私遮挡方法、装置及设备
CN116456121A (zh) * 2023-03-02 2023-07-18 广东互视达电子科技有限公司 一种多功能直播机

Citations (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105407261A (zh) * 2014-08-15 2016-03-16 索尼公司 图像处理装置、方法以及电子设备
CN106446803A (zh) * 2016-09-07 2017-02-22 北京小米移动软件有限公司 直播内容识别处理方法、装置及设备
CN106570408A (zh) * 2015-10-08 2017-04-19 阿里巴巴集团控股有限公司 敏感信息的展现方法和装置
WO2017128853A1 (zh) * 2016-01-29 2017-08-03 宇龙计算机通信科技(深圳)有限公司 摄制视频的处理方法、装置和设备
CN107197370A (zh) * 2017-06-22 2017-09-22 北京密境和风科技有限公司 一种直播视频的场景检测方法和装置
CN107864401A (zh) * 2017-11-08 2018-03-30 北京密境和风科技有限公司 一种基于直播的监控方法、装置、系统及终端设备
CN108040265A (zh) * 2017-12-13 2018-05-15 北京奇虎科技有限公司 一种对视频进行处理的方法和装置
CN108235054A (zh) * 2017-12-15 2018-06-29 北京奇虎科技有限公司 一种直播视频数据的处理方法和装置
KR20180102455A (ko) * 2017-03-07 2018-09-17 황영복 고효율비디오코딩 파일 영상내 개인정보 보호 방법
CN108848334A (zh) * 2018-07-11 2018-11-20 广东小天才科技有限公司 一种视频处理的方法、装置、终端和存储介质
CN108965982A (zh) * 2018-08-28 2018-12-07 百度在线网络技术（北京）有限公司 视频录制方法、装置、电子设备和可读存储介质
CN108989830A (zh) * 2018-08-30 2018-12-11 广州虎牙信息科技有限公司 一种直播方法、装置、电子设备及存储介质
CN109040824A (zh) * 2018-08-28 2018-12-18 百度在线网络技术（北京）有限公司 视频处理方法、装置、电子设备和可读存储介质
CN109104619A (zh) * 2018-09-28 2018-12-28 联想(北京)有限公司 用于直播的图像处理方法和装置
CN109451349A (zh) * 2018-10-31 2019-03-08 维沃移动通信有限公司 一种视频播放方法、装置及移动终端
CN109602452A (zh) * 2018-12-06 2019-04-12 余姚市华耀工具科技有限公司 器官定向遮挡系统
CN110490828A (zh) * 2019-09-10 2019-11-22 广州华多网络科技有限公司 视频直播中的图像处理方法和系统
CN110769311A (zh) * 2019-10-09 2020-02-07 北京达佳互联信息技术有限公司 直播数据流的处理方法、装置及系统
CN111385591A (zh) * 2018-12-28 2020-07-07 阿里巴巴集团控股有限公司 网络直播方法、直播处理方法、装置、直播服务器及终端设备
CN111770365A (zh) * 2020-07-03 2020-10-13 广州酷狗计算机科技有限公司 主播推荐方法、装置、计算机设备及计算机可读存储介质
CN112235589A (zh) * 2020-10-13 2021-01-15 中国联合网络通信集团有限公司 网络直播识别方法、边缘服务器、计算机设备及存储介质
CN112672173A (zh) * 2020-12-09 2021-04-16 上海东方传媒技术有限公司 一种电视直播信号中特定内容的遮挡方法及系统
CN112950443A (zh) * 2021-02-05 2021-06-11 深圳市镜玩科技有限公司 基于图像贴纸的自适应隐私保护方法、系统、设备及介质
KR102282373B1 (ko) * 2020-10-28 2021-07-28 (주)그린공간정보 Mms의 데이터 수집 위치에 따른 영상정보 변화 확인 기능의 구간별 위치검증 시스템
CN113223009A (zh) * 2021-04-16 2021-08-06 北京戴纳实验科技有限公司 一种衣着检测系统

Patent Citations (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105407261A (zh) * 2014-08-15 2016-03-16 索尼公司 图像处理装置、方法以及电子设备
CN106570408A (zh) * 2015-10-08 2017-04-19 阿里巴巴集团控股有限公司 敏感信息的展现方法和装置
WO2017128853A1 (zh) * 2016-01-29 2017-08-03 宇龙计算机通信科技(深圳)有限公司 摄制视频的处理方法、装置和设备
CN106446803A (zh) * 2016-09-07 2017-02-22 北京小米移动软件有限公司 直播内容识别处理方法、装置及设备
KR20180102455A (ko) * 2017-03-07 2018-09-17 황영복 고효율비디오코딩 파일 영상내 개인정보 보호 방법
CN107197370A (zh) * 2017-06-22 2017-09-22 北京密境和风科技有限公司 一种直播视频的场景检测方法和装置
CN107864401A (zh) * 2017-11-08 2018-03-30 北京密境和风科技有限公司 一种基于直播的监控方法、装置、系统及终端设备
CN108040265A (zh) * 2017-12-13 2018-05-15 北京奇虎科技有限公司 一种对视频进行处理的方法和装置
CN108235054A (zh) * 2017-12-15 2018-06-29 北京奇虎科技有限公司 一种直播视频数据的处理方法和装置
CN108848334A (zh) * 2018-07-11 2018-11-20 广东小天才科技有限公司 一种视频处理的方法、装置、终端和存储介质
CN109040824A (zh) * 2018-08-28 2018-12-18 百度在线网络技术（北京）有限公司 视频处理方法、装置、电子设备和可读存储介质
CN108965982A (zh) * 2018-08-28 2018-12-07 百度在线网络技术（北京）有限公司 视频录制方法、装置、电子设备和可读存储介质
CN108989830A (zh) * 2018-08-30 2018-12-11 广州虎牙信息科技有限公司 一种直播方法、装置、电子设备及存储介质
CN109104619A (zh) * 2018-09-28 2018-12-28 联想(北京)有限公司 用于直播的图像处理方法和装置
CN109451349A (zh) * 2018-10-31 2019-03-08 维沃移动通信有限公司 一种视频播放方法、装置及移动终端
CN109602452A (zh) * 2018-12-06 2019-04-12 余姚市华耀工具科技有限公司 器官定向遮挡系统
CN111385591A (zh) * 2018-12-28 2020-07-07 阿里巴巴集团控股有限公司 网络直播方法、直播处理方法、装置、直播服务器及终端设备
CN110490828A (zh) * 2019-09-10 2019-11-22 广州华多网络科技有限公司 视频直播中的图像处理方法和系统
CN110769311A (zh) * 2019-10-09 2020-02-07 北京达佳互联信息技术有限公司 直播数据流的处理方法、装置及系统
CN111770365A (zh) * 2020-07-03 2020-10-13 广州酷狗计算机科技有限公司 主播推荐方法、装置、计算机设备及计算机可读存储介质
CN112235589A (zh) * 2020-10-13 2021-01-15 中国联合网络通信集团有限公司 网络直播识别方法、边缘服务器、计算机设备及存储介质
KR102282373B1 (ko) * 2020-10-28 2021-07-28 (주)그린공간정보 Mms의 데이터 수집 위치에 따른 영상정보 변화 확인 기능의 구간별 위치검증 시스템
CN112672173A (zh) * 2020-12-09 2021-04-16 上海东方传媒技术有限公司 一种电视直播信号中特定内容的遮挡方法及系统
CN112950443A (zh) * 2021-02-05 2021-06-11 深圳市镜玩科技有限公司 基于图像贴纸的自适应隐私保护方法、系统、设备及介质
CN113223009A (zh) * 2021-04-16 2021-08-06 北京戴纳实验科技有限公司 一种衣着检测系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114268813A (zh) * 2021-12-31 2022-04-01 广州方硅信息技术有限公司 直播画面调整方法、装置及计算机设备
CN116030411A (zh) * 2022-12-28 2023-04-28 宁波星巡智能科技有限公司 基于姿态识别的人形隐私遮挡方法、装置及设备
CN116030411B (zh) * 2022-12-28 2023-08-18 宁波星巡智能科技有限公司 基于姿态识别的人形隐私遮挡方法、装置及设备
CN116456121A (zh) * 2023-03-02 2023-07-18 广东互视达电子科技有限公司 一种多功能直播机
CN116456121B (zh) * 2023-03-02 2023-10-31 广东互视达电子科技有限公司 一种多功能直播机

Also Published As

Publication number Publication date
CN113709519B (zh) 2023-11-17

Similar Documents

Publication Publication Date Title
CN113709519B (zh) 一种用于确定直播遮挡区域的方法与设备
KR102646695B1 (ko) 비디오 프레임 보간을 위한 특징 피라미드 워핑
US10827126B2 (en) Electronic device for providing property information of external light source for interest object
CN108566516B (zh) 图像处理方法、装置、存储介质及移动终端
CN110267008B (zh) 图像处理方法、装置、服务器及存储介质
CN113741698B (zh) 一种确定和呈现目标标记信息的方法与设备
CN105323497B (zh) 恒定包围的高动态范围(cHDR)操作
CN108525298B (zh) 图像处理方法、装置、存储介质及电子设备
CN109272459A (zh) 图像处理方法、装置、存储介质及电子设备
US11398041B2 (en) Image processing apparatus and method
CN109120863B (zh) 拍摄方法、装置、存储介质及移动终端
Fernandez-Sanchez et al. Background subtraction model based on color and depth cues
CN108551552B (zh) 图像处理方法、装置、存储介质及移动终端
US20130170760A1 (en) Method and System for Video Composition
CN108494996B (zh) 图像处理方法、装置、存储介质及移动终端
US20190379812A1 (en) Methods and apparatus for capturing media using plurality of cameras in electronic device
CN113965665A (zh) 一种用于确定虚拟直播图像的方法与设备
CN105554366A (zh) 一种多媒体拍摄处理方法、装置及智能终端
US11042215B2 (en) Image processing method and apparatus, storage medium, and electronic device
CN112153300A (zh) 多目摄像头曝光方法、装置、设备及介质
CN111968605A (zh) 曝光度调整方法及装置
CN109544441B (zh) 图像处理方法及装置、直播中的肤色处理方法及装置
CN113794831B (zh) 视频拍摄方法、装置、电子设备及介质
CN112532904B (zh) 视频的处理方法、装置及电子设备
CN112752110B (zh) 视频呈现方法及装置、计算设备、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant