CN113240702A - 图像处理方法及装置、电子设备和存储介质 - Google Patents
图像处理方法及装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN113240702A CN113240702A CN202110710159.2A CN202110710159A CN113240702A CN 113240702 A CN113240702 A CN 113240702A CN 202110710159 A CN202110710159 A CN 202110710159A CN 113240702 A CN113240702 A CN 113240702A
- Authority
- CN
- China
- Prior art keywords
- background
- live broadcast
- target image
- image
- background material
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003860 storage Methods 0.000 title claims abstract description 24
- 238000003672 processing method Methods 0.000 title claims abstract description 13
- 239000000463 material Substances 0.000 claims abstract description 212
- 238000000034 method Methods 0.000 claims abstract description 56
- 230000011218 segmentation Effects 0.000 claims abstract description 7
- 230000000694 effects Effects 0.000 claims description 24
- 238000012545 processing Methods 0.000 claims description 22
- 238000004590 computer program Methods 0.000 claims description 13
- 230000004044 response Effects 0.000 claims description 7
- 238000005520 cutting process Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 16
- 210000000746 body region Anatomy 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 11
- 238000004891 communication Methods 0.000 description 10
- 230000008034 disappearance Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 238000003709 image segmentation Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 102000010029 Homer Scaffolding Proteins Human genes 0.000 description 1
- 108010077223 Homer Scaffolding Proteins Proteins 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000002420 orchard Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Computer Vision & Pattern Recognition (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开涉及一种图像处理方法及装置、电子设备和存储介质,所述方法包括:在直播期间,获取直播人员的直播图像;对直播图像进行人像分割,得到直播图像的人体区域和背景区域;在满足背景替换条件的情况下,将背景区域替换为预设的背景素材,生成目标图像并进行显示;将目标图像同步至至少一个第二电子设备,以在第二电子设备中显示目标图像,其中,第二电子设备包括观看直播的观看人员的电子设备。本公开实施例可实现提高直播的趣味性。
Description
技术领域
本公开涉及计算机技术领域,尤其涉及一种图像处理方法及装置、电子设备和存储介质。
背景技术
目前利用直播软件进行直播卖货成为一种在线售货方式,而对于直播卖货的场景,有时仅靠主播讲解售卖物,直播的趣味性可能较低,对观看人员的吸引力度也可能较低。
发明内容
本公开提出了一种图像处理技术方案。
根据本公开的一方面,提供了一种图像处理方法,应用于第一电子设备,包括:在直播期间,获取直播人员的直播图像;对所述直播图像进行人像分割,得到所述直播图像的人体区域和背景区域;在满足背景替换条件的情况下,将所述背景区域替换为预设的背景素材,生成目标图像并进行显示;将所述目标图像同步至至少一个第二电子设备,以在所述第二电子设备中显示所述目标图像,其中,所述第二电子设备包括观看所述直播的观看人员的电子设备。
在一种可能的实现方式中,所述背景替换条件包括识别出所述直播图像中的展示物的物体类别,所述方法还包括:对所述直播图像中的展示物进行识别,得到所述直播图像中展示物的物体类别;其中,在满足背景替换条件的情况下,将所述背景区域替换为预设的背景素材,生成目标图像并进行显示,包括:在识别出所述直播图像中的展示物的物体类别的情况下,从背景素材库中确定出与所述物体类别对应的背景素材;将所述背景区域替换为与所述物体类别对应的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述背景替换条件包括所述直播人员的人体姿态与预设姿态匹配,所述方法还包括:对所述直播图像中的直播人员进行姿态识别,得到所述直播人员的人体姿态;其中,在满足背景替换条件的情况下,将所述背景区域替换为预设的背景素材,生成目标图像并进行显示,包括:在所述直播人员的人体姿态与预设姿态匹配的情况下,从背景素材库中确定出与所述预设姿态对应的背景素材;将所述背景区域替换为与所述预设姿态对应的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述背景替换条件包括所述直播人员中包含特定人员,所述方法还包括:对所述直播图像中的直播人员进行人脸识别,得到所述直播人员的身份信息,所述身份信息用于表征所述直播人员中是否包含特定人员;其中,在满足背景替换条件的情况下,将所述背景区域替换为预设的背景素材,生成目标图像并进行显示,包括:在所述直播人员的身份信息表征所述直播人员中包含特定人员的情况下,从背景素材库中确定出与所述特定人员对应的背景素材;将所述背景区域替换为与所述特定人员对应的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述在满足背景替换条件的情况下,将所述背景区域替换为所述背景素材,生成目标图像并进行显示,还包括:响应于针对所述背景素材的配置操作,将所述背景区域替换为配置的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述方法还包括:响应于针对所述目标图像中背景素材的调整操作,调整所述目标图像中背景素材的显示效果;和/或,响应于针对所述目标图像中人体区域的调整操作,调整所述目标图像中人体区域的显示效果;其中,所述调整操作包括放大、缩小、旋转、裁剪、调整透明度、调整位置中的至少一种。
在一种可能的实现方式中,所述方法还包括:响应于针对所述目标图像中背景素材或人体区域的消失操作,按照预设的消失效果,控制所述目标图像中背景素材或人体区域消失。
根据本公开的一方面,提供了一种图像处理装置,应用于第一电子设备,包括:获取模块,用于在直播期间,获取直播人员的直播图像;分割模块,用于对所述直播图像进行人像分割,得到所述直播图像的人体区域和背景区域;替换模块,用于在满足背景替换条件的情况下,将所述背景区域替换为预设的背景素材,生成目标图像并进行显示;同步模块,用于将所述目标图像同步至至少一个第二电子设备,以在所述第二电子设备中显示所述目标图像,其中,所述第二电子设备包括观看所述直播的观看人员的电子设备。
在一种可能的实现方式中,所述背景替换条件包括识别出所述直播图像中的展示物的物体类别,所述装置还包括:物体识别模块,用于对所述直播图像中的展示物进行识别,得到所述直播图像中展示物的物体类别;其中,替换模块,包括:第一素材确定子模块,用于在识别出所述直播图像中的展示物的物体类别的情况下,从背景素材库中确定出与所述物体类别对应的背景素材;第一替换子模块,用于将所述背景区域替换为与所述物体类别对应的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述背景替换条件包括所述直播人员的人体姿态与预设姿态匹配,所述装置还包括:姿态识别模块,用于对所述直播图像中的直播人员进行姿态识别,得到所述直播人员的人体姿态;其中,替换模块,包括:第二素材确定子模块,用于在所述直播人员的人体姿态与预设姿态匹配的情况下,从背景素材库中确定出与所述预设姿态对应的背景素材;第二替换子模块,用于将所述背景区域替换为与所述预设姿态对应的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述背景替换条件包括所述直播人员中包含特定人员,所述装置还包括:人脸识别模块,用于对所述直播图像中的直播人员进行人脸识别,得到所述直播人员的身份信息,所述身份信息用于表征所述直播人员中是否包含特定人员;其中,替换模块,包括:第三素材确定子模块,用于在所述直播人员的身份信息表征所述直播人员中包含特定人员的情况下,从背景素材库中确定出与所述特定人员对应的背景素材;第三替换子模块,用于将所述背景区域替换为与所述特定人员对应的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述替换模块,还包括:配置子模块,用于响应于针对所述背景素材的配置操作,将所述背景区域替换为配置的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述装置还包括:素材调整模块,用于响应于针对所述目标图像中背景素材的调整操作,调整所述目标图像中背景素材的显示效果;和/或,人像调整模块,用于响应于针对所述目标图像中人体区域的调整操作,调整所述目标图像中人体区域的显示效果;其中,所述调整操作包括放大、缩小、旋转、裁剪、调整透明度、调整位置中的至少一种。
在一种可能的实现方式中,所述装置还包括:控制消失模块,用于响应于针对所述目标图像中背景素材或人体区域的消失操作,按照预设的消失效果,控制所述目标图像中背景素材或人体区域消失。
根据本公开的一方面,提供了一种电子设备,包括:处理器;用于存储处理器可执行指令的存储器;其中,所述处理器被配置为调用所述存储器存储的指令,以执行上述方法。
根据本公开的一方面,提供了一种计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令被处理器执行时实现上述方法。
在本公开实施例中,能够将直播过程中的背景区域,自动替换为预设的背景素材,从而可提高直播的趣味性,也提高对观看人员的吸引力度。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非限制本公开。根据下面参考附图对示例性实施例的详细说明,本公开的其它特征及方面将变得清楚。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。
图1示出根据本公开实施例的图像处理方法的流程图。
图2示出根据本公开实施例的背景素材配置界面的示意图。
图3示出根据本公开实施例的图像处理装置的框图。
图4示出根据本公开实施例的一种电子设备的框图。
具体实施方式
以下将参考附图详细说明本公开的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面,但是除非特别指出,不必按比例绘制附图。
在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
另外,为了更好地说明本公开,在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解,没有某些具体细节,本公开同样可以实施。在一些实例中,对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述,以便于凸显本公开的主旨。
图1示出根据本公开实施例的图像处理方法的流程图,所述图像处理方法可以由第一电子设备执行,第一电子设备可以包括用户设备(User Equipment,UE)、移动设备、用户终端、终端、蜂窝电话、无绳电话、个人数字助理(Personal Digital Assistant,PDA)、手持设备、计算设备、车载设备、可穿戴设备等终端设备,所述方法可以通过第一电子设备的处理器调用存储器中存储的计算机可读指令的方式来实现。如图1所示,所述图像处理方法包括:
在步骤S11中,在直播期间,获取直播人员的直播图像。
直播期间,可理解为,直播人员(可称为主播)通过第一电子设备上安装的直播软件进行直播的期间。其中,直播软件可是技术人员采用本领域已知的软件开发技术,所开发出的应用程序、或网页客户端、或功能插件等,通过直播软件可实现在线直播。
应理解的是,该直播软件中包含实现本公开实施例中的图像处理方法的程序代码,该图像处理方法的程序代码可作为插件集成到直播软件中,以在直播期间实现本公开实施例的图像处理方法。
其中,直播图像可是第一电子设备上设置的图像采集部件采集的、直播人员的至少一帧图像。应理解的是,图像采集部件可包括各类摄像头,对此本公开实施例不作限制。
在步骤S12中,对直播图像进行人像分割,得到直播图像的人体区域和背景区域。
其中,可通过本领域已知的图像分割技术,例如图像分割网络,对直播图像进行人像分割,得到直播图像中的人体区域与背景区域。应理解的是,对于图像分割网络的网络结构、网络类型以及训练方式等,本公开实施例不作限制。
其中,人体区域为人体轮廓围成的区域,背景区域为直播图像中除人体区域以外的其它区域。
在步骤S13中,在满足背景替换条件的情况下,将背景区域替换为预设的背景素材,生成目标图像并进行显示。
背景替换条件,可理解为,对直播图像的背景区域进行背景替换的触发条件。在一种可能的实现方式中,背景替换条件可至少包括:识别出直播图像中的展示物的物体类别、直播人员的人体姿态与预设姿态匹配、直播人员中包含特定人员等。其中,直播图像中的展示物可理解为直播过程中展示的物品(例如展示的售卖物),特定人员可理解为具有特殊身份的人员,例如明星、作家等。
预设的背景素材例如可包括任意图像、视频等可对直播图像的背景区域进行替换的素材。在一种可能的实现方式中,直播人员可预先配置与背景替换条件对应的背景素材,这样可在满足背景替换条件时,获取对应的背景素材并进行替换。
应理解的是,在直播人员未预先配置与背景替换条件对应的背景素材的情况下,可采用默认的与背景替换条件对应的背景素材,来对背景区域进行替换,对此本公开实施例不作限制。
在一种可能的实现方式中,将背景区域替换为预设的背景素材,生成目标图像并进行显示,可包括:将背景素材插入背景区域与人体区域之间的图层中,得到目标图像并进行显示;还可包括:根据人体区域,对直播图像进行裁剪,得到人体区域对应的人体图像;进而将该人体图像与背景素材进行融合,得到目标图像并进行显示,对此本公开实施例不作限制。
可理解的是,可在第一电子设备的显示界面,或者说直播软件提供的显示界面中,显示目标图像,可便于直播人员看到替换背景后的目标图像。
在步骤S14中,将目标图像同步至至少一个第二电子设备,以在第二电子设备中显示目标图像,其中,第二电子设备包括观看直播的观看人员的电子设备。
考虑到观看直播的观看人员较多,为便于向多个第二电子设备同步目标图像。在一种可能的实现方式中,第一电子设备可将目标图像发送至云端服务器,由云端服务器向观看该直播的观看人员的第二电子设备中推送目标图像。
应理解的是,目标图像包括不止一帧,多帧目标图像可通过视频流的形式,发送给云端服务器,并由云端服务器发送给至少一个第二电子设备;第二电子设备在接收到目标图像后,可在第二电子设备的显示界面中显示该目标图像。
在本公开实施例中,能够将直播过程中的背景区域,自动替换为预设的背景素材,从而可提高直播的趣味性,也提高对观看人员的吸引力度。
如上所述,背景替换条件包括识别出直播图像中的展示物的物体类别,在一种可能的实现方式中,所述方法还包括:
对直播图像中的展示物进行识别,得到直播图像中展示物的物体类别。
其中,可采用本领域已知的图像识别技术,例如,训练后的物体识别网络,对直播图像中的展示物进行识别,得到展示物的物体类别。应理解的是,对于物体识别网络的网络结构、网络类型以及训练方式等,本公开实施例不作限制。
考虑到,直播图像中可能包含多种物体,直播人员可预先配置其所要展示的展示物的物体类别,这样在例如通过物体识别网络识别出直播图像中的全部或部分物体后,可与预先配置的物体类别进行匹配,得到当前直播图像中的展示物,也即得到直播图像中展示物的物体类别。
在一种可能的实现方式中,在步骤S13中,在满足背景替换条件的情况下,将背景区域替换为预设的背景素材,生成目标图像并进行显示,包括:
在识别出直播图像中的展示物的物体类别的情况下,从背景素材库中确定出与物体类别对应的背景素材;将背景区域替换为与物体类别对应的背景素材,生成目标图像并进行显示。
如上所述,直播人员可预先配置与背景替换条件对应的背景素材,也即,可预先配置与物体类别对应的背景素材。应理解的是,直播过程中的展示物可不止一个,每个展示物也可对应配置至少一个背景素材。
其中,背景素材库中可包含直播人员配置的全部或部分背景素材,当然也可包括直播软件在线提供的、默认的与背景替换条件对应的背景素材,对此本公开实施例不作限制。其中,可通过记录物体类别与背景素材之间的对应关系,实现从背景素材库中确定出与物体类别对应的背景素材。
在一种可能的实现方式中,在展示物对应配置了多个背景素材的情况下,可随机选取多个背景素材中的背景素材进行背景替换,并在直播展示该展示物期间,按照一定的替换周期,轮询替换直播图像的背景区域;当然也可按照直播人员预设的替换顺序,以及一定的替换周期,轮询替换直播图像的背景区域,对此本公开实施例不作限制。通过该方式,能够实现针对同一展示物显示多种背景素材,提升直播卖货的趣味性。
其中,将背景区域替换为与物体类别对应的背景素材,生成目标图像并进行显示,可参照上述本公开实施例中步骤S13生成目标图像并进行显示的方式,在此不做赘述。
在本公开实施例中,将直播图像的背景区域替换为与展示物对应的背景素材,例如,识别到直播卖水果,背景替换为果园的图像、视频等,识别到直播卖海产品,背景替换为海边的图像、视频等,能够提升直播卖货的趣味性,从而提升对观看人员的吸引力度。
如上所述,背景替换条件包括直播人员的人体姿态与预设姿态匹配,在一种可能的实现方式中,所述方法还包括:
对直播图像中的直播人员进行姿态识别,得到直播人员的人体姿态。
其中,可采用本领域已知的人体姿态识别技术,例如,训练后的姿态识别网络,对直播图像中的直播人员进行姿态识别,得到直播人员的人体姿态。应理解的是,对于姿态识别网络的网络结构、网络类型以及训练方式等,本公开实施例不作限制。
在一种可能的实现方式中,在步骤S13中,在满足背景替换条件的情况下,将背景区域替换为预设的背景素材,生成目标图像并进行显示,包括:
在直播人员的人体姿态与预设姿态匹配的情况下,从背景素材库中确定出与预设姿态对应的背景素材;将背景区域替换为与预设姿态对应的背景素材,生成目标图像并进行显示。
其中,预设姿态,可理解为预先设置的与背景素材对应的人体姿态。例如,若直播人员要直播打篮球,预设姿态包括打篮球的人体姿态,背景素材可是篮球场的图像、视频等;若直播人员要直播打台球,预设姿态包括打台球的人体姿态,背景素材可是台球厅的图像、视频等。
其中,人体姿态与预设姿态匹配,可是人体姿态与预设姿态之间的相似度较高,例如,可在人体姿态与预设姿态之间的相似度超过预设阈值的情况下,确定人体姿态与预设姿态匹配。
应理解的是,可采用本领域已知的相似度计算方式,例如余弦相似度、欧式距离等,计算人体姿态与预设姿态之间的相似度,对此本公开实施例不作限制;预设阈值可根据历史经验、姿态识别网络的识别精度等确定,对此本公开实施例不作限制。
如上所述,背景素材库中可包含直播人员配置的全部或部分背景素材,当然也可包括直播软件在线提供的、默认的与背景替换条件对应的背景素材,对此本公开实施例不作限制。其中,可通过记录预设姿态与背景素材之间的对应关系,实现从背景素材库中确定出与预设姿态对应的背景素材。
可理解的是,用于确定与预设姿态对应的背景素材的背景素材库,与上述用于确定与物体类别对应的背景素材的背景素材库,可是同一背景素材库,也可是不同的背景素材库,对此本公开实施例不作限制。
其中,将背景区域替换为人体姿态对应的背景素材,生成目标图像并进行显示,可参照上述本公开实施例中步骤S13生成目标图像并进行显示的方式,在此不做赘述。
在本公开实施例中,将直播图像的背景区域替换为与人体姿态对应的背景素材,能够提升直播人员进行直播的趣味性,从而提升对观看人员的吸引力度。
如上所述,背景替换条件包括直播人员中包含特定人员,在一种可能的实现方式中,所述方法还包括:
对直播图像中的直播人员进行人脸识别,得到直播人员的身份信息,身份信息用于表征直播人员中是否包含特定人员。
其中,可采用本领域已知的人脸识别技术,例如,训练后的人脸识别网络,对直播图像中的直播人员进行人脸识别,得到直播人员的身份信息。应理解的是,对于人脸识别网络的网络结构、网络类型以及训练方式等,本公开实施例不作限制。
应理解的是,直播人员可包括多个,多个直播人员中可包括主播、嘉宾等人员,其中,嘉宾可包括特定人员,也即具有特殊身份的人员,如明星、作家等公众人物,这样能够吸引更多的观看人员观看直播。
在一种可能的实现方式中,还可预先存储特定人员的人脸特征与身份信息之间的对应关系,并根据该对应关系确定直播人员的身份信息。
其中,对直播图像中的直播人员进行人脸识别,得到直播人员的身份信息,可包括:提取直播图像中直播人员的人脸特征,将提取的人脸特征与预先存储的人脸特征进行匹配,确定相匹配的人脸特征;进而根据预先存储的人脸特征与身份信息之间的对应关系,将与该相匹配的人脸特征对应的身份信息,确定为直播人员的身份信息。
在一种可能的实现方式中,在步骤S13中,在满足背景替换条件的情况下,将背景区域替换为预设的背景素材,生成目标图像并进行显示,包括:
在直播人员的身份信息表征直播人员中包含特定人员的情况下,从背景素材库中确定出与特定人员对应的背景素材;将背景区域替换为与特定人员对应的背景素材,生成目标图像并进行显示。
如上所述,直播人员可预先配置与背景替换条件对应的背景素材,也即,可预先配置与特定人员的身份信息对应的背景素材,例如可配置明星代言商品的广告、作家出版图书的封面等。应理解的是,直播过程中的特定人员可不止一位,每位特定人员也可对应配置至少一个背景素材
如上所述,背景素材库中可包含直播人员配置的全部或部分背景素材,当然也可包括直播软件在线提供的、默认的与背景替换条件对应的背景素材,对此本公开实施例不作限制。其中,可通过记录物体类别与身份信息之间的对应关系,实现从背景素材库中确定出与特定人员对应的背景素材。
可理解的是,用于确定与特定人员对应的背景素材的背景素材库,与上述用于确定与预设姿态对应的背景素材的背景素材库,用于确定与物体类别对应的背景素材的背景素材库,可是同一背景素材库,也可是不同的背景素材库,对此本公开实施例不作限制。
在一种可能的实现方式中,在配置了特定人员对应多个背景素材的情况下,可随机选取多个背景素材中的背景素材进行背景替换,并在特定人员直播期间,按照一定的替换周期,轮询替换直播图像的背景区域;当然也可按照直播人员预设的替换顺序,以及一定的替换周期,轮询替换直播图像的背景区域,对此本公开实施例不作限制。通过该方式,能够吸引更多的观看人员观看直播,提升直播的趣味性和吸引力度。
其中,将背景区域替换为与特定人员对应的背景素材,生成目标图像并进行显示,可参照上述本公开实施例中步骤S13生成目标图像并进行显示的方式,在此不做赘述。
在本公开实施例中,将直播图像的背景区域替换为与特定人员对应的背景素材,能够提升直播人员进行直播的趣味性,从而提升对观看人员的吸引力度。
在一种可能的实现方式中,在步骤S13中,在满足背景替换条件的情况下,将背景区域替换为背景素材,生成目标图像并进行显示,还包括:响应于针对背景素材的配置操作,将背景区域替换为配置的背景素材,生成目标图像并进行显示。
其中,针对背景素材的配置操作,可理解为,用于配置待替换的背景素材的操作。应理解的是,直播软件中可提供用于配置背景素材的配置控件,以便于直播人员进行配置操作,从而可实时配置或者更换背景素材。
在一种可能的实现方式中,直播人员可在线选择背景素材库中已有的背景素材,还可从第一电子设备中导入本地存储的背景素材,来配置待替换的背景素材,对此本公开实施例不作限制。
图2示出根据本公开实施例的背景素材配置界面的示意图,应理解的是,该背景素材配置界面可是直播软件提供的界面。如图2所示,直播人员可点选任一背景素材库中的背景素材,例如,可选中“素材1”;在选中任一背景素材后,可在“预览区域”显示替换后的直播图像,以便于参与人员预览该替换后的直播图像;还可通过点击“更多”按钮,查看更多未显示当前背景素材配置界面中的素材;还可通过“素材导入”功能,通过选择背景素材的本地存储地址,如图2中“D:\sucai\1.gif”,导入本地存储的背景素材;可通过点击“确认”按钮,确定所配置的背景素材。
应理解的是,图2示出的背景素材配置界面,可是本公开实施例提供的一种实施方式,实际上,本领域技术人员可根据实际需求,设计背景素材配置界面的界面布局及其中的各项配置功能等,对此本公开实施例不作限制。
其中,将背景区域替换为配置的背景素材,生成目标图像并进行显示,可参照上述本公开实施例中步骤S13生成目标图像并进行显示的方式,在此不做赘述。
在本公开实施例中,能够在线手动配置所要替换的背景素材,进行背景替换,以满足直播人员随时进行背景替换的替换需求。
在一种可能的实现方式中,所述方法还包括:
响应于针对目标图像中背景素材的调整操作,调整目标图像中背景素材的显示效果;和/或,响应于针对目标图像中人体区域的调整操作,调整目标图像中人体区域的显示效果;其中,调整操作包括放大、缩小、旋转、裁剪、调整透明度、调整位置中的至少一种。
在一种可能的实现方式中,直播软件中可提供用于调整背景素材和/或人体区域的显示效果的调整控件,例如可在上述素材配置界面中提供该调整控件,以便于直播人员随时调整背景素材和/或人体区域在目标图像中的显示效果,例如,放大或缩小背景素材、降低该背景素材的透明度、旋转背景素材、裁剪背景素材、调整人体区域的显示位置等。
其中,背景素材或人体区域的显示效果,可包括:显示尺寸、透明度、显示位置、显示角度等。应理解的是,以上调整操作是本公开实施例提供的一些实施方式,实际上,本领域技术人员可根据实际需求提供各种用于调整图像显示效果的调整控件,例如,还可提供用于设置滤镜、调整色温等的控件,对此本公开实施例不作限制。
应理解的是,通过上述任一调整操作调整背景素材或人体区域的显示效果后,可得到调整后的目标图像,第一电子设备可将该调整后的目标图像同步至观看人员的第二电子设备中,也即,第一电子设备可将该多帧调整后的目标图像以视频流的形式,发送至云端服务器,通过云端服务器将该调整后的目标图像推送至观看人员的第二电子设备中并进行显示。
在本公开实施例中,可便于直播人员调整背景素材和/或人体区域的显示效果,得到令参与人员满意的目标图像。
考虑到,直播过程中还可能存在:去掉已显示的背景素材,也即显示原始直播图像;或显示全部背景素材,也即不显示人体区域等直播需求,在一种可能的实现方式中,所述方法还包括:
响应于针对目标图像中背景素材或人体区域的消失操作,按照预设的消失效果,控制目标图像中背景素材或人体区域消失。通过该方式,能够满足直播人员各种直播需求。
其中,针对目标图像中背景素材或人体区域的消失操作,可理解为,用于控制背景素材或人体区域从直播界面中消失的操作。
应理解的是,直播软件中可提供用于控制背景素材或人体区域消失的操作控件,以实现触发背景素材或人体区域消失。其中,针对目标图像中背景素材或人体区域的消失操作,例如可包括触发该直播软件提供的操作控件,来触发按照预设的消失效果,使背景素材或人体区域消失。
其中,消失效果例如可包括:逐渐缩小尺寸至消失、逐渐增大透明度至消失、移动位置至显示界面外消失等。应理解的是,本领域技术人员可根据实际需求设计并实现各种消失效果,对此本公开实施例不作限制。
应理解的是,背景素材消失后,第一电子设备向第二电子设备同步的可直接是实时采集的直播图像;人体区域消失后,第一电子设备向第二电子设备同步的可直接是背景素材,也即第二电子设备显示的是背景素材,这类似于直播期间插播广告。
可以理解,本公开提及的上述各个方法实施例,在不违背原理逻辑的情况下,均可以彼此相互结合形成结合后的实施例,限于篇幅,本公开不再赘述。本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
此外,本公开还提供了图像处理装置、电子设备、计算机可读存储介质、程序,上述均可用来实现本公开提供的任一种图像处理方法,相应技术方案和描述和参见方法部分的相应记载,不再赘述。
图3示出根据本公开实施例的图像处理装置的框图,所述装置应用于第一电子设备,如图3所示,所述装置包括:
获取模块101,用于在直播期间,获取直播人员的直播图像;
分割模块102,用于对所述直播图像进行人像分割,得到所述直播图像的人体区域和背景区域;
替换模块103,用于在满足背景替换条件的情况下,将所述背景区域替换为预设的背景素材,生成目标图像并进行显示;
同步模块104,用于将所述目标图像同步至至少一个第二电子设备,以在所述第二电子设备中显示所述目标图像,其中,所述第二电子设备包括观看所述直播的观看人员的电子设备。
在一种可能的实现方式中,所述背景替换条件包括识别出所述直播图像中的展示物的物体类别,所述装置还包括:物体识别模块,用于对所述直播图像中的展示物进行识别,得到所述直播图像中展示物的物体类别;其中,替换模块103,包括:第一素材确定子模块,用于在识别出所述直播图像中的展示物的物体类别的情况下,从背景素材库中确定出与所述物体类别对应的背景素材;第一替换子模块,用于将所述背景区域替换为与所述物体类别对应的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述背景替换条件包括所述直播人员的人体姿态与预设姿态匹配,所述装置还包括:姿态识别模块,用于对所述直播图像中的直播人员进行姿态识别,得到所述直播人员的人体姿态;其中,替换模块103,包括:第二素材确定子模块,用于在所述直播人员的人体姿态与预设姿态匹配的情况下,从背景素材库中确定出与所述预设姿态对应的背景素材;第二替换子模块,用于将所述背景区域替换为与所述预设姿态对应的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述背景替换条件包括所述直播人员中包含特定人员,所述装置还包括:人脸识别模块,用于对所述直播图像中的直播人员进行人脸识别,得到所述直播人员的身份信息,所述身份信息用于表征所述直播人员中是否包含特定人员;其中,替换模块103,包括:第三素材确定子模块,用于在所述直播人员的身份信息表征所述直播人员中包含特定人员的情况下,从背景素材库中确定出与所述特定人员对应的背景素材;第三替换子模块,用于将所述背景区域替换为与所述特定人员对应的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述替换模块103,还包括:配置子模块,用于响应于针对所述背景素材的配置操作,将所述背景区域替换为配置的背景素材,生成目标图像并进行显示。
在一种可能的实现方式中,所述装置还包括:素材调整模块,用于响应于针对所述目标图像中背景素材的调整操作,调整所述目标图像中背景素材的显示效果;和/或,人像调整模块,用于响应于针对所述目标图像中人体区域的调整操作,调整所述目标图像中人体区域的显示效果;其中,所述调整操作包括放大、缩小、旋转、裁剪、调整透明度、调整位置中的至少一种。
在一种可能的实现方式中,所述装置还包括:控制消失模块,用于响应于针对所述目标图像中背景素材或人体区域的消失操作,按照预设的消失效果,控制所述目标图像中背景素材或人体区域消失。
在一些实施例中,本公开实施例提供的装置具有的功能或包含的模块可以用于执行上文方法实施例描述的方法,其具体实现可以参照上文方法实施例的描述,为了简洁,这里不再赘述。
本公开实施例还提出一种计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令被处理器执行时实现上述方法。计算机可读存储介质可以是易失性或非易失性计算机可读存储介质。
本公开实施例还提出一种电子设备,包括:处理器;用于存储处理器可执行指令的存储器;其中,所述处理器被配置为调用所述存储器存储的指令,以执行上述方法。
本公开实施例还提供了一种计算机程序产品,包括计算机可读代码,或者承载有计算机可读代码的非易失性计算机可读存储介质,当所述计算机可读代码在电子设备的处理器中运行时,所述电子设备中的处理器执行上述方法。
电子设备可以被提供为终端、服务器或其它形态的设备。
图4示出根据本公开实施例的一种电子设备800的框图。例如,电子设备800可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等终端。
参照图4,电子设备800可以包括以下一个或多个组件:处理组件802,存储器804,电源组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。
处理组件802通常控制电子设备800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在电子设备800的操作。这些数据的示例包括用于在电子设备800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件806为电子设备800的各种组件提供电力。电源组件806可以包括电源管理系统,一个或多个电源,及其他与为电子设备800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述电子设备800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当电子设备800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当电子设备800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。
I/O接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器,用于为电子设备800提供各个方面的状态评估。例如,传感器组件814可以检测到电子设备800的打开/关闭状态,组件的相对定位,例如所述组件为电子设备800的显示器和小键盘,传感器组件814还可以检测电子设备800或电子设备800一个组件的位置改变,用户与电子设备800接触的存在或不存在,电子设备800方位或加速/减速和电子设备800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如互补金属氧化物半导体(CMOS)或电荷耦合装置(CCD)图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件816被配置为便于电子设备800和其他设备之间有线或无线方式的通信。电子设备800可以接入基于通信标准的无线网络,如无线网络(WiFi),第二代移动通信技术(2G)或第三代移动通信技术(3G),或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,电子设备800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种非易失性计算机可读存储介质,例如包括计算机程序指令的存储器804,上述计算机程序指令可由电子设备800的处理器820执行以完成上述方法。
本公开可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于使处理器实现本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是(但不限于)电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等,以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本公开的各个方面。
这里参照根据本公开实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器,从而生产出一种机器,使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上,使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software Development Kit,SDK)等等。
以上已经描述了本公开的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。
Claims (10)
1.一种图像处理方法,其特征在于,应用于第一电子设备,包括:
在直播期间,获取直播人员的直播图像;
对所述直播图像进行人像分割,得到所述直播图像的人体区域和背景区域;
在满足背景替换条件的情况下,将所述背景区域替换为预设的背景素材,生成目标图像并进行显示;
将所述目标图像同步至至少一个第二电子设备,以在所述第二电子设备中显示所述目标图像,其中,所述第二电子设备包括观看所述直播的观看人员的电子设备。
2.根据权利要求1所述的方法,其特征在于,所述背景替换条件包括识别出所述直播图像中的展示物的物体类别,所述方法还包括:
对所述直播图像中的展示物进行识别,得到所述直播图像中展示物的物体类别;
其中,在满足背景替换条件的情况下,将所述背景区域替换为预设的背景素材,生成目标图像并进行显示,包括:
在识别出所述直播图像中的展示物的物体类别的情况下,从背景素材库中确定出与所述物体类别对应的背景素材;
将所述背景区域替换为与所述物体类别对应的背景素材,生成目标图像并进行显示。
3.根据权利要求1或2所述的方法,其特征在于,所述背景替换条件包括所述直播人员的人体姿态与预设姿态匹配,所述方法还包括:
对所述直播图像中的直播人员进行姿态识别,得到所述直播人员的人体姿态;
其中,在满足背景替换条件的情况下,将所述背景区域替换为预设的背景素材,生成目标图像并进行显示,包括:
在所述直播人员的人体姿态与预设姿态匹配的情况下,从背景素材库中确定出与所述预设姿态对应的背景素材;
将所述背景区域替换为与所述预设姿态对应的背景素材,生成目标图像并进行显示。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述背景替换条件包括所述直播人员中包含特定人员,所述方法还包括:
对所述直播图像中的直播人员进行人脸识别,得到所述直播人员的身份信息,所述身份信息用于表征所述直播人员中是否包含特定人员;
其中,在满足背景替换条件的情况下,将所述背景区域替换为预设的背景素材,生成目标图像并进行显示,包括:
在所述直播人员的身份信息表征所述直播人员中包含特定人员的情况下,从背景素材库中确定出与所述特定人员对应的背景素材;
将所述背景区域替换为与所述特定人员对应的背景素材,生成目标图像并进行显示。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述在满足背景替换条件的情况下,将所述背景区域替换为所述背景素材,生成目标图像并进行显示,还包括:
响应于针对所述背景素材的配置操作,将所述背景区域替换为配置的背景素材,生成目标图像并进行显示。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述方法还包括:
响应于针对所述目标图像中背景素材的调整操作,调整所述目标图像中背景素材的显示效果;和/或,
响应于针对所述目标图像中人体区域的调整操作,调整所述目标图像中人体区域的显示效果;
其中,所述调整操作包括放大、缩小、旋转、裁剪、调整透明度、调整位置中的至少一种。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述方法还包括:
响应于针对所述目标图像中背景素材或人体区域的消失操作,按照预设的消失效果,控制所述目标图像中背景素材或人体区域消失。
8.一种图像处理装置,其特征在于,应用于第一电子设备,包括:
获取模块,用于在直播期间,获取直播人员的直播图像;
分割模块,用于对所述直播图像进行人像分割,得到所述直播图像的人体区域和背景区域;
替换模块,用于在满足背景替换条件的情况下,将所述背景区域替换为预设的背景素材,生成目标图像并进行显示;
同步模块,用于将所述目标图像同步至至少一个第二电子设备,以在所述第二电子设备中显示所述目标图像,其中,所述第二电子设备包括观看所述直播的观看人员的电子设备。
9.一种电子设备,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为调用所述存储器存储的指令,以执行权利要求1至7中任意一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序指令,其特征在于,所述计算机程序指令被处理器执行时实现权利要求1至7中任意一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110710159.2A CN113240702A (zh) | 2021-06-25 | 2021-06-25 | 图像处理方法及装置、电子设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110710159.2A CN113240702A (zh) | 2021-06-25 | 2021-06-25 | 图像处理方法及装置、电子设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113240702A true CN113240702A (zh) | 2021-08-10 |
Family
ID=77140839
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110710159.2A Pending CN113240702A (zh) | 2021-06-25 | 2021-06-25 | 图像处理方法及装置、电子设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113240702A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114398133A (zh) * | 2022-01-14 | 2022-04-26 | 北京字跳网络技术有限公司 | 显示方法、装置、电子设备及存储介质 |
CN114501060A (zh) * | 2022-01-24 | 2022-05-13 | 广州繁星互娱信息科技有限公司 | 直播背景的切换方法和装置、存储介质及电子设备 |
CN115022668A (zh) * | 2022-07-21 | 2022-09-06 | 中国平安人寿保险股份有限公司 | 基于直播的视频生成方法和装置、设备、介质 |
WO2024051289A1 (zh) * | 2022-09-06 | 2024-03-14 | 华为技术有限公司 | 图像背景替换方法及相关设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109872297A (zh) * | 2019-03-15 | 2019-06-11 | 北京市商汤科技开发有限公司 | 图像处理方法及装置、电子设备和存储介质 |
CN110996121A (zh) * | 2019-12-11 | 2020-04-10 | 北京市商汤科技开发有限公司 | 信息处理方法及装置、电子设备和存储介质 |
CN112351291A (zh) * | 2020-09-30 | 2021-02-09 | 深圳点猫科技有限公司 | 一种基于ai人像分割的教学互动方法、装置及设备 |
CN112911318A (zh) * | 2021-01-15 | 2021-06-04 | 广州虎牙科技有限公司 | 直播间背景替换方法、装置、电子设备及存储介质 |
-
2021
- 2021-06-25 CN CN202110710159.2A patent/CN113240702A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109872297A (zh) * | 2019-03-15 | 2019-06-11 | 北京市商汤科技开发有限公司 | 图像处理方法及装置、电子设备和存储介质 |
CN110996121A (zh) * | 2019-12-11 | 2020-04-10 | 北京市商汤科技开发有限公司 | 信息处理方法及装置、电子设备和存储介质 |
CN112351291A (zh) * | 2020-09-30 | 2021-02-09 | 深圳点猫科技有限公司 | 一种基于ai人像分割的教学互动方法、装置及设备 |
CN112911318A (zh) * | 2021-01-15 | 2021-06-04 | 广州虎牙科技有限公司 | 直播间背景替换方法、装置、电子设备及存储介质 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114398133A (zh) * | 2022-01-14 | 2022-04-26 | 北京字跳网络技术有限公司 | 显示方法、装置、电子设备及存储介质 |
CN114501060A (zh) * | 2022-01-24 | 2022-05-13 | 广州繁星互娱信息科技有限公司 | 直播背景的切换方法和装置、存储介质及电子设备 |
CN115022668A (zh) * | 2022-07-21 | 2022-09-06 | 中国平安人寿保险股份有限公司 | 基于直播的视频生成方法和装置、设备、介质 |
CN115022668B (zh) * | 2022-07-21 | 2023-08-11 | 中国平安人寿保险股份有限公司 | 基于直播的视频生成方法和装置、设备、介质 |
WO2024051289A1 (zh) * | 2022-09-06 | 2024-03-14 | 华为技术有限公司 | 图像背景替换方法及相关设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106791893B (zh) | 视频直播方法及装置 | |
CN113240702A (zh) | 图像处理方法及装置、电子设备和存储介质 | |
CN108985176B (zh) | 图像生成方法及装置 | |
CN108260020B (zh) | 在全景视频中显示互动信息的方法和装置 | |
CN107692997B (zh) | 心率检测方法及装置 | |
CN110928627B (zh) | 界面展示方法及装置、电子设备和存储介质 | |
CN108924644B (zh) | 视频片段提取方法及装置 | |
CN107820131B (zh) | 分享评论信息的方法及装置 | |
CN107147936B (zh) | 弹幕的显示控制方法及装置 | |
CN108174269B (zh) | 可视化音频播放方法及装置 | |
JP2016530554A (ja) | イメージ切替方法、装置、プログラム、及び記録媒体 | |
CN108986117B (zh) | 视频图像分割方法及装置 | |
CN111815779A (zh) | 对象展示方法及装置、定位方法及装置以及电子设备 | |
CN112860061A (zh) | 场景图像展示方法及装置、电子设备和存储介质 | |
CN108346179B (zh) | Ar设备显示方法和装置 | |
CN111523346A (zh) | 图像识别方法及装置、电子设备和存储介质 | |
CN110609933A (zh) | 图像处理方法及装置、电子设备和存储介质 | |
CN106954093B (zh) | 全景视频处理方法、装置及系统 | |
CN107105311B (zh) | 直播方法及装置 | |
CN110148424B (zh) | 语音处理方法、装置、电子设备及存储介质 | |
CN110121115B (zh) | 精彩视频片段的确定方法及装置 | |
CN115914721A (zh) | 直播画面处理方法、装置、电子设备及存储介质 | |
CN106598247B (zh) | 基于虚拟现实的响应控制方法及装置 | |
CN109151544B (zh) | 多媒体的播放显示方法及装置 | |
CN109361959B (zh) | 弹幕控制方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210810 |