CN111277772A - 一种抠图方法、装置、设备和存储介质 - Google Patents
一种抠图方法、装置、设备和存储介质 Download PDFInfo
- Publication number
- CN111277772A CN111277772A CN202010158653.8A CN202010158653A CN111277772A CN 111277772 A CN111277772 A CN 111277772A CN 202010158653 A CN202010158653 A CN 202010158653A CN 111277772 A CN111277772 A CN 111277772A
- Authority
- CN
- China
- Prior art keywords
- pixel point
- image
- color
- segmented
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Analysis (AREA)
Abstract
本申请实施例公开了一种抠图方法、装置、设备和存储介质,该方法包括:获取针对静止场景的背景图像和待分割图像;其中,所述背景图像不包括目标对象,所述背景图像中的像素点具有对应的颜色阈值;计算所述待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离;所述第一像素点为所述待分割图像中的任一个像素点;当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点,所述目标像素点为所述目标对象中的像素点;根据所述目标像素点,从所述待分割图像中分割所述目标对象。该方法实现针对静止场景下的目标对象的分割,无需额外搭建背景,降低了虚拟抠图的复杂性,降低了抠图成本。
Description
技术领域
本申请涉及数据处理领域,特别是涉及一种抠图方法、装置、设备和存储介质。
背景技术
虚拟抠像可以用于从图像中抠出目标对象,并将抠出的目标对象与其它场景的图像进行合并,生成新的图像。虚拟抠像广泛应用于各种场景,如教学视频的录制、影视剧的拍摄等。
目前,虚拟抠像的主要方式为需要搭建蓝绿背景,录制目标对象在蓝绿背景下的视频,进而将目标对象从背景中抠像以与所需的其它场景图像进行合成。
可见,该方案需要构建背景,增大了抠图的复杂性,且也增加了抠图成本。
发明内容
为了解决上述技术问题,本申请提供了一种抠图方法、装置、设备和存储介质,可以实现针对静止场景下的目标对象的分割,无需额外搭建背景,降低了虚拟抠图的复杂性,降低了抠图成本。
本申请实施例公开了如下技术方案:
一方面,本申请实施例提供了一种抠图方法,所述方法包括:
获取针对静止场景的背景图像和待分割图像;其中,所述背景图像不包括目标对象,所述背景图像中的像素点具有对应的颜色阈值;
计算所述待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离;所述第一像素点为所述待分割图像中的任一个像素点;
当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点,所述目标像素点为所述目标对象中的像素点;
根据所述目标像素点,从所述待分割图像中分割所述目标对象。
可选的,所述背景图像为目标视频的前N帧图像中的任意一帧图像,所述第二像素点对应的颜色阈值通过如下方式确定:
确定所述前N帧图像中每一帧图像中的第三像素点与所述第二像素点的第二颜色距离,所述第三像素点对应于所述第二像素点;
根据所述第二颜色距离,确定所述第二像素点对应的颜色阈值。
可选的,所述待分割图像为所述目标视频中的第N+1帧图像。
可选的,所述背景图像为目标视频的前N帧图像中的任意一帧图像;
若所述待分割图像为所述目标视频中的第M帧图像,其中,M>N+1;则,所述第二像素点对应的颜色阈值是根据所述第二像素点和第四像素点的第三颜色距离确定的,所述第四像素点是第一图像中对应于所述第二像素点的像素点,所述第一图像为所述目标视频中的第M-1帧图像。
可选的,所述第二像素点对应的颜色阈值通过如下方式确定:
确定所述第三颜色距离是否大于所述第二像素点对应的颜色阈值;
若是,更新所述第二像素点对应的颜色阈值为所述第三颜色距离;
若否,不更新所述第二像素点对应的颜色阈值。
可选的,所述方法还包括:
根据所述第一颜色距离,对所述第一像素点添加透明度通道,其中,当所述第一颜色距离越大时,为所述第一像素点添加的透明度通道越小;
根据所述第一像素点对应的透明度通道,通过双向异性过滤算法对所述待分割图像进行处理;
所述根据所述目标像素点,从所述待分割图像中分割所述目标对象,包括:
根据所述目标像素点,从经所述双向异性过滤算法处理的待分割图像中分割所述目标对象。
另一方面,本申请实施例提供了一种抠图装置,所述装置包括:
获取单元,用于获取针对静止场景的背景图像和待分割图像;其中,所述背景图像不包括目标对象,所述背景图像中的像素点具有对应的颜色阈值;
计算单元,用于计算所述待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离;所述第一像素点为所述待分割图像中的任一个像素点;
确定单元,用于当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点,所述目标像素点为所述目标对象中的像素点;
分割单元,用于根据所述目标像素点,从所述待分割图像中分割所述目标对象。
可选的,所述背景图像为目标视频的前N帧图像中的任意一帧图像,所述第二像素点对应的颜色阈值通过如下方式确定:
确定所述前N帧图像中每一帧图像中的第三像素点与所述第二像素点的第二颜色距离,所述第三像素点对应于所述第二像素点;
根据所述第二颜色距离,确定所述第二像素点对应的颜色阈值。
可选的,所述待分割图像为所述目标视频中的第N+1帧图像。
可选的,所述背景图像为目标视频的前N帧图像中的任意一帧图像;
若所述待分割图像为所述目标视频中的第M帧图像,其中,M>N+1;则,所述第二像素点对应的颜色阈值是根据所述第二像素点和第四像素点的第三颜色距离确定的,所述第四像素点是第一图像中对应于所述第二像素点的像素点,所述第一图像为所述目标视频中的第M-1帧图像。
可选的,所述第二像素点对应的颜色阈值通过如下方式确定:
确定所述第三颜色距离是否大于所述第二像素点对应的颜色阈值;
若是,更新所述第二像素点对应的颜色阈值为所述第三颜色距离;
若否,不更新所述第二像素点对应的颜色阈值。
可选的,所述确定单元,还具体用于:
根据所述第一颜色距离,对所述第一像素点添加透明度通道,其中,当所述第一颜色距离越大时,为所述第一像素点添加的透明度通道越小;
根据所述第一像素点对应的透明度通道,通过双向异性过滤算法对所述待分割图像进行处理;
根据所述目标像素点,从经所述双向异性过滤算法处理的待分割图像中分割所述目标对象。
另一方面,本申请实施例提供了一种抠图设备,所述设备包括处理器以及存储器:
所述存储器用于存储计算机程序,并将所述计算机程序传输给所述处理器;
所述处理器用于根据所述计算机程序中的指令执行上述任意一项所述的抠图方法。
另一方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质用于存储计算机程序,所述计算机程序用于执行上述任意一项所述的抠图方法。
由上述技术方案可以看出,该抠图方法包括:获取针对静止场景的背景图像和待分割图像;其中,所述背景图像不包括目标对象,所述背景图像中的像素点具有对应的颜色阈值;计算所述待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离;所述第一像素点为所述待分割图像中的任一个像素点;当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点,所述目标像素点为所述目标对象中的像素点;根据所述目标像素点,从所述待分割图像中分割所述目标对象。该方法可以实现针对静止场景下的目标对象的分割,无需额外搭建背景,降低了虚拟抠图的复杂性,降低了抠图成本。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种抠图方法流程图;
图2为本申请实施例提供的一种背景图像和待分割图像的示意图;
图3为本申请实施例提供的一种颜色阈值确定方法流程图;
图4为本申请实施例提供的一种颜色阈值确定方法流程图;
图5为本申请实施例提供的一种分割目标对象的方法流程图;
图6为本申请实施例提供的一种抠图装置示意图;
图7为本申请实施例提供的服务器的一个结构示意图;
图8为本申请实施例提供的终端的一个结构示意图。
具体实施方式
下面结合附图,对本申请的实施例进行描述。
目前,虚拟抠像的主要方式为需要搭建蓝绿背景,录制目标对象在蓝绿背景下的视频,进而将目标对象从背景中进行抠像。该方案需要构建背景,增大了抠图的复杂性,且也增加了抠图成本。
为此,本申请提供了一种抠图方法,无需额外搭建背景,降低了虚拟抠图的复杂性,降低了抠图成本。
首先,对本申请实施例的执行主体进行介绍。本申请提供的抠图方法可以由数据处理设备来执行,如终端设备、服务器。其中,终端设备例如可以是智能手机、计算机、个人数字助理(Personal Digital Assistant,简称PDA)、平板电脑等设备。该抠图方法还可以应用到服务器中,其中,服务器可以是独立的服务器,也可以是集群中的服务器。
下面对本申请实施例提供的抠图方法进行介绍,参见图1,该图示出了本申请实施例提供的一种抠图方法流程图,如图1所示,所述方法包括:
S101:获取针对静止场景的背景图像和待分割图像。
本申请实施例中需要进行抠图的目标对象可以是任意物体,例如为人体(如主持人)等。
需要说明,本申请中的目标对象可以处于静止场景中,且目标对象的颜色值与静止场景中的颜色值的差别相差较大,如大于预设的颜色差值。
这里所述的颜色值可以是指红绿蓝(Red Green Blue,RGB)的数值。
在本申请实施例中,拍摄设备拍摄待分割图像与背景图像时所对应的背景场景是相同的。两者的差别为待分割图像是目标对象进入背景后拍摄的,而背景图像可以是不包括目标对象时拍摄的。
另外,背景图像中的像素点具有对应的颜色阈值。该颜色阈值可以用于区分待分割图像中的像素点是否属于背景。应用颜色阈值区分待分割图像中的像素点是否属于背景的方式将在后续进行详细介绍。
S102:计算待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离。
在本申请实施例中,待分割图像中的像素点可以与背景图像中的一个像素点相对应。其中,可以将两张图像中的像素点相对应理解为,拍摄设备拍摄这两张图像中相对应的像素点所对应的背景场景是一致的。
例如,参见图2,该图示出了本申请实施例提供的一种背景图像和待分割图像的示意图,如图2所示,背景图像展示了一个墙面,待分割图像展示了一个人在该墙面前,其中,背景图像中的像素点201与待分割图像中的像素点202相对应,这两个像素点对应的真实背景场景均为墙面上相同位置。
在本申请实施例中,可以计算待分割图像中像素点与背景图像中对应的像素点的颜色距离。以待分割图像中的第一像素点(待分割图像中的任意一个像素点)为例,可以计算第一像素点与背景图像中对应的第二像素点间的颜色距离,记为第一颜色距离。
其中,计算第一像素点与背景图像中对应的第二像素点间的第一颜色距离的方式可以为:
另外,为了方便计算,也可以将第一像素点和第二像素点的颜色值进行归一化后,再计算两者间的第一颜色距离d。其中,颜色值归一化的方式为FR=R/255;FG=G/255;FB=B/255,该情况下,第一像素点的颜色值为(FR1,FG1,FB1),第二像素点的颜色值为(FR2,FG2,FB2),两者间的第一颜色距离
S103:当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点。
其中,目标像素点可以是指目标对象中的像素点。
第二像素点具有对应的颜色阈值,该颜色阈值可以用于确定第一像素点属于目标对象中的像素点,其中,当第一像素点与第二像素点的第一颜色距离大于该第二像素点的颜色阈值时,可以确定该第一像素点属于目标对象中的像素点,当第一像素点与第二像素点的第一颜色距离小于该第二像素点的颜色阈值时,可以确定该第一像素点不属于目标对象中的像素点。
为此,在本申请实施例中,当确定第一颜色距离不小于所述第二像素点对应的第一颜色阈值时,确定所述第一像素点为目标像素点。
S104:根据所述目标像素点,从所述待分割图像中分割所述目标对象。
在为待分割图像中的各个像素点均通过上述方法确定是否为目标像素点后,可以根据待分割图像中的全部目标像素点,从待分割图像中将目标抠图出来。
需要说明,如果目标像素点对应的区域为目标对象的边缘,则可以根据目标像素点所确定的边缘,从待分割图像中分割出目标对象。
由上述技术方案可以看出,该抠图方法包括:获取针对静止场景的背景图像和待分割图像;其中,所述背景图像不包括目标对象,所述背景图像中的像素点具有对应的颜色阈值;计算所述待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离;所述第一像素点为所述待分割图像中的任一个像素点;当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点,所述目标像素点为所述目标对象中的像素点;根据所述目标像素点,从所述待分割图像中分割所述目标对象。该方法可以实现针对静止场景下的目标对象的分割,无需额外搭建背景,降低了虚拟抠图的复杂性,降低了抠图成本。
接下来对背景图像中像素点的颜色阈值的确定方法进行介绍。
在一种可能的实现方式中,所述背景图像为目标视频的前N帧图像中的任意一帧图像。其中,目标视频的前N帧图像中均不包括目标对象。也就是说,背景图像是根据目标视频中的前N帧图像确定的,例如背景图像为目标视频中的第一帧图像。
如此,参见图3,该图示出了本申请实施例提供的一种颜色阈值确定方法流程图,如图3所示,背景图像中第二像素点对应的颜色阈值可以通过如下方式确定:
S301:确定所述前N帧图像中每一帧图像中的第三像素点与所述第二像素点的第二颜色距离。
其中,可以将前N帧图像中除背景图像外的其它图像中对应于第二像素点的像素点记为第三像素点。则,针对前N帧图像中除背景图像外的其它图像中,可以分别确定其中的第三像素点与第二像素点的颜色距离,记为第二颜色距离。如此,可以确定出N-1个第二颜色距离。
S302:根据所述第二颜色距离,确定所述第二像素点对应的颜色阈值。
在具体实现中,可以将N-1个第二颜色距离的平均值,作为该第二像素点对应的颜色阈值,该颜色阈值也是第二像素点的抖动颜色阈值。
通过该方法,即确定出背景图像中像素点的颜色阈值。
在一种可能的实现方式中,待分割图像为所述目标视频中的第N+1帧图像。也就是说,仅在待分割图像为目标视频中的第N+1帧图像时,可以根据通过上述S301-S302方式确定的颜色阈值来进行目标抠图。
接下来对本申请实施例提供的另一种背景图像中像素点的颜色阈值的确定方法进行介绍。
在一种可能的实现方式中,上述背景图像为目标视频的前N帧图像中的任意一帧图像。其中,目标视频的前N帧图像中不包括目标对象。也就是说,背景图像是根据目标视频中的前N帧图像确定的,例如背景图像为目标视频中的第一帧图像。
为此,若所述待分割图像为所述目标视频中的第M帧图像,其中,M>N+1。则,第二像素点对应的颜色阈值是根据所述第二像素点和第四像素点的第三颜色距离确定的。其中,第四像素点可以是第一图像中对应于第二像素点的像素点,该第一图像为所述目标视频中的第M-1帧图像。
也就是说,可以对背景图像中像素点的颜色阈值进行实时更新。以背景图像中第二像素点的颜色阈值更新为例,在对目标视频中的第M-1帧图像进行目标抠图后,可以确定出该帧图像中对应于第二像素点的第四像素点,并确定第三像素点与第二像素点的颜色距离,即为第三颜色距离。从而,根据该第三颜色距离对第二像素点的颜色阈值进行更新。并将更新后的背景图像的颜色阈值应用于第M帧图像,以进行第M帧图像的目标抠图。
在一种可能的实现方式中,参见图4,该图示出了本申请实施例提供的另一种颜色阈值确定方法流程图,如图4所示,背景图像中第二像素点对应的颜色阈值可以通过如下方式确定:
S401:确定所述第三颜色距离是否大于所述第二像素点对应的颜色阈值。若是,执行S402,若否,执行S403。
S402:更新所述第二像素点对应的颜色阈值为所述第三颜色距离。
S403:不更新所述第二像素点对应的颜色阈值。
也就是说,如果第三颜色距离大于第二像素点对应的颜色阈值,则可以将其颜色阈值更新为第三颜色距离,即第三颜色距离为更新后的第二像素点的颜色阈值。
在实际场景中,当需要对目标视频中的图像分割目标对象时,可以通过前N帧图像来确定背景图像和背景图像中像素点对应的颜色阈值。当需要对目标视频中第N+1帧图像进行目标抠图时,可以根据通过上述S301-S302方法确定的背景图像中像素点对应的颜色阈值,来进行目标抠图。当需要对目标视频中第N+1帧图像之后的任意一帧图像进行目标抠图时,可以根据通过上述S401-S403方法进行实时更新的颜色阈值,来进行目标抠图。
在本申请实施例中,在S103之后,参见图5,该图示出了本申请实施例提供的一种分割目标对象的方法流程图,如图5所示,所述方法还可以包括:
S501:根据所述第一颜色距离,对所述第一像素点添加透明度通道。
其中,当所述第一颜色距离越大时,为所述第一像素点添加的透明度通道越小。当所述第一颜色距离越小时,为所述第一像素点添加的透明度通道越大。
S502:根据所述第一像素点对应的透明度通道,通过双向异性过滤算法对所述待分割图像进行处理。
其中,双向异性过滤算法可以是一种用于平滑图像的算法,通过针对待分割图像的透明度通道来对待分割图像进行处理,如此,对于待分割图像中透明度高的像素点,经处理后其透明度可以更高。对于透明度低的像素点,经处理后其透明度更低。也就是说,使得经处理后待分割图像中背景区域像素点的透明度更高,目标像素点的透明度更低,方便后续对目标对象的分割。
则,上述S104、根据所述目标像素点,从所述待分割图像中分割所述目标对象的方法,可以包括:
S503:根据所述目标像素点,从经所述双向异性过滤算法处理的待分割图像中分割所述目标对象。
该方法利用双向异性过滤算法对目标对象在待分割图像中的画面进行噪声滤波,使得目标对象在待分割图像中的画面更加清晰,从而有利于获得更加平滑的目标对象区域。
基于上述提供的抠图方法,本申请实施例还提供了一种抠图装置,参见图6,该图示出了本申请实施例提供的一种抠图装置示意图,所述装置包括:
获取单元601,用于获取针对静止场景的背景图像和待分割图像;其中,所述背景图像不包括目标对象,所述背景图像中的像素点具有对应的颜色阈值;
计算单元602,用于计算所述待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离;所述第一像素点为所述待分割图像中的任一个像素点;
确定单元603,用于当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点,所述目标像素点为所述目标对象中的像素点;
分割单元604,用于根据所述目标像素点,从所述待分割图像中分割所述目标对象。
在一种可能的实现方式中,所述背景图像为目标视频的前N帧图像中的任意一帧图像,所述第二像素点对应的颜色阈值通过如下方式确定:
确定所述前N帧图像中每一帧图像中的第三像素点与所述第二像素点的第二颜色距离,所述第三像素点对应于所述第二像素点;
根据所述第二颜色距离,确定所述第二像素点对应的颜色阈值。
在一种可能的实现方式中,所述待分割图像为所述目标视频中的第N+1帧图像。
在一种可能的实现方式中,所述背景图像为目标视频的前N帧图像中的任意一帧图像;
若所述待分割图像为所述目标视频中的第M帧图像,其中,M>N+1;则,所述第二像素点对应的颜色阈值是根据所述第二像素点和第四像素点的第三颜色距离确定的,所述第四像素点是第一图像中对应于所述第二像素点的像素点,所述第一图像为所述目标视频中的第M-1帧图像。
在一种可能的实现方式中,所述第二像素点对应的颜色阈值通过如下方式确定:
确定所述第三颜色距离是否大于所述第二像素点对应的颜色阈值;
若是,更新所述第二像素点对应的颜色阈值为所述第三颜色距离;
若否,不更新所述第二像素点对应的颜色阈值。
在一种可能的实现方式中,所述确定单元603,还具体用于:
根据所述第一颜色距离,对所述第一像素点添加透明度通道,其中,当所述第一颜色距离越大时,为所述第一像素点添加的透明度通道越小;
根据所述第一像素点对应的透明度通道,通过双向异性过滤算法对所述待分割图像进行处理;
根据所述目标像素点,从经所述双向异性过滤算法处理的待分割图像中分割所述目标对象。
由上述技术方案可以看出,该抠图方法包括:获取针对静止场景的背景图像和待分割图像;其中,所述背景图像不包括目标对象,所述背景图像中的像素点具有对应的颜色阈值;计算所述待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离;所述第一像素点为所述待分割图像中的任一个像素点;当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点,所述目标像素点为所述目标对象中的像素点;根据所述目标像素点,从所述待分割图像中分割所述目标对象。该方法可以实现针对静止场景下的目标对象的分割,无需额外搭建背景,降低了虚拟抠图的复杂性,降低了抠图成本。
本申请实施例还提供一种设备,该设备具体可以是服务器,图7是本申请实施例提供的一种服务器结构示意图,该服务器600可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上中央处理器(central processing units,CPU)622(例如,一个或一个以上处理器)和存储器632,一个或一个以上存储应用程序642或数据644的存储介质630(例如一个或一个以上海量存储设备)。其中,存储器632和存储介质630可以是短暂存储或持久存储。存储在存储介质630的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对服务器中的一系列指令操作。更进一步地,中央处理器622可以设置为与存储介质630通信,在服务器600上执行存储介质630中的一系列指令操作。
服务器600还可以包括一个或一个以上电源626,一个或一个以上有线或无线网络接口650,一个或一个以上输入输出接口658,和/或,一个或一个以上操作系统641,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等等。
上述实施例中由服务器所执行的步骤可以基于该图7所示的服务器结构。
其中,CPU 622用于执行如下步骤:
获取针对静止场景的背景图像和待分割图像;其中,所述背景图像不包括目标对象,所述背景图像中的像素点具有对应的颜色阈值;
计算所述待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离;所述第一像素点为所述待分割图像中的任一个像素点;
当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点,所述目标像素点为所述目标对象中的像素点;
根据所述目标像素点,从所述待分割图像中分割所述目标对象。
可选的,CPU622还用于执行本申请实施例提供的抠图方法的任意一种实现方式的步骤。
本申请实施例还提供了另一种设备,该设备具体可以是终端,该终端可以为台式机desktop、笔记本电脑等等,如图8所示,为了便于说明,仅示出了与本申请实施例相关的部分,具体技术细节未揭示的,请参照本申请实施例方法部分。以终端为desktop为例:
图8示出的是与本申请实施例提供的终端相关的desktop部分结构的框图。参考图8,desktop包括:射频(英文全称:Radio Frequency,英文缩写:RF)电路710、存储器720、输入单元730、显示单元740、传感器750、音频电路760、无线保真(英文全称:wirelessfidelity,英文缩写:WiFi)模块770、处理器780、以及电源790等部件。本领域技术人员可以理解,图7中示出的desktop结构并不构成对desktop的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
下面结合图8对desktop的各个构成部件进行具体的介绍:
RF电路710可用于收发信息或通话过程中,信号的接收和发送。通常,RF电路710包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(英文全称:Low NoiseAmplifier,英文缩写:LNA)、双工器等。此外,RF电路710还可以通过无线通信与网络和其他设备通信。
存储器720可用于存储软件程序以及模块,处理器780通过运行存储在存储器720的软件程序以及模块,从而执行desktop的各种功能应用以及数据处理。存储器720可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据desktop的使用所创建的数据(比如音频数据等)等。此外,存储器720可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
输入单元730可用于接收输入的数字或字符信息,以及产生与desktop的用户设置以及功能控制有关的键信号输入。具体地,输入单元730可包括触控面板731以及其他输入设备732。触控面板731,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板731上或在触控面板731附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板731可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器780,并能接收处理器780发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板731。除了触控面板731,输入单元730还可以包括其他输入设备732。具体地,其他输入设备732可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元740可用于显示由用户输入的信息或提供给用户的信息以及desktop的各种菜单。显示单元740可包括显示面板741,可选的,可以采用液晶显示器(英文全称:Liquid Crystal Display,英文缩写:LCD)、有机发光二极管(英文全称:Organic Light-Emitting Diode,英文缩写:OLED)等形式来配置显示面板741。进一步的,触控面板731可覆盖显示面板741,当触控面板731检测到在其上或附近的触摸操作后,传送给处理器780以确定触摸事件的类型,随后处理器780根据触摸事件的类型在显示面板741上提供相应的视觉输出。虽然在图7中,触控面板731与显示面板741是作为两个独立的部件来实现desktop的输入和输入功能,但是在某些实施例中,可以将触控面板731与显示面板741集成而实现desktop的输入和输出功能。
desktop还可包括至少一种传感器750,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板741的亮度,接近传感器可在desktop移动到耳边时,关闭显示面板741和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别desktop姿态的应用、振动识别相关功能(比如计步器、敲击)等;至于desktop还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路760、扬声器761,传声器762可提供用户与desktop之间的音频接口。音频电路760可将接收到的音频数据转换后的电信号,传输到扬声器761,由扬声器761转换为声音信号输出;另一方面,传声器762将收集的声音信号转换为电信号,由音频电路760接收后转换为音频数据,再将音频数据输出处理器780处理后,经RF电路710以发送给比如另一desktop,或者将音频数据输出至存储器720以便进一步处理。
WiFi属于短距离无线传输技术,desktop通过WiFi模块770可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图8示出了WiFi模块770,但是可以理解的是,其并不属于desktop的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
处理器780是desktop的控制中心,利用各种接口和线路连接整个desktop的各个部分,通过运行或执行存储在存储器720内的软件程序和/或模块,以及调用存储在存储器720内的数据,执行desktop的各种功能和处理数据,从而对desktop进行整体监控。可选的,处理器780可包括一个或多个处理单元;优选的,处理器780可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器780中。
desktop还包括给各个部件供电的电源790(比如电池),优选的,电源可以通过电源管理系统与处理器780逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管未示出,desktop还可以包括摄像头、蓝牙模块等,在此不再赘述。
在本申请实施例中,该终端所包括的处理器780还具有以下功能:
获取针对静止场景的背景图像和待分割图像;其中,所述背景图像不包括目标对象,所述背景图像中的像素点具有对应的颜色阈值;
计算所述待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离;所述第一像素点为所述待分割图像中的任一个像素点;
当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点,所述目标像素点为所述目标对象中的像素点;
根据所述目标像素点,从所述待分割图像中分割所述目标对象。
可选的,所述处理器780还用于执行本申请的抠图方法的任意一种实现方式的步骤。
本申请实施例还提供一种计算机可读存储介质,用于存储计算机程序,该计算机程序用于执行前述各个实施例所述的一种进程访问确定方法中的任意一种实施方式。
本申请实施例还提供一种包括指令的计算机程序产品,当其在计算机上运行时,使得计算机执行前述各个实施例所述的一种抠图方法中的任意一种实施方式。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质可以是下述介质中的至少一种:只读存储器(英文:read-only memory,缩写:ROM)、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于设备及系统实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的设备及系统实施例仅仅是示意性的,其中作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
以上所述,仅为本申请的一种具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应该以权利要求的保护范围为准。
Claims (14)
1.一种抠图方法,其特征在于,所述方法包括:
获取针对静止场景的背景图像和待分割图像;其中,所述背景图像不包括目标对象,所述背景图像中的像素点具有对应的颜色阈值;
计算所述待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离;所述第一像素点为所述待分割图像中的任一个像素点;
当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点,所述目标像素点为所述目标对象中的像素点;
根据所述目标像素点,从所述待分割图像中分割所述目标对象。
2.根据权利要求1所述的方法,其特征在于,所述背景图像为目标视频的前N帧图像中的任意一帧图像,所述第二像素点对应的颜色阈值通过如下方式确定:
确定所述前N帧图像中每一帧图像中的第三像素点与所述第二像素点的第二颜色距离,所述第三像素点对应于所述第二像素点;
根据所述第二颜色距离,确定所述第二像素点对应的颜色阈值。
3.根据权利要求2所述的方法,其特征在于,所述待分割图像为所述目标视频中的第N+1帧图像。
4.根据权利要求1所述的方法,其特征在于,所述背景图像为目标视频的前N帧图像中的任意一帧图像;
若所述待分割图像为所述目标视频中的第M帧图像,其中,M>N+1;则,所述第二像素点对应的颜色阈值是根据所述第二像素点和第四像素点的第三颜色距离确定的,所述第四像素点是第一图像中对应于所述第二像素点的像素点,所述第一图像为所述目标视频中的第M-1帧图像。
5.根据权利要求4所述的方法,其特征在于,所述第二像素点对应的颜色阈值通过如下方式确定:
确定所述第三颜色距离是否大于所述第二像素点对应的颜色阈值;
若是,更新所述第二像素点对应的颜色阈值为所述第三颜色距离;
若否,不更新所述第二像素点对应的颜色阈值。
6.根据权利要求1-5任意一项所述的方法,其特征在于,所述方法还包括:
根据所述第一颜色距离,对所述第一像素点添加透明度通道,其中,当所述第一颜色距离越大时,为所述第一像素点添加的透明度通道越小;
根据所述第一像素点对应的透明度通道,通过双向异性过滤算法对所述待分割图像进行处理;
所述根据所述目标像素点,从所述待分割图像中分割所述目标对象,包括:
根据所述目标像素点,从经所述双向异性过滤算法处理的待分割图像中分割所述目标对象。
7.一种抠图装置,其特征在于,所述装置包括:
获取单元,用于获取针对静止场景的背景图像和待分割图像;其中,所述背景图像不包括目标对象,所述背景图像中的像素点具有对应的颜色阈值;
计算单元,用于计算所述待分割图像中的第一像素点与所述背景图像中对应的第二像素点的第一颜色距离;所述第一像素点为所述待分割图像中的任一个像素点;
确定单元,用于当所述第一颜色距离不小于所述第二像素点对应的颜色阈值时,确定所述第一像素点为目标像素点,所述目标像素点为所述目标对象中的像素点;
分割单元,用于根据所述目标像素点,从所述待分割图像中分割所述目标对象。
8.根据权利要求7所述的装置,其特征在于,所述背景图像为目标视频的前N帧图像中的任意一帧图像,所述第二像素点对应的颜色阈值通过如下方式确定:
确定所述前N帧图像中每一帧图像中的第三像素点与所述第二像素点的第二颜色距离,所述第三像素点对应于所述第二像素点;
根据所述第二颜色距离,确定所述第二像素点对应的颜色阈值。
9.根据权利要求8所述的装置,其特征在于,所述待分割图像为所述目标视频中的第N+1帧图像。
10.根据权利要求7所述的装置,其特征在于,所述背景图像为目标视频的前N帧图像中的任意一帧图像;
若所述待分割图像为所述目标视频中的第M帧图像,其中,M>N+1;则,所述第二像素点对应的颜色阈值是根据所述第二像素点和第四像素点的第三颜色距离确定的,所述第四像素点是第一图像中对应于所述第二像素点的像素点,所述第一图像为所述目标视频中的第M-1帧图像。
11.根据权利要求10所述的装置,其特征在于,所述第二像素点对应的颜色阈值通过如下方式确定:
确定所述第三颜色距离是否大于所述第二像素点对应的颜色阈值;
若是,更新所述第二像素点对应的颜色阈值为所述第三颜色距离;
若否,不更新所述第二像素点对应的颜色阈值。
12.根据权利要求7-11任意一项所述的装置,其特征在于,所述确定单元,还具体用于:
根据所述第一颜色距离,对所述第一像素点添加透明度通道,其中,当所述第一颜色距离越大时,为所述第一像素点添加的透明度通道越小;
根据所述第一像素点对应的透明度通道,通过双向异性过滤算法对所述待分割图像进行处理;
根据所述目标像素点,从经所述双向异性过滤算法处理的待分割图像中分割所述目标对象。
13.一种抠图设备,其特征在于,所述设备包括处理器以及存储器:
所述存储器用于存储计算机程序,并将所述计算机程序传输给所述处理器;
所述处理器用于根据所述计算机程序中的指令执行权利要求1-6任意一项所述的抠图方法。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质用于存储计算机程序,所述计算机程序用于执行权利要求1-6任意一项所述的抠图方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010158653.8A CN111277772A (zh) | 2020-03-09 | 2020-03-09 | 一种抠图方法、装置、设备和存储介质 |
CN202011255943.0A CN112203024B (zh) | 2020-03-09 | 2020-11-11 | 一种抠图方法、装置、设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010158653.8A CN111277772A (zh) | 2020-03-09 | 2020-03-09 | 一种抠图方法、装置、设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111277772A true CN111277772A (zh) | 2020-06-12 |
Family
ID=71004154
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010158653.8A Withdrawn CN111277772A (zh) | 2020-03-09 | 2020-03-09 | 一种抠图方法、装置、设备和存储介质 |
CN202011255943.0A Active CN112203024B (zh) | 2020-03-09 | 2020-11-11 | 一种抠图方法、装置、设备和存储介质 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011255943.0A Active CN112203024B (zh) | 2020-03-09 | 2020-11-11 | 一种抠图方法、装置、设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (2) | CN111277772A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112330692A (zh) * | 2020-11-11 | 2021-02-05 | 北京文香信息技术有限公司 | 一种抠图方法、装置、设备和存储介质 |
CN112767312A (zh) * | 2020-12-31 | 2021-05-07 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种图像处理方法、装置、存储介质及处理器 |
CN113034509A (zh) * | 2021-02-26 | 2021-06-25 | 北京达佳互联信息技术有限公司 | 图像处理方法及装置 |
CN113079329A (zh) * | 2021-03-29 | 2021-07-06 | 湖南快乐阳光互动娱乐传媒有限公司 | 抠图方法、相关装置及抠图系统 |
CN113379762A (zh) * | 2021-05-28 | 2021-09-10 | 上海商汤智能科技有限公司 | 图像分割方法、装置、电子设备和存储介质 |
CN113486962A (zh) * | 2021-07-12 | 2021-10-08 | 深圳市慧鲤科技有限公司 | 图像生成方法及装置、电子设备和存储介质 |
CN113487689A (zh) * | 2021-07-28 | 2021-10-08 | 厦门纵横集团科技股份有限公司 | 一种针对视频图像的颜色比对方法、终端设备及存储介质 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112767055B (zh) * | 2021-02-02 | 2021-09-28 | 广东便捷神科技股份有限公司 | 一种基于物联网的精准广告营销方法及系统 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4171722B2 (ja) * | 2004-07-20 | 2008-10-29 | 株式会社バンダイナムコゲームス | プログラム、情報記憶媒体、写真印刷装置及び写真印刷方法 |
JP2006039689A (ja) * | 2004-07-22 | 2006-02-09 | Nara Institute Of Science & Technology | 画像処理装置、画像処理方法、画像処理プログラムおよびそのプログラムを記録した記録媒体 |
US8094943B2 (en) * | 2007-09-27 | 2012-01-10 | Behavioral Recognition Systems, Inc. | Background-foreground module for video analysis system |
US8284249B2 (en) * | 2008-03-25 | 2012-10-09 | International Business Machines Corporation | Real time processing of video frames for triggering an alert |
KR101605168B1 (ko) * | 2010-01-04 | 2016-03-22 | 삼성전자주식회사 | 이미지 처리 장치 및 방법 |
US9460522B2 (en) * | 2014-10-29 | 2016-10-04 | Behavioral Recognition Systems, Inc. | Incremental update for background model thresholds |
CN104616290A (zh) * | 2015-01-14 | 2015-05-13 | 合肥工业大学 | 一种统计矩阵模型和自适应阈值相结合的目标检测算法 |
US20170116741A1 (en) * | 2015-10-26 | 2017-04-27 | Futurewei Technologies, Inc. | Apparatus and Methods for Video Foreground-Background Segmentation with Multi-View Spatial Temporal Graph Cuts |
US10269119B2 (en) * | 2015-12-07 | 2019-04-23 | Avigilon Analytics Corporation | System and method for background and foreground segmentation |
JP2018147329A (ja) * | 2017-03-07 | 2018-09-20 | 株式会社デンソーテン | 画像処理装置、画像処理システム、及び画像処理方法 |
CN108965647B (zh) * | 2017-05-18 | 2020-12-15 | 北京金山云网络技术有限公司 | 一种前景图像获得方法及装置 |
JP7187154B2 (ja) * | 2018-02-05 | 2022-12-12 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
CN108830866A (zh) * | 2018-06-25 | 2018-11-16 | 北京达佳互联信息技术有限公司 | 图像分离方法、装置、计算机设备及存储介质 |
CN109919836A (zh) * | 2019-03-20 | 2019-06-21 | 广州华多网络科技有限公司 | 视频抠像处理方法、视频抠像处理客户端及可读存储介质 |
CN110070507B (zh) * | 2019-04-17 | 2021-03-02 | 安徽科朗电子科技有限公司 | 一种视频图像的抠图方法、装置、存储介质及抠图设备 |
CN110503725B (zh) * | 2019-08-27 | 2023-07-14 | 百度在线网络技术(北京)有限公司 | 图像处理的方法、装置、电子设备及计算机可读存储介质 |
-
2020
- 2020-03-09 CN CN202010158653.8A patent/CN111277772A/zh not_active Withdrawn
- 2020-11-11 CN CN202011255943.0A patent/CN112203024B/zh active Active
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112330692A (zh) * | 2020-11-11 | 2021-02-05 | 北京文香信息技术有限公司 | 一种抠图方法、装置、设备和存储介质 |
CN112767312A (zh) * | 2020-12-31 | 2021-05-07 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种图像处理方法、装置、存储介质及处理器 |
CN113034509A (zh) * | 2021-02-26 | 2021-06-25 | 北京达佳互联信息技术有限公司 | 图像处理方法及装置 |
CN113079329A (zh) * | 2021-03-29 | 2021-07-06 | 湖南快乐阳光互动娱乐传媒有限公司 | 抠图方法、相关装置及抠图系统 |
CN113379762A (zh) * | 2021-05-28 | 2021-09-10 | 上海商汤智能科技有限公司 | 图像分割方法、装置、电子设备和存储介质 |
CN113486962A (zh) * | 2021-07-12 | 2021-10-08 | 深圳市慧鲤科技有限公司 | 图像生成方法及装置、电子设备和存储介质 |
CN113487689A (zh) * | 2021-07-28 | 2021-10-08 | 厦门纵横集团科技股份有限公司 | 一种针对视频图像的颜色比对方法、终端设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112203024B (zh) | 2023-07-21 |
CN112203024A (zh) | 2021-01-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112203024B (zh) | 一种抠图方法、装置、设备和存储介质 | |
CN110891144B (zh) | 一种图像显示方法及电子设备 | |
CN107977144B (zh) | 一种截屏处理方法及移动终端 | |
CN109002243B (zh) | 一种图像参数调节方法及终端设备 | |
CN110096326B (zh) | 一种截屏方法、终端设备及计算机可读存储介质 | |
CN110719402B (zh) | 图像处理方法及终端设备 | |
CN109240577B (zh) | 一种截屏方法及终端 | |
CN112330692B (zh) | 一种抠图方法、装置、设备和存储介质 | |
CN110062105B (zh) | 一种界面显示方法及终端设备 | |
CN107846583B (zh) | 一种图像阴影补偿方法及移动终端 | |
CN111401463B (zh) | 检测结果输出的方法、电子设备及介质 | |
CN111010511B (zh) | 全景分身图像拍摄方法及电子设备 | |
CN111050109B (zh) | 电子设备控制方法及电子设备 | |
WO2021082772A1 (zh) | 截屏方法及电子设备 | |
CN110769174B (zh) | 视频查看方法及电子设备 | |
CN110650294A (zh) | 视频拍摄方法、移动终端及可读存储介质 | |
CN110505660B (zh) | 一种网络速率调整方法及终端设备 | |
CN109361864B (zh) | 一种拍摄参数设置方法及终端设备 | |
CN108833791B (zh) | 一种拍摄方法和装置 | |
CN108536513B (zh) | 一种图片显示方向调整方法及移动终端 | |
CN108366171B (zh) | 一种温升控制方法和移动终端 | |
CN111026263B (zh) | 一种音频播放方法及电子设备 | |
CN111131930B (zh) | 设备资源控制方法、第一电子设备及计算机可读存储介质 | |
CN109922256B (zh) | 拍摄方法及终端设备 | |
CN111050223A (zh) | 弹幕信息处理方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20200612 |
|
WW01 | Invention patent application withdrawn after publication |