CN110717914A - 人体抠像的方法和装置 - Google Patents

人体抠像的方法和装置 Download PDF

Info

Publication number
CN110717914A
CN110717914A CN201910860921.8A CN201910860921A CN110717914A CN 110717914 A CN110717914 A CN 110717914A CN 201910860921 A CN201910860921 A CN 201910860921A CN 110717914 A CN110717914 A CN 110717914A
Authority
CN
China
Prior art keywords
image
matting
video frame
current video
frame image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910860921.8A
Other languages
English (en)
Inventor
谢建涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Megvii Technology Co Ltd
Beijing Maigewei Technology Co Ltd
Original Assignee
Beijing Maigewei Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Maigewei Technology Co Ltd filed Critical Beijing Maigewei Technology Co Ltd
Priority to CN201910860921.8A priority Critical patent/CN110717914A/zh
Publication of CN110717914A publication Critical patent/CN110717914A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Image Processing (AREA)

Abstract

本公开涉及一种人体抠像的方法和装置,其中,该方法包括获取步骤,获取连续的视频帧图像;判断步骤,基于前一视频帧图像的预测检测范围,确定当前视频帧图像的检测范围;抠像处理步骤,根据当前视频帧图像、当前视频帧图像的检测范围和人体抠像模型进行抠像处理,得到当前视频帧图像中的抠像人像;预测范围确定步骤,基于当前视频帧图像中的抠像人像,确定当前视频帧图像的预测检测范围。通过此方法可以提高人体抠像效果。

Description

人体抠像的方法和装置
技术领域
本公开涉及抠像的技术领域,具体是涉及一种人体抠像的方法和装置。
背景技术
现有的人体抠像方法,是将原图片输入至人体抠像模型来实现人体抠像的。由于需要将原图片压缩至某一固定尺寸,才能将该原图片输入至人体抠像模型,那么,对于手机等实时性要求高的设备,由于视频或者相机视频流的输入宽高各异,对该视频或视频流对应的图片进行压缩后,会使得该图片产生不同程度的变形。进一步地,如若该人体图像在整个图片中比例较小,那么,压缩后的原图片会使得人体图像的像素变得更少,进而使得该人体图像通过抠像检测模型得出的抠像效果较差。
发明内容
为了克服现有技术中存在的问题,本公开提供一种人体抠像的方法和装置。
第一方面,本公开实施例提供一种人体抠像的方法,其包括获取步骤,获取连续的视频帧图像;判断步骤,基于前一视频帧图像的预测检测范围,确定当前视频帧图像的检测范围;抠像处理步骤,根据当前视频帧图像、当前视频帧图像的检测范围和人体抠像模型进行抠像处理,得到当前视频帧图像中的抠像人像;预测范围确定步骤,基于当前视频帧图像中的抠像人像,确定当前视频帧图像的预测检测范围。
在一例中,判断步骤包括:若前一视频帧图像中不具有前一视频帧图像抠像人像,和/或当前视频帧图像为首帧图像,则基于当前视频帧图像的全图范围,确定当前视频帧图像的检测范围。
在一例中,抠像处理步骤包括:根据当前视频帧图像的检测范围,对当前视频帧图像进行截取,得到检测图像;将检测图像压缩至检测尺寸,得到与检测图像对应的抠像检测图像;基于人体抠像模型,对抠像检测图像进行抠像检测,得到抠像检测图像的抠像结果图像,其中,抠像结果图像包括检测抠像人像;根据抠像结果图像和当前视频帧图像,得到当前视频帧图像中的抠像人像。
在一例中,根据抠像结果图像和当前视频帧图像,得到当前视频帧图像中的抠像人像包括:基于检测抠像人像,将抠像结果图像放大至检测图像原有尺寸,并与当前视频帧图像进行合并,得到当前视频帧图像中的抠像人像。
在一例中,抠像结果图像包括透明值,透明值用于确定抠像结果图像中的每一像素点是否属于检测抠像人像的像素点。
在一例中,预测范围确定步骤包括:基于当前视频帧图像中的抠像人像,得到当前视频帧图像中的抠像范围,并将抠像范围,以放大倍数进行等比例放大,得到当前视频帧图像的预测检测范围。
在一例中,预测范围确定步骤包括:基于抠像结果图像中的检测抠像人像,得到抠像结果图像中的检测抠像人像范围,并将检测抠像人像范围,以第一放大倍数进行等比例放大,得到第一预测检测范围;计算第一预测检测范围的中心点在当前视频帧图像中的对应位置;基于第一预测检测范围的中心点在当前视频帧图像中的对应位置,将第一预测检测范围以第二放大倍数进行等比例放大,得到当前视频帧图像的预测检测范围,其中,第二放大倍数为将抠像结果图像放大至检测图像原有尺寸的倍数。
在一例中,判断步骤包括:获取前一视频帧图像对应的抠像结果图像的透明值,基于透明值,判断前一视频帧图像中是否具有抠像人像。
第二方面,本公开实施例提供一种人体抠像的装置,其中,该装置包括,获取模块,用于获取连续的视频帧图像;判断模块,用于基于前一视频帧图像的预测检测范围,确定当前视频帧图像的检测范围;抠像处理模块,用于根据当前视频帧图像、当前视频帧图像的检测范围和人体抠像模型进行抠像处理,得到当前视频帧图像中的抠像人像;预测范围确定模块,用于基于当前视频帧图像中的抠像人像,确定当前视频帧图像的预测检测范围。
第三方面,本公开实施例提供一种电子设备,其中,电子设备包括:存储器,用于存储指令;以及处理器,用于调用存储器存储的指令执行第一方面的人体抠像的方法。
第四方面,本公开实施例提供一种计算机可读存储介质,其中,计算机可读存储介质存储有计算机可执行指令,计算机可执行指令在由处理器执行时,执行第一方面的人体抠像的方法。
本公开提供一种人体抠像的方法和装置,其中,人体抠像的方法通过基于前一视频帧图像的抠像人像,确定前一视频帧图像的预测检测范围,进而确定当前视频帧图像的检测范围;基于当前视频帧图像的检测范围,对当前视频帧图像进行抠像检测。通过此方法,将对当前视频帧图像进行抠像检测,转化为对当前视频帧图像的检测范围所对应的图像进行抠像检测,相当于增大了抠像检测主体在需要检测的图像中的比例,进而可以有效提高人体抠像的效果。
附图说明
通过参考附图阅读下文的详细描述,本公开实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中,以示例性而非限制性的方式示出了本公开的实施方式,其中:
图1示出了本公开实施例提供的一种人体抠像的方法流程图;
图2示出了本公开实施例提供的一种人体抠像的方法中抠像处理步骤的流程图;
图3示出了本公开实施例提供的一种人体抠像的方法中预测范围确定步骤的流程图;
图4示出了本公开实施例提供的一种人体抠像的装置流程图;
图5示出了本公开实施例提供的一种电子设备示意图。
具体实施方式
下面将参考若干示例性实施方式来描述本公开的原理和精神。应当理解,给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本公开,而并非以任何方式限制本公开的范围。
需要注意,虽然本文中使用“第一”、“第二”等表述来描述本公开的实施方式的不同模块、步骤和数据等,但是“第一”、“第二”等表述仅是为了在不同的模块、步骤和数据等之间进行区分,而并不表示特定的顺序或者重要程度。实际上,“第一”、“第二”等表述完全可以互换使用。
图1为本公开实施例提供的一种人体抠像的方法的流程图。如图1所示,人体抠像方法100包括获取步骤S101、判断步骤S102、抠像处理步骤S103和预测范围确定步骤S104。
作为一种可能的实施例,通过获取步骤S101,在视频流或相机流的前后视频帧连续的前提下,获取连续的视频帧图像,其中,获取的视频帧图像至少包括前一视频帧图像和当前视频帧图像。
在判断步骤S102中,基于前一视频帧图像的预测检测范围,来确定当前视频帧图像的检测范围。需要说明的是,前一视频帧图像的预测检测范围,是指基于前一视频帧图像的抠像人像所涉及的区域画面,在该前一视频帧图像中生成的用于预测当前视频帧图像的可能存在待抠像的人体图像的范围,并根据生成的预测检测范围,来确定当前视频帧图像的检测范围。进一步地,可以在当前视频帧图像的检测范围内,对当前视频帧图像进行抠像检测。
在抠像处理步骤S103中,可以根据当前视频帧图像、当前视频帧图像的检测范围和人体抠像模型进行抠像处理,以得到当前视频帧图像中的抠像人像。也可以理解为,通过人体抠像模型,基于当前视频帧图像的检测范围,来实现对当前视频帧图像的抠像人像处理。
进一步地,在预测范围确定步骤S104中,基于当前视频帧图像中的抠像人像,来确定当前视频帧图像的预测检测范围。也就是说,可以根据当前视频帧图像中的经过抠像处理的人体图像的画面区域,来确定当前视频帧图像的预测检测范围。
需要说明的是,人体图像即为当前视频帧图像中的抠像主体,通过抠像处理后,可以得到当前视频帧图像中的抠像人像。
本公开提供一种人体抠像的方法和装置,其中,人体抠像的方法通过基于前一视频帧图像的抠像人像,确定前一视频帧图像的预测检测范围,进而确定当前视频帧图像的检测范围;基于当前视频帧图像的检测范围,对当前视频帧图像进行抠像检测,以实现根据前一视频帧图像的抠像人像的结果,动态自适应预测当前视频帧图像的抠像处理的位置范围。进一步地,通过此方法,还将对当前视频帧图像进行抠像检测,转化为对当前视频帧图像的检测范围所对应的图像进行抠像检测,相当于增大了抠像检测主体在需要检测的图像中的比例,进而可以有效提高人体抠像的效果。
作为一种可能的实施例,判断步骤S102包括,若判断出前一视频帧图像中不具有前一视频帧图像抠像人像,或者,当前视频帧图像为首帧图像,那么,将基于当前视频帧图像的全图范围,来确定当前视频帧图像的检测范围。基于确定的当前视频帧图像的检测范围,根据抠像处理步骤S103,来实现对当前视频帧图像的抠像人像处理。
图2为本公开实施例提供的一种人体抠像的方法中抠像处理步骤的流程图。如图2所示,抠像处理步骤S103包括:步骤S103a,根据当前视频帧图像的检测范围,对当前视频帧图像进行截取,得到检测图像;步骤S103b,将检测图像压缩至检测尺寸,得到与检测图像对应的抠像检测图像;步骤S103c,基于人体抠像模型,对抠像检测图像进行抠像检测,得到抠像检测图像的抠像结果图像,其中,抠像结果图像包括检测抠像人像;步骤S103d,根据抠像结果图像和当前视频帧图像,得到当前视频帧图像中的抠像人像。
在步骤S103a中,因为基于前一视频帧图像的抠像人像,预测到在前一视频帧图像的预测检测范围内,当前视频帧图像可能存在人体图像,也就是存在需要进行抠像处理的主体。因此,通过截取得到检测图像,将对当前视频帧图像进行抠像检测,转化为对检测图像进行抠像检测,相当于增大了抠像检测主体在需要检测的图像中的比例,进而可以有效提高人体抠像的效果。
在步骤S103b中,由于基于人体抠像模型进行抠像检测,往往需要将待检测的图像压缩至人体抠像模型所适应的尺寸,才能进行抠像检测。因此,基于已确定的当前视频帧图像的检测图像,需要将检测图像压缩至检测尺寸,即人体抠像模型所适应的尺寸,进而得到了与该检测图像对应的抠像检测图像。
在步骤S103c中,基于人体抠像模型,对抠像检测图像进行抠像检测,得到抠像检测图像的抠像结果图像,并且,抠像结果图像中包括有检测抠像人像。其中,抠像结果图像可以理解为是抠像检测图像经过抠像检测处理后,得到带有抠像处理结果的图像。检测抠像人像可以理解为是抠像结果图像上的抠像人像,进一步可以理解为,抠像结果图像上的检测抠像人像与当前视频帧图像上的抠像人像相对应。
在步骤S103d中,可以根据抠像结果图像和当前视频帧图像,得到当前视频帧图像中的抠像人像。
进一步地,作为一种可能的实施例,根据抠像结果图像和当前视频帧图像,得到当前视频帧图像中的抠像人像包括:基于得到的检测抠像人像,将抠像结果图像放大至检测图像原有尺寸,并与当前视频帧图像进行合并,得到当前视频帧图像中的抠像人像。
进一步地,将抠像结果图像放大至相应检测图像的原有尺寸,此过程可以理解为是,基于可逆的思路,将当前视频帧图像对应的抠像结果图像逆推至当前视频帧图像的检测图像的过程;相应的,检测抠像人像也可以理解为是,基于可逆的思路,将抠像结果图像中的检测抠像人像逆推至当前视频帧图像中的抠像人像的过程。由于抠像结果图像上带有抠像处理后的结果,因此,将放大后的抠像结果图像与当前视频帧图像进行合并,即可得到当前视频帧图像中的抠像人像。
作为一种可能的实施例,抠像结果图像上还可以包括有透明值,其中,该透明值可以用来确定抠像结果图像中的每一像素点,是否属于检测抠像人像的像素点。
也就是说,通过人体抠像模型对抠像检测图像的抠像检测,获得相应的抠像结果图像以及检测抠像人像的过程,在实际应用中,是通过抠像结果图像上的透明值来体现检测到的检测抠像人像的。例如,对检测到的检测抠像人像,以透明值为255来表示;对于抠像结果图像上的其他背景,以透明值为0来表示。由于透明值越小,对应的图像则越透明,因此,可以在抠像结果图像上显示出检测到的检测抠像人像。
基于在抠像结果图像上显示出的检测抠像人像,将该抠像结果图像放大至检测图像的原有尺寸,并与当前视频帧图像进行合并。当将当前视频帧图像对应的抠像结果图像放大至检测图像的原有尺寸后,此时,放大后的抠像结果图像可以很好的贴入当前视频帧图像上,实现与当前视频帧图像合并。由于放大后的抠像结果图像的背景透明值为0,而经过抠像处理的人体图像的透明值为255,此时,可以在当前视频帧图像上很好的显现出经过抠像处理的人体图像,也就是得到了当前视频帧图像中的抠像人像。
作为一种可能的实施例,在预测范围确定步骤S104中,由于当前视频帧图像中的每一个像素点均具有相应的坐标,因此,基于当前视频帧图像中的抠像范围与其对应的坐标,可以确定抠像范围的边界。考虑到人体人像在当前视频帧图像中的位置相对于前一视频帧图像中的位置可能有小范围的移动,因此,可以对该抠像范围的边界以放大倍数进行等比例的扩大,进而得到当前视频帧图像的预测检测范围。其中,放大倍数可以根据实际情况进行确定,这里不对放大倍数的具体数值做限定。
作为一种可能的实施例,在预测范围确定步骤S104中,对于当前视频帧图像的预测检测范围,还可以通过当前视频帧的抠像结果图像中的检测抠像人像来确定。
如图3所示,预测范围确定步骤S104包括:步骤S104a,基于抠像结果图像中的检测抠像人像,得到抠像结果图像中的检测抠像人像范围,并将检测抠像人像范围,以第一放大倍数进行等比例放大,得到第一预测检测范围;步骤S104b,计算第一预测检测范围的中心点在当前视频帧图像中的对应位置;步骤S104c,基于第一预测检测范围的中心点在当前视频帧图像中的对应位置,将第一预测检测范围以第二放大倍数进行等比例放大,得到当前视频帧图像的预测检测范围,其中,第二放大倍数为将抠像结果图像放大至检测图像原有尺寸的倍数。
在步骤S104a中,基于抠像结果图像中的检测抠像人像,得到抠像结果图像中的检测抠像人像范围,并将该检测抠像人像范围,以第一放大倍数进行等比例放大,以得到第一预测检测范围。其中,抠像结果图像中的第一预测检测范围,与当前视频帧图像中的预测检测范围是相对应的。第一放大倍数也就是根据当前视频帧图像中的抠像人像的范围,放大得到当前视频帧图像的预测检测范围的放大倍数。进一步地,第一放大倍数也可以根据实际情况进行确定,这里不对第一放大倍数的具体数值做限定。
由于通过抠像检测,可以获得待检测图像的透明值。相应的,在当前视频帧图像的抠像结果图像上,可以获得检测抠像人像的透明值,为255,和除去检测抠像人像之外的其他背景的透明值为0。由于抠像结果图像上的像素点有具有相应的坐标,那么,可以理解为,透明值为255的像素点同样具有相应的坐标。在实际应用中,可以通过找到透明值为255的像素点的横坐标的最大值和最小值,以及纵坐标的最大值和最小值,如{x,x,y,y},来确定检测抠像人像在抠像结果图像上的四个边界顶点坐标,也就是得到了检测抠像人像范围。根据得到的检测抠像人像范围,按照第一放大倍数进行等比例的放大,即可得到与当前视频帧图像对应的抠像结果图像中的第一预测检测范围。
以第一放大倍数是1.3倍为例,得到的第一预测检测范围的四个顶点对应的横坐标的最大值和最小值,以及纵坐标的最大值和最小值分别为{x+(x-x)*1.3,x-(x-x)*1.3,y+(y-y)*1.3y-(y-y)*1.3}。
在步骤S104b中,计算该第一预测检测范围的中心点在当前视频帧图像中对应的位置。
在步骤S104c中,基于该第一预测检测范围的中心点在当前视频帧图像中的对应位置,对第一预测检测范围以第二放大倍数进行等倍放大,也就是按照将抠像结果图像放大至检测图像原有尺寸的放大倍数进行放大。进而,可以在当前视频帧图像中确定出当前视频帧图像的预测检测范围。
作为一种可能的实施例,由于通过抠像检测模型,可以得到抠像结果图像的透明值,进一步可以理解为,抠像结果图像上的检测抠像人像的透明值为255,除去检测抠像人像之外的背景的透明值为0。因此,在判断前一视频帧图像中是否具有抠像人像时,可以通过前一视频帧图像对应的抠像结果图像的透明值来确定,若前一视频帧图像对应的抠像结果图像具有透明值为255的像素点,则代表该前一视频帧图像上具有抠像人像,否则,不具有抠像人像。
基于相同的发明构思,本公开实施例还提供一种人体抠像装置200。如图4所示,人体抠像装置200包括,获取模块201,用于获取连续的视频帧图像;判断模块202,用于基于前一视频帧图像的预测检测范围,确定当前视频帧图像的检测范围;抠像处理模块203,用于根据当前视频帧图像、当前视频帧图像的检测范围和人体抠像模型进行抠像处理,得到当前视频帧图像中的抠像人像;预测范围确定模块204,用于基于所述当前视频帧图像中的抠像人像,确定所述当前视频帧图像的预测检测范围。
在一例中,判断模块202包括:若前一视频帧图像中不具有前一视频帧图像抠像人像,和/或当前视频帧图像为首帧图像,则基于当前视频帧图像的全图范围,确定当前视频帧图像的检测范围。
在一例中,抠像处理模块203包括:根据当前视频帧图像的检测范围,对当前视频帧图像进行截取,得到检测图像;将检测图像压缩至检测尺寸,得到与检测图像对应的抠像检测图像;基于人体抠像模型,对抠像检测图像进行抠像检测,得到抠像检测图像的抠像结果图像,其中,抠像结果图像包括检测抠像人像;根据抠像结果图像和当前视频帧图像,得到当前视频帧图像中的抠像人像。
在一例中,根据抠像结果图像和当前视频帧图像,得到当前视频帧图像中的抠像人像包括:基于检测抠像人像,将抠像结果图像放大至检测图像原有尺寸,并与当前视频帧图像进行合并,得到当前视频帧图像中的抠像人像。
在一例中,抠像结果图像包括透明值,透明值用于确定抠像结果图像中的每一像素点是否属于检测抠像人像的像素点。
在一例中,预测范围确定模块204包括:基于当前视频帧图像中的抠像人像,得到当前视频帧图像中的抠像范围,并将抠像范围,以放大倍数进行等比例放大,得到当前视频帧图像的预测检测范围。
在一例中,预测范围确定模块204包括:基于抠像结果图像中的检测抠像人像,得到抠像结果图像中的检测抠像人像范围,并将检测抠像人像范围,以第一放大倍数进行等比例放大,得到第一预测检测范围;计算第一预测检测范围的中心点在当前视频帧图像中的对应位置;基于第一预测检测范围的中心点在当前视频帧图像中的对应位置,将第一预测检测范围以第二放大倍数进行等比例放大,得到当前视频帧图像的预测检测范围,其中,第二放大倍数为将抠像结果图像放大至检测图像原有尺寸的倍数。
在一例中,判断模块202包括:获取前一视频帧图像对应的抠像结果图像的透明值,基于透明值,判断前一视频帧图像中是否具有抠像人像。
图5示出了本公开的一个实施方式提供的一种电子设备30。如图5所示,本公开的一个实施方式提供的一种电子设备30,其中,该电子设备30包括存储器310、处理器320、输入/输出(Input/Output,I/O)接口330。其中,存储器310,用于存储指令。处理器320,用于调用存储器310存储的指令执行本公开量化校正算法精度的方法。其中,处理器320分别与存储器310、I/O接口330连接,例如可通过总线系统和/或其他形式的连接机构(未示出)进行连接。存储器310可用于存储程序和数据,包括本公开实施例中涉及的量化校正算法精度的程序,处理器320通过运行存储在存储器310的程序从而执行电子设备30的各种功能应用以及数据处理。
本公开实施例中处理器320可以采用数字信号处理器(Digital SignalProcessing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable Logic Array,PLA)中的至少一种硬件形式来实现,所述处理器320可以是中央处理单元(Central Processing Unit,CPU)或者具有数据处理能力和/或指令执行能力的其他形式的处理单元中的一种或几种的组合。
本公开实施例中的存储器310可以包括一个或多个计算机程序产品,所述计算机程序产品可以包括各种形式的计算机可读存储介质,例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(Random Access Memory,RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(Read-OnlyMemory,ROM)、快闪存储器(Flash Memory)、硬盘(Hard Disk Drive,HDD)或固态硬盘(Solid-State Drive,SSD)等。
本公开实施例中,I/O接口330可用于接收输入的指令(例如数字或字符信息,以及产生与电子设备30的用户设置以及功能控制有关的键信号输入等),也可向外部输出各种信息(例如,图像或声音等)。本公开实施例中I/O接口330可包括物理键盘、功能按键(比如音量控制按键、开关按键等)、鼠标、操作杆、轨迹球、麦克风、扬声器、和触控面板等中的一个或多个。
在一些实施方式中,本公开提供了一种计算机可读存储介质,该计算机可读存储介质存储有计算机可执行指令,计算机可执行指令在由处理器执行时,执行上文所述的任何方法。
尽管在附图中以特定的顺序描述操作,但是不应将其理解为要求按照所示的特定顺序或是串行顺序来执行这些操作,或是要求执行全部所示的操作以得到期望的结果。在特定环境中,多任务和并行处理可能是有利的。
本公开的方法和装置能够利用标准编程技术来完成,利用基于规则的逻辑或者其他逻辑来实现各种方法步骤。还应当注意的是,此处以及权利要求书中使用的词语“装置”和“模块”意在包括使用一行或者多行软件代码的实现和/或硬件实现和/或用于接收输入的设备。
此处描述的任何步骤、操作或程序可以使用单独的或与其他设备组合的一个或多个硬件或软件模块来执行或实现。在一个实施方式中,软件模块使用包括包含计算机程序代码的计算机可读介质的计算机程序产品实现,其能够由计算机处理器执行用于执行任何或全部的所描述的步骤、操作或程序。
出于示例和描述的目的,已经给出了本公开实施的前述说明。前述说明并非是穷举性的也并非要将本公开限制到所公开的确切形式,根据上述教导还可能存在各种变形和修改,或者是可能从本公开的实践中得到各种变形和修改。选择和描述这些实施例是为了说明本公开的原理及其实际应用,以使得本领域的技术人员能够以适合于构思的特定用途来以各种实施方式和各种修改而利用本公开。

Claims (11)

1.一种人体抠像的方法,其特征在于,所述方法包括:
获取步骤,获取连续的视频帧图像;
判断步骤,基于前一视频帧图像的预测检测范围,确定当前视频帧图像的检测范围;
抠像处理步骤,根据所述当前视频帧图像、所述当前视频帧图像的所述检测范围和人体抠像模型进行抠像处理,得到所述当前视频帧图像中的抠像人像;
预测范围确定步骤,基于所述当前视频帧图像中的抠像人像,确定所述当前视频帧图像的预测检测范围。
2.根据权利要求1所述的方法,其特征在于,所述判断步骤包括:
若所述前一视频帧图像中不具有前一视频帧图像抠像人像,和/或所述当前视频帧图像为首帧图像,则基于所述当前视频帧图像的全图范围,确定所述当前视频帧图像的检测范围。
3.根据权利要求1所述的方法,其特征在于,所述抠像处理步骤包括:
根据所述当前视频帧图像的所述检测范围,对所述当前视频帧图像进行截取,得到检测图像;
将所述检测图像压缩至检测尺寸,得到与所述检测图像对应的抠像检测图像;
基于所述人体抠像模型,对所述抠像检测图像进行抠像检测,得到所述抠像检测图像的抠像结果图像,其中,所述抠像结果图像包括检测抠像人像;
根据所述抠像结果图像和所述当前视频帧图像,得到所述当前视频帧图像中的抠像人像。
4.根据权利要求3所述的方法,其特征在于,所述根据所述抠像结果图像和所述当前视频帧图像,得到所述当前视频帧图像中的抠像人像包括:
基于所述检测抠像人像,将所述抠像结果图像放大至所述检测图像原有尺寸,并与所述当前视频帧图像进行合并,得到所述当前视频帧图像中的抠像人像。
5.根据权利要求3所述的方法,其特征在于,
所述抠像结果图像包括透明值,所述透明值用于确定所述抠像结果图像中的每一像素点是否属于所述检测抠像人像的像素点。
6.根据权利要求1所述的方法,其特征在于,所述预测范围确定步骤包括:
基于所述当前视频帧图像中的抠像人像,得到所述当前视频帧图像中的抠像范围,并将所述抠像范围,以放大倍数进行等比例放大,得到所述当前视频帧图像的预测检测范围。
7.根据权利要求3所述的方法,其特征在于,所述预测范围确定步骤包括:
基于所述抠像结果图像中的所述检测抠像人像,得到所述抠像结果图像中的检测抠像人像范围,并将所述检测抠像人像范围,以第一放大倍数进行等比例放大,得到第一预测检测范围;
计算所述第一预测检测范围的中心点在所述当前视频帧图像中的对应位置;
基于所述第一预测检测范围的中心点在所述当前视频帧图像中的对应位置,将所述第一预测检测范围以第二放大倍数进行等比例放大,得到所述当前视频帧图像的预测检测范围,其中,所述第二放大倍数为将所述抠像结果图像放大至所述检测图像原有尺寸的倍数。
8.根据权利要求1所述的方法,其特征在于,所述判断步骤包括:
获取所述前一视频帧图像对应的抠像结果图像的透明值,基于所述透明值,判断所述前一视频帧图像中是否具有所述抠像人像。
9.一种人体抠像的装置,其特征在于,所述装置包括:
获取模块,用于获取连续的视频帧图像;
判断模块,用于基于前一视频帧图像的预测检测范围,确定当前视频帧图像的检测范围;
抠像处理模块,用于根据所述当前视频帧图像、所述当前视频帧图像的所述检测范围和人体抠像模型进行抠像处理,得到所述当前视频帧图像中的抠像人像;
预测范围确定模块,用于基于所述当前视频帧图像中的抠像人像,确定所述当前视频帧图像的预测检测范围。
10.一种电子设备,其特征在于,所述电子设备包括:
存储器,用于存储指令;以及
处理器,用于调用所述存储器存储的指令执行权利要求1-8中任一项所述人体抠像的方法。
11.一种计算机可读存储介质,其特征在于,
所述计算机可读存储介质存储有计算机可执行指令,所述计算机可执行指令在由处理器执行时,执行权利要求1-8中任一项所述人体抠像的方法。
CN201910860921.8A 2019-09-11 2019-09-11 人体抠像的方法和装置 Pending CN110717914A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910860921.8A CN110717914A (zh) 2019-09-11 2019-09-11 人体抠像的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910860921.8A CN110717914A (zh) 2019-09-11 2019-09-11 人体抠像的方法和装置

Publications (1)

Publication Number Publication Date
CN110717914A true CN110717914A (zh) 2020-01-21

Family

ID=69210369

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910860921.8A Pending CN110717914A (zh) 2019-09-11 2019-09-11 人体抠像的方法和装置

Country Status (1)

Country Link
CN (1) CN110717914A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111861900A (zh) * 2020-06-05 2020-10-30 北京迈格威科技有限公司 视频抠像降噪方法和装置
CN111885306A (zh) * 2020-07-28 2020-11-03 重庆虚拟实境科技有限公司 目标对象调整方法、计算机装置及存储介质
CN113949803A (zh) * 2020-07-16 2022-01-18 华为技术有限公司 拍照方法及电子设备
CN114222181A (zh) * 2021-11-11 2022-03-22 北京达佳互联信息技术有限公司 一种图像处理方法、装置、设备及介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104866833A (zh) * 2015-05-29 2015-08-26 中国科学院上海高等研究院 视频流人脸检测方法及其装置
CN105120185A (zh) * 2015-08-27 2015-12-02 新奥特(北京)视频技术有限公司 一种视频图像抠像方法与装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104866833A (zh) * 2015-05-29 2015-08-26 中国科学院上海高等研究院 视频流人脸检测方法及其装置
CN105120185A (zh) * 2015-08-27 2015-12-02 新奥特(北京)视频技术有限公司 一种视频图像抠像方法与装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111861900A (zh) * 2020-06-05 2020-10-30 北京迈格威科技有限公司 视频抠像降噪方法和装置
CN113949803A (zh) * 2020-07-16 2022-01-18 华为技术有限公司 拍照方法及电子设备
CN113949803B (zh) * 2020-07-16 2023-08-25 华为技术有限公司 拍照方法及电子设备
CN111885306A (zh) * 2020-07-28 2020-11-03 重庆虚拟实境科技有限公司 目标对象调整方法、计算机装置及存储介质
CN111885306B (zh) * 2020-07-28 2021-12-07 重庆虚拟实境科技有限公司 目标对象调整方法、计算机装置及存储介质
CN114222181A (zh) * 2021-11-11 2022-03-22 北京达佳互联信息技术有限公司 一种图像处理方法、装置、设备及介质
CN114222181B (zh) * 2021-11-11 2024-03-12 北京达佳互联信息技术有限公司 一种图像处理方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
CN110717914A (zh) 人体抠像的方法和装置
CN108268869B (zh) 目标检测方法、装置及系统
CN108961303B (zh) 一种图像处理方法、装置、电子设备和计算机可读介质
CN109829506B (zh) 图像处理方法、装置、电子设备和计算机存储介质
US11810297B2 (en) Computer aided diagnosis system for detecting tissue lesion on microscopy images based on multi-resolution feature fusion
CN108596944B (zh) 一种提取运动目标的方法、装置及终端设备
WO2021068618A1 (zh) 图像融合方法、装置、计算处理设备和存储介质
CN110930419A (zh) 图像分割方法、装置、电子设备及计算机存储介质
CN101957712A (zh) 一种显示界面背景图片的显示控制方法、系统及移动终端
CN108564550B (zh) 图像处理方法、装置及终端设备
CN110213479B (zh) 一种视频拍摄防抖方法和装置
CN110751602B (zh) 基于人脸检测的保形畸变校正方法和装置
US20210295475A1 (en) Method and apparatus for generating image, and electronic device
CN110503704B (zh) 三分图的构造方法、装置和电子设备
WO2023030139A1 (zh) 图像融合方法、电子设备和存储介质
CN112508918A (zh) 图像处理方法及装置、电子设备和存储介质
CN111080571A (zh) 摄像头遮挡状态检测方法、装置、终端和存储介质
CN110751593A (zh) 一种图像虚化处理方法及装置
CN110689496B (zh) 降噪模型的确定方法、装置、电子设备和计算机存储介质
WO2020078102A1 (zh) 图像增强方法、装置和计算机可读存储介质
CN110852958B (zh) 基于物体倾斜角度的自适应校正方法和装置
CN112351271A (zh) 一种摄像头的遮挡检测方法、装置、存储介质和电子设备
CN109165648B (zh) 一种图像处理方法、图像处理装置及移动终端
CN114418848A (zh) 视频处理方法、装置、存储介质及电子设备
CN111784607A (zh) 图像色调映射方法、装置、终端设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200121

RJ01 Rejection of invention patent application after publication