CN110377389B - 图像标注导引方法、装置、计算机设备和存储介质 - Google Patents
图像标注导引方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN110377389B CN110377389B CN201910629379.5A CN201910629379A CN110377389B CN 110377389 B CN110377389 B CN 110377389B CN 201910629379 A CN201910629379 A CN 201910629379A CN 110377389 B CN110377389 B CN 110377389B
- Authority
- CN
- China
- Prior art keywords
- face
- user
- image
- editing window
- quality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
- G06F9/453—Help systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30168—Image quality inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本申请涉及一种图像标注导引方法、装置、计算机设备和存储介质,根据当前图像的人脸检测结果,给出对应的人脸编辑窗口,使用户能够直接在人像系统中的人脸编辑窗口中进行目标人像的框选和标注操作,而不必借助其他工具,从而提高了标注效率和用户体验。
Description
技术领域
本申请涉及图像处理技术领域,特别是涉及一种图像标注导引方法、装置、计算机设备和存储介质。
背景技术
在用户上传包含某个人的照片来在人像系统中对该人进行检索或存档时,需要首先对照片进行人脸检测,再对检测到的人脸进行特征提取、识别。但是,在对人脸进行检测时,会存在照片中检测出多个人脸、检测不到人脸或检测出的人脸质量差等情况。在检测出多个人脸、检测不到人脸的情况下,人像系统无法获知哪个人脸为用户所要的目标人脸。
为了检测出用户所要的目标人脸,通常需要用户手动切换至其他软件,在其他软件中截取出照片中的目标人脸,再返回到人像系统中进行人脸检测。然而,通过其他软件截取照片中的目标人脸打断了用户的使用流程,增加了照片检索或存档复杂度,用户体验差。在检测出的人脸质量差的情况下,人像系统无法获知人脸中五官的位置,也就无法进行特征提取。
发明内容
基于此,有必要针对上述技术问题,提供一种简化照片编辑流程的图像标注引导方法、装置、计算机设备和存储介质。
第一方面,本申请提出一种图像标注导引方法,其特征在于,所述方法包括:
对当前图像进行人脸检测;
若人脸检测结果为检测出多个人脸,则根据用户通过第一人脸编辑窗口输入的人脸选择操作确定所述当前图像中的目标人脸,若所述目标人脸的质量未达到预设阈值,则在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸;
若人脸检测结果为未检测出人脸,则在第二人脸编辑窗口中输出所述框选提示信息,根据用户响应于所述框选提示信息通过所述第二人脸编辑窗口输入的框选操作确定所述当前图像中的目标人脸,并基于所述目标人脸输出图像标注引导信息,以引导用户对所述目标人脸进行标注;其中,所述框选提示信息用于提示用户输入框选操作以对所述目标人脸进行标注;
若人脸检测结果为检测出低质量人脸,则在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸。
第二方面,本申请提出一种图像标注导引装置,包括:
人脸检测模块,用于对当前图像进行人脸检测;
人脸标注引导模块,若人脸检测结果为检测出多个人脸,则根据用户通过第一人脸编辑窗口输入的人脸选择操作确定所述当前图像中的目标人脸,若所述目标人脸的质量未达到预设阈值,则在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸;若人脸检测结果为未检测出人脸,则在第二人脸编辑窗口中输出所述框选提示信息,根据用户响应于所述框选提示信息通过所述第二人脸编辑窗口输入的框选操作确定所述当前图像中的目标人脸,并基于所述目标人脸输出图像标注引导信息,以引导用户对所述目标人脸进行标注;其中,所述框选提示信息用于提示用户输入框选操作以对所述目标人脸进行标注;若人脸检测结果为检测出低质量人脸,则在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸。
第三方面,本申请提出一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现本申请实施例中的方法的步骤。
第一方面,本申请提出一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现本申请实施例中的方法的步骤。
上述图像标注导引方法、装置、计算机设备和存储介质,根据当前图像的人脸检测结果,给出对应的人脸编辑窗口,使用户能够直接在人像系统中的人脸编辑窗口中进行目标人像的框选和标注操作,而不必借助其他工具,从而提高了标注效率和用户体验。
附图说明
图1为一个实施例中应用图像归类注方法的终端的示意图;
图2为一个实施例中的图像标注导引方法的流程示意图;
图3为一个实施例中的第一图像编辑窗口的界面的示意图;
图4为一个实施例中的第二图像编辑窗口的界面的示意图;
图5为一个实施例中图像标注导引方法的补充步骤的流程图;
图6为一个实施例中的图像标注界面的示意图;
图7为另一个实施例中的图像标注界面的示意图;
图8为一个实施例中图像标注导引装置的结构框图;
图9为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的图像标注导引方法可以应用于如图1所示的终端100。该终端100可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑。可选地,该终端的处理器可以执行预设的算法对图像进行检测人脸检测。
在一个实施例中,如图2所示,提供了一种图像标注导引方法,以该方法应用于图1中的终端100为例进行说明,包括以下步骤:
步骤210,对当前图像进行人脸检测。
具体地,终端100获取当前图像后,会对当前图像进行人脸检测,得到人脸检测结果。该人脸检测结果可以为检测出多个人脸、未检出人脸或者检测出一个人脸。进一步地,终端100在对当前图像进行人脸检测时还可以同时获取检测出的人脸(图像)的质量。可选地,终端100可以根据识别出的人脸的清晰度、角度等评估人脸的质量。
步骤220,若人脸检测结果为检测出多个人脸,则根据用户通过第一人脸编辑窗口输入的人脸选择操作确定目标人脸,若所述目标人脸的质量未达到预设阈值,则在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸。
具体地,用户通过第一人脸编辑窗口输入的人脸选择操作后,终端100根据该人脸选择操作确定目标人脸。之后,终端100获取该目标人脸的质量,若该目标人脸的质量未达到预设阈值,说明虽然该目标人脸的质量较差,但是质量还没有差到识别不到人脸的程度,也没有差到识别不到五官,进而无法提取特征的程度,因此可以由用户自行决定是否对目标人脸进行进一步的标注。如果用户认为无需进行进一步的标注,则终端100会判定所述当前图像完成标注。
例如,用户要在人像系统中将当前图像中的目标人脸与人像系统中的其他图像进行人脸比对。可选地,该第一人脸编辑窗口的可以包含如图3所示界面。该界面包含当前图像,以及当前图像的人脸检测结果。具体地,如图3所示,可以将当前图像显示在该界面的第一预设区域,同时在该第一预设区域显示对应的人脸检测框。可选地,还可以在该界面的第二预设区域分别显示对应的人脸检测框中的图像。可选地,这些人脸识别框可以用于用户输入人脸选择操作,以从所述多个人脸中确定目标人脸。可选地,该第一人脸编辑窗口的界面中还可以包括镜像按钮图像旋转按钮等图像调整按钮。用户可以通过这些图像调整按钮输入图像调整操作,对当前图像进行对应的图像调整处理。进一步地,该界面还可以包括确定按钮用于用户输入确定操作,终端100可以根据确定操作用确定目标人脸。可选地,该界面中还可以包括取消按钮用于用户输入取消操作,终端100可以根据取消操作用取消人脸选择过程。
可选地,若本步骤S220中选择的目标人脸的质量达到预设阈值,此时说明该目标人脸的质量达到要求,终端100会判定所述当前图像完成标注。
步骤S230,若人脸检测结果为未检测出人脸,则在第二人脸编辑窗口中输出所述框选提示信息,根据用户响应于所述框选提示信息通过第二人脸编辑窗口输入的框选操作确定所述当前图像中的目标人脸,并基于所述目标人脸输出图像标注引导信息,以引导用户对所述目标人脸进行标注。
其中,所述框选提示信息用于提示用户输入框选操作以对所述目标人脸进行标注。具体地,若人脸检测结果为未检测出人脸,终端100将第二人脸编辑窗口显示。用户通过第二人脸编辑窗口输入框选操作,终端100根据该框选操作输出确定所述当前图像中的目标人脸,并基于所述目标人脸输出图像标注引导信息,引导用户对所述目标人脸进行标注。
若人脸检测结果为未检测出人脸,说明目标人脸的质量已经差到无法检测出的程度,此时需要用户对人脸进行框选和标注,通过框选和标注能够能够使人像系统对框选和标注的部分进行检测和特征提取,能够一定程度上提高精度。
可选地,该第二人脸编辑窗口可以包含如图4所示的界面。该界面包含当前图像,以及当前图像的人脸检测结果。具体地,如图4所示,可以将当前图像显示在该界面的第一预设区域;可以在该界面的第二预设区域显示框选提示信息。可选地,该第二人脸编辑窗口的界面中还可以包括镜像按钮图像旋转按钮等等图像调整按钮。用户可以通过这些图像调整按钮输入图像调整操作,对当前图像进行对应的图像调整处理。进一步地,该界面还可以包括确定按钮用于用户输入确定操作,终端100可以根据确定操作用确定目标人脸。可选地,该界面中还可以包括取消按钮用于用户输入取消操作,终端100可以根据取消操作用取消人脸选择过程。
步骤S240,若人脸检测结果为检测出低质量人脸,则在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸。
具体地,若人脸检测结果为低质量人脸,终端100将第三人脸编辑窗口显示并给出低质量标签提示。若该低质量人脸的质量未达到预设阈值,说明虽然该低质量人脸的质量较差,但是质量还没有差到识别不到人脸的程度,也没有差到识别不到五官,进而无法提取特征的程度,因此可以由用户自行决定是否对目标人脸进行进一步的标注。如果用户认为无需进行进一步的标注,则终端100会判定所述当前图像完成标注。
可选地,该第三人脸编辑窗口的界面也可以包含第一预设区域和第二预设区域(可参考图3和图4)。该界面包含当前图像,以及当前图像的人脸检测结果。具体地可以将当前图像显示在该界面的第一预设区域,同时在该第一预设区域显示对应的人脸检测框。可选地,还可以在该界面的第二预设区域显示对应的人脸检测框中的图像以及框选提示信息。可选地,该第二人脸编辑窗口的界面中还可以包括镜像按钮图像旋转按钮等图像编辑操作按钮。用户可以通过这些图像编辑操作按钮输入图像调整操作,对当前图像进行调整操作。进一步地,该界面还可以包括确定按钮用于用户输入确定操作,终端100可以根据确定操作用确定目标人脸。可选地,该界面中还可以包括取消按钮用于用户输入取消操作,终端100可以根据取消操作用取消人脸选择过程。
需要说明的是,图3、图4中界面仅为本申请提供的一种示例,这些界面中的第一预设区域、第二预设区域的位置、形状以及大小可以根据需求进行相应的更改,这些界面中各个区域的划分,以及各个区域的颜色、形状、大小本申请在此不做限定。
在步骤S220和S240中,通过对检测出的质量未达到预设阈值的目标人脸或低质量人脸处给出低质量标签提示,可以使得用户获知为何需要对当前图像进行重新标注操作。
上述图像标注导引方法,根据当前图像的人脸检测结果,给出对应的人脸编辑窗口,使用户能够直接在人像系统中的人脸编辑窗口中进行目标人像的框选和标注操作,而不必借助其他工具,从而提高了标注效率和用户体验。
在其中一个实施例中,在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,所述方法还包括:若是,则在所述第一人脸编辑窗口中输出图像标注引导信息,以引导用户对所述目标人脸进行标注;
和/或,
在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,所述方法还包括:若是,则在所述第三人脸编辑窗口中输出图像标注引导信息,以引导用户对所述低质量人脸进行标注。
若用户认为需要对质量未达到预设阈值的所述目标人脸或低质量人脸进行重新标注,则在相应人脸编辑窗口输出图像标注引导信息,以引导用户对所述质量未达到预设阈值的目标人脸或所述低质量人脸进行标注。
在其中一个实施例中,所述若是,则在所述第一人脸编辑窗口中输出图像标注引导信息,包括:若是,则在所述第一人脸编辑窗口中输出框选提示信息,根据用户输入的框选操作输出图像标注引导信息;
或,所述若是,则在所述第三人脸编辑窗口中输出图像标注引导信息,包括:若是,则在所述第三人脸编辑窗口中输出框选提示信息,根据用户输入的框选操作输出图像标注引导信息。
若用户认为需要对质量未达到预设阈值的所述目标人脸或低质量人脸不是用户需要的目标人脸,则可以重新对通过框选确定目标人脸,再对目标人脸进行标注。在其中一个实施例中,如图5所示,上述图像标注引导方法还可以包括:
步骤S250,响应于用户输入的框选操作,显示图像标注界面,在所述图像标注界面输出所述目标人脸及所述目标人脸对应的图像标注引导信息。
其中,所述图像标注界面包含人脸标注导引信息以及对应的目标人脸。具体地,终端100在接收用户输入的框选操作的信号后,响应于该框选操作,显示图像标注界面。可选地,可以根据人脸图像的标注步骤,分别定义标注导引信息。例如,人脸图像的标注步骤包含:1.标注眼睛;2.标注嘴巴,则可以将“标注眼睛”作为人脸图像第一个步骤的标注导引信息;将“标注嘴巴”作为人脸图像第二个步骤的标注导引信息。可选地,还可以人脸图像的标注步骤分别设置对应的标注子界面,以辅助引导用户进行精确的标注操作。例如,承接上例,可以将图像标注界面设置为包含如图6和图7所示的两个子界面。图6的子界面用于引导用户输入“标注眼睛”的操作;图7的子界面用于引导用户输入“标注嘴巴”的操作。可选地,图6和图7所示的两个子界面,可以包含第四预设区域和第五预设区域,其中,该第四预设区域用于显示待标注图像,第五预设区域用于显示标注导引信息。进一步地,在图6和图7所示的界面中,用户可以输入对应图像标注操作,例如,在图6的子界面可以输入“标注眼睛”的操作;图7的子界面可以输入“标注嘴巴”的操作。
可选地,该图6和图7所示的两个子界面还可以包括第六预设区域,该第六预设区域用于展示所述当前图像的缩略图。可选地,该第六区域还可以包括撤销按钮确认按钮以及取消按钮等交互按钮,用户可以通过这些交互按钮对标注操作进行调整。进一步地,第五预设区域也可以包括取消按钮用于用户输入取消操作,取消人脸选择过程。进一步可选地,为了防止误操作,可以设置图6所示的子界面中确认按钮为不可用状态。
需要说明的是图6和图7所示的两个子界面仅为本申请提供的一种示例,这些界面中的第四预设区域、第五预设区域的位置、形状以及大小可以根据需求进行相应的更改,这些界面中的中各个区域的划分,以及各个区域的颜色、形状、大小本申请在此不做限定。
步骤S260,根据用户输入的标注操作对所述图像标注界面中的所述目标人脸进行处理。
具体地,终端100根据用户输入的标注操作对所述图像标注界面中的目标人脸进行处理,例如根据用户标注的双目、嘴巴位置确定所述目标人脸的双目、嘴巴位置。承接上例,用户在图6的子界面输入“标注眼睛”的操作,终端100则在该界面的图像的对应位置显示该操作的结果“标注了眼睛”;用户在图7的子界面输入“标注嘴巴”的操作,终端100则在该界面的图像的对应位置显示该操作的结果“标注了嘴巴”。可选地,还可以设置在前一子界面的标注步骤完成(或合格)后,自动切换为下一子界面,直至完成最后的标注步骤。
本实施例提供了一种在需要用户多个步骤标注待标注图像时,引导用户准确标注图像的方法,该方法容易实施,得到的方案用户操作简单。
在其中一个实施例中,上述图像标注方法,还可以包括:
根据用户输入的缩略图选择操作,显示所述缩略图选择操作对应的图像以及与所述图像对应的人脸检测结果;其中,每个所述缩略图对应一进行了人脸检测的图像,所述缩略图中包含与其对应的进行了人脸检测的图像的人脸检测结果。
例如,人脸编辑窗口为图3的第一人脸编辑窗口或者图4的第一人脸编辑窗口用户可以在第三预设区域输入缩略图选择操作以实现人脸编辑窗口中的图像切换。
在其中一个实施例中,所述第一人脸编辑窗口包含当前图像以及所述当前图像中的多个人脸的人脸识别框,所述人脸识别框用于用户输入所述人脸选择操作。该人脸标注导引方法还可以包括:将所述第一人脸编辑窗口中的多个人脸中质量最高的人脸设置为预选状态,所述预选状态的人脸的人脸识别框与所述多个人脸中其他人脸的人脸识别框区别显示。
具体地,终端100将所述第一人脸编辑窗口中的多个人脸中质量最高的人脸设置为预选状态。可选地,请继续参见图3,可以使用加粗人脸识别框的形式区分处于预选状态的人脸识别框和未处于预选状态的人脸识别框。可选地,还可以使用颜色区分处于预选状态的人脸识别框和未处于预选状态的人脸识别框,以及使用颜色区分处于预选状态的人脸图像和未处于预选状态的人脸图像。
需要说明的是,处于预选状态的人脸检测框中的人脸和/或预选状态的人脸图像不一定是用户选的目标人脸。本申请中目标人脸的确定需用户通过第一人脸编辑窗口输入人脸选择操作来进行确认,例如点选对应的人脸识别框。由于用户进行处理的图像中人脸的质量与目标人脸具有较高的相关(质量最高的人脸大概率是目标人脸),因此,本实施例根据识别出的人脸的质量设定第一人脸编辑窗口中的人脸选择框和/或人脸图像的状态,可以方便用户选择出期望的目标人脸。
应该理解的是,虽然图2、图5的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2、图5中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图8所示,提供了一种图像标注导引装置,包括:
人脸识别模块810,用于对当前图像进行人脸检测。
人脸标注引导模块820,用于若人脸检测结果为检测出多个人脸,则根据用户通过第一人脸编辑窗口输入的人脸选择操作确定所述当前图像中的目标人脸,若所述目标人脸的质量未达到预设阈值,则在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸;若人脸检测结果为未检测出人脸,则在第二人脸编辑窗口中输出所述框选提示信息,根据用户响应于所述框选提示信息通过所述第二人脸编辑窗口输入的框选操作确定所述当前图像中的目标人脸,并基于所述目标人脸输出图像标注引导信息,以引导用户对所述目标人脸进行标注;其中,所述框选提示信息用于提示用户输入框选操作以对所述目标人脸进行标注;若人脸检测结果为检测出低质量人脸,则在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸。
在其中一个实施例中,人脸标注引导模块820还用于在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第一人脸编辑窗口中输出图像标注引导信息,以引导用户对所述目标人脸进行标注;或,在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第三人脸编辑窗口中输出图像标注引导信息,以引导用户对所述低质量人脸进行标注。
在其中一个实施例中,人脸标注引导模块820还用于在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第一人脸编辑窗口中输出框选提示信息,根据用户输入的框选操作输出图像标注引导信息;或,在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第三人脸编辑窗口中输出框选提示信息,根据用户输入的框选操作输出图像标注引导信息。
在其中一个实施例中,人脸标注引导模块820还用于响应于用户输入的框选操作,显示图像标注界面,其中,在所述图像标注界面输出所述目标人脸及所述目标人脸对应的图像标注引导信息。
在其中一个实施例中,人脸标注引导模块820还用于根据用户输入的标注操作对所述图像标注界面中的所述目标人脸进行处理。
在其中一个实施例中,人脸标注引导模块820具体用于根据用户标注的双目、嘴巴位置确定所述目标人脸的双目、嘴巴位置。
在其中一个实施例中,人脸标注引导模块820还用于根据用户输入的缩略图选择操作,显示所述缩略图选择操作对应的图像以及与所述图像对应的人脸检测结果;其中,每个所述缩略图对应一进行了人脸检测的图像,所述缩略图中包含与其对应的进行了人脸检测的图像的人脸检测结果。
在其中一个实施例中,人脸标注引导模块820还用于根据用户通过所述第一人脸编辑窗口输入的图像调整操作,对所述第一人脸编辑窗口中的当前图像进行对应的图像调整处理,所述图像调整处理包括裁剪、镜像以及旋转中的一种或几种。
在其中一个实施例中,人脸标注引导模块820还用于将所述第一人脸编辑窗口中的多个人脸中质量最高的人脸设置为预选状态,所述预选状态的人脸的人脸识别框与所述多个人脸中其他人脸的人脸识别框区别显示。
关于图像标注导引装置的具体限定可以参见上文中对于图像标注导引方法的限定,在此不再赘述。上述图像标注导引装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图9所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种图像标注导引方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图9中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现以下步骤:对当前图像进行人脸检测;若人脸检测结果为检测出多个人脸,则根据用户通过第一人脸编辑窗口输入的人脸选择操作确定所述当前图像中的目标人脸,若所述目标人脸的质量未达到预设阈值,则在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸;若人脸检测结果为未检测出人脸,则在第二人脸编辑窗口中输出所述框选提示信息,根据用户响应于所述框选提示信息通过所述第二人脸编辑窗口输入的框选操作确定所述当前图像中的目标人脸,并基于所述目标人脸输出图像标注引导信息,以引导用户对所述目标人脸进行标注;其中,所述框选提示信息用于提示用户输入框选操作以对所述目标人脸进行标注;若人脸检测结果为检测出低质量人脸,则在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第一人脸编辑窗口中输出图像标注引导信息,以引导用户对所述目标人脸进行标注;或,在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第三人脸编辑窗口中输出图像标注引导信息,以引导用户对所述低质量人脸进行标注。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第一人脸编辑窗口中输出框选提示信息,根据用户输入的框选操作输出图像标注引导信息;或,在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第三人脸编辑窗口中输出框选提示信息,根据用户输入的框选操作输出图像标注引导信息。
在一个实施例中,处理器执行计算机程序时具体实现以下步骤:响应于用户输入的框选操作,显示图像标注界面,其中,在所述图像标注界面输出所述目标人脸及所述目标人脸对应的图像标注引导信息。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:根据用户输入的标注操作对所述图像标注界面中的所述目标人脸进行处理。
在一个实施例中,处理器执行计算机程序时具体实现以下步骤:根据用户标注的双目、嘴巴位置确定所述目标人脸的双目、嘴巴位置。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:根据用户输入的缩略图选择操作,显示所述缩略图选择操作对应的图像以及与所述图像对应的人脸检测结果;其中,每个所述缩略图对应一进行了人脸检测的图像,所述缩略图中包含与其对应的进行了人脸检测的图像的人脸检测结果。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:根据用户通过所述第一人脸编辑窗口输入的图像调整操作,对所述第一人脸编辑窗口中的当前图像进行对应的图像调整处理,所述图像调整处理包括裁剪、镜像以及旋转中的一种或几种。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:将所述第一人脸编辑窗口中的多个人脸中质量最高的人脸设置为预选状态,所述预选状态的人脸的人脸识别框与所述多个人脸中其他人脸的人脸识别框区别显示。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:对当前图像进行人脸检测;若人脸检测结果为检测出多个人脸,则根据用户通过第一人脸编辑窗口输入的人脸选择操作确定所述当前图像中的目标人脸,若所述目标人脸的质量未达到预设阈值,则在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸;若人脸检测结果为未检测出人脸,则在第二人脸编辑窗口中输出所述框选提示信息,根据用户响应于所述框选提示信息通过所述第二人脸编辑窗口输入的框选操作确定所述当前图像中的目标人脸,并基于所述目标人脸输出图像标注引导信息,以引导用户对所述目标人脸进行标注;其中,所述框选提示信息用于提示用户输入框选操作以对所述目标人脸进行标注;若人脸检测结果为检测出低质量人脸,则在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第一人脸编辑窗口中输出图像标注引导信息,以引导用户对所述目标人脸进行标注;或,在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第三人脸编辑窗口中输出图像标注引导信息,以引导用户对所述低质量人脸进行标注。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第一人脸编辑窗口中输出框选提示信息,根据用户输入的框选操作输出图像标注引导信息;或,在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,若是,则在所述第三人脸编辑窗口中输出框选提示信息,根据用户输入的框选操作输出图像标注引导信息。
在一个实施例中,计算机程序被处理器执行时具体实现以下步骤:响应于用户输入的框选操作,显示图像标注界面,其中,在所述图像标注界面输出所述目标人脸及所述目标人脸对应的图像标注引导信息。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:根据用户输入的标注操作对所述图像标注界面中的所述目标人脸进行处理。
在一个实施例中,处理器执行计算机程序时具体实现以下步骤:根据用户标注的双目、嘴巴位置确定所述目标人脸的双目、嘴巴位置。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:根据用户输入的缩略图选择操作,显示所述缩略图选择操作对应的图像以及与所述图像对应的人脸检测结果;其中,每个所述缩略图对应一进行了人脸检测的图像,所述缩略图中包含与其对应的进行了人脸检测的图像的人脸检测结果。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:根据用户通过所述第一人脸编辑窗口输入的图像调整操作,对所述第一人脸编辑窗口中的当前图像进行对应的图像调整处理,所述图像调整处理包括裁剪、镜像以及旋转中的一种或几种。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:将所述第一人脸编辑窗口中的多个人脸中质量最高的人脸设置为预选状态,所述预选状态的人脸的人脸识别框与所述多个人脸中其他人脸的人脸识别框区别显示。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (13)
1.一种图像标注导引方法,其特征在于,所述方法包括:
对当前图像进行人脸检测;
若人脸检测结果为检测出多个人脸,则根据用户通过第一人脸编辑窗口输入的人脸选择操作确定所述当前图像中的目标人脸,若所述目标人脸的质量未达到预设阈值,则在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸;
若人脸检测结果为未检测出人脸,则在第二人脸编辑窗口中输出框选提示信息,根据用户响应于所述框选提示信息通过所述第二人脸编辑窗口输入的框选操作确定所述当前图像中的目标人脸,并基于所述目标人脸输出图像标注引导信息,以引导用户对所述目标人脸进行标注;其中,所述框选提示信息用于提示用户输入框选操作以对所述目标人脸进行标注;
若人脸检测结果为检测出低质量人脸,则在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸。
2.根据权利要求1所述的方法,其特征在于,在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,所述方法还包括:若是,则在所述第一人脸编辑窗口中输出图像标注引导信息,以引导用户对所述目标人脸进行标注;
或,
在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸之后,所述方法还包括:
若是,则在所述第三人脸编辑窗口中输出图像标注引导信息,以引导用户对所述低质量人脸进行标注。
3.根据权利要求2所述的方法,其特征在于,所述若是,则在所述第一人脸编辑窗口中输出图像标注引导信息,包括:若是,则在所述第一人脸编辑窗口中输出框选提示信息,根据用户输入的框选操作输出图像标注引导信息;
或,
所述若是,则在所述第三人脸编辑窗口中输出图像标注引导信息,包括:若是,则在所述第三人脸编辑窗口中输出框选提示信息,根据用户输入的框选操作输出图像标注引导信息。
4.根据权利要求1或3所述的方法,其特征在于,所述根据用户输入的框选操作输出图像标注引导信息,以引导用户对所述目标人脸进行标注包括:
响应于用户输入的框选操作,显示图像标注界面,其中,在所述图像标注界面输出所述目标人脸及所述目标人脸对应的图像标注引导信息。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括;
根据用户输入的标注操作对所述图像标注界面中的所述目标人脸进行处理。
6.根据权利要求5所述的方法,其特征在于,所述根据用户输入的标注操作对所述图像标注界面中的所述目标人脸进行处理包括:
根据用户标注的双目、嘴巴位置确定所述目标人脸的双目、嘴巴位置。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述方法还包括:
根据用户输入的缩略图选择操作,显示所述缩略图选择操作对应的图像以及与所述图像对应的人脸检测结果;其中,每个所述缩略图对应一进行了人脸检测的图像,所述缩略图中包含与其对应的进行了人脸检测的图像的人脸检测结果。
8.根据权利要求1-7任一项所述的方法,其特征在于,所述方法还包括:
根据用户通过所述第一人脸编辑窗口输入的图像调整操作,对所述第一人脸编辑窗口中的当前图像进行对应的图像调整处理,所述图像调整处理包括裁剪、镜像以及旋转中的一种或几种。
9.根据权利要求1-8任一项所述的方法,其特征在于,所述第一人脸编辑窗口包含当前图像以及所述当前图像中的多个人脸的人脸识别框,所述人脸识别框用于用户输入所述人脸选择操作。
10.根据权利要求9所述的方法,其特征在于,所述方法还包括:
将所述第一人脸编辑窗口中的多个人脸中质量最高的人脸设置为预选状态,所述预选状态的人脸的人脸识别框与所述多个人脸中其他人脸的人脸识别框区别显示。
11.一种图像标注导引装置,其特征在于,包括:
人脸检测模块,用于对当前图像进行人脸检测;
人脸标注引导模块,用于若人脸检测结果为检测出多个人脸,则根据用户通过第一人脸编辑窗口输入的人脸选择操作确定所述当前图像中的目标人脸,若所述目标人脸的质量未达到预设阈值,则在所述第一人脸编辑窗口中在所述目标人脸处给出低质量标签提示,并询问用户是否重新标注人脸;若人脸检测结果为未检测出人脸,则在第二人脸编辑窗口中输出框选提示信息,根据用户响应于所述框选提示信息通过所述第二人脸编辑窗口输入的框选操作确定所述当前图像中的目标人脸,并基于所述目标人脸输出图像标注引导信息,以引导用户对所述目标人脸进行标注;其中,所述框选提示信息用于提示用户输入框选操作以对所述目标人脸进行标注;若人脸检测结果为检测出低质量人脸,则在第三人脸编辑窗口中在所述低质量人脸处给出低质量标签提示,并询问用户是否重新标注人脸。
12.一种计算机设备,包括存储器及处理器,所述存储器上存储有可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至10中任一项所述方法的步骤。
13.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至10中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910629379.5A CN110377389B (zh) | 2019-07-12 | 2019-07-12 | 图像标注导引方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910629379.5A CN110377389B (zh) | 2019-07-12 | 2019-07-12 | 图像标注导引方法、装置、计算机设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110377389A CN110377389A (zh) | 2019-10-25 |
CN110377389B true CN110377389B (zh) | 2022-07-26 |
Family
ID=68253033
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910629379.5A Active CN110377389B (zh) | 2019-07-12 | 2019-07-12 | 图像标注导引方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110377389B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112837083A (zh) * | 2019-11-25 | 2021-05-25 | 浙江大搜车软件技术有限公司 | 用户行为数据处理方法、装置、计算机设备和存储介质 |
CN113806573A (zh) * | 2021-09-15 | 2021-12-17 | 上海商汤科技开发有限公司 | 标注方法、装置、电子设备、服务器及存储介质 |
CN115952315B (zh) * | 2022-09-30 | 2023-08-18 | 北京宏扬迅腾科技发展有限公司 | 校园监控视频存储方法、装置、设备、介质和程序产品 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101533520A (zh) * | 2009-04-21 | 2009-09-16 | 腾讯数码(天津)有限公司 | 一种人像标记方法及装置 |
WO2016110030A1 (zh) * | 2015-01-09 | 2016-07-14 | 杭州海康威视数字技术股份有限公司 | 一种人脸图像的检索系统及方法 |
CN106844492A (zh) * | 2016-12-24 | 2017-06-13 | 深圳云天励飞技术有限公司 | 一种人脸识别的方法、客户端、服务器及系统 |
CN108875453A (zh) * | 2017-05-11 | 2018-11-23 | 北京旷视科技有限公司 | 人脸图片底库注册的方法、装置及计算机存储介质 |
CN109117760A (zh) * | 2018-07-27 | 2019-01-01 | 北京旷视科技有限公司 | 图像处理方法、装置、电子设备和计算机可读介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10416859B2 (en) * | 2016-08-23 | 2019-09-17 | International Business Machines Corporation | Enhanced configuration of a profile photo system |
-
2019
- 2019-07-12 CN CN201910629379.5A patent/CN110377389B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101533520A (zh) * | 2009-04-21 | 2009-09-16 | 腾讯数码(天津)有限公司 | 一种人像标记方法及装置 |
WO2016110030A1 (zh) * | 2015-01-09 | 2016-07-14 | 杭州海康威视数字技术股份有限公司 | 一种人脸图像的检索系统及方法 |
CN106844492A (zh) * | 2016-12-24 | 2017-06-13 | 深圳云天励飞技术有限公司 | 一种人脸识别的方法、客户端、服务器及系统 |
CN108875453A (zh) * | 2017-05-11 | 2018-11-23 | 北京旷视科技有限公司 | 人脸图片底库注册的方法、装置及计算机存储介质 |
CN109117760A (zh) * | 2018-07-27 | 2019-01-01 | 北京旷视科技有限公司 | 图像处理方法、装置、电子设备和计算机可读介质 |
Also Published As
Publication number | Publication date |
---|---|
CN110377389A (zh) | 2019-10-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11574115B2 (en) | Method of processing analog data and electronic device thereof | |
CN110377389B (zh) | 图像标注导引方法、装置、计算机设备和存储介质 | |
US10438077B2 (en) | Face liveness detection method, terminal, server and storage medium | |
US10616475B2 (en) | Photo-taking prompting method and apparatus, an apparatus and non-volatile computer storage medium | |
US10230907B2 (en) | Thermal imaging device and normative photographing method for thermal image | |
KR101899530B1 (ko) | 분산 광학 문자 인식 및 분산 기계 언어번역을 위한 기법들 | |
AU2010203220B2 (en) | Organizing digital images by correlating faces | |
US20150277571A1 (en) | User interface to capture a partial screen display responsive to a user gesture | |
KR101856119B1 (ko) | 분산 광학 문자 인식 및 분산 기계 언어번역을 위한 기법들 | |
JP5662670B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
KR20150055543A (ko) | 제스처 인식 장치 및 제스처 인식 장치의 제어 방법 | |
CN105894042B (zh) | 检测证件图像遮挡的方法和装置 | |
WO2019228236A1 (zh) | 显示设备中人机交互方法、装置、计算机设备和存储介质 | |
CN109598748B (zh) | 图像提取装置、图像提取方法及图像提取程序以及存储有该程序的记录介质 | |
JP2007052575A (ja) | メタデータ付与装置およびメタデータ付与方法 | |
CN114066858A (zh) | 模型训练方法及装置、电子设备和存储介质 | |
CN111881740A (zh) | 人脸识别方法、装置、电子设备及介质 | |
US10664066B2 (en) | Method and apparatus for adjusting orientation, and electronic device | |
CN112822394B (zh) | 显示控制方法、装置、电子设备及可读存储介质 | |
CN115174506B (zh) | 会话信息处理方法、装置、可读存储介质和计算机设备 | |
US20180157846A1 (en) | Information processing method, electronic device and computer storage medium | |
CN111666936A (zh) | 标注方法及装置和系统、电子设备和存储介质 | |
CN112286430B (zh) | 图像处理方法、装置、设备及介质 | |
CN107124553A (zh) | 拍摄控制方法及装置、计算机装置和可读存储介质 | |
CN107885180B (zh) | 测试设备和测试方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: Image annotation guidance method, device, computer equipment, and storage medium Effective date of registration: 20230404 Granted publication date: 20220726 Pledgee: Shanghai Yunxin Venture Capital Co.,Ltd. Pledgor: BEIJING KUANGSHI TECHNOLOGY Co.,Ltd. Registration number: Y2023990000193 |
|
PE01 | Entry into force of the registration of the contract for pledge of patent right |