CN117292416A - 一种人脸尺寸确定方法和装置 - Google Patents

一种人脸尺寸确定方法和装置 Download PDF

Info

Publication number
CN117292416A
CN117292416A CN202310505880.7A CN202310505880A CN117292416A CN 117292416 A CN117292416 A CN 117292416A CN 202310505880 A CN202310505880 A CN 202310505880A CN 117292416 A CN117292416 A CN 117292416A
Authority
CN
China
Prior art keywords
detected
face
image
size
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310505880.7A
Other languages
English (en)
Inventor
许坚
王慧泉
周明钊
何垄
庄志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BMC Tianjin Medical Co Ltd
Original Assignee
BMC Tianjin Medical Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BMC Tianjin Medical Co Ltd filed Critical BMC Tianjin Medical Co Ltd
Priority to CN202310505880.7A priority Critical patent/CN117292416A/zh
Publication of CN117292416A publication Critical patent/CN117292416A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M16/00Devices for influencing the respiratory system of patients by gas treatment, e.g. mouth-to-mouth respiration; Tracheal tubes
    • A61M16/06Respiratory or anaesthetic masks
    • A61M16/0605Means for improving the adaptation of the mask to the patient
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • G06V10/243Aligning, centring, orientation detection or correction of the image by compensating for image skew or non-uniform image deformations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/255Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00Measuring parameters of the user

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Emergency Medicine (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Pulmonology (AREA)
  • Anesthesiology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Hematology (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明实施例提供了一种人脸尺寸确定方法和装置,其中的方法包括:集待测目标的第一待测人脸图像,其中,第一待测人脸图像中包括待测目标的第一待测人脸以及圆形参照物;获取第一待测人脸的第一像素值,以及圆形参照物的第二像素值;在圆形参照物的圆度大于预设圆度阈值的情况下,根据圆形参照物的标准长轴,获取圆形参照物的水平倾斜角与竖直倾斜角;根据第一像素值、第二像素值、水平倾斜角、竖直倾斜角以及圆形参照物的实际尺寸,确定第一待测人脸的第一尺寸。本发明实施例通过圆形参照物的实际尺寸、倾斜角与在第一待测人脸图像中的像素值,确定第一待测人脸的第一尺寸,简化了现有技术中的测量操作步骤,并提高了测量人脸尺寸的准确度。

Description

一种人脸尺寸确定方法和装置
本申请是2021年01月25日提出的、名称为“一种人脸尺寸确定方法和装置”的发明专利申请202110100112.4的分案申请。
技术领域
本发明涉及图像处理技术领域,尤其涉及一种人脸尺寸确定方法和装置。
背景技术
非侵入式正压通气的方式已被广泛用于阻塞性睡眠呼吸暂停(obstructivesleep apnea syndrome,简称OSA),慢性阻塞性肺气肿(chronic obstructive pulmonarydisease,简称COPD)等,不需要通过外科手术将管子插入病人的气道,而是利用鼓风机通过管路和病人接口装置对病人的气道输送一个持续的压力通气(CPAP)或者变化的压力通气,例如随着病人呼吸周期变化的双水平压力或随着病人监控情况而变化的自动调压通气。这种压力支持的疗法还通常被用于如阻塞性睡眠低通气,上呼吸道阻力综合症(UpperAirway Resistance Syndrome,简称UARS)或充血性心力衰竭等。
非侵入式通气治疗包括病人面部上的接口装置,这种接口装置通常是指围绕患者脸部的鼻子和嘴巴并形成密封的面罩。在治疗过程中,有一个外部鼓风机是压力支持设备,如呼吸机,病人接口装置把呼吸机提供的气体压力和病人的气道相连,将呼吸气流送入到病人气道。
为了适配不同的面部尺寸,多数情况下的面罩被设定为大号、中号、小号等不同的型号。为提供更有效的治疗,需要选出适合患者面部尺寸的面罩。选用与面部尺寸不适配的面罩,可能造成漏气等现象,影响佩戴舒适度,降低治疗效果。因此,方便快捷的测量患者脸部尺寸,从而选出适合患者面部尺寸的面罩格外重要。对于面部畸形的患者,无法适用标准型号的面罩。需根据患者脸部轮廓,定制专属面罩。在这种情况下,需方便快捷的获取患者脸部3D轮廓信息。
医疗面罩上的选用或医疗面罩的个性化设计,大多使用如图1所示的量鼻卡来测量鼻宽,现有技术中测量鼻宽用的量鼻卡,多为设有可容纳患者鼻部的卡片。如图1所示的量鼻卡,该量鼻卡根据面罩的适用型号,设置有小号(S)、中号(M)、大号(L)三个凹槽(10-12),凹槽下方有对应的型号标识2。使用时,患者将量鼻卡上的凹槽卡于鼻上,结合量鼻卡上的型号标识2选出适合的面罩型号。
现有技术中医疗面罩的选用或医疗面罩的个性化设计,也可以使用如图2所示用刻度尺等测量工具直接测量患者脸部的特定尺寸(例如图2中的5个尺寸)。根据人脸中的这些尺寸,进行面罩的选型或个性化设计。
现有技术中采用量鼻卡测量鼻宽的方法,一方面只能得到患者鼻宽的大概范围,无法用于面罩的个性化定制;另一方面只利用鼻宽来进行面罩选型时,考率因素单一,可能出现鼻梁、下巴等其他位置不合适的现象。
现有技术中直接用刻度尺测量患者脸部尺寸的方法,数据记录繁琐,操作麻烦,依靠手动测量易出现较大误差。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供一种人脸尺寸确定方法和装置,可以准确测量待测目标的人脸尺寸,以解决现有技术中人脸尺寸测量精度低的技术问题。
第一方面,本发明实施例提供了一种人脸尺寸确定方法,所述方法包括:集待测目标的第一待测人脸图像,其中,所述第一待测人脸图像中包括所述待测目标的第一待测人脸以及圆形参照物;获取所述第一待测人脸的第一像素值,以及所述圆形参照物的第二像素值;在所述圆形参照物的圆度大于预设圆度阈值的情况下,获取所述圆形参照物的标准长轴,其中,所述标准长轴为在所述圆度大于预设圆度阈值的情况下,所述圆形参照物中的最长的直径;获取所述圆形参照物中位于第一方向上的第一长轴以及位于第二方向上的第二长轴,其中,所述第一方向为所述第一人脸图像中两个眼睛中心的连线所在直线,所述第二方向为所述第一人脸图像中眉心、鼻尖的连线所在直线;根据所述标准长轴以及第一长轴确定所述圆形参照物的水平倾斜角;根据所述标准长轴以及第二长轴确定所述圆形参照物的竖直倾斜角;根据所述第一像素值、第二像素值、所述水平倾斜角、所述竖直倾斜角以及所述圆形参照物的实际尺寸,确定所述第一待测人脸的第一尺寸。
第二方面,本发明实施例还提供了一种人脸尺寸确定方法,所述方法包括:通过第二图像采集设备分别采集待测目标的第二待测人脸图像以及第三待测人脸图像,其中,所述第二待测人脸图像的图像采集距离与所述第三待测人脸图像的图像采集距离不同;获取所述第二待测人脸图像中的第二像素值,以及所述第三待测人脸图像的第三像素值;根据所述第二待测人脸图像与所述第三待测人脸图像之间的图像采集距离差值、所述第二图像采集设备的焦距、所述第二像素值以及所述第三像素值,确定所述待测目标的第二待测人脸的第二尺寸。
第三方面,本发明实施例还提供了一种人脸尺寸确定方法,所述方法包括:通过第三图像采集设备采集所述待测目标的第四待测人脸图像,其中,所述图像采集设备包括至少两个摄像头;获取所述第四待测人脸图像中的信息采集点对应的至少两组入射倾角,其中,所述入射倾角是由所述信息采集点漫反射照入所述至少两个摄像头时,基于所述第三图像采集设备得到的;根据所述至少两组入射倾角、所述至少两个摄像头之间的摄像头距离,确定所述信息采集点的位置;根据所述信息采集点的位置确定所述第四待测人脸图像中第三待测人脸的第三尺寸。
第四方面,本发明实施例还提供了一种面罩型号确定方法,所述方法包括:根据第一方面、第二方面、第三方面中任意一个方面所述的人脸尺寸确定方法,得到目标人脸尺寸;根据多组预设面罩参照值以及所述目标人脸尺寸确定所述待测目标的面罩型号,其中,所述多组面罩参照值分别对应多个面罩型号。
第五方面,本发明实施例还提供了一种人脸尺寸确定装置,所述装置包括:第一采集单元,用于采集待测目标的第一待测人脸图像,其中,所述第一待测人脸图像中包括所述待测目标的第一待测人脸以及圆形参照物;第一获取单元,用于获取所述第一待测人脸的第一像素值,以及所述圆形参照物的第二像素值;第二获取单元,用于在所述圆形参照物的圆度大于预设圆度阈值的情况下,获取所述圆形参照物的倾斜角;第一确定单元,用于根据所述第一像素值、第二像素值、所述倾斜角以及所述圆形参照物的实际尺寸,确定所述第一待测人脸的第一尺寸。
第六方面,本发明实施例还提供了一种人脸尺寸确定装置,所述装置包括:第二采集单元,用于通过第二图像采集设备分别采集待测目标的第二待测人脸图像以及第三待测人脸图像,其中,所述第二待测人脸图像的图像采集距离与所述第三待测人脸图像的图像采集距离不同;第三获取单元,用于获取所述第二待测人脸图像中的第二像素值,以及所述第三待测人脸图像的第三像素值;第二确定单元,用于根据所述第二待测人脸图像与所述第三待测人脸图像之间的图像采集距离差值、所述第二图像采集设备的焦距、所述第二像素值以及所述第三像素值,确定所述待测目标的第二待测人脸的第二尺寸。
第七方面,本发明实施例还提供了一种人脸尺寸确定装置,所述装置包括:第三采集单元,用于通过第三图像采集设备采集所述待测目标的第四待测人脸图像,其中,所述图像采集设备包括至少两个摄像头;第四获取单元,用于获取所述第四待测人脸图像中的信息采集点对应的至少两组入射倾角,其中,所述入射倾角是由所述信息采集点漫反射照入所述至少两个摄像头时,基于所述第三图像采集设备得到的;第三确定单元,用于根据所述至少两组入射倾角、所述至少两个摄像头之间的摄像头距离,确定所述信息采集点的位置;第四确定单元,用于根据所述信息采集点的位置确定所述第四待测人脸图像中第三待测人脸的第三尺寸。
本发明实施例包括以下优点:
本发明实施例中,采集待测目标的第一待测人脸图像,其中,第一待测人脸图像中包括待测目标的第一待测人脸以及圆形参照物;获取第一待测人脸的第一像素值,以及圆形参照物的第二像素值;在圆形参照物的圆度大于预设圆度阈值的情况下,根据圆形参照物的标准长轴,获取圆形参照物的水平倾斜角与竖直倾斜角;根据第一像素值、第二像素值、水平倾斜角、竖直倾斜角以及圆形参照物的实际尺寸,确定第一待测人脸的第一尺寸。通过圆形参照物的实际尺寸与在第一待测人脸图像中的像素值的比例关系,并根据圆形参照物的倾斜角来确定第一待测人脸的第一尺寸,简化了现有技术中的测量操作步骤,并提高了测量人脸尺寸的准确度。
此外,在本发明的另一实施例中,通过第二图像采集设备分别采集待测目标的第二待测人脸图像以及第三待测人脸图像,其中,第二待测人脸图像的图像采集距离与第三待测人脸图像的图像采集距离不同;获取第二待测人脸图像中的第二像素值,以及第三待测人脸图像的第三像素值;根据第二待测人脸图像与第三待测人脸图像之间的图像采集距离差值、第二图像采集设备的焦距、第二像素值以及第三像素值,确定待测目标的第二待测人脸的第二尺寸。通过在不同图像采集距离拍摄多个待测目标的人脸图像,然后再通过图像采集距离差值,不同人脸图像的像素值来确定第二待测人脸的第二尺寸,进一步提高了测量人脸尺寸的准确度。
再者,在本发明的另一实施例中,通过第三图像采集设备采集待测目标的第四待测人脸图像,其中,图像采集设备包括至少两个摄像头;获取第四待测人脸图像中的信息采集点对应的至少两组入射倾角,其中,入射倾角是由信息采集点漫反射照入至少两个摄像头时,基于第三图像采集设备得到的;根据至少两组入射倾角、至少两个摄像头之间的摄像头距离,确定信息采集点的位置;根据信息采集点的位置确定第四待测人脸图像中第三待测人脸的第三尺寸,避免了通过刻度尺对人脸进行手动测量,简化了测量操作,同时通过多镜头拍摄的第四待测人脸图像,可以基于摄像头之间的摄像头距离确定第三待测人脸的第三尺寸,保证了测量人脸尺寸的准确性。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1示出了相关技术中的一种量鼻卡的示意图;
图2示出了相关技术中的一种用刻度尺等测量工具直接测量患者脸部的特定尺寸的示意图;
图3示出了本发明的一种人脸尺寸确定方法实施例一的流程图;
图4示出了本发明的一种非标准角度的第一待测人脸图像的示意图;
图5示出了本发明的一种包含圆度大于预设阈值的圆形参照物的第一待测人脸图像的示意图;
图6示出了本发明的一种圆度大于预设阈值的圆形参照物示意图;
图7示出了本发明的一种标准角度的第一待测人脸图像的示意图;
图8示出了本发明的一种人脸尺寸确定方法实施例二的流程图;
图9示出了本发明的一种第二图像采集设备在不同图像采集距离采集待测人脸图像的示意图;
图10示出了本发明的一种人脸尺寸确定方法实施例三的流程图;
图11示出了本发明的一种基于双摄像头图像采集设备的信息采集点的入射倾角取获取方法的示意图;
图12示出了本发明的一种基于双摄像头图像采集设备获取多个信息采集点之间距离的示意图;
图13示出了本发明一种基于三摄像头图像采集设备的人脸尺寸确定方法的示意图;
图14示出了本发明实施例中的一种待测目标的人脸模型的示意图;
图15示出了本发明的一种人脸尺寸确定装置实施例一的结构框图;
图16示出了本发明的一种人脸尺寸确定装置实施例二的结构框图;
图17示出了本发明的一种人脸尺寸确定装置实施例三的结构框图;
图18示出了本发明的一种电子设备的结构框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
方法实施例一
参照图3,示出了本发明的一种人脸尺寸确定方法实施例一的流程图,具体可以包括:
步骤301、采集待测目标的第一待测人脸图像,其中,第一待测人脸图像中包括待测目标的第一待测人脸以及圆形参照物;
步骤302、获取所述第一待测人脸的第一像素值,以及所述圆形参照物的第二像素值;
步骤303、在所述圆形参照物的圆度大于预设圆度阈值的情况下,获取所述圆形参照物的标准长轴,其中,所述标准长轴为在所述圆度大于预设圆度阈值的情况下,所述圆形参照物中的最长的直径;
步骤304、获取所述圆形参照物中位于第一方向上的第一长轴以及位于第二方向上的第二长轴,其中,所述第一方向为所述第一人脸图像中两个眼睛中心的连线所在直线,所述第二方向为所述第一人脸图像中眉心、鼻尖的连线所在直线;
步骤305、根据所述标准长轴以及第一长轴确定所述圆形参照物的水平倾斜角;根据所述标准长轴以及第二长轴确定所述圆形参照物的竖直倾斜角;
步骤306、根据所述第一像素值、第二像素值、所述水平倾斜角、所述竖直倾角以及所述圆形参照物的实际尺寸,确定所述第一待测人脸的第一尺寸。
在本实施例中,采集待测目标的第一待测人脸图像,其中,第一待测人脸图像可以是人体的全部或局部照片,在第一待测人脸图像中包括需要进行测量的第一待测人脸以及预设参照物。例如人体的全身照、上半身照片、头部或脸部照片等,在本实施例中,对此不做任何限定。本实施例中的第一图像采集设备一般采集的是待测目标的平面图像,第一图像采集设备包括但不限于照相机、摄像机以及其他具备图像采集功能的装置。
在本实施例中,圆形参照物包括但不限于硬币、圆形杯盖、圆盘等。此外,预设参照物还包括但不限于已知尺寸的圆形的贴纸等。在本实施例中,对圆形参照物的具体种类以及形状不做任何限定。本实施例中的圆度为包容同一横剖面实际轮廓且半径差为最小的两同心圆间的半径之差。其数值越小,表示越趋近于标准圆形;数值越大,表示越偏离于标准圆形。
此外,在圆形参照物小于或等于预设圆度阈值的情况下,则认为当前圆形参照物的平面与图像采集设备所处的平面是平行的,参照图4,为放置于额头上的圆形参照物。在具体的应用场景中,圆形参照物包括但不限于硬币、圆形贴纸等。在采集设备采集待测目标的第一待测人脸图像时的图像采集角度为标准角度的情况下,例如摄像头的镜头中心轴线与圆形参照物的平面垂直、或摄像头的与人脸圆形参照物的平面平行,则圆形参照物的在第一待测人脸图像中呈现为标准圆形。
而在采集设备采集待测目标的第一待测人脸图像时的图像采集角度为非标准角度的情况下,圆形参照物的圆度大于预设圆度阈值,因此需要获取圆形参照物的倾斜角。参照图5,示出了本发明的一种非标准角度的第一待测人脸图像的示意图,在图像采集角度为非标准角度的情况下,则圆形参照物的圆度会变大,圆形参照物呈现为椭圆形,此时若根据圆形参照物的像素值以及实际尺寸,来确定第一人脸的第一尺寸,则会产生计量偏差。
在圆形参照物的圆度大于预设圆度阈值的情况下,确定包含圆形参照物的第一待测人脸是在非标准角度下进行拍摄的,则认为第一待测人脸图像是在照片/底片上的投影。则需要确定圆形参照物的倾斜角,以纠正倾角偏差。因此,在第一待测人脸图像中的圆形参照物的圆度大于预设圆度阈值的情况下,要确定圆形参照物的倾斜角,在确定圆形参照物的倾斜角之后,再根据倾斜角确定第一待测人脸的第一尺寸。
在本实施例的其他例子中,是在上述基础上将贴于待测目标额头的硬币换成信用卡,当然也可以是尺寸容易测量的圆形非标准化物品(包括但不限于圆形纸片等)。本实施例中其他例子的实施与计算过程,同上述用硬币作为预设参照物的原理相同,在此不做赘述。
需要说明的是,通过本实施例,采集待测目标的第一待测人脸图像,其中,第一待测人脸图像中包括待测目标的第一待测人脸以及圆形参照物;获取第一待测人脸的第一像素值,以及圆形参照物的第二像素值;在圆形参照物的圆度大于预设圆度阈值的情况下,获取圆形参照物的倾斜角;其中,所述倾斜角包括垂直倾斜角和水平倾斜角。
在本实施例中,在圆度大于预设圆度阈值的情况下,确定圆形参照物的倾斜角,包括但不限于:获取圆形参照物的标准长轴,其中,标准长轴为在圆度大于预设圆度阈值的情况下,圆形参照物中的最长的直径;以及,获取圆形参照物中位于第一方向上的第一长轴以及位于第二方向上的第二长轴,其中,第一方向为第一人脸图像中两个眼睛中心的连线所在直线,第二方向为第一人脸图像中眉心、鼻尖的连线所在直线;根据标准长轴以及第一长轴确定圆形参照物的水平倾斜角;根据标准长轴以及第二长轴确定圆形参照物的竖直倾斜角。
具体地,参照图4,示出了一种预设参照物为硬币的第一待测人脸图像的示意图,其中,这是由于在采集待测目标的第一待测人脸图像时,第一图像采集设备的摆放与待测目标的人脸存在一定的倾斜角度导致的。此时照片可认为是第一待测人脸部轮廓在纸平面(底片、胶卷所在的平面)上的投影。在投影方向上,可以认为上述倾斜角度由水平倾斜角α和竖直倾斜角β组成。如图4所示,在待测目标脸平面中两个眼睛中心的连线定义为l1,眉心、鼻尖、人中(上唇上方正中的凹痕)的连线定义为l2。在空间坐标中,则水平倾斜角α指的是脸平面中的l1与其在纸平面内投影的夹角,竖直倾斜角β指脸平面中的l2与其在纸平面内投影的夹角。
参照图5以及图6,其中,图5中示出了本发明的一种包含圆度大于预设阈值的圆形参照物的第一待测人脸图像的示意图,图6示出了本发明的一种圆形参照物的示意图,识别照片中圆形参照物标准长轴(圆形参照物最长方向的直径)的像素值g;识别第一待测人脸图像中圆形参照物沿l1方向的像素值k;识别第一待测人脸图像中圆形参照物沿l2方向的像素值i。容易得到,圆形参照物的标准长轴像素值g与无倾斜角(相机和脸平面平行)时直径的像素值相等。可以理解的,像素值k等于长轴像素值g在l1方向的投影,像素值i等于长轴像素值g在l2方向的投影,则可以通过以下公式确定水平倾角以及竖直倾角:
根据第一像素值、第二像素值、倾斜角以及圆形参照物的实际尺寸,确定第一待测人脸的第一尺寸。通过圆形参照物的实际尺寸与在第一待测人脸图像中的像素值的比例关系,并根据圆形参照物的倾斜角来确定第一待测人脸的第一尺寸,简化了现有技术中的测量操作步骤,并提高了测量人脸尺寸的准确度。
可选地,在本实施例中,还包括但不限于:在圆度小于或等于预设圆度阈值的情况下,根据第一像素值、第二像素值、实际尺寸,确定第一尺寸。
具体地,在一个例子中,参照图7,所示出的本发明的标准角度一种第一待测人脸图像示意图,其采用标准化的硬币作为预设参照物,在标准角度下采集待测目标的第一待测人脸图像时,将硬币按压在待测目标人脸的前额中心上,由于硬币紧贴在额头中心处,可以理解的,硬币和人脸在同一平面内。作为已知的条件,一元硬币的直径为22.25mm。在标准角度进行图像采集的情况下,可以认为摄像头与待测目标的人脸所在平面平行。在该情况下,测量第一待测人脸图像中硬币直径的像素值f。则根据实际尺寸与第一待测人脸图像中像素值的比例关系,可以得到:
通过以上公式,可以得到第一待测人脸中各个特定位置的实际尺寸:
通过上述示例,能够获取圆形参照物圆度小于预设圆度阈值的情况下,根据第一像素值、第二像素值、圆形参照物的实际尺寸确定第一待测人脸的第一尺寸,提升了获取到的人脸尺寸的精准度。
可选地,在本实施例中,根据第一像素值、第二像素值以及预设参照物的实际尺寸,确定待测人脸的第一尺寸,包括但不限于:根据第一像素值、第二像素值、水平倾斜角、竖直倾斜角以及实际尺寸,确定第一尺寸。
具体地,在圆形参照物为一元硬币的情况下,一元硬币的直径为22.25mm,其中,在图4中,根据一元硬币的实际尺寸和像素值的比例关系,易得两眼中心在l1上的投影距离为
则两眼中心在空间中的真实距离为:
将公式(5)中的代入得:
同理,基于图5可得:
可选地,在本实施例中,在采集待测目标的第一待测人脸图像之前,还包括但不限于:在用于采集第一待测人脸图像的第一图像采集设备的图像预览界面上,展示辅助线,其中,辅助线用于指示第一图像采集设备的空间位置与图像采集角度。
具体地,为有效降低非标准角度的图像采集角度下采集待测目标人脸图像而产生的误差,可以在第一图像采集设备上设置拍摄辅助措施。例如在采集待测目标的人脸图像时,在镜头图像预览画面中展示辅助线,引导用户调整相机位置,以减小上述水平倾斜角和竖直倾斜角。上述辅助线可以是水平线,引导用户拍摄时眼睛与所述水平线平齐;也可以是具有相似功能的矩形辅助线、圆形辅助线,以使将预设参照物置于辅助线的范围内等。
可选地,在本实施例中,圆形参照物包括但不限于所述第一待测人脸图像中的虹膜。
通过本实施例,采集待测目标的第一待测人脸图像,其中,第一待测人脸图像中包括待测目标的第一待测人脸以及圆形参照物;获取第一待测人脸的第一像素值,以及圆形参照物的第二像素值;在圆形参照物的圆度大于预设圆度阈值的情况下,获取圆形参照物的倾斜角;根据第一像素值、第二像素值、倾斜角以及圆形参照物的实际尺寸,确定第一待测人脸的第一尺寸。通过圆形参照物的实际尺寸与在第一待测人脸图像中的像素值的比例关系,并根据圆形参照物的倾斜角来确定第一待测人脸的第一尺寸,简化了现有技术中的测量操作步骤,并提高了测量人脸尺寸的准确度。
方法实施例二
参照图8,示出了本发明的一种人脸尺寸确定方法实施例二的流程图,具体可以包括:
步骤801,通过第二图像采集设备分别采集待测目标的第二待测人脸图像以及第三待测人脸图像,其中,第二待测人脸图像的图像采集距离与第三待测人脸图像的图像采集距离不同;
步骤802,获取第二待测人脸图像中的第二像素值,以及第三待测人脸图像的第三像素值;
步骤803,根据第二待测人脸图像与第三待测人脸图像之间的图像采集距离差值、第二图像采集设备的焦距、第二像素值以及第三像素值,确定待测目标的第二待测人脸的第二尺寸。
在本实施例中,采集待测目标的第二待测人脸图像以及第三待测人脸图像中,包括但不限于人体的全部或局部照片,在第二待测人脸图像或第三待测人脸图像中包括需要进行测量的第二待测人脸,例如人体的全身照、上半身照片、头部或脸部照片等,在本实施例中,对具体的照片类型不做任何限定。
本实施例中的第二图像采集设备一般采集的是待测目标的平面图像,第二图像采集设备包括但不限于照相机、摄像机以及其他具备图像采集功能的装置。需要说明的是,在第二图像采集设备采集待测目标的第二待测人脸图像以及第三待测人脸图像的过程中,采集第二待测人脸图像以及采集第三待测人脸图像的图像采集距离不同,但是图像采集角度相同。为了保持获取的第二人脸尺寸的准确性,需要保持摄像头与第二待测人脸的人脸平面平行。
此外,可选地,在本实施例中,包括但不限于通过第二图像采集设备进行两次不同距离下采集得到的第二待测人脸图像以及第三待测人脸图像,还可以包括但不限于通过第二图像采集设备在至少两次不同距离下采集得到的至少两个人脸图像,例如三个不同距离下采集得到的第二待测人脸图像、第三待测人脸图像以及其他待测人脸图像,通过采集多个待测人脸图像以增加实际测量的第二待测人脸的准确性,减少误差。
参照图9,示出了本发明的一种第二图像采集设备在不同图像采集距离采集待测人脸图像的示意图。图像采集设备中的摄像头本质上是一个凸透镜。一束平行光线经过凸透镜后汇聚的点称之为焦点,焦点到凸透镜中心的距离称之为焦距,用字母f表示。摄像头的焦距f是由凸透镜自身曲率决定的,不同曲率的凸透镜焦距f不同。常用摄像机或照相机的摄像头的焦距f,可从产品说明书或制造商处获得,或者是通过预先设置完成的。在进行图像采集时,待测目标到摄像头的凸透镜中心的距离为图像采集距离μ;胶卷(成像处)到摄像头的凸透镜中心的距离为像距υ。第二图像采集设备工作时,物体在2倍焦距以外(μ>2f),胶卷(成像处)在1倍焦距和2倍焦距之间(f<υ<2f),成倒立、缩小的像。
在图9中的示例中,待测目标的第二待测人脸中为尺寸h的指定物体在图像采集距离为μ1的位置1时,在A点成像的尺寸为n,此时像距为υ1。在图像采集距离为μ2的位置2时,在B点成像的尺寸为n′,此时的像距为υ2。由凸透镜成像的原理,可得:
在图9中,由直角三角形的相似原理,可得:
多数情况下,图像采集距离μ1和μ2的测量相对比较麻烦。若定义两次图像采集距离的差值为:
△X=μ12 (14)
则联立(10)-(14)式,可得物体尺寸:
从公式(15)可知,只需测量出图像采集距离的差值△X,同一物体在两张不同图像采集的相片上的尺寸n和n′,即可估算出第二待测人脸中指定物体的真实尺寸。可以理解的,当物体尺寸h为患者脸表面的多个特征尺寸时,可分别估算多个特征的真实尺寸。
在实际的应用场景中,当尺寸精度要求不高时,像距υ2大小近似等于焦距f(υ2≈f)。可估算指定物体到摄像头的图像采集距离:
当所述指定物体为待测目标的某个细小特征时,可估算出该细小特征到照相机的距离。
同理的,可估算待测目标的脸部每一个细小的特征(例如点特征、线特征)到照相机的图像采集距离。将上述待测目标脸部每一个点特征、线特征到摄像头的图像距离进行数据处理,可得到待测目标脸部的3D轮廓图,以得到待测目标的第二待测人脸的第二尺寸。
可选地,在本实施例中,通过第二图像采集设备分别采集待测目标的第二待测人脸图像以及第三待测人脸图像,包括但不限于:根据第二图像采集设备中的第一位置传感器,以及待测目标中的第二位置传感器,确定图像采集距离差值。
具体地,在第二图像采集设备以及待测目标中分别设置第一位置传感器以及第二位置传感器,通过第一位置传感器确定以及第二位置传感器来确定第二待测人脸图像对应的第一图像采集距离,以及第三待测人脸图像对应的第二图像采集距离,然后获取第一图像采集距离以及第二图像采集距离的差值。
需要说明的是,本实施例中的第一位置传感器以及第二位置传感器包括但不限于定位传感器、红外传感器等。在第一位置传感器以及第二位置传感为定位传感器的情况下,根据第一位置传感器以及第二位置传感器可以分别确定图像采集设备以及待测目标的实时位置,进而确定图像采集距离差值。而在第一位置传感器以及第二位置传感器为红外传感器的情况下,可以获取第一位传感器以及第二位置传感器之间的距离,进而确定图像采集距离差值。在本实施例中,对第一位置传感器以及第二位置传感器的具体类别不做任何限定。
可选地,在本实施例中,通过第二图像采集设备分别采集待测目标的第二待测人脸图像以及第三待测人脸图像,包括但不限于:在通过第二图像采集设备采集第二待测人脸图像之后,控制第二图像采集设备移动第一距离,其中,第一距离与图像采集距离差值距离相同;或,在通过第二图像采集设备采集第二待测人脸图像之后,控制待测目标移动第一距离。
具体地,在本实施例中,在图像采集距离的改变有两种方式:第一种方式是保持待测目标位置不变,第二图像采集设备相对于待测目标移动第一距离;第二种方式是保持第二图像采集设备位置不变,控制待测目标相对第二图像采集设备移动第一距离。需要说明的是,在第二图像采集设备或待测目标移动第一距离后,需要保持第二图像采集设备中摄像头与待测目标人脸平面的平行。
在本实施例中,通过第二图像采集设备分别采集待测目标的第二待测人脸图像以及第三待测人脸图像,其中,第二待测人脸图像的图像采集距离与第三待测人脸图像的图像采集距离不同;获取第二待测人脸图像中的第二像素值,以及第三待测人脸图像的第三像素值;根据第二待测人脸图像与第三待测人脸图像之间的图像采集距离差值、第二图像采集设备的焦距、第二像素值以及第三像素值,确定待测目标的第二待测人脸的第二尺寸。通过在不同图像采集距离拍摄多个待测目标的人脸图像,然后再通过图像采集距离差值,不同人脸图像的像素值来确定第二待测人脸的第二尺寸,进一步提高了人脸测量的准确度。
方法实施例三
参照图10,示出了本发明的一种人脸尺寸确定方法实施例三的流程图,具体可以包括:
步骤1001,通过第三图像采集设备采集待测目标的第四待测人脸图像,其中,图像采集设备包括至少两个摄像头;
步骤1002,获取第四待测人脸图像中的信息采集点对应的至少两组入射倾角,其中,入射倾角是由信息采集点漫反射照入至少两个摄像头时,基于第三图像采集设备得到的;
步骤1003,根据至少两组入射倾角、至少两个摄像头之间的摄像头距离,确定信息采集点的位置;
步骤1004,根据信息采集点的位置确定第四待测人脸图像中第三待测人脸的第三尺寸。
在本实施例中,第四待测人脸图像中包括但不限于人体的全部或局部照片,在第四待测人脸图像中包括需要进行测量的第三待测人脸,例如人体的全身照、上半身照片、头部或脸部照片等,在本实施例中,对具体的照片类型不做任何限定。
本实施例中的第三图像采集设备包括但不限于照相机、摄像机以及其他具备图像采集功能的装置。在第三图像采集设备中包括至少两个摄像头,其摄像头具有数据处理功能,能够获取光线的入射倾角。优选地,第三图像采集设备中至少两个摄像头按照预设布局进行设置,例如,在图像采集设备为双摄像头的图像采集设备的情况下,双摄像头连线所在的直线为竖直或水平方向的直线,与待测目标的人脸所在平面平行。而在图像采集设备为三个以上摄像头的图像采集设备的情况下,三个以上摄像头全部设置在同一平面上,且布局在多边形的顶点位置,多边形的边数与摄像头数量相同,例如三个摄像头的图像采集设备中,三个摄像头分别设置于三角形的顶点位置;四个摄像头分别设置于正方形的顶点位置。
本实施例中的第三图像采集设备中的摄像头具有数据处理功能,能够获取光线的入射倾角,实际上通过第三图像采集中的摄像头的位置布局可以获取多个摄像头之间的距离,然后根据多个摄像头之间的距离以及待测目标人脸中的信息采集点可以确定信息采集点的位置。
在具体的应用场景中,在待测目标的人脸中提前设置多个信息采集点,通过获取多个信息采集点的位置,建立待测目标的人脸立体3D模型。信息采集点的数量和具体位置可以根据实际经验进行设置,例如根据实际应用中呼吸面罩的需要来设置信息采集点,例如人脸中的两眼距离,鼻尖到人眼的距离,鼻梁高度等,本实施例中对此不做任何限定。
可选地,在本实施例中,第三图像采集设备包括第一摄像头以及第二摄像头,信息采集点包括第四待测人脸图像的预设连线中的第一端点和第二端点,其中,获取第四待测人脸图像中的信息采集点对应的至少两组入射倾角,包括但不限于:获取第一端点对应的入射倾角以及第二端点对应的入射倾角,其中,预设连线与第一摄像头以及第二摄像头的连线平行。
具体地,在第三图像采集设备中仅存在双摄像头的情况下,所获取的信息采集点的与第一摄像头以及第二摄像头的距离实际上是一种相对距离。第一摄像头与第二摄像头所构成的连线与预设连线平行,预设连线中的信息采集点位于第一摄像头、第二摄像头、第一端点以及第二端点构成的平面内。通过双摄像头的第三图像采集设备获取预设连线中的至少两个信息采集点:第一端点以及第二端点分别对应的入射倾角,来确定第一端点以及第二端点的相对位置。
可选地,在本实施例中,获取第一端点对应的入射倾角以及第二端点对应的入射倾角,包括但不限于:获取第一端点照入第一摄像头的第一入射倾角,以及第一端点照入第二摄像头的第二入射倾角;获取第二端点照入第一摄像头的第三入射倾角,以及第二端点照入第二摄像头的第四入射倾角。
具体的,参照图11,示出了本发明的一种基于双摄像头图像采集设备的信息采集点的入射倾角取获取方法的示意图,采用双镜头处理系统,获得待测目标的尺寸信息。所述双摄像头的图像采集设备,包括摄像头A、摄像头B,并具有数据处理功能。摄像头A和摄像头B之间的距离作为已知的条件,用字母d表示。摄像头头A和摄像头头B可捕捉光线,并感知光线的入射倾角。待测目标脸部取预设连线中的第一端点M,其漫反射的光线分别进入到摄像头A和摄像头B。摄像头A捕捉到来自第一端点M的光线MA,并计算得到其入射倾斜角γ;摄像头B捕捉到来自第一端点M的光线MB,并计算得到其入射倾斜角λ。基于与第一端点M相同的逻辑与计算方式,同样也可以得到预设连线中第二端点的入射倾角,在此不做赘述。
可选地,在本实施例中,根据至少两组入射倾角、至少两个摄像头之间的摄像头距离,确定信息采集点的位置,包括但不限于:根据第一入射倾角确定第一端点与第一摄像头之间的第一距离,以及根据第一入射倾角确定第一端点与第二摄像头之间的第二距离;根据第二入射倾角确定第二端点与第一摄像头之间的第三距离,以及根据第二入射倾角确定第二端点与第二摄像头之间的第四距离;基于第一摄像头以及第二摄像头所在的直线,建立平面坐标系;基于平面坐标系中,根据第一距离、第二距离、第一入射倾角、第二入射倾角以及摄像头距离,确定第一端点的平面坐标位置;基于平面坐标系中,根据第三距离、第四距离、第三入射倾角、第四入射倾角以及摄像头距离,确定第二端点的平面坐标位置。
具体地,参照图12,示出了本发明的一种基于双摄像头图像采集设备获第一端点与第二端点之间距离的示意图,图11的示例中给出了第一端点M和第二端点N的入射倾角获取方法,在图12中,以第一端点M为例,在平面中构件三角形MAB,则利用三角形正弦定理,可得:
为进一步确定第一端点M的位置,本发明给出如下优选的逻辑计算方法。以摄像头B作为坐标原点,以摄像头B和摄像头A连线的方向作为Y轴方向,以与摄像头B和摄像头A连线的法向作为X轴方向,建立平面直角坐标系XOY(图10)。可以理解的,摄像头B点的坐标为(0,0),摄像头A点的坐标为(0,d)。设信息采集点M的坐标为(x,y),则可得如下向量关系:
BA=(0,d);BM=(x,y);AB=(0,-d);AM=(x,y-d) (19)
/>
联立公式(20)-(21)可以得:
即第一端点M的在坐标系XOY中的位置坐标为 由同样的逻辑计算方法,可得患者脸部的第二端点N的位置坐标,本实施例在此不做赘述。
可选地,在本实施例中,根据信息采集点的位置确定第四待测人脸图像中第三待测人脸的尺寸,包括但不限于:获取第四待测人脸图像中,预设连线的像素值以及第二待测人脸的像素值;根据第一端点的坐标位置以及第二端点的坐标位置,确定预设连线的尺寸;根据预设连线的尺寸、预设连线的像素值以及第三待测人脸的像素值确定第三尺寸。
具体地,在一个例子中,设置第二端点N的坐标为(m,n),则可以得到第二端点N在坐标系XOY中的位置坐标,进而可以得到待测目标脸部中预设连线的第一端点M与第二端点N之间的距离为:
即采用上述双镜头处理系统,可以得到待测目标脸部任意2个信息采集点之间的距离,以确定第三待测人脸的第三尺寸,用于指导待测目标选取合适的面罩,或用于制作合适的面罩。
可选地,在本实施例中,第三图像采集设备包括至少三个摄像头,至少三个摄像头位于同一平面;第四待测人脸图像中包括多个信息采集点,信息采集点是按照预设密度阈值分配第四待测人脸图像中的;其中,获取第四待测人脸图像中的信息采集点,漫反射照入至少两个摄像头对应的至少两组入射倾角,包括但不限于:获取信息采集点对应的至少三组入射倾角。
具体地,参照图13,示出了本发明一种基于三摄像头图像采集设备的人脸尺寸确定方法的示意图,第三图像采集设备包括了摄像头A、摄像头B、摄像头C三个镜头,并具有数据处理功能。上述摄像头A、摄像头B以及摄像头C所在的平面,用希腊字母θ标识。所述摄像头A、摄像头B、以及摄像头C可捕捉光线,并感知光线的相对于平面θ的入射倾角。待测目标脸部取任意一信息采集点M,其漫反射的光线分别进入到摄像头A、摄像头B以及摄像头C。摄像头A捕捉到来自信息采集点M的光线MA,并计算得到其相对于面θ的入射倾斜角γ;摄像头B捕捉到来自信息采集点M的光线MB,并计算得到其相对于面θ的入射倾斜角λ;摄像头C捕捉到来自信息采集点M的光线MC,并计算得到其相对于面θ的入射倾斜角ξ。
可选地,在本实施例中,根据至少两组入射倾角、至少两个摄像头之间的摄像头距离,确定信息采集点的位置,包括但不限于:获取每个信息采集点与至少三个摄像头的至少三组距离;根据至少三个摄像头所在的平面建立空间坐标系;基于空间坐标系,根据至少三个摄像头之间的摄像头距离、至少三组入射角确定信息采集点的空间坐标位置。
具体地,仍以上述图13中示例为例进行说明,为方便的确定信息采集点M的位置,本实施例给出如下优选的逻辑计算方法。建立空间直角坐标系,并定义摄像头A、摄像头B、摄像头C的坐标位置为别为A(0,-1,0)、B(0,1,0)、C(0,0,1)。设信息采集点M的坐标为(x,y,z),易知信息采集点M在面θ内的投影点为P(0,y,z)。
则可得如下向量关系:
AP=(0,y+1,z);AM=(x,y+1,z); (25)
BP=(0,y-1,z);BM=(x,y-1,z); (26)
CP=(0,y,z-1);CM=(x,y,z-1) (27)
联立上述公式(28)-(30),可得到x、y、z的值,即得到信息采集点M的空间坐标位置。
可选地,在本实施例中,根据信息采集点的位置确定第四待测人脸图像中第三待测人脸的尺寸,包括但不限于:基于多个信息采集点对应的空间坐标位置,建立第三待测人脸的人脸模型,以确定第三尺寸。
具体地,参照附图14,示出了本发明实施例中的一种待测目标的人脸模型的示意图,其中,在本实施例中,待测目标脸部曲面由多个信息采集点组合而成,具体地信息采集点的数量可以根据实际经验进行设置。所有来自待测目标脸部的信息采集点的数据,由三个镜头处理系统的第三图像采集设备采集并运算,分别获取每个信息采集点的空间坐标位置,进而可形成待测目标脸部的人脸3D模型。在具体地应用场景,人脸3D模型可用于计算机自动识别特定的尺寸信息,用于选取与待测目标脸部相适应的面罩;当然也可以用于根据待测目标脸部的3D模型,设计个性化面罩。
需要说明的是,在具体地应用场景中,尤其对于面部畸形的待测目标,根据待测目标脸部信息设计相匹配的面罩,将有效增加密封性能、提高佩戴舒适度。
在本实施例中,通过第三图像采集设备采集待测目标的第四待测人脸图像,其中,图像采集设备包括至少两个摄像头;获取第四待测人脸图像中的信息采集点对应的至少两组入射倾角;根据至少两组入射倾角、至少两个摄像头之间的摄像头距离,确定信息采集点的位置;根据信息采集点的位置确定第四待测人脸图像中第三待测人脸的第三尺寸,避免了通过刻度尺对人脸进行手动测量,简化了测量操作,同时通过多镜头拍摄的第四待测人脸图像,可以基于摄像头之间的摄像头距离确定第三待测人脸的第三尺寸,保证了人脸测量的准确性。
方法实施例四
本实施例中还提出了一种面罩尺寸确定方法,具体可以包括以下步骤:
步骤S1,根据方法实施例一、方法实施例二或方法实施例三中任意一个或多个的人脸尺寸确定方法,得到目标人脸尺寸;
步骤S2,根据多组预设面罩参照值以及目标人脸尺寸确定待测目标的面罩型号,其中,多组面罩参照值分别对应多个面罩型号。
基于前述方法实施例一、方法实施例二或方法实施例三中的方法得到目标人脸尺寸,具体目标人脸尺寸的获取过程,本实施例中对此不做赘述。
然后,在具体的应用场景中,不同型号的面罩对应不同的人脸尺寸范围,每个人脸尺寸范围对应一组预设面罩参照值,若目标人脸尺寸的相关参数落在预设面罩参照值对应的人脸尺寸范围内,则确定当前预设面罩参照值对应的面罩型号为与待测目标匹配的面罩型号。
具体地,在本实施例中,面罩参照值中包括但不限于鼻宽、脸部两内眼角之间的第一距离以及眉心与人中之间的第二距离等参数。具体地脸部部位参数种类可以根据实际经验进行设置,本实施例中对此不做任何限定。
可选地,在本实施例中,面罩参照值包括第一人脸部部位对应的第一参照值以及得第二人脸部部位对应的第二参照值,目标人脸尺寸包括第一脸部部位以及第二脸部部位分别对应的多个部位尺寸,其中,根据多组面罩参照值以及目标人脸尺寸确定待测目标的面罩型号,包括但不限于:在第一脸部部位对应的部位尺寸与第一参照值匹配的情况下,确定第一参照值对应的面罩型号。
在具体的应用场景中,人脸脸部部位按照气密优先级进行划分,将气密优先级较高和/或舒适权重值较高的脸部部位划分为第一脸部部位、将气密优先级较低和/或舒适权重值较低的脸部部位划分为第二脸部部位,其中,气密优先级越高面罩的气密性越好、舒适权重值越高则用户的舒适度越高。
在本实施例中,由于不同部位所对应的参照值均不相同,目标人脸中的脸部部位会存在不完全与一个面罩型号的参照值完全匹配的情况,在该情况下,根据第一脸部部位匹配的第一参照值确定对应的面罩型号,以保证面罩的气密性以及舒适度。
可选地,在本实施例中,根据多组面罩参照值以及目标人脸尺寸确定待测目标的面罩型号,包括但不限于:在目标人脸尺寸中的多个部位尺寸与面罩参照值中的多个部位参照值全部匹配的情况下,选取面罩参照值对应的面罩型号;或,在目标人脸尺寸中的多个部位尺寸与面罩参照值中的多个部位参照值部分匹配的情况下,若匹配的部位参照值数量大于或等于预设数量阈值,则选取面罩参照值对应的面罩型号。
具体地,在本实施例中,根据多组面罩参照值以及目标人脸尺寸确定待测目标的面罩型号,是通过将目标人脸尺寸中的多个部位尺寸与面罩参照值中的多个部位参照值进行匹配,在目标人脸尺寸中的多个部位尺寸与面罩参照值中的多个部位参照值全部匹配的情况下,选取面罩参照值对应的面罩型号。在目标人脸尺寸中的多个部位尺寸与面罩参照值中的多个部位参照值部分匹配的情况下,若匹配的部位参照值数量大于或等于预设数量阈值,则选取面罩参照值对应的面罩型号。
在一个例子中,将目标人脸尺寸中的鼻宽、脸部两内眼角之间的第一距离以及眉心与人中之间的第二距离对面罩参照值进行匹配,若鼻宽、第一距离以及第二距离均与面罩型号A的部位参照值匹配,则确定目标人匹配的面罩型号为型号A。若鼻宽与面罩型号A对应的部位参照值匹配,第一距离以及第二距离均与面罩型号B的部位参照值匹配,则确定目标人匹配的面罩型号为型号B。
通过上述实施例,根据多组预设面罩参照值以及目标人脸尺寸确定待测目标的面罩型号,以保证面罩的气密性以及舒适度。
装置实施例一
参照图15,示出了本发明的一种人脸尺寸确定装置实施例一的结构框图,具体可以包括:
1)第一图像采集模块1501,用于采集待测目标的第一待测人脸图像,其中,所述第一待测人脸图像中包括所述待测目标的第一待测人脸以及圆形参照物;
2)第一获取模块1502,用于获取所述第一待测人脸的第一像素值,以及所述圆形参照物的第二像素值;
3)第二获取模块1503,用于在所述圆形参照物的圆度大于预设圆度阈值的情况下,获取所述圆形参照物的倾斜角;
4)第一确定模块1504,用于根据所述第一像素值、第二像素值、所述倾斜角以及所述圆形参照物的实际尺寸,确定所述第一待测人脸的第一尺寸。
可选地,本实施例中的具体示例可以参考上述方法实施例一中所描述的示例,本实施例在此不再赘述。
装置实施例二
参照图16,示出了本发明的一种人脸尺寸确定装置实施例二的结构框图,具体可以包括:
1)第二图像采集模块1601,用于通过第二图像采集设备分别采集待测目标的第二待测人脸图像以及第三待测人脸图像,其中,所述第二待测人脸图像的图像采集距离与所述第三待测人脸图像的图像采集距离不同;
2)第三获取模块1602,用于获取所述第二待测人脸图像中的第二像素值,以及所述第三待测人脸图像的第三像素值;
3)第二确定模块1603,用于根据所述第二待测人脸图像与所述第三待测人脸图像之间的图像采集距离差值、所述第二图像采集设备的焦距、所述第二像素值以及所述第三像素值,确定所述待测目标的第二待测人脸的第二尺寸。
可选地,本实施例中的具体示例可以参考上述方法实施例二中所描述的示例,本实施例在此不再赘述。
装置实施例三
参照图17,示出了本发明的一种人脸尺寸确定装置实施例三的结构框图,具体可以包括:
1)第三图像采集模块1701,用于通过第三图像采集设备采集待测目标的第四待测人脸图像,其中,所述图像采集设备包括至少两个摄像头;
2)第四获取模块1702,用于获取所述第四待测人脸图像中的信息采集点对应的至少两组入射倾角,其中,所述入射倾角是由所述信息采集点漫反射照入所述至少两个摄像头时,基于所述第三图像采集设备得到的;
3)第三确定模块1703,用于根据所述至少两组入射倾角、所述至少两个摄像头之间的摄像头距离,确定所述信息采集点的位置;
4)第四确定模块1704,用于根据所述信息采集点的位置确定所述第四待测人脸图像中第三待测人脸的第三尺寸。
可选地,本实施例中的具体示例可以参考上述方法实施例三中所描述的示例,本实施例在此不再赘述。
装置实施例四
本实施例中还提出了一种面罩型号确定装置,所述装置包括:
1)获取单元,用于根据装置实施例一、装置实施例二或装置实施例三中的任意一个人脸尺寸确定装置,得到目标人脸尺寸;
2)确定单元,用于根据多组预设面罩参照值以及所述目标人脸尺寸确定所述待测目标的面罩型号,其中,所述多组面罩参照值分别对应多个面罩型号。
可选地,本实施例中的具体示例可以参考上述方法实施例四中所描述的示例,本实施例在此不再赘述。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本申请的实施例还提供了一种电子设备,参见图18,包括:处理器1801、存储器1802以及存储在所述存储器上并可在所述处理器上运行的计算机程序18021,所述处理器执行所述程序时实现前述实施例的人脸尺寸确定方法。
本申请的实施例还提供了一种可读存储介质,当所述存储介质中的指令由电子设备的处理器执行时,使得电子设备能够执行前述实施例的人脸尺寸确定方法。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本申请的实施例也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本申请的实施例的内容,并且上面对特定语言所做的描述是为了披露本申请的实施例的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本申请的实施例的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本申请并帮助理解各个发明方面中的一个或多个,在上面对本申请的实施例的示例性实施例的描述中,本申请的实施例的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本申请的实施例要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本申请的实施例的单独实施例。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
本申请的实施例的各个部件实施例可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本申请的实施例的排序设备中的一些或者全部部件的一些或者全部功能。本申请的实施例还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序。这样的实现本申请的实施例的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。应该注意的是上述实施例对本申请的实施例进行说明而不是对本申请的实施例进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本申请的实施例可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
以上所述仅为本申请的实施例的较佳实施例而已,并不用以限制本申请的实施例,凡在本申请的实施例的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本申请的实施例的保护范围之内。
以上所述仅为本申请的实施例的具体实施方式,本申请的实施例的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请的实施例揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的实施例的保护范围之内。因此,本申请的实施例的保护范围应以权利要求的保护范围为准。

Claims (12)

1.一种人脸尺寸确定方法,其特征在于,所述方法包括:
采集待测目标的第一待测人脸图像,其中,所述第一待测人脸图像中包括所述待测目标的第一待测人脸以及预设参照物;
获取所述第一待测人脸的第一像素值,以及所述预设参照物的第二像素值;
在所述预设参照物的几何形状满足预设条件的情况下,获取所述预设参照物的标准长轴,其中,所述标准长轴为在所述预设参照物的几何形状满足预设条件的情况下,经过所述预设参照物的几何中心与几何边缘的最长线段;
获取所述预设参照物中位于第一方向上的第一长轴以及位于第二方向上的第二长轴,其中,所述第一方向为所述第一人脸图像中两个眼睛中心的连线所在直线,所述第二方向为所述第一人脸图像中眉心、鼻尖的连线所在直线;
根据所述标准长轴以及第一长轴确定所述预设参照物的水平倾斜角;根据所述标准长轴以及第二长轴确定所述预设参照物的竖直倾斜角;
根据所述第一像素值、第二像素值、所述水平倾斜角、所述竖直倾斜角以及所述预设参照物的实际尺寸,确定所述第一待测人脸的第一尺寸。
2.根据权利要求1所述的方法,其特征在于,还包括:
在所述预设参照物的几何形状满足预设条件的情况下,根据所述第一像素值、第二像素值、所述实际尺寸,确定所述第一尺寸。
3.根据权利要求1所述的方法,其特征在于,根据所述第一像素值、第二像素值、所述倾斜角以及所述预设参照物的实际尺寸,确定所述第一待测人脸的第一尺寸,包括:
根据所述第一像素值、第二像素值、所述水平倾斜角、所述竖直倾斜角以及所述实际尺寸,确定所述第一尺寸。
4.根据权利要求1所述的方法,其特征在于,所述预设参照物包括所述第一待测人脸图像中的虹膜。
5.根据权利要求1所述的方法,其特征在于,所述预设参照物包括圆形参照物;在所述圆形参照物的圆度大于预设圆度阈值的情况下,确定所述圆形参照物的几何形状满足预设条件。
6.一种人脸尺寸确定方法,其特征在于,所述方法包括:
通过第二图像采集设备分别采集待测目标的第二待测人脸图像以及第三待测人脸图像,其中,所述第二待测人脸图像的图像采集距离与所述第三待测人脸图像的图像采集距离不同;
获取所述第二待测人脸图像中的第二像素值,以及所述第三待测人脸图像的第三像素值;
根据所述第二图像采集设备中的第一位置传感器,以及所述待测目标中的第二位置传感器,确定所述第二待测人脸图像与所述第三待测人脸图像之间的所述图像采集距离差值;
根据所述图像采集距离差值、所述第二图像采集设备的焦距、所述第二像素值以及所述第三像素值,确定所述待测目标的第二待测人脸的第二尺寸。
7.根据权利要求6所述的方法,其特征在于,通过第二图像采集设备分别采集所述待测目标的第二待测人脸图像以及第三待测人脸图像,包括:
在通过所述第二图像采集设备采集所述第二待测人脸图像之后,控制所述第二图像采集设备移动第一距离,其中,所述第一距离与所述第二图像采集距离差值距离相同;或,
在通过所述第二图像采集设备采集所述第二待测人脸图像之后,控制所述待测目标移动所述第一距离。
8.一种面罩型号确定方法,其特征在于,所述方法包括:
根据权利要求1-5或6-7中任意一个或多个所述的人脸尺寸确定方法,得到目标人脸尺寸;
根据多组预设面罩参照值以及所述目标人脸尺寸确定所述待测目标的面罩型号,其中,所述多组面罩参照值分别对应多个面罩型号。
9.根据权利要求8所述的方法,其特征在于,所述面罩参照值包括第一人脸部部位对应的第一参照值以及得第二人脸部部位对应的第二参照值,所述目标人脸尺寸包括第一脸部部位以及第二脸部部位分别对应的多个部位尺寸,其中,
根据多组面罩参照值以及所述目标人脸尺寸确定所述待测目标的面罩型号,包括:
在所述第一脸部部位对应的部位尺寸与所述第一参照值匹配的情况下,确定所述第一参照值对应的面罩型号。
10.根据权利要求9所述的方法,其特征在于,根据多组面罩参照值以及所述目标人脸尺寸确定所述待测目标的面罩型号,包括:
在所述目标人脸尺寸中的多个所述部位尺寸与所述面罩参照值中的多个所述部位参照值全部匹配的情况下,选取所述面罩参照值对应的面罩型号;或,
在所述目标人脸尺寸中的多个所述部位尺寸与所述面罩参照值中的多个所述部位参照值部分匹配的情况下,若匹配的所述部位参照值数量大于或等于预设数量阈值,则选取所述面罩参照值对应的面罩型号。
11.一种人脸尺寸确定装置,其特征在于,所述装置包括:
第一图像采集模块,用于采集待测目标的第一待测人脸图像,其中,所述第一待测人脸图像中包括所述待测目标的第一待测人脸以及预设参照物;
第一获取模块,用于获取所述第一待测人脸的第一像素值,以及所述预设参照物的第二像素值;
第二获取模块,用于在所述预设参照物的圆度大于预设圆度阈值的情况下,获取所述预设参照物的倾斜角;
第一确定模块,用于根据所述第一像素值、第二像素值、所述倾斜角以及所述预设参照物的实际尺寸,确定所述第一待测人脸的第一尺寸。
12.一种人脸尺寸确定装置,其特征在于,所述装置包括:
第二图像采集模块,用于通过第二图像采集设备分别采集待测目标的第二待测人脸图像以及第三待测人脸图像,其中,所述第二待测人脸图像的图像采集距离与所述第三待测人脸图像的图像采集距离不同;
第三获取模块,用于获取所述第二待测人脸图像中的第二像素值,以及所述第三待测人脸图像的第三像素值;
第二确定模块,用于根据所述第二待测人脸图像与所述第三待测人脸图像之间的图像采集距离差值、所述第二图像采集设备的焦距、所述第二像素值以及所述第三像素值,确定所述待测目标的第二待测人脸的第二尺寸。
CN202310505880.7A 2021-01-25 2021-01-25 一种人脸尺寸确定方法和装置 Pending CN117292416A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310505880.7A CN117292416A (zh) 2021-01-25 2021-01-25 一种人脸尺寸确定方法和装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202110100112.4A CN112883811B (zh) 2021-01-25 2021-01-25 一种人脸尺寸确定方法和装置
CN202310505880.7A CN117292416A (zh) 2021-01-25 2021-01-25 一种人脸尺寸确定方法和装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202110100112.4A Division CN112883811B (zh) 2021-01-25 2021-01-25 一种人脸尺寸确定方法和装置

Publications (1)

Publication Number Publication Date
CN117292416A true CN117292416A (zh) 2023-12-26

Family

ID=76051235

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202310505880.7A Pending CN117292416A (zh) 2021-01-25 2021-01-25 一种人脸尺寸确定方法和装置
CN202110100112.4A Active CN112883811B (zh) 2021-01-25 2021-01-25 一种人脸尺寸确定方法和装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202110100112.4A Active CN112883811B (zh) 2021-01-25 2021-01-25 一种人脸尺寸确定方法和装置

Country Status (6)

Country Link
US (1) US20240024604A1 (zh)
EP (1) EP4246372A4 (zh)
JP (1) JP2023550189A (zh)
CN (2) CN117292416A (zh)
AU (1) AU2022209518A1 (zh)
WO (1) WO2022156810A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117292416A (zh) * 2021-01-25 2023-12-26 天津怡和嘉业医疗科技有限公司 一种人脸尺寸确定方法和装置

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101748180B1 (ko) * 2010-12-31 2017-06-16 주식회사 케이티 영상으로부터 피사체의 크기를 측정하기 위한 방법 및 장치
CN102693417A (zh) * 2012-05-16 2012-09-26 清华大学 基于异构主动视觉网络的人脸图像样本采集优化方法
CN105637512B (zh) * 2013-08-22 2018-04-20 贝斯普客公司 用于创造定制产品的方法和系统
US8885916B1 (en) * 2014-03-28 2014-11-11 State Farm Mutual Automobile Insurance Company System and method for automatically measuring the dimensions of and identifying the type of exterior siding
CN106666903A (zh) * 2015-11-09 2017-05-17 恒基伟业投资发展集团有限公司 一种利用图像测量人体体型参数的方法及装置
CN106482641B (zh) * 2016-12-27 2020-10-16 努比亚技术有限公司 一种尺寸测量装置和方法
CN109148433B (zh) * 2017-06-16 2021-06-04 睿励科学仪器(上海)有限公司 用于确定集成电路器件的尺寸的方法和设备
CN107566654B (zh) * 2017-09-27 2020-03-17 Oppo广东移动通信有限公司 解锁控制方法及相关产品
CN109840453B (zh) * 2017-11-28 2020-12-11 中国移动通信集团浙江有限公司 一种人脸匹配方法及装置
CN108198141B (zh) * 2017-12-28 2021-04-16 北京奇虎科技有限公司 实现瘦脸特效的图像处理方法、装置及计算设备
CN108240793A (zh) * 2018-01-26 2018-07-03 广东美的智能机器人有限公司 物体尺寸测量方法、装置和系统
CN109118426A (zh) * 2018-08-16 2019-01-01 奇酷互联网络科技(深圳)有限公司 移动终端和定制眼镜的试妆方法、装置
CN111259703B (zh) * 2018-12-03 2024-01-23 北京嘀嘀无限科技发展有限公司 人脸倾斜角度检测方法和装置
CN110348936A (zh) * 2019-05-23 2019-10-18 珠海随变科技有限公司 一种眼镜推荐方法、装置、系统及存储介质
CN112254633B (zh) * 2020-01-15 2023-05-30 北京京东振世信息技术有限公司 物体尺寸测量方法、装置和设备
CN111486798B (zh) * 2020-04-20 2022-08-26 苏州智感电子科技有限公司 图像测距方法、图像测距系统及终端设备
CN111932604A (zh) * 2020-08-24 2020-11-13 腾讯音乐娱乐科技(深圳)有限公司 人耳特征距离测量的方法和装置
CN112070021A (zh) * 2020-09-09 2020-12-11 深圳数联天下智能科技有限公司 基于人脸检测的测距方法、测距系统、设备和存储介质
CN117292416A (zh) * 2021-01-25 2023-12-26 天津怡和嘉业医疗科技有限公司 一种人脸尺寸确定方法和装置

Also Published As

Publication number Publication date
JP2023550189A (ja) 2023-11-30
WO2022156810A1 (zh) 2022-07-28
AU2022209518A1 (en) 2023-07-13
US20240024604A1 (en) 2024-01-25
EP4246372A4 (en) 2024-04-10
CN112883811A (zh) 2021-06-01
EP4246372A1 (en) 2023-09-20
CN112883811B (zh) 2023-06-02

Similar Documents

Publication Publication Date Title
Camison et al. Validation of the Vectra H1 portable three-dimensional photogrammetry system for facial imaging
JP4649319B2 (ja) 視線検出装置、視線検出方法、および視線検出プログラム
EP2907106B1 (en) System for accessing data of a face of a subject
US7929661B2 (en) Method and apparatus for radiographic imaging
JP4662514B2 (ja) 3dボリュウムデータレコード内のマークの座標を求める方法
JP4824420B2 (ja) 視線ベクトル検出方法及び同装置
CN111160136B (zh) 一种标准化3d信息采集测量方法及系统
US20190231284A1 (en) Portable bite part for determining an imaging area of a patient in panoramic, computed tomography, or cephalometric x-ray imaging
KR102195268B1 (ko) 근거리 시력 지점을 결정하기 위한 방법, 장치 및 컴퓨터 프로그램
CN112883811B (zh) 一种人脸尺寸确定方法和装置
CN107122754A (zh) 姿势识别方法和装置
JP2014042806A (ja) 注視線測定方法、注視線測定装置、眼球回旋点測定方法及びアイポイント測定装置
JP2600114B2 (ja) ノイズに強い正確な楕円近似による計測方法
JP3711053B2 (ja) 視線測定装置及びその方法と、視線測定プログラム及びそのプログラムを記録した記録媒体
RU2629051C2 (ru) Способ и устройство для определения анатомических свойств пациента
JP3013356B2 (ja) 前眼部撮影装置
US20190231285A1 (en) Portable bite part for correcting a motion of an object in panoramic, computed tomography, or cephalometric x-ray imaging
TWI819439B (zh) 視線追蹤方法及應用其之視線追蹤裝置
CN110545728B (zh) 放射线图像处理装置和放射线图像处理方法
CN211085115U (zh) 标准化生物三维信息采集装置
RU2618980C1 (ru) Способ контроля изменений дефектов кожи лица и устройство для его осуществления
KR20160038297A (ko) 의료 영상 시스템의 자세 교정 가이드 장치 및 그 방법
CN114430670A (zh) 患者位置检测方法及装置、放射医疗设备、可读存储介质
RU2820980C1 (ru) Способ диагностики опорно-двигательной системы
WO2023007651A1 (ja) 撮像システム及び撮像方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination