CN115457422A - 采样过程验证方法、装置和增强现实功能眼镜 - Google Patents
采样过程验证方法、装置和增强现实功能眼镜 Download PDFInfo
- Publication number
- CN115457422A CN115457422A CN202210970546.4A CN202210970546A CN115457422A CN 115457422 A CN115457422 A CN 115457422A CN 202210970546 A CN202210970546 A CN 202210970546A CN 115457422 A CN115457422 A CN 115457422A
- Authority
- CN
- China
- Prior art keywords
- sampling
- face image
- registration information
- acquiring
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000005070 sampling Methods 0.000 title claims abstract description 407
- 238000000034 method Methods 0.000 title claims abstract description 191
- 239000011521 glass Substances 0.000 title claims abstract description 50
- 238000012795 verification Methods 0.000 title claims abstract description 39
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 22
- 239000012472 biological sample Substances 0.000 claims abstract description 59
- 238000004590 computer program Methods 0.000 claims description 33
- 230000006870 function Effects 0.000 claims description 15
- 239000000523 sample Substances 0.000 claims description 12
- 238000011028 process validation Methods 0.000 claims description 5
- 238000012545 processing Methods 0.000 abstract description 3
- 210000000214 mouth Anatomy 0.000 description 25
- 210000000887 face Anatomy 0.000 description 15
- 238000004891 communication Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 239000003550 marker Substances 0.000 description 3
- 210000003800 pharynx Anatomy 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 150000007523 nucleic acids Chemical class 0.000 description 2
- 102000039446 nucleic acids Human genes 0.000 description 2
- 108020004707 nucleic acids Proteins 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 210000002741 palatine tonsil Anatomy 0.000 description 2
- 241000894006 Bacteria Species 0.000 description 1
- 229920000742 Cotton Polymers 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 229920002521 macromolecule Polymers 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 210000003296 saliva Anatomy 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Optics & Photonics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Image Analysis (AREA)
Abstract
本发明提供一种采样过程验证方法、装置和增强现实功能眼镜,涉及图像处理技术领域。该方法包括:获取待采人员的人脸图像,并识别所述人脸图像中的采样区域;获取采样设备对所述采样区域内生物样本采集过程的采样视频;基于所述采样视频,确定所述采样设备与所述采样区域的接触状态信息,基于所述接触状态信息验证所述采样设备的采样过程是否有效。本发明中通过采样视频,确定采样设备与采样区域的接触状态信息,以基于该接触状态信息,对通过采样设备在采样区域内采集生物样本的过程进行监督和验证,从而可以提高采样的有效性。
Description
技术领域
本发明涉及图像处理技术领域,尤其涉及一种采样过程验证方法、装置和增强现实功能眼镜。
背景技术
生物样本,如血液、唾液、生物大分子、细胞、组织等在医疗、科研等领域有着重要的作用。生物样本通常由专业人员进行采集后放入专用容器内,再送去实验室进行检测。生物样本对环境的要求比较严苛,温度、湿度以及空气中的各种细菌都有可能影响其活性,因此生物样本的采样、保存过程也同样具有严苛的条件。
采样过程是否有效直接影响着生物样本的有效性及检测结果。然而,对生物样本进行采样时,完全依赖于专业人员自己的经验以及专业性,对人员的要求较高,并且容易因操作失误导致采样失败,影响生物样本的有效性。例如,在核酸采样过程中,需要在咽后壁进行采样得到咽拭子样本,但是口腔空间较小,容易采集错部位,导致采集的咽拭子样本无效。
发明内容
本发明提供一种采样过程验证方法、装置和增强现实功能眼镜,用以解决现有技术中采样过程缺乏监督的缺陷,提高采样的有效性。
本发明提供一种采样过程验证方法,应用于增强现实功能眼镜,该方法包括:获取待采人员的人脸图像,并识别所述人脸图像中的采样区域;获取采样设备对所述采样区域内生物样本采集过程的采样视频;基于所述采样视频,确定所述采样设备与所述采样区域的接触状态信息,基于所述接触状态信息验证所述采样设备的采样过程是否有效。
根据本发明提供的一种实施方式,所述接触状态信息包括接触次数和/或接触时长;所述基于所述接触状态信息验证所述采样设备的采样过程是否有效,包括:验证所述接触次数满足采样次数阈值,和/或验证所述接触时长满足采样时长阈值的情况下,确定所述采样设备的采样过程有效。
根据本发明提供的一种实施方式,该方法还包括:基于增强现实功能,显示的所述人脸图像上增加显示所述采样区域的区域标识;所述区域标识用于指示采样设备采集生物样本的区域。
根据本发明提供的一种实施方式,所述基于所述接触状态信息验证所述采样设备的采样过程是否有效之后,还包括:在所述采样过程有效的情况下,显示用于指示采样过程有效的第一标识;在所述采样过程无效的情况下,显示用于指示采样过程无效的第二标识。
根据本发明提供的一种实施方式,所述获取待采人员的人脸图像,并识别所述人脸图像中的采样区域,包括:获取待采人员的人脸图像,在识别到所述人脸图像中嘴巴处于张开状态的情况下,从所述嘴巴对应的区域识别所述采样区域。
根据本发明提供的一种实施方式,所述获取所述采样设备对所述采样区域内生物样本采集过程的采样视频,包括:在识别到所述人脸图像中嘴巴处于张开状态的情况下,采集所述采样设备对所述采样区域内生物样本采集过程的采样视频。
根据本发明提供的一种实施方式,所述获取待采人员的人脸图像之后,还包括:获取采样管关联的登记信息,所述采样管用于保存采样设备采集到的生物样本;获取所述登记信息对应的登记人脸,将所述人脸图像与所述登记人脸进行对比,根据对比结果确定所述采样设备的采样过程是否有效。
根据本发明提供的一种实施方式,所述获取所述登记信息对应的登记人脸,将所述人脸图像与所述登记人脸进行对比,包括:将所述登记信息与所述人脸图像上传至服务端,获取所述服务端返回的对比结果。
根据本发明提供的一种实施方式,所述获取采样管关联的登记信息之前,还包括:获取所述采样管的标识信息,以及获取登记人员的登记信息;将所述标识信息与所述登记信息进行关联,且与同一标识信息关联的登记信息不超过预设数量。
根据本发明提供的一种实施方式,所述将所述人脸图像与所述登记人脸进行对比,包括:在所述采样管关联的登记信息为多个的情况下,按照多个所述登记信息的顺序确定所述人脸图像对应的目标登记信息;将所述人脸图像与所述目标登记信息对应的登记人脸进行对比。
根据本发明提供的一种实施方式,所述将所述人脸图像与所述登记人脸进行对比,包括:在所述采样管关联的登记信息为多个的情况下,确定多个登记信息对应的多个登记人脸中没有匹配过的目标人脸;将所述人脸图像与所述目标人脸进行对比。
本发明还提供一种采样过程验证装置,包括:图像识别模块,用于获取待采人员的人脸图像,并识别所述人脸图像中的采样区域;视频采集模块,用于获取采样设备对所述采样区域内生物样本采集过程的采样视频;信息验证模块,用于基于所述采样视频,确定所述采样设备与所述采样区域的接触状态信息,基于所述接触状态信息验证所述采样设备的采样过程是否有效。
本发明还提供一种增强现实功能眼镜,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述采样过程验证方法。
本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述采样过程验证方法。
本发明还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述任一种所述采样过程验证方法。
本发明提供的采样过程验证方法、装置和增强现实功能眼镜,通过待采人员的人脸图像识别出采样区域。根据采样设备对采样区域内生物样本采集过程的采样视频,确定采样设备与采样区域的接触状态信息,基于该接触状态信息,可以对通过采样设备在采样区域内采集生物样本的过程进行监督和验证,从而可以避免采样过程无效,验证了采样过程的有效性,同时提高了所采集的生物样本的有效性。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的采样过程验证方法的流程示意图;
图2是本发明实施例提供的采样过程验证方法的显示效果示意图;
图3是本发明实施例提供的采样过程验证装置的结构示意图;
图4是本发明实施例提供的增强现实功能眼镜的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
附图中所示的方框图仅仅是功能实体,不一定必须与物理上独立的实体相对应。即,可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
附图中所示的流程图仅是示例性说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解,而有的操作/步骤可以合并或部分合并,因此实际执行的顺序有可能根据实际情况改变。
本说明书中,用语“第一”、“第二”、“第三”等仅作为标记使用,不是对其对象的数量或顺序限制。
下面结合附图描述本发明的采样过程验证方法、装置和增强现实功能眼镜。
本发明实施例首先提供一种采样过程验证方法,示例性的,该方法可应用于一种具有增强现实(Augmented Reality,AR)功能的眼镜,可简称为AR眼镜。增强现实是一种将真实世界和虚拟信息进行集成的技术,是把原本在真实世界一定时间空间范围内很难体验到的实体信息,如视觉、声音、味道、触觉等信息,通过计算机技术模拟仿真后再与真实世界叠加,从而将虚拟的信息应用到真实世界,被人类感官所感知,达到超越现实的感官体验。
采集生物样本的采样人员可以佩戴该AR眼镜,完成生物样本的采样。图1示出了本实施例中采样过程验证方法的流程图,如图1所示,该方法可以包括以下步骤:
步骤10:获取待采人员的人脸图像,并识别所述人脸图像中的采样区域。
步骤20:获取采样设备对所述采样区域内生物样本采集过程的采样视频。
步骤30:基于所述采样视频,确定所述采样设备与所述采样区域的接触状态信息,基于所述接触状态信息验证所述采样设备的采样过程是否有效。
采样人员指的是负责采集生物样本的专业人员,例如医护人员。待采人员指的是提供生物样本的用户,例如患者等。采样人员佩戴的AR眼镜中包括摄像头,在采集生物样本时采样人员可以开启AR眼镜的摄像头,进行实时图像采集。AR眼镜可以从实时采集到的每张图像中识别人脸,并将包括人脸的图像进行保存。然后从保存的人脸图像识别出采样区域。不同的生物样本对应的采样区域不同,AR眼镜可以对人脸图像进行图像识别,确定人脸图像中的采样区域。图像识别可以通过各种算法,例如ResNet、inception等深度学习算法,本实施方式对此不作特殊限定。
采样设备指的是用于采集生物样本的设备,例如棉签、注射器等。采样人员可以利用采样设备采集采样区域内的生物样本,例如核酸样本等。AR眼镜通过摄像头录制采集过程的采样视频,然后从采样视频中识别出采样设备与采样区域的接触状态信息。接触状态信息可以包括用于指示采样设备与采样区域是否接触的信息,也可以包括采样设备与采样区域接触的时长、次数等信息。通过接触状态信息AR眼镜可以验证生物样本的采集过程是否有效,例如当接触状态信息满足预设要求时,确定采集过程有效。
通过对采集过程的接触状态信息进行验证,可以对采集过程起到监督作用,保证采集过程的规范、正确性,避免采集出错导致样本有误的情况,从而提高样本的有效性。
示例性的,本发明以采集咽拭子样本为例。咽拭子对应的采集区域包括咽后壁、扁桃体隐窝、侧壁等。因此获取待采人员的人脸图像,在识别到人脸图像中嘴巴处于张开状态的情况下,从嘴巴对应的区域识别采样区域。具体的,采集到人脸图像后先识别人脸图像中嘴巴是否处于张开状态,若人脸图像中嘴巴张开,则将嘴巴中咽后壁、扁桃体隐窝、侧壁部分对应的区域作为采样区域。
AR眼镜在识别出人脸图像中的采样区域后,可以基于增强现实功能,在采样区域对应的位置处显示区域标识,使得采样人员通过AR眼镜可以看到真实人脸对应位置处虚拟的区域标识。该区域标识用于指示采样设备采集生物样本的区域。区域标识可以包括任意形状的图形、字符等,例如在采集区域处用圆形、矩形进行标识等,本实施方式对此不作特殊限定。具体的AR眼镜可以根据拍摄的人脸图像构建人脸三维模型,然后确定采集区域在该三维模型中的位置坐标,在该位置坐标处显示区域标识。例如,将红色高亮矩形框作为区域标识,显示在采集区域对应的位置处,为采样人员指示咽拭子采样的区域。通过区域标识可以提示采样的区域,便于采样人员进行生物样本采集。
在识别到人脸图像中嘴巴处于张开状态的情况下,AR眼镜可以开始录制一定时长的采样视频,例如5秒、6秒等。或者,在识别到人脸图像中嘴巴处于张开状态的情况下开始录制,在识别到采样设备离开嘴巴时结束录制,得到记录生物样本采集过程的采样视频。在识别到人脸图像中嘴巴张开时再开始录制视频,可以减少需要处理的视频帧,避免冗余视频帧对验证结果产生影响,提高验证的准确性和效率。
待采人员进行生物样本采样时需要先登记信息。示例性的,根据预先获得的登记信息,可以对待采人员的身份进行验证,验证提供生物样本的待采人员是否是预先登记身份信息的人员,从而避免恶意顶替他人采样的情况,保证后续样本检测结果的准确性。AR眼镜可以将采样管与待采人员的登记信息进行关联。采样管为保存生物样本的设备。具体的,AR眼镜可以获取采样管的标识信息,再获取登记人员的登记信息,然后将标识信息与登记信息进行关联。其中,采样管的标识信息可以包括二维码,或者其他标识码;登记信息可以包括例如一码通、身份证号码、手机号码等等。AR眼镜获得采样管的标识信息以及登记人员的登记信息后,可以将登记信息与标识信息进行关联,并且,与同一标识信息关联的登记信息不超过预设数量。预设数量可以包括5、10等各种数值。例如,预设数量为10时,一个采样管可以与10个待采人员的登记信息进行关联,即,一个采样管中可以保存十个待采人员的生物样本等。
待采人员进行信息登记后,采样人员可以开始采集待采人员的生物样本。AR眼镜识别到人脸图像后,可以获取当前与采样管关联的登记信息,根据登记信息获取登记人员预先录入的登记人脸,然后将实时采集到的人脸图像与登记人脸进行对比,根据对比结果确定采样过程是否有效。登记人员可以预先将自己的登记信息与人脸图像上传至云端服务器。当AR眼镜获取到与采样管关联的登记信息后,AR眼镜可以将当前关联的登记信息上传至云端服务器,从云端服务器获得与登记信息对应的人脸图像,作为登记人脸。
AR眼镜获得登记人脸后可以将其与实时采集到的人脸图像进行对比,确定当前采集的人脸图像和与采样管关联的登记信息对应的登记人脸中是否有匹配,如果登记人脸中存在与人脸图像匹配的图像,则可以确定对比结果为采样过程有效。举例来说,若当前与采样管关联的登记信息有5条,则AR眼镜可以从云端服务器分别获取5条登记信息对应的5个登记人脸。然后将当前采集到的人脸图像分别与5个登记人脸进行对比,若查找到相匹配的人脸,则对比结果为人脸图像对应的采样过程有效。若该5个登记人脸均不予人脸图像匹配,则对比结果可以为人脸图像对应的采样过程无效。
示例性的,AR眼镜可以将采集的人脸图像也上传到云端服务器,由云端服务器来执行人脸对比的过程,然后将对比结果返回给AR眼镜。人脸对比过程在云端服务器执行,可以降低AR眼镜的性能要求,增大AR眼镜的应用场景。
在采样管关联的登记信息为多个的情况下,AR眼镜可以按照多个登记信息的顺序确定人脸图像对应的目标登记信息。然后将人脸图像与目标登记信息对应的登记人脸进行对比,得到对比结果。具体的,眼镜采集到人脸图像时可以确定当前采集的人脸图像的顺序,然后将相同顺序的登记信息作为目标登记信息。例如,依次与采样管相关联的为登记信息A、登记信息B、登记信息C,则AR眼镜采集到的第一个人脸图像的目标登记信息为A。
示例性的实施方式中,在于采样管关联的登记信息为多个的情况下,AR眼镜也可以确定多个登记信息对应的多个登记人脸中没有匹配过的目标人脸,然后将人脸图像与该目标人脸进行对比。如果登记人脸与某一人脸图像匹配,则可以对该登记人脸添加标记,则没有标记过的登记人脸可以作为目标人脸。例如,采样管关联的登记信息对应的登记人脸包括人脸1、人脸2、人脸3。该三个登记人脸均不包括标记时,则这三个登记人脸均可以作为目标人脸。将这三个登记人脸分别与当前获取的人脸图像进行对比,若当前的人脸图像与人脸1匹配,则对人脸1添加标记。下一次当AR眼镜再次获得另一个待采人员a的人脸图像,可以将没有标记的人脸2、人脸3与该待采人员a的人脸图像进行对比,确定对比结果。
示例性的实施方式中,接触状态信息可以包括采样设备与采样区域接触的接触时长和接触次数。采样视频中包括多个视频帧,识别采样视频中采样设备与采样区域相接触的视频帧,根据这些视频帧确定采样设备与采样区域接触的接触次数和接触时长。通过接触次数和/或接触时长验证采样过程是否有效,能够确保采样设备与采样区域充分有效接触,从而监督采样过程,提高样本的有效性。
具体的,AR眼镜可以通过双目视觉系统检测采样视频中每帧的深度信息,然后基于深度信息确定采样设备与采样区域是否接触。如果视频帧的深度信息中采样设备与采样区域的深度相同,则该视频帧对应的时刻,采样设备与采样区域接触。统计采样设备和采样区域接触的视频帧对应的时长,得到接触时长。然后验证接触时长是否满足采样时长阈值,若接触时长满足采样时长阈值时,则可以确认采样过程有效。其中,采样时长阈值可以根据实际情况设置,例如采样时长阈值可以包括3秒、5秒等,本实施方式对此不作任何限定。如果验证接触时长不满足采样时长阈值,那么采样过程无效。在采样过程无效的情况下,采样人员可以重新对待采人员进行采样。
示例性的,筛选出采样视频中采样设备和采样区域接触的连续视频帧,确定连续的片段数量,可以得到接触次数。举例来说,例如采样视频中第3帧至第10帧、第15帧至第25帧以及第30帧至35帧三个片段为采样设备与采样区域接触的连续帧,则接触次数为3次。然后验证接触次数是否满足采样次数阈值,在接触次数满足采样次数阈值的情况下,可以确认采样过程有效。其中,采样次数阈值根据实际需要确定,例如采样次数阈值可以包括2次、3次等,本实施方式对此不作特殊限定。
在示例性的实施方式中,同时验证接触次数与接触时长均满足对应的要求的情况下,可以确认采样过程有效。具体的,若接触次数满足采样次数阈值,并且接触时长满足采样时长阈值,则采样过程有效。通过接触时长和接触次数同时确定采样过程是否有效,可以避免验证出错的问题,提高采样过程验证的准确性。
在验证采样过程有效的情况下,AR眼镜通过其镜片可以显示用于指示采样过程有效的第一标识。验证采样过程无效的情况下,AR眼镜可以显示用于指示采样过程无效的第二标识。可以理解的是,第一标识与第二标识是AR眼镜在真实场景中添加的虚拟对象。如图2所示,采样人员通过AR眼镜202可以看到虚拟的第二标识201。通过显示标识可以提示采样人员采样过程的验证结果,便于采样人员及时了解到验证结果,从而及时对无效的样本重新采样,保证样本的有效性。示例性的,第一标识可以为“成功(pass)”、“通过”等文字标识,也可以包括数字、形状、图案等标识。第二标识可以包括“失败(fail)”、“无效”等文字标识,也可以包括数字、形状、图案等标识。本实施方式对第一标识、第二标识的具体表现形式不作特殊限定。
本实施方式提供的技术方案中,一方面可以通过人脸图像验证待采人员是否与预先登记的人员一致,可以避免冒名顶替的情况,保证采样过程的正确性。另一方面,通过采样过程的采样视频可以监督采样人员的采样过程,避免采样不规范而导致采集到的生物样本无效的情况,最大程度的避免了采样异常情况,保证采样过程的有效性。
下面对本发明提供的采样过程验证装置进行描述,下文描述的采样过程验证装置与上文描述的采样过程验证方法可相互对应参照。
该采样过程验证装置可以应用于采样人员所佩戴的具有增强现实功能的眼镜。图3示出了该采样过程验证装置的结构示意图。如图3所示,该采样过程验证装置20可以包括:图像识别模块21,用于获取待采人员的人脸图像,并识别所述人脸图像中的采样区域;视频采集模块22,用于获取采样设备对所述采样区域内生物样本采集过程的采样视频;信息验证模块23,用于基于所述采样视频,确定所述采样设备与所述采样区域的接触状态信息,基于所述接触状态信息验证所述采样设备的采样过程是否有效。
在本发明的一种示例性实施方式中,该装置20还包括:显示模块,用于基于所述增强现实功能,显示的所述人脸图像上增加显示所述采样区域的区域标识;所述区域标识用于指示采样设备采集生物样本的区域。
在本发明的一种示例性实施方式中,所述接触状态信息包括接触次数和/或接触时长;所述信息验证模块23具体用于:验证所述接触次数满足采样次数阈值,和/或验证所述接触时长满足采样时长阈值的情况下,确定所述采样设备的采样过程有效。
在本发明的一种示例性实施方式中,该装置20还包括:第一显示模块,用于在所述采样过程有效的情况下,显示用于指示采样过程有效的第一标识;第二显示模块,用于在所述采样过程无效的情况下,显示用于指示采样过程无效的第二标识。
在本发明的一种示例性实施方式中,图像识别模块21具体用于:获取待采人员的人脸图像,在识别到所述人脸图像中嘴巴处于张开状态的情况下,从所述嘴巴对应的区域识别所述采样区域。
在本发明的一种示例性实施方式中,视频采集模块22具体用于:在识别到所述人脸图像中嘴巴处于张开状态的情况下,采集所述采样设备对所述采样区域内生物样本采集过程的采样视频。
在本发明的一种示例性实施方式中,该装置20还包括:关联模块,用于获取采样管关联的登记信息,所述采样管用于保存采样设备采集到的生物样本;人脸对比模块,用于获取所述登记信息对应的登记人脸,将所述人脸图像与所述登记人脸进行对比,根据对比结果确定所述采样设备的采样过程是否有效。
在本发明的一种示例性实施方式中,上述人脸对比模块具体可用于:将所述登记信息与所述人脸图像上传至服务端,获取所述服务端返回的对比结果。
在本发明的一种示例性实施方式中,该装置20还包括:标识获取模块,用于获取所述采样管的标识信息,以及获取登记人员的登记信息;标识关联模块,用于将所述标识信息与所述登记信息进行关联,且与同一标识信息关联的登记信息不超过预设数量。
在本发明的一种示例性实施方式中,上述人脸对比模块具体用于:在所述采样管关联的登记信息为多个的情况下,按照多个所述登记信息的顺序确定所述人脸图像对应的目标登记信息;将所述人脸图像与所述目标登记信息对应的登记人脸进行对比。
在本发明的一种示例性实施方式中,上述人脸对比模块具体用于:在所述采样管关联的登记信息为多个的情况下,确定多个登记信息对应的多个登记人脸中没有匹配过的目标人脸;将所述人脸图像与所述目标人脸进行对比。
本申请实施例提供的视频处理装置能够实现图1中的方法实施例实现的各个过程,为避免重复,这里不再赘述。
本申请实施例还提供一种AR眼镜,如图4所示,该AR眼镜可以包括:处理器(processor)310、通信接口(Communications Interface)320、存储器(memory)330和通信总线340,其中,处理器310,通信接口320,存储器330通过通信总线340完成相互间的通信。处理器310可以调用存储器330中的逻辑指令,以执行采样过程验证方法,该方法包括:获取待采人员的人脸图像,并识别所述人脸图像中的采样区域;获取采样设备对所述采样区域内生物样本采集过程的采样视频;基于所述采样视频,确定所述采样设备与所述采样区域的接触状态信息,基于所述接触状态信息验证所述采样设备的采样过程是否有效。
根据本发明提供的一种实施方式,处理器310还可以执行:基于增强现实功能,显示的所述人脸图像上增加显示所述采样区域的区域标识;所述区域标识用于指示采样设备采集生物样本的区域。
根据本发明提供的一种实施方式,所述接触状态信息包括接触次数和/或接触时长;处理器310可以执行:验证所述接触次数满足采样次数阈值,和/或验证所述接触时长满足采样时长阈值的情况下,确定所述采样设备的采样过程有效。
根据本发明提供的一种实施方式,处理器310还可以执行:在所述采样过程有效的情况下,显示用于指示采样过程有效的第一标识;在所述采样过程无效的情况下,显示用于指示采样过程无效的第二标识。
根据本发明提供的一种实施方式,处理器310可以执行:获取待采人员的人脸图像,在识别到所述人脸图像中嘴巴处于张开状态的情况下,从所述嘴巴对应的区域识别所述采样区域。
根据本发明提供的一种实施方式,处理器310可以执行:在识别到所述人脸图像中嘴巴处于张开状态的情况下,采集所述采样设备对所述采样区域内生物样本采集过程的采样视频。
根据本发明提供的一种实施方式,处理器310还可以执行:获取采样管关联的登记信息,所述采样管用于保存采样设备采集到的生物样本;获取所述登记信息对应的登记人脸,将所述人脸图像与所述登记人脸进行对比,根据对比结果确定所述采样设备的采样过程是否有效。
根据本发明提供的一种实施方式,处理器310可以执行:将所述登记信息与所述人脸图像上传至服务端,获取所述服务端返回的对比结果。
根据本发明提供的一种实施方式,处理器310还可以执行:获取所述采样管的标识信息,以及获取登记人员的登记信息;将所述标识信息与所述登记信息进行关联,且与同一标识信息关联的登记信息不超过预设数量。
根据本发明提供的一种实施方式,处理器310可以执行:在所述采样管关联的登记信息为多个的情况下,按照多个所述登记信息的顺序确定所述人脸图像对应的目标登记信息;将所述人脸图像与所述目标登记信息对应的登记人脸进行对比。
根据本发明提供的一种实施方式,处理器310可以执行:在所述采样管关联的登记信息为多个的情况下,确定多个登记信息对应的多个登记人脸中没有匹配过的目标人脸;将所述人脸图像与所述目标人脸进行对比。
此外,上述的存储器330中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种计算机程序产品,所述计算机程序产品包括计算机程序,计算机程序可存储在非暂态计算机可读存储介质上,所述计算机程序被处理器执行时,计算机能够执行上述各方法所提供的采样过程验证方法,该方法包括:获取待采人员的人脸图像,并识别所述人脸图像中的采样区域;获取采样设备对所述采样区域内生物样本采集过程的采样视频;基于所述采样视频,确定所述采样设备与所述采样区域的接触状态信息,基于所述接触状态信息验证所述采样设备的采样过程是否有效。
根据本发明提供的一种实施方式,所述计算机程序被处理器执行时,计算机能够执行:基于增强现实功能,显示的所述人脸图像上增加显示所述采样区域的区域标识;所述区域标识用于指示采样设备采集生物样本的区域。
根据本发明提供的一种实施方式,所述接触状态信息包括接触次数和/或接触时长;所述计算机程序被处理器执行时,计算机能够执行:验证所述接触次数满足采样次数阈值,和/或验证所述接触时长满足采样时长阈值的情况下,确定所述采样设备的采样过程有效。
根据本发明提供的一种实施方式,所述计算机程序被处理器执行时,计算机能够执行:在所述采样过程有效的情况下,显示用于指示采样过程有效的第一标识;在所述采样过程无效的情况下,显示用于指示采样过程无效的第二标识。
根据本发明提供的一种实施方式,所述计算机程序被处理器执行时,计算机能够执行:获取待采人员的人脸图像,在识别到所述人脸图像中嘴巴处于张开状态的情况下,从所述嘴巴对应的区域识别所述采样区域。
根据本发明提供的一种实施方式,所述计算机程序被处理器执行时,计算机能够执行:在识别到所述人脸图像中嘴巴处于张开状态的情况下,采集所述采样设备对所述采样区域内生物样本采集过程的采样视频。
根据本发明提供的一种实施方式,所述计算机程序被处理器执行时,计算机能够执行:获取采样管关联的登记信息,所述采样管用于保存采样设备采集到的生物样本;获取所述登记信息对应的登记人脸,将所述人脸图像与所述登记人脸进行对比,根据对比结果确定所述采样设备的采样过程是否有效。
根据本发明提供的一种实施方式,所述计算机程序被处理器执行时,计算机能够执行:将所述登记信息与所述人脸图像上传至服务端,获取所述服务端返回的对比结果。
根据本发明提供的一种实施方式,所述计算机程序被处理器执行时,计算机能够执行:获取所述采样管的标识信息,以及获取登记人员的登记信息;将所述标识信息与所述登记信息进行关联,且与同一标识信息关联的登记信息不超过预设数量。
根据本发明提供的一种实施方式,所述计算机程序被处理器执行时,计算机能够执行:在所述采样管关联的登记信息为多个的情况下,按照多个所述登记信息的顺序确定所述人脸图像对应的目标登记信息;将所述人脸图像与所述目标登记信息对应的登记人脸进行对比。
根据本发明提供的一种实施方式,所述计算机程序被处理器执行时,计算机能够执行:在所述采样管关联的登记信息为多个的情况下,确定多个登记信息对应的多个登记人脸中没有匹配过的目标人脸;将所述人脸图像与所述目标人脸进行对比。
又一方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各方法提供的采样过程验证方法,该方法包括:获取待采人员的人脸图像,并识别所述人脸图像中的采样区域;获取采样设备对所述采样区域内生物样本采集过程的采样视频;基于所述采样视频,确定所述采样设备与所述采样区域的接触状态信息,基于所述接触状态信息验证所述采样设备的采样过程是否有效。
根据本发明提供的一种实施方式,该计算机程序被处理器执行时实现:基于增强现实功能,显示的所述人脸图像上增加显示所述采样区域的区域标识;所述区域标识用于指示采样设备采集生物样本的区域。
根据本发明提供的一种实施方式,所述接触状态信息包括接触次数和/或接触时长;该计算机程序被处理器执行时实现:验证所述接触次数满足采样次数阈值,和/或验证所述接触时长满足采样时长阈值的情况下,确定所述采样设备的采样过程有效。
根据本发明提供的一种实施方式,该计算机程序被处理器执行时实现:在所述采样过程有效的情况下,显示用于指示采样过程有效的第一标识;在所述采样过程无效的情况下,显示用于指示采样过程无效的第二标识。
根据本发明提供的一种实施方式,该计算机程序被处理器执行时实现:获取待采人员的人脸图像,在识别到所述人脸图像中嘴巴处于张开状态的情况下,从所述嘴巴对应的区域识别所述采样区域。
根据本发明提供的一种实施方式,该计算机程序被处理器执行时实现:在识别到所述人脸图像中嘴巴处于张开状态的情况下,采集所述采样设备对所述采样区域内生物样本采集过程的采样视频。
根据本发明提供的一种实施方式,该计算机程序被处理器执行时实现:获取采样管关联的登记信息,所述采样管用于保存采样设备采集到的生物样本;获取所述登记信息对应的登记人脸,将所述人脸图像与所述登记人脸进行对比,根据对比结果确定所述采样设备的采样过程是否有效。
根据本发明提供的一种实施方式,该计算机程序被处理器执行时实现:将所述登记信息与所述人脸图像上传至服务端,获取所述服务端返回的对比结果。
根据本发明提供的一种实施方式,该计算机程序被处理器执行时实现:获取所述采样管的标识信息,以及获取登记人员的登记信息;将所述标识信息与所述登记信息进行关联,且与同一标识信息关联的登记信息不超过预设数量。
根据本发明提供的一种实施方式,该计算机程序被处理器执行时实现:在所述采样管关联的登记信息为多个的情况下,按照多个所述登记信息的顺序确定所述人脸图像对应的目标登记信息;将所述人脸图像与所述目标登记信息对应的登记人脸进行对比。
根据本发明提供的一种实施方式,该计算机程序被处理器执行时实现:在所述采样管关联的登记信息为多个的情况下,确定多个登记信息对应的多个登记人脸中没有匹配过的目标人脸;将所述人脸图像与所述目标人脸进行对比。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (14)
1.一种采样过程验证方法,其特征在于,应用于增强现实功能眼镜,所述方法包括:
获取待采人员的人脸图像,并识别所述人脸图像中的采样区域;
获取采样设备对所述采样区域内生物样本采集过程的采样视频;
基于所述采样视频,确定所述采样设备与所述采样区域的接触状态信息,基于所述接触状态信息验证所述采样设备的采样过程是否有效。
2.根据权利要求1所述的采样过程验证方法,其特征在于,所述接触状态信息包括接触次数和/或接触时长;
所述基于所述接触状态信息验证所述采样设备的采样过程是否有效,包括:
验证所述接触次数满足采样次数阈值,和/或验证所述接触时长满足采样时长阈值的情况下,确定所述采样设备的采样过程有效。
3.根据权利要求1所述的采样过程验证方法,其特征在于,还包括:
基于所述增强现实功能,显示的所述人脸图像上增加显示所述采样区域的区域标识,所述区域标识用于指示采样设备采集生物样本的区域。
4.根据权利要求1所述的采样过程验证方法,其特征在于,所述基于所述接触状态信息验证所述采样设备的采样过程是否有效之后,还包括:
在所述采样过程有效的情况下,显示用于指示采样过程有效的第一标识;
在所述采样过程无效的情况下,显示用于指示采样过程无效的第二标识。
5.根据权利要求1所述的采样过程验证方法,其特征在于,所述获取待采人员的人脸图像,并识别所述人脸图像中的采样区域,包括:
获取待采人员的人脸图像,在识别到所述人脸图像中嘴巴处于张开状态的情况下,从所述嘴巴对应的区域识别所述采样区域。
6.根据权利要求5所述的采样过程验证方法,其特征在于,所述获取所述采样设备对所述采样区域内生物样本采集过程的采样视频,包括:
在识别到所述人脸图像中嘴巴处于张开状态的情况下,采集所述采样设备对所述采样区域内生物样本采集过程的采样视频。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述获取待采人员的人脸图像之后,还包括:
获取采样管关联的登记信息,所述采样管用于保存采样设备采集到的生物样本;
获取所述登记信息对应的登记人脸,将所述人脸图像与所述登记人脸进行对比,根据对比结果确定所述采样设备的采样过程是否有效。
8.根据权利要求7所述的方法,其特征在于,所述获取所述登记信息对应的登记人脸,将所述人脸图像与所述登记人脸进行对比,包括:
将所述登记信息与所述人脸图像上传至服务端,获取所述服务端返回的对比结果。
9.根据权利要求7所述的方法,其特征在于,所述获取采样管关联的登记信息之前,还包括:
获取所述采样管的标识信息,以及获取登记人员的登记信息;
将所述标识信息与所述登记信息进行关联,且与同一标识信息关联的登记信息不超过预设数量。
10.根据权利要求7所述方法,其特征在于,所述将所述人脸图像与所述登记人脸进行对比,包括:
在所述采样管关联的登记信息为多个的情况下,按照多个所述登记信息的顺序确定所述人脸图像对应的目标登记信息;
将所述人脸图像与所述目标登记信息对应的登记人脸进行对比。
11.根据权利要求7所述的方法,其特征在于,所述将所述人脸图像与所述登记人脸进行对比,包括:
在所述采样管关联的登记信息为多个的情况下,确定多个登记信息对应的多个登记人脸中没有匹配过的目标人脸;
将所述人脸图像与所述目标人脸进行对比。
12.一种采样过程验证装置,其特征在于,包括:
图像识别模块,用于获取待采人员的人脸图像,并识别所述人脸图像中的采样区域;
视频采集模块,用于获取采样设备对所述采样区域内生物样本采集过程的采样视频;
信息验证模块,用于基于所述采样视频,确定所述采样设备与所述采样区域的接触状态信息,基于所述接触状态信息验证所述采样设备的采样过程是否有效。
13.一种增强现实功能眼镜,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至11任一项所述采样过程验证方法。
14.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至11任一项所述采样过程验证方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210970546.4A CN115457422A (zh) | 2022-08-12 | 2022-08-12 | 采样过程验证方法、装置和增强现实功能眼镜 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210970546.4A CN115457422A (zh) | 2022-08-12 | 2022-08-12 | 采样过程验证方法、装置和增强现实功能眼镜 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115457422A true CN115457422A (zh) | 2022-12-09 |
Family
ID=84299513
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210970546.4A Pending CN115457422A (zh) | 2022-08-12 | 2022-08-12 | 采样过程验证方法、装置和增强现实功能眼镜 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115457422A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116109982A (zh) * | 2023-02-16 | 2023-05-12 | 哈尔滨星云智造科技有限公司 | 一种基于人工智能的生物样本采集有效性检验方法 |
-
2022
- 2022-08-12 CN CN202210970546.4A patent/CN115457422A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116109982A (zh) * | 2023-02-16 | 2023-05-12 | 哈尔滨星云智造科技有限公司 | 一种基于人工智能的生物样本采集有效性检验方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102945366B (zh) | 一种人脸识别的方法及装置 | |
Nomir et al. | A system for human identification from X-ray dental radiographs | |
US8065529B2 (en) | Methods for using a biometric parameter in the identification of persons | |
CN110807117B (zh) | 一种用户关系预测方法及装置、计算机可读存储介质 | |
CN108520512B (zh) | 一种测量眼部参数的方法及装置 | |
US20130208952A1 (en) | Method and Apparatus for Improving Accuracy of Biometric Identification in Specimen Collection Applications | |
CN102542242B (zh) | 非接触式采集图像的生物特征区域定位方法和装置 | |
WO2016115835A1 (zh) | 人体特征数据的处理方法及装置 | |
CN111524580A (zh) | 一种基于神经网络的病毒筛查与防疫系统及方法 | |
CN113823376B (zh) | 智能服药提醒方法、装置、设备及存储介质 | |
CN113130058A (zh) | 手部卫生管理系统、方法、计算机设备及可读存储介质 | |
CN115457422A (zh) | 采样过程验证方法、装置和增强现实功能眼镜 | |
CN112991343B (zh) | 眼底图像黄斑区域的识别检测方法和装置及设备 | |
CN114897655B (zh) | 基于视觉的防疫控制方法及装置、存储介质、电子设备 | |
CN111863252A (zh) | 健康监测方法、系统、计算机设备及存储介质 | |
CN113436711B (zh) | 一种基于大数据平台的西医问诊系统 | |
CN110175522A (zh) | 考勤方法、系统及相关产品 | |
CN112716468A (zh) | 基于三维卷积网络的非接触心率测量方法及装置 | |
CN111402987B (zh) | 基于可见光视频的用药提醒方法、装置、设备及存储介质 | |
CN115188490A (zh) | 一种基于大数据分析的疫情防控行踪溯源智能管理平台 | |
CN113782146B (zh) | 基于人工智能的全科用药推荐方法、装置、设备及介质 | |
CN111860100B (zh) | 行人数量的确定方法、装置、电子设备及可读存储介质 | |
CN112766230A (zh) | 一种视频流人员在线时长估计方法及对应系统 | |
CN112989083A (zh) | 人员身份分析方法、装置、设备及存储介质 | |
TWI847574B (zh) | 生命體徵監測方法、系統、電子設備及電腦可讀儲存介質 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |