CN115375572A - 一种视频面签的面部补全方法、装置、系统及存储介质 - Google Patents
一种视频面签的面部补全方法、装置、系统及存储介质 Download PDFInfo
- Publication number
- CN115375572A CN115375572A CN202211004739.0A CN202211004739A CN115375572A CN 115375572 A CN115375572 A CN 115375572A CN 202211004739 A CN202211004739 A CN 202211004739A CN 115375572 A CN115375572 A CN 115375572A
- Authority
- CN
- China
- Prior art keywords
- face
- video
- recording file
- user
- screen recording
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 58
- 230000001815 facial effect Effects 0.000 claims abstract description 87
- 238000012545 processing Methods 0.000 claims abstract description 43
- 238000012937 correction Methods 0.000 claims description 17
- 239000000126 substance Substances 0.000 claims description 2
- 230000001502 supplementing effect Effects 0.000 claims 1
- 230000006854 communication Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000000903 blocking effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000000295 complement effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 238000002372 labelling Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 208000006440 Open Bite Diseases 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/752—Contour matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种视频面签的面部补全方法、装置、系统及存储介质，方法包括：展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，拍摄指引用于引导用户调整面部位置和角度；当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件；根据标准面部图像对原始录屏文件中与时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件。通过采集用户多角度下的标准面部图像，在用户视频面签过程中存在面部遮挡时，可基于多角度的标准面部图像自动对原始录屏文件进行面部补全处理，使得用户无需为偶然的面部遮挡而重新补录，提高视频面签效率，避免重复面签给用户带来不便。
Description
技术领域
本发明涉及图像处理技术领域，尤其涉及一种视频面签的面部补全方法、装置、系统及存储介质。
背景技术
远程视频面签即以音视频通话的方式，由后台坐席人员对用户身份核实、业务事项核对、资料签署、场景见证等进行在线面签操作的全新模式，目前在金融科技领域被广泛应用于身份认证、理财购买、客服咨询、保险理赔等场景中。
然而，在面签过程中，用户的面部可能会在无意间被遮挡而坐席没有及时发现提醒，此时会将不合格的录屏文件上传审批平台，导致视频质检不通过而需重新补录，降低视频面签的效率也为用户的业务办理过程带来不便。
发明内容
鉴于上述现有技术的不足，本发明的目的在于提供一种可应用于金融科技或其它相关领域的视频面签的面部补全方法、装置、系统及存储介质，旨在提高视频面签的效率，避免因面部遮挡导致的补录为用户带来不便。
本发明的技术方案如下：
一种视频面签的面部补全方法，包括：
展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，所述拍摄指引用于引导用户调整面部位置和角度；
当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件；
根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件。
在一个实施例中，所述展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，包括：
展示一个指引角度的指引轮廓，确认用户的实时面部图像是否与所述指引轮廓相匹配；
若匹配，则采集所述实时面部图像作为当前角度下的标准面部图像，若不匹配，则输出调整提示，以此类推，完成所有指引角度下的标准面部图像的采集。
在一个实施例中，所述当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件，包括：
当开启视频面签后，实时识别用户的面部是否存在遮挡；
每识别到一次面部存在遮挡时，均在预先创建的存储空间中记录相应的视频时间节点；
在视频面签结束时输出原始录屏文件。
在一个实施例中，所述根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件，包括：
调取所述存储空间中的视频时间节点；
根据所述视频时间节点在所述原始录屏文件中提取相应的遮挡视频帧；
根据所述标准面部图像对所述遮挡视频帧进行面部补全处理与视频帧替换，生成修正录屏文件。
在一个实施例中，所述根据所述标准面部图像对所述遮挡视频帧进行面部补全处理与视频帧替换，生成修正录屏文件，包括：
检测所述遮挡视频帧中的面部角度；
根据所述面部角度在所述标准面部图像中确认目标面部图像，所述目标面部图像的指引角度与所述面部角度的差值小于预设阈值；
根据所述目标面部图像对所述遮挡视频帧进行面部补全处理，得到无遮挡视频帧；
将所述遮挡视频帧对应替换为所述无遮挡视频帧后，生成修正录屏文件。
在一个实施例中，所述根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件之后，所述方法还包括：
将所述修正录屏文件上传至审批平台。
在一个实施例中，所述根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件之前，所述方法还包括：
确认所述存储空间中是否存在数据，若是，则进行面部补全处理，否则将所述原始录屏文件上传至审批平台。
一种视频面签的面部补全装置，包括：
展示采集模块，用于展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，所述拍摄指引用于引导用户调整面部位置和角度；
识别记录模块，用于当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件；
补全修正模块，用于根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件。
一种视频面签的面部补全系统，所述系统包括至少一个处理器；以及，
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述视频面签的面部补全方法。
一种非易失性计算机可读存储介质，所述非易失性计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行时，可使得所述一个或多个处理器执行上述的视频面签的面部补全方法。
有益效果：本发明公开了一种视频面签的面部补全方法、装置、系统及存储介质，相比于现有技术，本发明实施例通过采集用户多角度下的标准面部图像，在用户视频面签过程中存在面部遮挡时，可基于多角度的标准面部图像自动对原始录屏文件进行面部补全处理，使得用户无需为偶然的面部遮挡而重新补录，提高视频面签效率，避免重复面签给用户带来不便。
附图说明
下面将结合附图及实施例对本发明作进一步说明，附图中：
图1为本发明实施例提供的视频面签的面部补全方法的一个流程图；
图2为本发明实施例提供的视频面签的面部补全方法中步骤S100的一个流程图；
图3为本发明实施例提供的视频面签的面部补全方法中步骤S200的一个流程图；
图4为本发明实施例提供的视频面签的面部补全方法中步骤S300的一个流程图；
图5为本发明实施例提供的视频面签的面部补全方法中步骤S303的一个流程图；
图6为本发明实施例提供的视频面签的面部补全装置的功能模块示意图；
图7为本发明实施例提供的视频面签的面部补全系统的硬件结构示意图。
具体实施方式
为使本发明的目的、技术方案及效果更加清楚、明确，以下对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。以下结合附图对本发明实施例进行介绍。
请参阅图1，图1为本发明提供的视频面签的面部补全方法一个实施例的流程图。本实施例提供的面部补全方法适用于对视频面签中存在的面部遮挡进行自动补全的情况，具体应用于包括终端设备、网络和服务器构成的系统，其中网络为用于在终端设备和服务器直接提供通信链路的介质，其可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等；终端设备上的操作系统可以包括手持设备操作系统(iPhone operatingsystem，iOS系统)、安卓系统或其他操作系统，终端设备通过网络连接到服务器以实现交互，从而进行接收或发送数据等操作，具体可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、便携式计算机和台式服务器等等。如图1所示，该方法具体包括如下步骤：
S100、展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，所述拍摄指引用于引导用户调整面部位置和角度。
本实施例中，在用户进行视频面签之前，先在终端界面上展示若干个指引角度的拍摄指引，以指导用户调整其面部位置和角度，并通过摄像头采集用户在各个指引角度下的标准面部图像，得到不同角度下的完整的面部数据，作为面部自动补全的基准，以便实现准确的面部补全处理。具体可以在用户初始登录银行APP即采集标准面部图像备用，当然也可以在用户需要进行视频面签时指引用户进行标准面部图像的采集，本实施例对此不作限定。
S200、当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件。
当用户开启视频面签后，与后台坐席人员进行视频通话的过程中则实时对面部遮挡进行识别，在识别到用户的面部存在遮挡时记录下遮挡时刻的时间信息，以便后续面部补全处理时能快速高效对遮挡时刻进行定位，当视频面签结束时则输出原始录屏文件，即原始录屏文件中可能存在面部被遮挡的画面，需结合记录下的时间信息进行自动面部补全处理以避免视频质检不通过。
S300、根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件。
若原始录屏文件中存在面部被遮挡的情况，则基于预先采集的多角度下的标准面部图像，根据记录下的时间信息对原始录屏文件中相应的视频帧图像进行面部补全处理，即与时间信息对应的视频帧图像为面部被遮挡的图像，对原始录屏文件中存在面部遮挡的视频帧图像进行自动的面部补全处理，具体可调用现有的面部补全算法实现，本实施例对此不作限定，进而生成修正录屏文件，该修正录屏文件中将不会存在面部被遮挡的情况，使得用户无需为偶尔的面部遮挡进行面签补录，提高视频面签效率的同时也避免浪费用户时间。
在一个实施例中，步骤S300之后，方法还包括：
将所述修正录屏文件上传至审批平台。
本实施例中，将经过自动面部补全处理后的修正录屏文件上传至审批平台进行审批，避免因用户无意间的面部遮挡造成的视频审核不通过。
在一个实施例中，请参阅图2，其为本发明实施例提供的视频面签的面部补全方法中步骤S100的流程图，如图2所示，步骤S100包括：
S101、展示一个指引角度的指引轮廓，确认用户的实时面部图像是否与所述指引轮廓相匹配；
S102、若匹配，则采集所述实时面部图像作为当前角度下的标准面部图像，若不匹配，则输出调整提示，以此类推，完成所有指引角度下的标准面部图像的采集。
本实施例中，在进行标准面部图像的采集指引时，可通过在终端界面上展示相应的指引轮廓实现，即针对预设的多个指引角度，依次展示各个指引角度的指引轮廓，例如需用户正视摄像头时指引轮廓为圆形，需用户往左/右旋转90°时指引轮廓为左侧头部轮廓/右侧头部轮廓等等，以引导用户按当前展示的指引轮廓进行面部图像拍摄。
在进行采集时，展示一个指引角度的指引轮廓，同时检测当前摄像头拍摄到的用户的实时面部图像是否与该指引轮廓相匹配，可通过检测实时面部图像的边缘轮廓与指引轮廓之间的相似度，若相似度大于等于预设相似度则认为匹配，此时采集实时面部图像作为当前角度下的标准面部图像，并展示下一个指引角度的指引轮廓进行采集；若相似度小于预设相似度则认为不匹配，此时则输出相应的调整提示，例如提示用户靠近/远离摄像头、抬头/低头、向左/向右转头等等提示，以完成当前指引角度下的标准面部图像采集，实现每个用户的标准面部数据收集，以便为各个用户提供针对性的面部补全，提高面部补全的准确性。
在一个实施例中，请参阅图3，其为本发明实施例提供的视频面签的面部补全方法中步骤S200的流程图，如图3所示，步骤S200包括：
S201、当开启视频面签后，实时识别用户的面部是否存在遮挡；
S202、每识别到一次面部存在遮挡时，均在预先创建的存储空间中记录相应的视频时间节点；
S203、在视频面签结束时输出原始录屏文件。
本实施例中，在正式开始视频面签后，实时识别用户的面部是否存在遮挡，具体可通过现有的遮挡算法进行识别，本实施例对此不作限定，若识别到面部存在遮挡，则记录下相应的视频时间节点，具体预先创建以存储空间，例如声明一存储变量T，其数据类型为数组，以用于存储每次识别到面部遮挡的视频时间节点，例如一通通话过程中用户有N个视频帧是遮面状态，则T有N个值，在视频面签结束时输出原始录屏文件，同时T的数据也根据遮挡识别情况被更新存储，以准确对应原始录屏文件中遮面转头的视频帧图像。
在一个实施例中，步骤S300之前，方法还包括：
确认所述存储空间中是否存在数据，若是，则进行面部补全处理，否则将所述原始录屏文件上传至审批平台。
本实施例中，在视频面签结束后得到原始录屏文件时，则先确认存储空间中是否存在数据，即对变量T中的数据进行检索，若其中存在数据，说明原始录屏文件中存在对应为遮面状态的视频帧，此时启动面部补全流程，若不存在数据，说明原始录屏文件中不存在遮面状态的视频帧，可直接将其上传至审批平台进行审批，通过存储空间中的数据情况快速区分每次面签过程中的面部遮挡情况，提高面部补全处理效率。
在一个实施例中，请参阅图4，其为本发明实施例提供的视频面签的面部补全方法中步骤S300的流程图，如图4所示，步骤S300包括：
S301、调取所述存储空间中的视频时间节点；
S302、根据所述视频时间节点在所述原始录屏文件中提取相应的遮挡视频帧；
S303、根据所述标准面部图像对所述遮挡视频帧进行面部补全处理与视频帧替换，生成修正录屏文件。
本实施例中，在进行面部补全处理时，先调取存储空间中的视频时间节点，具体为依次遍历存储变量T，如果T中存在数据则说明存在遮面状态的视频帧图像，此时则根据T中的数据即视频时间节点，在原始录屏文件中提取相应的遮挡视频帧，根据预先采集的当前用户的标准面部图像对遮挡视频帧进行面部补全处理以及视频帧替换，即原始录屏文件进行帧数据修改，替换其中遮挡视频帧以生成修正录屏文件，实现对原始录屏文件中遮面状态的精准修正。
在一个实施例中，请参阅图5，其为本发明实施例提供的视频面签的面部补全方法中步骤S303的流程图，如图5所示，步骤S303包括：
S3031、检测所述遮挡视频帧中的面部角度；
S3032、根据所述面部角度在所述标准面部图像中确认目标面部图像，所述目标面部图像的指引角度与所述面部角度的差值小于预设阈值；
S3033、根据所述目标面部图像对所述遮挡视频帧进行面部补全处理，得到无遮挡视频帧；
S3034、将所述遮挡视频帧对应替换为所述无遮挡视频帧后，生成修正录屏文件。
本实施例中，当根据多个角度的标准面部图像对遮挡视频帧进行面部补全处理时，先检测遮挡视频帧中的面部角度，通过该面部角度，在用户的标准面部图像中寻找角度接近的目标面部图像，即目标面部图像对应的指引角度与该面部角度的差值小于预设阈值，与单一角度采集用户的面部图像进行补充处理相比，本实施例通过预先采集多个角度的标准面部图像，并选择角度接近的目标面部图像来对遮挡视频帧进行面部补全处理，可提高面部补全的精确度，得到还原度更高的无遮挡视频帧，将遮挡视频帧对应替换为无遮挡视频帧后即可生成相应的修正录屏文件，为银行远程视频面签场景提供了用户面部遮挡自动补全方案，有效节约了用户与坐席的视频面签时间，避免补录造成的时间成本增加。
进一步地，为规范面部补全的适用范围，可对面部遮挡的视频帧数量进行限制，例如在一次视频面签过程中，允许存在3次(可任意设置，此处以3次进行说明)的偶发性的面部遮挡，即一次视频面签结束后对应的存储空间中最多允许存在3条时间数据，若小于等于3条时间数据，则进行后续的面部自动补全处理，若大于3条时间数据说明发生了较多次的面部遮挡，为确保录屏文件的合规性可进一步输出复核提醒，避免因面部补全造成的合规漏洞。
更进一步地，在生成了修正录屏文件后，还将原始录屏文件上传至非结构化存储平台进行长久存储，以备相应的合规检测。
本发明另一实施例提供一种视频面签的面部补全装置，如图6所示，装置1包括：
展示采集模块11，用于展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，所述拍摄指引用于引导用户调整面部位置和角度；
识别记录模块12，用于当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件；
补全修正模块13，用于根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件。
展示采集模块11、识别记录模块12和补全修正模块13依次连接，本发明所称的模块是指能够完成特定功能的一系列计算机程序指令段，比程序更适合于描述视频面签的面部补全的执行过程，各模块的具体实施方式请参考上述对应的方法实施例，此处不再赘述。
在一个实施例中，所述展示采集模块11，包括：
展示单元，用于展示一个指引角度的指引轮廓，确认用户的实时面部图像是否与所述指引轮廓相匹配；
采集单元，用于若匹配，则采集所述实时面部图像作为当前角度下的标准面部图像，若不匹配，则输出调整提示，以此类推，完成所有指引角度下的标准面部图像的采集。
在一个实施例中，所述识别记录模块12，包括：
识别单元，用于当开启视频面签后，实时识别用户的面部是否存在遮挡；
记录单元，用于每识别到一次面部存在遮挡时，均在预先创建的存储空间中记录相应的视频时间节点；
输出单元，用于在视频面签结束时输出原始录屏文件。
在一个实施例中，所述补全修正模块13，包括：
调取单元，用于调取所述存储空间中的视频时间节点；
视频帧提取单元，用于根据所述视频时间节点在所述原始录屏文件中提取相应的遮挡视频帧；
补全替换单元，用于根据所述标准面部图像对所述遮挡视频帧进行面部补全处理与视频帧替换，生成修正录屏文件。
在一个实施例中，所述补全替换单元，包括：
检测子单元，用于检测所述遮挡视频帧中的面部角度；
确认子单元，用于根据所述面部角度在所述标准面部图像中确认目标面部图像，所述目标面部图像的指引角度与所述面部角度的差值小于预设阈值；
补全子单元，用于根据所述目标面部图像对所述遮挡视频帧进行面部补全处理，得到无遮挡视频帧；
替换子单元，用于将所述遮挡视频帧对应替换为所述无遮挡视频帧后，生成修正录屏文件。
在一个实施例中，所述装置1还包括：
上传模块，用于将所述修正录屏文件上传至审批平台。
在一个实施例中，所述装置1还包括：
数据确认模块，用于确认所述存储空间中是否存在数据，若是，则进行面部补全处理，否则将所述原始录屏文件上传至审批平台。
本发明另一实施例提供一种视频面签的面部补全系统，如图7所示，系统10包括：
一个或多个处理器110以及存储器120，图7中以一个处理器110为例进行介绍，处理器110和存储器120可以通过总线或者其他方式连接，图7中以通过总线连接为例。
处理器110用于完成系统10的各种控制逻辑，其可以为通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、单片机、ARM(Acorn RISCMachine)或其它可编程逻辑器件、分立门或晶体管逻辑、分立的硬件组件或者这些部件的任何组合。还有，处理器110还可以是任何传统处理器、微处理器或状态机。处理器110也可以被实现为计算设备的组合，例如，DSP和微处理器的组合、多个微处理器、一个或多个微处理器结合DSP和/或任何其它这种配置。
存储器120作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如本发明实施例中的视频面签的面部补全方法对应的程序指令。处理器110通过运行存储在存储器120中的非易失性软件程序、指令以及单元，从而执行系统10的各种功能应用以及数据处理，即实现上述方法实施例中的视频面签的面部补全方法。
存储器120可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据系统10使用所创建的数据等。此外，存储器120可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中，存储器120可选包括相对于处理器110远程设置的存储器，这些远程存储器可以通过网络连接至系统10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
一个或者多个单元存储在存储器120中，当被一个或者多个处理器110执行时，实现以下步骤：
展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，所述拍摄指引用于引导用户调整面部位置和角度；
当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件；
根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件。
在一个实施例中，所述展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，包括：
展示一个指引角度的指引轮廓，确认用户的实时面部图像是否与所述指引轮廓相匹配；
若匹配，则采集所述实时面部图像作为当前角度下的标准面部图像，若不匹配，则输出调整提示，以此类推，完成所有指引角度下的标准面部图像的采集。
在一个实施例中，所述当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件，包括：
当开启视频面签后，实时识别用户的面部是否存在遮挡；
每识别到一次面部存在遮挡时，均在预先创建的存储空间中记录相应的视频时间节点；
在视频面签结束时输出原始录屏文件。
在一个实施例中，所述根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件，包括：
调取所述存储空间中的视频时间节点；
根据所述视频时间节点在所述原始录屏文件中提取相应的遮挡视频帧；
根据所述标准面部图像对所述遮挡视频帧进行面部补全处理与视频帧替换，生成修正录屏文件。
在一个实施例中，所述根据所述标准面部图像对所述遮挡视频帧进行面部补全处理与视频帧替换，生成修正录屏文件，包括：
检测所述遮挡视频帧中的面部角度；
根据所述面部角度在所述标准面部图像中确认目标面部图像，所述目标面部图像的指引角度与所述面部角度的差值小于预设阈值；
根据所述目标面部图像对所述遮挡视频帧进行面部补全处理，得到无遮挡视频帧；
将所述遮挡视频帧对应替换为所述无遮挡视频帧后，生成修正录屏文件。
在一个实施例中，所述根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件之后，所述方法还包括：
将所述修正录屏文件上传至审批平台。
在一个实施例中，所述根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件之前，所述方法还包括：
确认所述存储空间中是否存在数据，若是，则进行面部补全处理，否则将所述原始录屏文件上传至审批平台。
本发明实施例提供了一种非易失性计算机可读存储介质，计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行，例如，执行以上描述的图1中的方法步骤S100至步骤S300。
作为示例，非易失性存储介质能够包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦ROM(EEPROM)或闪速存储器。易失性存储器能够包括作为外部高速缓存存储器的随机存取存储器(RAM)。通过说明而非限制，RAM可以以诸如同步RAM(SRAM)、动态RAM、(DRAM)、同步DRAM(SDRAM)、双数据速率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、Synchlink DRAM(SLDRAM)以及直接Rambus(兰巴斯)RAM(DRRAM)之类的许多形式得到。本文中所描述的操作环境的所公开的存储器组件或存储器旨在包括这些和/或任何其他适合类型的存储器中的一个或多个。
综上，本发明公开的一种视频面签的面部补全方法、装置、系统及存储介质中，方法通过展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，拍摄指引用于引导用户调整面部位置和角度；当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件；根据标准面部图像对原始录屏文件中与时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件。通过采集用户多角度下的标准面部图像，在用户视频面签过程中存在面部遮挡时，可基于多角度的标准面部图像自动对原始录屏文件进行面部补全处理，使得用户无需为偶然的面部遮挡而重新补录，提高视频面签效率，避免重复面签给用户带来不便。
当然，本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关硬件(如处理器，控制器等)来完成，所述的计算机程序可存储于一非易失性计算机可读取的存储介质中，该计算机程序在执行时可包括如上述各方法实施例的流程。其中所述的存储介质可为存储器、磁碟、软盘、闪存、光存储器等。
应当理解的是，本发明的应用不限于上述的举例，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，所有这些改进和变换都应属于本发明所附权利要求的保护范围。
Claims (10)
1.一种视频面签的面部补全方法，其特征在于，包括：
展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，所述拍摄指引用于引导用户调整面部位置和角度；
当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件；
根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件。
2.根据权利要求1所述的视频面签的面部补全方法，其特征在于，所述展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，包括：
展示一个指引角度的指引轮廓，确认用户的实时面部图像是否与所述指引轮廓相匹配；
若匹配，则采集所述实时面部图像作为当前角度下的标准面部图像，若不匹配，则输出调整提示，以此类推，完成所有指引角度下的标准面部图像的采集。
3.根据权利要求1所述的视频面签的面部补全方法，其特征在于，所述当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件，包括：
当开启视频面签后，实时识别用户的面部是否存在遮挡；
每识别到一次面部存在遮挡时，均在预先创建的存储空间中记录相应的视频时间节点；
在视频面签结束时输出原始录屏文件。
4.根据权利要求3所述的视频面签的面部补全方法，其特征在于，所述根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件，包括：
调取所述存储空间中的视频时间节点；
根据所述视频时间节点在所述原始录屏文件中提取相应的遮挡视频帧；
根据所述标准面部图像对所述遮挡视频帧进行面部补全处理与视频帧替换，生成修正录屏文件。
5.根据权利要求4所述的视频面签的面部补全方法，其特征在于，所述根据所述标准面部图像对所述遮挡视频帧进行面部补全处理与视频帧替换，生成修正录屏文件，包括：
检测所述遮挡视频帧中的面部角度；
根据所述面部角度在所述标准面部图像中确认目标面部图像，所述目标面部图像的指引角度与所述面部角度的差值小于预设阈值；
根据所述目标面部图像对所述遮挡视频帧进行面部补全处理，得到无遮挡视频帧；
将所述遮挡视频帧对应替换为所述无遮挡视频帧后，生成修正录屏文件。
6.根据权利要求1所述的视频面签的面部补全方法，其特征在于，所述根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件之后，所述方法还包括：
将所述修正录屏文件上传至审批平台。
7.根据权利要求3所述的视频面签的面部补全方法，其特征在于，所述根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件之前，所述方法还包括：
确认所述存储空间中是否存在数据，若是，则进行面部补全处理，否则将所述原始录屏文件上传至审批平台。
8.一种视频面签的面部补全装置，其特征在于，包括：
展示采集模块，用于展示若干个指引角度的拍摄指引并采集用户在各个指引角度下的标准面部图像，所述拍摄指引用于引导用户调整面部位置和角度；
识别记录模块，用于当开启视频面签后，在识别到用户的面部存在遮挡时记录相应的时间信息，直到视频面签结束时输出原始录屏文件；
补全修正模块，用于根据所述标准面部图像对所述原始录屏文件中与所述时间信息对应的视频帧图像进行面部补全处理，生成修正录屏文件。
9.一种视频面签的面部补全系统，其特征在于，所述系统包括至少一个处理器；以及，
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-7任一项所述的视频面签的面部补全方法。
10.一种非易失性计算机可读存储介质，其特征在于，所述非易失性计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行时，可使得所述一个或多个处理器执行权利要求1-7任一项所述的视频面签的面部补全方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211004739.0A CN115375572A (zh) | 2022-08-22 | 2022-08-22 | 一种视频面签的面部补全方法、装置、系统及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211004739.0A CN115375572A (zh) | 2022-08-22 | 2022-08-22 | 一种视频面签的面部补全方法、装置、系统及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115375572A true CN115375572A (zh) | 2022-11-22 |
Family
ID=84067237
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211004739.0A Pending CN115375572A (zh) | 2022-08-22 | 2022-08-22 | 一种视频面签的面部补全方法、装置、系统及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115375572A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116503289A (zh) * | 2023-06-20 | 2023-07-28 | 北京天工异彩影视科技有限公司 | 一种视觉特效应用处理方法和系统 |
-
2022
- 2022-08-22 CN CN202211004739.0A patent/CN115375572A/zh active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116503289A (zh) * | 2023-06-20 | 2023-07-28 | 北京天工异彩影视科技有限公司 | 一种视觉特效应用处理方法和系统 |
| CN116503289B (zh) * | 2023-06-20 | 2024-01-09 | 北京天工异彩影视科技有限公司 | 一种视觉特效应用处理方法和系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10482343B1 (en) | Government ID card validation systems | |
| CN110572601B (zh) | 一种具有实时校验功能的双录音视频录制系统 | |
| CN110705405A (zh) | 目标标注的方法及装置 | |
| CN109508404B (zh) | 维修教学视频管理方法、装置、终端设备及存储介质 | |
| CN104537389A (zh) | 人脸识别方法和终端设备 | |
| JP2007158421A (ja) | 監視カメラシステム及び顔画像追跡記録方法 | |
| CN109859104B (zh) | 一种视频生成图片的方法、计算机可读介质及转换系统 | |
| CN112788269B (zh) | 视频处理方法、装置、服务器及存储介质 | |
| CN115375572A (zh) | 一种视频面签的面部补全方法、装置、系统及存储介质 | |
| CN111079687A (zh) | 证件伪装识别方法、装置、设备及存储介质 | |
| US10803617B2 (en) | Method and system for detecting and correcting an orientation of an image | |
| CN110929555B (zh) | 脸部识别方法与使用此方法的电子装置 | |
| US20210012075A1 (en) | Method for intelligent inspections, electronic device using method, and non-transitory storage medium | |
| CN105049714A (zh) | 一种人物图像预览方法和装置 | |
| KR20240031988A (ko) | 바코드 판독 시스템 | |
| EP3958169A1 (en) | Facial image processing method and apparatus, computer device, and medium | |
| CN111369703A (zh) | 一种在线时间确定方法、装置、服务器及介质 | |
| CN111353361A (zh) | 一种人脸识别方法及装置、电子设备 | |
| US11036971B2 (en) | Face recognition method and electronic device employing the method | |
| CN113781209A (zh) | 一种信贷业务数据处理方法和相关装置 | |
| CN109376585B (zh) | 一种人脸识别的辅助方法、人脸识别方法及终端设备 | |
| CN112580379A (zh) | 数据处理系统和方法、电子设备以及计算机可读存储介质 | |
| CN112434548B (zh) | 一种视频标注方法及装置 | |
| CN110688908A (zh) | 一种共享租赁物id号自动识别的方法及识别系统 | |
| CN112434548A (zh) | 一种视频标注方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |