CN111899135A - 以人脸识别为基础的智能化伴学方法及系统 - Google Patents
以人脸识别为基础的智能化伴学方法及系统 Download PDFInfo
- Publication number
- CN111899135A CN111899135A CN202010632730.9A CN202010632730A CN111899135A CN 111899135 A CN111899135 A CN 111899135A CN 202010632730 A CN202010632730 A CN 202010632730A CN 111899135 A CN111899135 A CN 111899135A
- Authority
- CN
- China
- Prior art keywords
- face
- module
- information
- intelligent
- face recognition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 239000000126 substance Substances 0.000 title claims abstract description 19
- 238000000034 method Methods 0.000 title claims abstract description 16
- 238000001514 detection method Methods 0.000 claims abstract description 64
- 238000004458 analytical method Methods 0.000 claims abstract description 29
- 238000000605 extraction Methods 0.000 claims abstract description 21
- 238000004891 communication Methods 0.000 claims abstract description 12
- 230000005540 biological transmission Effects 0.000 claims abstract description 11
- 230000006399 behavior Effects 0.000 claims description 13
- 238000012795 verification Methods 0.000 claims description 6
- 230000001815 facial effect Effects 0.000 claims description 3
- 230000006870 function Effects 0.000 abstract description 11
- 230000009286 beneficial effect Effects 0.000 description 3
- 238000013135 deep learning Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000739 chaotic effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/40—Spoof detection, e.g. liveness detection
- G06V40/45—Detection of the body part being alive
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Educational Technology (AREA)
- Educational Administration (AREA)
- Computer Security & Cryptography (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Economics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Telephonic Communication Services (AREA)
- Telephone Function (AREA)
- Collating Specific Patterns (AREA)
Abstract
一种以人脸识别为基础的智能化伴学系统及方法,其中,该系统包括人脸识别智能化终端机、云端平台和移动终端,所述人脸识别智能化终端机包括人脸抓拍模块、边缘分析模块、人脸检测模块、活体检测模块、特征提取模块,以及语音播报模块;所述云端平台包括人脸识别模块、人脸特征信息库、人脸特征比对模块和权限认证模块,所述移动终端包括人脸拍摄模块、信息录入系统、信息储存系统和信息输送系统;本发明具有可以根据不同的场景、不同的人脸识别信息进行语音播报,功能更多,功能更加丰富,更加有利于学生、家长和老师之间的沟通的优点。
Description
技术领域
本发明涉及教学辅导工具领域,尤其涉及一种以人脸识别为基础的智能化伴学方法及系统。
背景技术
随着信息技术时代的到来,未来的教育方式发生着改变,人工智能在教育中的应用越来越广泛。
在现有的智能化伴学系统中,都是以课程学习、作业为主的手机软件,功能比较单一,不能很好的反映师生们的交流和学生的日常学习状况,家长也不能实时查看孩子的在校情况,鉴于此,一种以人脸识别为基础的智能化伴学系统就应运而生了。
发明内容
为了解决上述问题,本发明向社会提供一种可以根据不同的场景、不同的人脸识别信息进行语音播报,功能更多,功能更加丰富,更加有利于学生、家长和教师之间的沟通的以人脸识别为基础的智能化伴学系统。
本发明还提供一种可以根据不同的场景、不同的人脸识别信息进行语音播报,功能更多,功能更加丰富,更加有利于学生、家长和教师之间的沟通的以人脸识别为基础的智能化伴学方法。
本发明的技术方案是:提供一种以人脸识别为基础的智能化伴学方法,包括如下步骤:
S1、注册人脸信息:在移动终端,通过用户填写基本信息、利用人脸拍摄模块拍照并上传人脸照片到人脸识别模块,特征提取模块进行人脸特征提取,人脸特征数据存储在人脸信息库中;
S2、登录移动终端;用户可输入手机号加密码登录,或手机号加验证码登录,或者是人脸识别登录;
S3、移动终端信息录入;用户利用信息录入系统将行为、语音、或者文字等信息的录入;
S4、移动终端信息储存;利用信息储存系统将不同时期用户的语音、行为、文字等信息储存,并可实时查看;
S5、面部特征采集;利用人脸抓拍模块同时智能抓拍经过人脸识别智能化终端机所在场所的学生的人脸,并将人脸图像上传到边缘分析模块;
S6、人脸图像边缘分析,所述边缘分析模块依据接收到的人脸图像,对该人脸图像进行边缘分析;
S71、语音播报,当边缘分析模块收到多张人脸时,则直接输出到语音播报模块,利用语音播报模块接收到指令后将文本转成语音播报的音频输出到扬声器;
S72、人脸检测,如所述边缘分析模块收到一张人脸时,则将人脸图像分派到所述人脸检测模块;
S8、活体检测人脸;如所述人脸检测模块检测到人脸,则利用活体检测模块检测人脸的真实性;
S9、人脸特征提取;如所述活体检测模块检测出真脸,则利用特征提取模块进行人脸特征提取,并将人脸特征数据输出给人脸特征比对模块;
S10、人脸信息比对;利用人脸特征比对模块将人脸特征数据与人脸信息库中的人脸信息进行比对,并将与人脸特征相近的照片对应的人员信息提取出来, 最后发送给所述语音播报模块;
S11、语音播报;利用语音播报模块接收到指令,语音播报模块接收到指令后匹配到教师最近的评语,将评语文本转成语音播报的音频输出到扬声器。
作为本发明的改进,所述注册人脸信息的过程如下:
用户填写基本信息、通过人脸拍摄模块拍照并上传人脸照片到所述人脸识别模块;
所述人脸识别模块收到注册请求后,将照片信息分派到所述人脸检测模块;
如所述人脸检测模块未检测到人脸,则返回注册失败的结果给移动终端;
如所述人脸检测模块检测到人脸,则进入所述活体检测模块,所述活体检测模块用于检测人脸的真实性;
如所述活体检测模块检测出是假体,则返回注册失败的结果给所述移动终端;
如所述活体检测模块检测出真脸,则进入所述特征提取模块进行人脸特征提取,并将人脸特征数据输出给所述人脸识别模块;
所述人脸识别模块将人脸特征数据存储在所述人脸信息库中,并最终返回注册成功的结果给所述移动终端。
本发明还提供一种以人脸识别为基础的具有语音播报功能的智能化伴学系统,包括人脸识别智能化终端机、云端平台和移动终端,
所述人脸识别智能化终端机包括人脸抓拍模块、边缘分析模块、人脸检测模块、活体检测模块、特征提取模块,以及语音播报模块;所述云端平台包括人脸识别模块、人脸特征信息库、人脸特征比对模块和权限认证模块,所述移动终端包括人脸拍摄模块、信息录入系统、信息储存系统和信息输送系统;
所述人脸抓拍模块用于拍摄人脸,并将拍摄到的人脸图像上传给边缘分析模块;
所述边缘分析模块用于接收人脸抓拍模块发送过来的人脸图像,并对该人脸图像进行边缘分析;
所述人脸检测模块用于对人脸图像进行搜索和检测;
所述活体检测模块用于对人脸图像的真实性进行检测;
所述特征提取模块用于对活体检测模块检测后的人脸图像进行人脸特征提取,并将提取后的人脸特征数据传送给人脸特征比对模块;
所述人脸识别模块用于接收用户的人脸信息并将用户的人脸信息进行建模重构;
所述人脸特征信息库用于储存记录用户的人脸信息建模重构后的数据;
所述人脸特征比对模块用于将接收到的人脸特征数据与人脸特征信息库中的人脸特征数据进行比对;
所述权限认证模块用于将人脸特征信息库所比对的结果进行分析;
所述人脸拍摄模块用于拍摄人脸;
所述信息录入系统用于用户行为、语音、文字等信息的记录;
所述信息储存系统用于不同时期用户语音、行为、文字等信息的储存记忆并可实时查看;
所述信息输送系统用于构建人脸识别智能化终端机、云端平台和移动终端三方信息的传送枢纽。
作为本发明的改进,所述人脸识别智能化终端机还包括信息留言模块,所述信息留言模块用于接受语音的输入、储存和查看。
作为本发明的改进,所述人脸识别智能化终端机还包括即时通信模块,所述即时通许模块用于用户之间的实时交流。
作为本发明的改进,所述移动终端还包括信息共享系统,所述信息共享系统用于不同用户对同一信息进行查看和对信息的共同关注。
作为本发明的改进,所述人脸抓拍模块是可同时检测多张人脸的智能化IP数字摄像机。
本发明由于包括人脸识别智能化终端机、云端平台和移动终端,所述人脸识别智能化终端机包括人脸抓拍模块、边缘分析模块、人脸检测模块、活体检测模块、特征提取模块,以及语音播报模块;所述云端平台包括人脸识别模块、人脸特征信息库、人脸特征比对模块和权限认证模块,所述移动终端包括人脸拍摄模块、信息录入系统、信息储存系统和信息输送系统;本发明相对于现有技术而言,本发明以人脸识别为基础,教师可随时给学生留言,学生在前端机器上进行查看,解决师生沟通难的困境;家长也可以通过移动终端查看孩子在学校的相关信息(包括学习、状态、安全等);本发明可以根据不同的场景、不同的人脸识别信息进行语音播报;本发明还有共享通讯功能,方便在校期间家长与学生之间的联系,相对于现有技术而言,本发明的功能更多,功能更加丰富,更加有利于学生、家长和教师之间的沟通。
附图说明
图1是本发明智能化伴学方法的流程图。
图2是注册人脸信息过程的流程图。
图3是移动终端进行人脸登录过程的流程图。
图4是本发明中以人脸识别为基础的智能化伴学系统的示意图。
图5是图4中的人脸识别智能化终端机的结构示意图。
具体实施方式
请参见图1,图1揭示的是一种以人脸识别为基础的智能化伴学方法,包括如下步骤:S1、注册人脸信息:在移动终端,通过用户填写基本信息、利用人脸拍摄模块拍照并上传人脸照片到人脸识别模块,特征提取模块进行人脸特征提取,人脸特征数据存储在人脸信息库中;
S2、登录移动终端;用户可输入手机号加密码登录,或手机号加验证码登录,或者是人脸识别登录;
S3、移动终端信息录入;用户利用信息录入系统将行为、语音、或者文字等信息的录入;
S4、移动终端信息储存;利用信息储存系统将不同时期用户的语音、行为、文字等信息储存,并可实时查看;
S5、面部特征采集;利用人脸抓拍模块同时智能抓拍经过人脸识别智能化终端机所在场所的学生的人脸,并将人脸图像上传到边缘分析模块;
S6、人脸图像边缘分析,所述边缘分析模块依据接收到的人脸图像,对该人脸图像进行边缘分析;
S71、多张人脸语音播报内容,当边缘分析模块收到多张人脸时,则直接输出到语音播报模块,利用语音播报模块接收到指令后将文本转成语音播报的音频输出到扬声器;
S72、人脸检测,如所述边缘分析模块收到一张人脸时,则将人脸图像分派到所述人脸检测模块;
S8、活体检测人脸;如所述人脸检测模块检测到人脸,则利用活体检测模块检测人脸的真实性;
S9、人脸特征提取;如所述活体检测模块检测出真脸,则利用特征提取模块进行人脸特征提取,并将人脸特征数据输出给人脸特征比对模块;
S10、人脸信息比对;利用人脸特征比对模块将人脸特征数据与人脸信息库中的人脸信息进行比对,并将与人脸特征相近的照片对应的人员信息提取出来,最后发送给所述语音播报模块;
S11、单张人脸语音播报内容;利用语音播报模块接收到指令,语音播报模块接收到指令后匹配到教师最近的评语,将评语文本转成语音播报的音频输出到扬声器。
本发明中,优选的,利用移动终端注册人脸信息的过程如下:如图2所示:
用户填写基本信息、通过人脸拍摄模块31拍照并上传人脸照片到所述人脸识别模块21;
所述人脸识别模块21收到注册请求后,将照片信息分派到所述人脸检测模块12;
如所述人脸检测模块12未检测到人脸,则返回注册失败的结果给移动终端;
如所述人脸检测模块12检测到人脸,则进入所述活体检测模块13,所述活体检测模块13用于检测人脸的真实性;
如所述活体检测模块13检测出是假体,则返回注册失败的结果给所述移动终端;
如所述活体检测模块13检测出真脸,则进入所述特征提取模块14进行人脸特征提取,并将人脸特征数据输出给所述人脸识别模块21;
所述人脸识别模块21将人脸特征数据存储在所述人脸信息库22中,并最终返回注册成功的结果给所述移动终端。
本发明中,优选的,移动终端登录过程,如图3所示:用户通过人脸拍摄模块31拍照并上传人脸照片到人脸识别模块21;
人脸识别模块21收到登录请求后,将照片信息分派到人脸检测模块12;
人脸检测模块12未检测到人脸,则返回登录失败的结果给移动终端;
如人脸检测模块12检测到人脸,则进入活体检测模块13,活体检测模块13用于检测人脸的真实性;
如活体检测模块13检测出是假体,则返回登录失败的结果给移动终端;
如活体检测模块13检测出真脸,则进入特征提取模块14进行人脸特征提取,并将人脸特征数据输出给人脸特征比对模块23;
人脸特征比对模块23将人脸特征数据与所述人脸信息库22中的人脸信息进行比对,将与人脸特征相近的照片对应的人员信息提取出来,并进一步通过所述权限认证模块24进行权限认证;
如权限认证模块24认证失败,则返回登录失败的结果给所述移动终端;
否则最终返回登录成功的结果给所述移动终端。
本发明还提供以人脸识别为基础的智能化伴学系统的一种实施方式,一种以人脸识别为基础的智能化伴学系统,如图4和图5所示,包括人脸识别智能化终端机1、云端平台2和移动终端3,所述人脸识别智能化终端机1包括人脸抓拍模块10、边缘分析模块11、人脸检测模块12、活体检测模块13、特征提取模块14,以及语音播报模块15;所述云端平台2包括人脸识别模块21、人脸特征信息库22、人脸特征比对模块23和权限认证模块24,所述移动终端包括人脸拍摄模块31、信息录入系统32、信息储存系统33和信息输送系统34;
所述人脸抓拍模块10用于拍摄人脸,并将拍摄到的人脸图像上传给边缘分析模块11;
所述边缘分析模块11用于接收人脸抓拍模块10发送过来的人脸图像,并对该人脸图像进行边缘分析;具体的,本发明中,所述边缘分析模块11是具有边缘计算能力的包含但不限于人脸识别、测量身高、行为分析等视觉分析计算机系统;
所述人脸检测模块12用于对人脸图像进行搜索和检测;
所述活体检测模块13用于对人脸图像的真实性进行检测;
所述特征提取模块14用于对活体检测模块13检测后的人脸图像进行人脸特征提取,并将提取后的人脸特征数据传送给人脸特征比对模块23;本发明中,所述人脸特征比对模块23是具有求两张脸图的包含但不限于欧氏距离或余弦距离的装置;
所述语音播报模块15是指能接收指令及文本转语音数据的智能音频输出设备;
所述人脸识别模块21用于接收用户的人脸信息并将用户的人脸信息进行建模重构;
所述人脸特征信息库22用于储存记录用户的人脸信息建模重构后的数据;本发明中,所述人脸信息库22是指用来存储所述特征提取模块23提取的人脸特征数据以包含但不限于128维/512维的二进制数据格式存在;
所述人脸特征比对模块23用于将接收到的人脸特征数据与人脸特征信息库22中的人脸特征数据进行比对;
所述权限认证模块24用于将人脸特征信息库22所比对的结果进行分析;本发明中,所述权限认证模块24是指系统通过有效时间段来限定认证的有效性;
所述人脸拍摄模块31用于拍摄人脸;
所述信息录入系统用于用户行为、语音、文字等信息的记录;
所述信息储存系统用于不同时期用户语音、行为、文字等信息的储存记忆并可实时查看;
所述信息输送系统用于构建人脸识别智能化终端机1、云端平台2和移动终端3三方信息的传送枢纽。
本发明中,优选的,所述人脸识别智能化终端机1还包括信息留言模块16,所述信息留言模块16用于接受语音的输入、储存和查看。
本发明中,优选的,所述人脸识别智能化终端机1还包括即时通信模块17,所述即时通信模块17用于用户之间的实时交流。
本发明中,优选的,所述移动终端还包括信息共享系统,所述信息共享系统用于不同用户对同一信息进行查看和对信息的共同关注。
本发明中,优选的,所述人脸抓拍模块11是可同时检测多张人脸的智能化IP数字摄像机。
本发明中,优选的,所述人脸检测模块12是指一种能对于任意一幅给定的图像,采用一定的策略对其进行搜索以确定其中是否含有人脸,如果是则返回一脸的位置、大小和姿态的装置,该装置一般基于深度学习为基础的包含但不限于MTCNN(暂态混沌神经网络)人脸检测算法构成。
本发明中,所述活体检测模块13是指具有在一些身份验证场景确定对象真实生理特征的装置,该装置一般包括但不限于单目RGB色彩模式、双目红外活体及3D结构光的活体检测算法构成。
本发明中,所述特征提取模块14是指具有对人脸的器官特征、纹理区域和预定义的特征点进行定位和提取的装置,该装置一般基于深度学习为基础的算法构成。
本发明中,所述移动终端通过云端平台2进行人脸注册的身份有三种选择,学生、教师或者家长,注册人员选择手机号或者学号、密码、验证码完成注册,用户身份经后台管理员审核成功后,可输入手机号加密码登录,也可以选择手机号加验证码登录,或者是人脸识别登录。
本发明中,用户登录所述移动终端后,学生端的页面有五大版块,分别是:悄悄话、通讯录、知行合一、大擂台和我。
所述悄悄话页面显示最近的聊天消息列表,可执行置顶、删除操作。
所述学生通讯录页面,学生可查看小学、中学、高中、大学教师信息,可选择教师进入一对一聊天界面。所述一对一聊天界面页面,页面左边展示历史聊天记录,页面右边显示为对方信息;聊天可以输入文字、发送语音等方式进行。
所述知行合一页面展示四大版块:行知理念、课程中心、故事推荐、课题论坛。
所述大擂台赛事页面展示学校正在进行中的比赛列表,点击进入赛事排名页面,展示当前赛事下排名信息、学生作品信息;根据用户点赞情况进行作品排名。
所述我的页面展示登录后的个人中心界面,显示用户信息及其它模块入口,有如下模块:能量宝库、快乐银行、我的空间、我的A梦、我的课程、我的收藏、我的建议。
本发明中,用户登录所述移动终端后,教师端的页面有三大版块,分别是:首页、通讯录和我。所述教师通讯录页面,教师可查看历届学生信息,可选择学生进入一对一聊天界面。
Claims (7)
1.一种以人脸识别为基础的智能化伴学方法,其特征在于:包括如下步骤:
S1、注册人脸信息:在移动终端,通过用户填写基本信息、利用人脸拍摄模块拍照并上传人脸照片到人脸识别模块,特征提取模块进行人脸特征提取,人脸特征数据存储在人脸信息库中;
S2、登录移动终端;用户可输入手机号加密码登录,或手机号加验证码登录,或者是人脸识别登录;
S3、移动终端信息录入;用户利用信息录入系统将行为、语音、或者文字等信息的录入;
S4、移动终端信息储存;利用信息储存系统将不同时期用户的语音、行为、文字等信息储存,并可实时查看;
S5、面部特征采集;利用人脸抓拍模块同时智能抓拍经过人脸识别智能化终端机所在场所的学生的人脸,并将人脸图像上传到边缘分析模块;
S6、人脸图像边缘分析,所述边缘分析模块依据接收到的人脸图像,对该人脸图像进行边缘分析;
S71、语音播报,当边缘分析模块收到多张人脸时,则直接输出到语音播报模块,利用语音播报模块接收到指令后将文本转成语音播报的音频输出到扬声器;
S72、人脸检测,如所述边缘分析模块收到一张人脸时,则将人脸图像分派到所述人脸检测模块;
S8、活体检测人脸;如所述人脸检测模块检测到人脸,则利用活体检测模块检测人脸的真实性;
S9、人脸特征提取;如所述活体检测模块检测出真脸,则利用特征提取模块进行人脸特征提取,并将人脸特征数据输出给人脸特征比对模块;
S10、人脸信息比对;利用人脸特征比对模块将人脸特征数据与人脸信息库中的人脸信息进行比对,并将与人脸特征相近的照片对应的人员信息提取出来, 最后发送给所述语音播报模块;
S11、语音播报;利用语音播报模块接收到指令,语音播报模块接收到指令后匹配到老师最近的评语,将评语文本转成语音播报的音频输出到扬声器。
2.根据权利要求3所述的以人脸识别为基础的智能化伴学方法,其特征在于:所述注册人脸信息的过程如下:
用户填写基本信息、通过人脸拍摄模块(31)拍照并上传人脸照片到所述人脸识别模块(21);
所述人脸识别模块(21)收到注册请求后,将照片信息分派到所述人脸检测模块(12);
如所述人脸检测模块(12)未检测到人脸,则返回注册失败的结果给移动终端(3);
如所述人脸检测模块(12)检测到人脸,则进入所述活体检测模块(13),所述活体检测模块(13)用于检测人脸的真实性;
如所述活体检测模块(13)检测出是假体,则返回注册失败的结果给所述移动终端(3);
如所述活体检测模块(13)检测出真脸,则进入所述特征提取模块(14)进行人脸特征提取,并将人脸特征数据输出给所述人脸识别模块(21);
所述人脸识别模块(21)将人脸特征数据存储在所述人脸信息库(22)中,并最终返回注册成功的结果给所述移动终端(3)。
3.一种以人脸识别为基础的智能化伴学系统,其特征在于:包括人脸识别智能化终端机(1)、云端平台(2)和移动终端(3),
所述人脸识别智能化终端机(1)包括人脸抓拍模块(10)、边缘分析模块(11)、人脸检测模块(12)、活体检测模块(13)、特征提取模块(14),以及语音播报模块(15);所述云端平台(2)包括人脸识别模块(21)、人脸特征信息库(22)、人脸特征比对模块(23)和权限认证模块(24),所述移动终端(3)包括人脸拍摄模块(31)、信息录入系统、信息储存系统和信息输送系统;
所述人脸抓拍模块(10)用于拍摄人脸,并将拍摄到的人脸图像上传给边缘分析模块(11);
所述边缘分析模块(11)用于接收人脸抓拍模块(10)发送过来的人脸图像,并对该人脸图像进行边缘分析;
所述人脸检测模块(12)用于对人脸图像进行搜索和检测;
所述活体检测模块(13)用于对人脸图像的真实性进行检测;
所述特征提取模块(14)用于对活体检测模块(13)检测后的人脸图像进行人脸特征提取,并将提取后的人脸特征数据传送给人脸特征比对模块(23);
所述人脸识别模块(21)用于接收用户的人脸信息并将用户的人脸信息进行建模重构;
所述人脸特征信息库(22)用于储存记录用户的人脸信息建模重构后的数据;
所述人脸特征比对模块(23)用于将接收到的人脸特征数据与人脸特征信息库(22)中的人脸特征数据进行比对;
所述权限认证模块(24)用于将人脸特征信息库(22)所比对的结果进行分析;
所述人脸拍摄模块(31)用于拍摄人脸;
所述信息录入系统用于用户行为、语音、文字等信息的记录;
所述信息储存系统用于不同时期用户语音、行为、文字等信息的储存记忆并可实时查看;
所述信息输送系统用于构建人脸识别智能化终端机(1)、云端平台(2)和移动终端(3)三方信息的传送枢纽。
4.根据权利要求3所述的以人脸识别为基础的智能化伴学系统,其特征在于:所述人脸识别智能化终端机(1)还包括信息留言模块(16),所述信息留言模块(16)用于接受语音的输入、储存和查看。
5.根据权利要求3或4所述的以人脸识别为基础的智能化伴学系统,其特征在于:所述人脸识别智能化终端机(1)还包括即时通信模块(17),所述即时通许模块(17)用于用户之间的实时交流。
6.根据权利要求3或4所述的以人脸识别为基础的智能化伴学系统,其特征在于:所述移动终端(3)还包括信息共享系统,所述信息共享系统用于不同用户对同一信息进行查看和对信息的共同关注。
7.根据权利要求3或4所述的以人脸识别为基础的智能化伴学系统,其特征在于:所述人脸抓拍模块(11)是可同时检测多张人脸的智能化IP数字摄像机。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010632730.9A CN111899135A (zh) | 2020-07-04 | 2020-07-04 | 以人脸识别为基础的智能化伴学方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010632730.9A CN111899135A (zh) | 2020-07-04 | 2020-07-04 | 以人脸识别为基础的智能化伴学方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111899135A true CN111899135A (zh) | 2020-11-06 |
Family
ID=73192970
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010632730.9A Pending CN111899135A (zh) | 2020-07-04 | 2020-07-04 | 以人脸识别为基础的智能化伴学方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111899135A (zh) |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104484929A (zh) * | 2014-12-22 | 2015-04-01 | 唐玉勇 | 一种新型社区安全应用系统及实施方法 |
CN104765998A (zh) * | 2015-04-16 | 2015-07-08 | 国家电网公司 | 一种基于人脸识别用户身份可靠认证系统及其使用方法 |
CN105681278A (zh) * | 2015-12-29 | 2016-06-15 | 福建星网锐捷通讯股份有限公司 | 一种人脸识别门禁的注册方法及系统 |
CN107020632A (zh) * | 2016-01-29 | 2017-08-08 | 施肖亮 | 一种教学机器人的控制系统 |
CN107545792A (zh) * | 2017-08-31 | 2018-01-05 | 深圳市鼎盛智能科技有限公司 | 智能教学机器人及智能教学系统 |
CN107798307A (zh) * | 2017-10-31 | 2018-03-13 | 努比亚技术有限公司 | 一种公共交通费用快捷支付方法、装置及计算机可读存储介质 |
CN109255993A (zh) * | 2018-10-31 | 2019-01-22 | 北京汉高天泓文化艺术发展有限公司 | 基于多端互通的教学平台 |
CN109522829A (zh) * | 2018-11-02 | 2019-03-26 | 南京邮电大学 | 一种基于深度学习的智能手机“刷脸”会议注册方法 |
CN109660509A (zh) * | 2018-10-29 | 2019-04-19 | 北京旷视科技有限公司 | 基于人脸识别的登录方法、装置、系统和存储介质 |
CN110491220A (zh) * | 2019-08-30 | 2019-11-22 | 珠海市颢腾智胜科技有限公司 | 一种基于智能台灯的课后学习系统及方法 |
CN110827832A (zh) * | 2018-08-14 | 2020-02-21 | 上海汇付数据服务有限公司 | 一种视频身份的识别设备及其方法 |
CN110910549A (zh) * | 2019-11-15 | 2020-03-24 | 江苏高泰软件技术有限公司 | 基于深度学习和人脸识别特征的校园人员安全管理系统 |
-
2020
- 2020-07-04 CN CN202010632730.9A patent/CN111899135A/zh active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104484929A (zh) * | 2014-12-22 | 2015-04-01 | 唐玉勇 | 一种新型社区安全应用系统及实施方法 |
CN104765998A (zh) * | 2015-04-16 | 2015-07-08 | 国家电网公司 | 一种基于人脸识别用户身份可靠认证系统及其使用方法 |
CN105681278A (zh) * | 2015-12-29 | 2016-06-15 | 福建星网锐捷通讯股份有限公司 | 一种人脸识别门禁的注册方法及系统 |
CN107020632A (zh) * | 2016-01-29 | 2017-08-08 | 施肖亮 | 一种教学机器人的控制系统 |
CN107545792A (zh) * | 2017-08-31 | 2018-01-05 | 深圳市鼎盛智能科技有限公司 | 智能教学机器人及智能教学系统 |
CN107798307A (zh) * | 2017-10-31 | 2018-03-13 | 努比亚技术有限公司 | 一种公共交通费用快捷支付方法、装置及计算机可读存储介质 |
CN110827832A (zh) * | 2018-08-14 | 2020-02-21 | 上海汇付数据服务有限公司 | 一种视频身份的识别设备及其方法 |
CN109660509A (zh) * | 2018-10-29 | 2019-04-19 | 北京旷视科技有限公司 | 基于人脸识别的登录方法、装置、系统和存储介质 |
CN109255993A (zh) * | 2018-10-31 | 2019-01-22 | 北京汉高天泓文化艺术发展有限公司 | 基于多端互通的教学平台 |
CN109522829A (zh) * | 2018-11-02 | 2019-03-26 | 南京邮电大学 | 一种基于深度学习的智能手机“刷脸”会议注册方法 |
CN110491220A (zh) * | 2019-08-30 | 2019-11-22 | 珠海市颢腾智胜科技有限公司 | 一种基于智能台灯的课后学习系统及方法 |
CN110910549A (zh) * | 2019-11-15 | 2020-03-24 | 江苏高泰软件技术有限公司 | 基于深度学习和人脸识别特征的校园人员安全管理系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111079113B (zh) | 一种人工智能控制的教学系统及其使用方法 | |
CN106982224A (zh) | 实时身份验证识别的方法和系统 | |
CN108399809A (zh) | 虚拟教学系统、云平台管理系统和处理终端管理系统 | |
CN104299178A (zh) | 一种基于面部识别的网络教学方法及系统 | |
CN110543811B (zh) | 一种基于深度学习的非配合式考试人员管理方法及其系统 | |
CN115082269B (zh) | 一种基于大数据的教学规划方法及系统 | |
CN111046819A (zh) | 一种行为识别处理方法及装置 | |
CN104143163A (zh) | 一种知识地图的生成方法和装置 | |
CN109447860A (zh) | 成绩统计与分析系统 | |
CN109522829A (zh) | 一种基于深度学习的智能手机“刷脸”会议注册方法 | |
CN108681972B (zh) | 社交关系引导方法、装置、计算机设备及存储介质 | |
WO2020199512A1 (zh) | 一种题目信息采集的方法及系统 | |
CN210743263U (zh) | 教学资源管理系统 | |
KR20190100694A (ko) | 사용자 필기 데이터 기반의 학습 성취도 판단 방법, 그리고 이를 위한 스마트 디바이스, 서버 및 시스템 | |
RU2622843C2 (ru) | Способ управления устройством обработки изображения | |
CN114333477A (zh) | 一种基于ar技术的虚拟仿真教学实训系统 | |
CN113538991A (zh) | 一种基于互联网的教育培训管理平台及其管理方法 | |
CN111899135A (zh) | 以人脸识别为基础的智能化伴学方法及系统 | |
CN111899136A (zh) | 以人脸识别为基础的智能化伴学系统的移动终端的使用方法 | |
CN112116841A (zh) | 一种基于深度学习的个性化远程教育系统及方法 | |
CN107886791B (zh) | 一种基于教学数据的智能共享方法及其系统 | |
Abdalkarim et al. | A Literature Review on Smart Attendance Systems | |
Zhang et al. | Designing a streamlined viewport strategy system to enhance performance in context awareness in mobile learning environments | |
CN113837010A (zh) | 一种教育评估系统及方法 | |
CN109817043A (zh) | 一种实验教学系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20201106 |
|
WD01 | Invention patent application deemed withdrawn after publication |