CN112565600A - 一种智能ai摄像头系统及其定位识别方法 - Google Patents

一种智能ai摄像头系统及其定位识别方法 Download PDF

Info

Publication number
CN112565600A
CN112565600A CN202011365558.1A CN202011365558A CN112565600A CN 112565600 A CN112565600 A CN 112565600A CN 202011365558 A CN202011365558 A CN 202011365558A CN 112565600 A CN112565600 A CN 112565600A
Authority
CN
China
Prior art keywords
human body
module
camera
body detection
intelligent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011365558.1A
Other languages
English (en)
Other versions
CN112565600B (zh
Inventor
高强
陈双友
徐宝秋
安静
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Financial Information Technology Co Ltd
Original Assignee
Inspur Financial Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Financial Information Technology Co Ltd filed Critical Inspur Financial Information Technology Co Ltd
Priority to CN202011365558.1A priority Critical patent/CN112565600B/zh
Publication of CN112565600A publication Critical patent/CN112565600A/zh
Application granted granted Critical
Publication of CN112565600B publication Critical patent/CN112565600B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/695Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects

Abstract

本发明公开了一种智能AI摄像头系统,包括控制平台、主控系统、人体检测模块、通讯模块、电机控制模块、传动模块和图像采集模块,控制平台与主控系统连接,通讯模块分别与主控系统、人体检测模块、电机控制模块和图像采集模块连接,传动模块与电机控制模块连接;控制平台主要实现人脸定位、人脸识别功能;人体检测模块主要实现智能自助设备前人体状态监测,主控系统实时查询人体检测模块传感器状态,并将信息及时上报控制平台,控制平台根据人员状态变化下发相应控制指令。通过上述方式,本发明能够提高AI摄像头定位识别的效率及准确性,智能化程度高,抗干扰能力强。

Description

一种智能AI摄像头系统及其定位识别方法
技术领域
本发明涉及摄像头定位识别技术领域,特别是涉及一种智能AI摄像头系统及其定位识别方法。
背景技术
智能自助终端设备目前已成为人们日常生活中主要的业务办理窗口,市场的发展也对其智能化、客户体验提出了更高的要求,因此对于智能化自助终端设备组成模块也有了新的需求,如目前智能自助终端设备中大量使用的摄像头,它作为人机交互的眼睛,在实际应用场景中具有以下问题:
1.客户体验差,智能自助终端设备中,摄像头角度不可调节,在涉及人脸信息认证时,摄像头无法获取一些身材较矮客户的人脸信息,导致认证失败。
2.智能化程度不高,为了适用不同身高人群,最普遍采用手动调节方式,且只能单维度调节,不符合市场对于自助终端设备的智能化需求。
3.抗干扰能力差,人脸定位、识别算法简单,仅能简单识别人脸部特征,无干扰滤除机制,在进行人脸信息提取时,易受到周边环境、人的影响,出现误判、错判现象。
4.人脸定位时间长,目前市场上自助设备,只有在业务过程中,需要人脸信息认证时,才会进行人脸定位,获取人脸图像,但目前人脸定位识别时间较长,进而导致整个业务流程效率低。
发明内容
本发明主要解决的技术问题是提供一种智能AI摄像头系统及其定位识别方法,能够结合智能AI摄像头和人体检测技术,人脸定位检测触发条件不以业务流程为准,以人体检测传感器为准,检测到客户靠近操作设备,即启动人脸定位,有助于提高业务办理效率;智能AI摄像头可在二维平面定位,系统可视范围更大,能够适用各类身高人群,客户体验更佳;智能AI摄像头系统可自主学习,规划最优运动路径,设置最优初始位置;智能AI摄像头采用分区域检测,抗干扰能力增强;智能AI摄像头自动控制失效时,可手动调节,自动+手动控制方式,使系统更具可靠性。
为解决上述技术问题,本发明采用的一个技术方案是:提供一种智能AI摄像头系统,包括:控制平台、主控系统、人体检测模块、通讯模块、电机控制模块、传动模块和图像采集模块,控制平台与主控系统连接,通讯模块分别与主控系统、人体检测模块、电机控制模块和图像采集模块连接,传动模块与电机控制模块连接;
所述控制平台通过人体检测模块判断是否开启主控系统、通讯模块、电机控制模块、传动模块和图像采集模块;
所述主控系统用于转发控制平台发送的摄像头双轴运动系统流程控制指令,主控系统上报人体检测模块的状态和图像采集模块的数据至控制平台;
所述电机控制模块用于控制X轴向电机和Y轴向电机,控制摄像头在二维平面定位。
进一步,所述人体检测模块包括微处理器MCU和人体检测传感器,微处理器MCU获取人体检测传感器状态并存储,与主控系统交互,上报人体检测传感器状态;人体检测传感器实时监测自助设备前人员状态。
进一步,所述人体检测传感器为雷达传感器或红外传感器。
进一步,所述通讯模块为USB集线器。
进一步,所述电机控制模块主要包括X轴向电机控制电路、Y轴向电机控制电路、USB2.0通讯电路、MCU。
进一步,所述传动模块包括双轴电机、限位传感器、计数传感器。
进一步,所述图像采集模块用于图像获取,实现控制平台进行人脸定位、人脸识别;
一种智能AI摄像头系统的定位识别方法,包括初始化步骤和执行步骤;
所述初始化步骤包括:
S101、系统初始化上电,查询传感器状态;
S102、传感器状态正常则系统开始自检,进行双轴运动系统中Y轴向电机自检;
S103、Y轴向电机自检正常,则进行X轴向电机自检;
S104、X轴向电机自检正常,则判断系统是否配置了初始位置;
S105、若有初始位置,双轴运动系统回到设置初始位;否则双轴运动系统回到默认初始位;
所述执行步骤包括:
S201、主控系统实时监控人体检测传感器状态,若人体检测传感器触发,主控系统上报控制平台执行S202,否则执行S209;
S202、控制平台收到人体检测传感器触发状态后,获取图像采集模块图像,检测人体特征,若检测到人体特征,计算偏差坐标执行S205,若未检测到人体特征开启二维平面轮询模式执行S203;
S203、主控系统转发二维平面轮询指令至电机控制模块,控制摄像头在XY轴方向以分块法在二维平面运动;
S204、若二维平面轮询模式期间检测到人体特征,计算偏差坐标执行S205,否则直至检测超时,流程结束执行S209;
S205、主控系统转发坐标修正指令至电机控制模块,电机控制模块根据坐标修正指令的参数偏差坐标,控制摄像头运动到目标坐标点执行S206;
S206、摄像头运动过程中,若发生故障则流程结束并上报故障执行S209,否则运动到目标点后保持执行S207;
S207、等待控制摄像头回归设置初始位指令执行S208,如需微调执行S202;
S208、回归初始位成功流程结束,否则上报错误流程结束执行S209;
S209、流程结束。
本发明的有益效果是:本发明在实现人脸信息提取功能的基础上,实现了客户靠近识别、人脸自动定位、人脸检测抗干扰能力提升和AI自主学习;采用人体检测技术,实时监测自助设备前是否有客户在办理业务,当系统检测到客户时,即可实时调整摄像头,实现对客户脸部进行实时定位;AI摄像头控制采用双轴运动系统,使摄像头能在二维平面运动,结合人体特征识别技术,实现摄像头对于人脸的自动定位功能;采用分区检测技术,确定重点检测区域,结合人脸识别对比技术,提升抗干扰能力;可实现AI自主学习,通过记录大量实际场景应用数据,自动化调整摄像头初始化位置,并为人脸自动定位系统规划最优路径。
附图说明
图1是本发明一种智能AI摄像头系统一较佳实施例的架构图;
图2是所示一种智能AI摄像头系统的定位识别方法的初始化流程图;
图3是所示一种智能AI摄像头系统的定位识别方法的执行流程图。
具体实施方式
下面结合附图对本发明的较佳实施例进行详细阐述,以使本发明的优点和特征能更易于被本领域技术人员理解,从而对本发明的保护范围做出更为清楚明确的界定。
请参阅图1,本发明实施例包括:
一种智能AI摄像头系统,包括:控制平台、主控系统、人体检测模块、通讯模块、电机控制模块、传动模块和图像采集模块;
所述控制平台主要实现人脸定位、人脸识别功能;
人脸定位,为了提高业务办理效率,人脸定位功能触发条件不以业务为准,而以人体检测模块信号为准,即当控制平台通过人体检测模块监测到有客户靠近并使用自助设备时,控制平台启动人脸定位功能,控制摄像头在二维平面运动,直至将客户脸部放置在镜头中央,确保人脸信息提取准确性。
人脸识别,实现人脸信息提取认证及人脸定位;采用分区域检测算法实现对于镜头分区域识别,把镜头分为重点监测区域和非重点监测区域,人脸定位、识别时只对重点监测区域图像进行分析处理,非重点监测区域只作辅助判别使用,提高检测效率和系统的抗干扰能力;当重点检测区域中出现多张人脸时,系统通过人脸检测对比算法,以最靠近自助设备人脸图像为准。
所述主控系统用于控制平台指令转发、AI摄像头双轴运动系统流程控制、人体检测模块状态上报、图像采集模块数据转发。
所述人体检测模块实现智能自助设备前人体状态监测,主控系统实时查询人体检测模块传感器状态,并将信息及时上报控制平台,控制平台根据人员状态变化下发相应控制指令。
所述人体检测模块包括微处理器MCU、人体检测传感器。
微处理器MCU获取人体检测传感器状态并存储,与主控系统交互,上报人体检测传感器状态。
人体检测传感器实时监测自助设备前人员状态,传感器为雷达传感器、红外传感器等。
所述通讯模块为USB集线器;智能AI摄像头系统作为独立模组使用,采用USB集线器可将模组对外通讯接口统一为一个USB接口,USB集线器集成USB2.0、USB3.0功能,智能AI摄像头系统兼容USB2.0通讯和USB3.0通讯。
所述电机控制模块主要实现XY轴向电机控制,实现摄像头在二维平面定位;所述电机控制模块主要包括X轴向电机控制电路、Y轴向电机控制电路、USB2.0通讯电路、MCU。
X轴向电机控制:主要用来驱动X轴向电机,使摄像头可在X轴向运动,X轴向电机可以由电机驱动芯片驱动,也可以自己搭建逻辑电路驱动;X轴向电机可以是舵机,也可以是高速马达。
Y轴向电机控制:主要用来驱动Y轴向电机,使摄像头可在Y轴向运动,Y轴向电机可以由电机驱动芯片驱动,也可以自己搭建逻辑电路驱动;Y轴向电机可以是舵机或高速马达。
USB2.0通讯电路用于MCU与主控系统通讯,采用USB通讯方式,优化线缆、通讯接口,也可使用RS232、RS485等方式进行通讯。
MCU控制电路与主控系统交互,结合传感器信号实现智能AI摄像头的自动化控制,MCU通过监测双轴电机电流,实现电机防护功能。
所述传动模块为系统的动作执行单元、状态监测单元,包括双轴电机、限位传感器、计数传感器。
所述图像采集模块用于图像获取,实现控制平台进行人脸定位、人脸识别。
见图2和图3,一种智能AI摄像头系统的定位识别方法,包括初始化步骤和执行步骤;
初始化步骤包括:
S101、系统初始化上电,查询传感器状态;
S102、传感器状态无问题后系统自检开始,首先系统进行Y轴向自检运动;
S103、Y轴向自检完成后,X轴向电机自检开始;
S104、自检无问题后,判断系统是否进行了初始位置设置;
S105、若设置了初始位置,双轴运动系统回到设置初始位;否则双轴运动系统回到默认初始位。
执行步骤包括:
S201、主控系统实时监控人体检测传感器状态,若人体检测传感器触发,主控系统上报控制平台执行S202,否则此次流程结束执行S209;
S202、控制平台收到人体检测传感器触发状态后,获取图像采集模块图像,检测人体特征,若检测到人体特征计算偏差坐标执行S205,若未检测到人体特征开启二维平面轮询模式执行S203;
S203、主控系统转发指令至电机控制模块,控制摄像头在XY轴方向以分块法在二维平面运动;
S204、若期间检测到人体特征计算偏差坐标执行S205,否则直至检测超时流程结束执行S209;
S205、主控系统转发指令至电机控制模块,电机控制模块根据指令参数偏差坐标,控制摄像头运动到目标坐标点执行S206;
S206、摄像头运动过程中,若发生故障则流程结束并上报故障执行S209,否则运动到目标点后保持执行S207;
S207、等待控制摄像头回归设置初始位指令执行S208,如需微调执行S202;
S208、回归初始位成功流程结束,否则上报错误流程结束执行S209;
S209、流程结束。
本发明从客户体验触发,以自助设备前人体检测状态作为人脸定位触发条件,可在客户进行业务办理过程中,就提前锁定客户人脸位置,人脸认证时只需微调即可,可有效提高业务办理效率;
智能AI摄像头可在二维平面定位,对于客户站立位置的要求更佳灵活,系统能够很好的适用各类身高人群;
从系统稳定性角度看,智能AI摄像头系统采用分区域检测,抗干扰能力更强;
智能AI摄像头模组采用自动结合手动控制方式,系统可靠性更高;
从智能化角度看,智能AI摄像头系统可自主学习,通过实际应用训练,可自主规划最优运动路径,设置最优初始位置,无需人工干预。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (8)

1.一种智能AI摄像头系统,其特征在于,包括:控制平台、主控系统、人体检测模块、通讯模块、电机控制模块、传动模块和图像采集模块,控制平台与主控系统连接,通讯模块分别与主控系统、人体检测模块、电机控制模块和图像采集模块连接,传动模块与电机控制模块连接;
所述控制平台通过人体检测模块判断是否开启主控系统、通讯模块、电机控制模块、传动模块和图像采集模块;
所述主控系统用于转发控制平台发送的摄像头双轴运动系统流程控制指令,主控系统上报人体检测模块的状态和图像采集模块的数据至控制平台;
所述电机控制模块用于控制X轴向电机和Y轴向电机,控制摄像头在二维平面定位。
2.根据权利要求1所述的一种智能AI摄像头系统,其特征在于:所述人体检测模块包括微处理器MCU和人体检测传感器,微处理器MCU获取人体检测传感器状态并存储,与主控系统交互,上报人体检测传感器状态;人体检测传感器实时监测自助设备前人员状态。
3.根据权利要求1所述的一种智能AI摄像头系统,其特征在于:所述人体检测传感器为雷达传感器或红外传感器。
4.根据权利要求1所述的一种智能AI摄像头系统,其特征在于:所述通讯模块为USB集线器。
5.根据权利要求1所述的一种智能AI摄像头系统,其特征在于:所述电机控制模块主要包括X轴向电机控制电路、Y轴向电机控制电路、USB2.0通讯电路、MCU。
6.根据权利要求1所述的一种智能AI摄像头系统,其特征在于:所述传动模块包括双轴电机、限位传感器、计数传感器。
7.根据权利要求1所述的一种智能AI摄像头系统,其特征在于:所述图像采集模块用于图像获取,实现控制平台进行人脸定位、人脸识别。
8.一种智能AI摄像头系统的定位识别方法,其特征在于,包括初始化步骤和执行步骤;
所述初始化步骤包括:
S101、系统初始化上电,查询传感器状态;
S102、传感器状态正常则系统开始自检,进行双轴运动系统中Y轴向电机自检;
S103、Y轴向电机自检正常,则进行X轴向电机自检;
S104、X轴向电机自检正常,则判断系统是否配置了初始位置;
S105、若有初始位置,双轴运动系统回到设置初始位;否则双轴运动系统回到默认初始位;
所述执行步骤包括:
S201、主控系统实时监控人体检测传感器状态,若人体检测传感器触发,主控系统上报控制平台执行S202,否则执行S209;
S202、控制平台收到人体检测传感器触发状态后,获取图像采集模块图像,检测人体特征,若检测到人体特征,计算偏差坐标执行S205,若未检测到人体特征开启二维平面轮询模式执行S203;
S203、主控系统转发二维平面轮询指令至电机控制模块,控制摄像头在XY轴方向以分块法在二维平面运动;
S204、若二维平面轮询模式期间检测到人体特征,计算偏差坐标执行S205,否则直至检测超时,流程结束执行S209;
S205、主控系统转发坐标修正指令至电机控制模块,电机控制模块根据坐标修正指令的参数偏差坐标,控制摄像头运动到目标坐标点执行S206;
S206、摄像头运动过程中,若发生故障则流程结束并上报故障执行S209,否则运动到目标点后保持执行S207;
S207、等待控制摄像头回归设置初始位指令执行S208,如需微调执行S202;
S208、回归初始位成功流程结束,否则上报错误流程结束执行S209;
S209、流程结束。
CN202011365558.1A 2020-11-28 2020-11-28 一种智能ai摄像头系统及其定位识别方法 Active CN112565600B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011365558.1A CN112565600B (zh) 2020-11-28 2020-11-28 一种智能ai摄像头系统及其定位识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011365558.1A CN112565600B (zh) 2020-11-28 2020-11-28 一种智能ai摄像头系统及其定位识别方法

Publications (2)

Publication Number Publication Date
CN112565600A true CN112565600A (zh) 2021-03-26
CN112565600B CN112565600B (zh) 2023-11-03

Family

ID=75046548

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011365558.1A Active CN112565600B (zh) 2020-11-28 2020-11-28 一种智能ai摄像头系统及其定位识别方法

Country Status (1)

Country Link
CN (1) CN112565600B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113676666A (zh) * 2021-08-23 2021-11-19 江苏亨诺科技有限公司 一种智能定位ai摄像头系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202196458U (zh) * 2011-08-24 2012-04-18 苏州飞锐智能科技有限公司 一种人脸识别系统
CN102956050A (zh) * 2011-08-24 2013-03-06 苏州飞锐智能科技有限公司 智能门禁控制系统
CN111277737A (zh) * 2020-01-19 2020-06-12 浪潮金融信息技术有限公司 一种用于自助终端的智能ai摄像头模组及控制方法
CN111933136A (zh) * 2020-08-18 2020-11-13 南京奥拓电子科技有限公司 一种辅助语音识别控制方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202196458U (zh) * 2011-08-24 2012-04-18 苏州飞锐智能科技有限公司 一种人脸识别系统
CN102956050A (zh) * 2011-08-24 2013-03-06 苏州飞锐智能科技有限公司 智能门禁控制系统
CN111277737A (zh) * 2020-01-19 2020-06-12 浪潮金融信息技术有限公司 一种用于自助终端的智能ai摄像头模组及控制方法
CN111933136A (zh) * 2020-08-18 2020-11-13 南京奥拓电子科技有限公司 一种辅助语音识别控制方法和装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113676666A (zh) * 2021-08-23 2021-11-19 江苏亨诺科技有限公司 一种智能定位ai摄像头系统

Also Published As

Publication number Publication date
CN112565600B (zh) 2023-11-03

Similar Documents

Publication Publication Date Title
CN107139179B (zh) 一种智能服务机器人及工作方法
CN108733420B (zh) 智能设备的唤醒方法、装置、智能设备和存储介质
CN103419944B (zh) 一种登机桥及其自动靠接方法
CN100478142C (zh) 一种移动机器人的位姿传感系统及其方法
US11537696B2 (en) Method and apparatus for turning on screen, mobile terminal and storage medium
WO2020199589A1 (zh) 桌面机器人的回充控制方法
CN109062201B (zh) 基于ros的智能导航微系统及其控制方法
CN102193621A (zh) 基于视觉的交互式电子设备控制系统及其控制方法
CN109199240B (zh) 一种基于手势控制的扫地机器人控制方法及系统
WO2019232804A1 (zh) 软件更新方法、系统、移动机器人及服务器
CN112565600A (zh) 一种智能ai摄像头系统及其定位识别方法
CN110516578A (zh) 一种基于人脸识别和目标跟踪的监视系统
CN117519126A (zh) 自移动设备的控制方法
CN109001756A (zh) 基于嵌入式设备的多线激光雷达障碍物检测系统及方法
CN111872935A (zh) 一种机器人控制系统及其控制方法
CN112907803B (zh) 一种自动调节ai智能门禁系统及门禁检测方法
Volkhardt et al. Finding people in apartments with a mobile robot
EP4242775A1 (en) Charging station, method for returning to a charging station for a lawnmower robot
CN115421590B (zh) 一种手势控制方法、存储介质及摄像设备
CN111144219A (zh) 一种基于3d结构光的虹膜识别装置及方法
Roßler et al. Visual servoing of a miniature robot toward a marked target
JPH10137225A (ja) 生体の特徴を用いた個人認識装置およびこの個人認識装置を用いた自動取引システム
CN114610035A (zh) 回桩方法、装置及割草机器人
CN112286201A (zh) Agv导航控制系统及方法
CN112036213A (zh) 一种机器人的手势定位方法、机器人以及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant