CN206331472U - 一种基于人脸检测的互动机器人 - Google Patents
一种基于人脸检测的互动机器人 Download PDFInfo
- Publication number
- CN206331472U CN206331472U CN201621078446.7U CN201621078446U CN206331472U CN 206331472 U CN206331472 U CN 206331472U CN 201621078446 U CN201621078446 U CN 201621078446U CN 206331472 U CN206331472 U CN 206331472U
- Authority
- CN
- China
- Prior art keywords
- face
- module
- robot
- user
- head
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Manipulator (AREA)
Abstract
本实用新型涉及一种基于人脸检测的互动机器人，通过人脸追逐，实时调整头部角度，使头部正对用户，为后续进一步人脸识别提供更可靠的数据来源，此外也带来了更好的科技感和用户体验；同时通过对人脸的识别可以判断用户等级，进而为不同用户提供不同服务，提供了良好的支持。
Description
技术领域
本实用新型涉及一种智能机器人，尤其涉及一种基于人脸检测的互动机器人。
背景技术
随着计算机技术的不断向智能化方向发展，机器人应用领域的不断扩展和深化，机器人技术正从工业制造领域向医疗服务、娱乐教育、家庭服务等领域迅速扩展。
人脸识别系统的研究始于20世纪60年代，80年代后随着计算机技术和光学成像技术的发展得到提高，而真正进入初级的应用阶段则在90年后期。人工智能的发展推动了人脸识别向人脸追踪方向的发展，让智能用户体验更加顺畅。
人脸识别，是基于人的脸部特征信息进行身份识别的一种生物识别技术。用摄像机或摄像头采集含有人脸的图像或视频流，并自动在图像中检测和跟踪人脸，进而对检测到的人脸进行脸部的一系列相关技术，通常也叫做人像识别、面部识别。人脸追踪主要是基于人脸识别技术加上相关的机械结构来配合，进行人脸的智能追踪。
目前的人脸识别主要用于自动对焦等摄像头固有的功能，没有跟机器人头部运动等外部设备联动，在机器人与用户互动时，需要人不停的调整位置或者调整摄像机的状态进行识别，主要表现为使用起来不方便，无法做到实时追踪。
有鉴于上述的缺陷，本设计人，积极加以研究创新，以期创设一种新型结构的基于人脸检测的互动机器人，使其更具有产业上的利用价值。
实用新型内容
为解决上述技术问题，本实用新型的目的是提供一种基于人脸检测的互动机器人，使用人脸识别技术能够追踪人脸，根据用户前后左右移动位置实时调整机器人头部上下左右转动，使机器人头部正对用户进行问答交互。
本实用新型的基于人脸检测的互动机器人，包括
-摄像头，位于所述机器人头部正中间，用于采集含有人脸的图像或视频流；
-人脸识别模块，与摄像头连接，用于识别出图像或视频流中的人脸；
-距离传感器，用于检测用户相对机器人的距离；
-控制主机，连接所述人脸识别模块与距离传感器，根据所述距离传感器检测到用户相对机器人的距离，判断用户是否进入检测范围，并控制所述人脸识别模块是否进行人脸检测；
-人脸位置计算模块，与所述控制主机连接，根据人脸在图像中的位置，计算用户对摄像头是否偏移以及偏移位置；
-头部控制器，与所述人脸位置计算模块连接，并连接有电机转动角度计算模块，所述电机转动角度计算模块通过所述头部控制器根据所述人脸位置计算模块计算出的偏移数据换算出使机器人正对用户头部电机所要转动的角度；
-头部电机驱动器，与所述电机转动角度计算模块连接，根据电机转动角度计算模块计算出的角度驱动机器人头部电机转动相应的角度，使机器人的头部正对用户。
进一步的，还包括与所述控制主机连接的云计算平台和动作表情互动模块，所述云计算平台具有人脸数据库，所述控制主机根据所述人脸识别模块检测出的人脸查询所述人脸数据库并进行比对，根据比对结果控制所述动作表情互动模块是否做出相应的动作与表情。
进一步的，所述控制主机还连接有语音采集模块和语音输出模块；所述云计算平台还具有语音识别模块、语义解析模块和智能回答模块；所述控制主机根据所述语音采集模块采集的语音通过所述语音识别模块、语义解析模块和智能回答模块控制所述语音输出模块做出回答。
进一步的，所述云计算平台与所述控制主机无线连接。
进一步的，所述机器人通过以下方法与用户进行互动，所述方法包括步骤：
(1)判断用户是否在机器人的检测范围内，若在，唤醒处于休眠模式的机器人执行下一步，若不在，继续检测；
(2)通过人脸识别技术识别出人脸；
(3)根据人脸在整个图幅中的位置，确定用户对摄像头是否偏移以及偏移位置；
(4)若用户不在摄像头正中间，则调整头部的上下左右角度使摄像头正对用户；
(5)当不再捕获到人脸时，回正机器人头部。
进一步的，所述方法在进行人脸追踪过程中还可同时进行问询操作。
进一步的，所述方法在问询操作时，还可根据检测到的人脸通过对比人脸数据库，辨识用户分类，为不同类用户提供差异化服务。
借由上述方案，本实用新型通过人脸追逐，能实时调整头部角度，使头部正对用户，可以为后续进一步人脸识别提供更可靠的数据来源，此外也带来了更好的科技感和用户体验；同时通过对人脸的识别可以判断用户等级，进而为不同用户提供不同服务，提供了良好的支持。
上述说明仅是本实用新型技术方案的概述，为了能够更清楚了解本实用新型的技术手段，并可依照说明书的内容予以实施，以下以本实用新型的较佳实施例并配合附图详细说明如后。
附图说明
图1是本实用新型的机器人的系统框架图；
图2是本实用新型的机器人的互动流程图。
具体实施方式
下面结合附图和实施例，对本实用新型的具体实施方式作进一步详细描述。以下实施例用于说明本实用新型，但不用来限制本实用新型的范围。
参见图1，本实用新型一较佳实施例所述的一种基于人脸检测的互动机器人，包括
-摄像头，位于机器人头部正中间，用于采集含有人脸的图像或视频流；
-人脸识别模块，与摄像头连接，用于识别出图像或视频流中的人脸；
-距离传感器，用于检测用户相对机器人的距离；
-控制主机，连接人脸识别模块与距离传感器，根据距离传感器检测到用户相对机器人的距离，判断用户是否进入检测范围，并控制人脸识别模块是否进行人脸检测；
-人脸位置计算模块，与控制主机连接，根据人脸在图像中的位置，计算用户对摄像头是否偏移以及偏移位置；
-头部控制器，与人脸位置计算模块连接，并连接有电机转动角度计算模块，电机转动角度计算模块通过头部控制器根据人脸位置计算模块计算出的偏移数据换算出使机器人正对用户头部电机所要转动的角度；
-头部电机驱动器，与电机转动角度计算模块连接，根据电机转动角度计算模块计算出的角度驱动机器人头部电机转动相应的角度，使机器人的头部正对用户。
本实用新型通过人脸识别技术能够追踪人脸，根据用户前后左右移动位置实时调整机器人头部上下左右转动，使机器人头部正对用户，大大提高了用户体验；同时不需要人不停的调整机器人位置，即可使机器人自动追踪用户。
为提升交互效果，本实用新型还包括与控制主机连接的云计算平台和动作表情互动模块，云计算平台具有人脸数据库，控制主机根据人脸识别模块检测出的人脸查询人脸数据库并进行比对，根据比对结果控制动作表情互动模块是否做出相应的动作与表情；控制主机还连接有语音采集模块和语音输出模块；云计算平台还具有语音识别模块、语义解析模块和智能回答模块；控制主机根据语音采集模块采集的语音通过语音识别模块、语义解析模块和智能回答模块控制语音输出模块做出回答。
本实用新型将机器人与云计算平台相结合，使机器人可以自由流畅的与用户对话，机器人还可根据识别到的不同身份与其进行沟通交流或提供特定的优先级服务，并且具有丰富的表情动作，带来了更好的科技感和用户体验。
为使一台云计算平台能够服务于多个机器人，本实用新型中云计算平台与控制主机无线连接。即可使人脸数据库共享给多个机器人，使语音识别模块、语义解析模块和智能回答模块按照时序为多个机器人提供问询答案。
如图2所示，本实用新型的机器人通过以下方法与用户进行互动，互动方法包括步骤：
(1)判断用户是否在机器人的检测范围内，若在，唤醒处于休眠模式的机器人执行下一步，若不在，继续检测；
(2)通过人脸识别技术识别出人脸；
(3)根据人脸在整个图幅中的位置，确定用户对摄像头是否偏移以及偏移位置；
(4)若用户不在摄像头正中间，则调整头部的上下左右角度使摄像头正对用户；
(5)当不再捕获到人脸时，回正机器人头部。
当然，在进行人脸追踪过程中还可同时进行问询操作，在问询操作时，还可根据检测到的人脸通过对比人脸数据库，辨识用户分类，为不同类用户提供差异化服务。
本实用新型的工作原理如下：用户到达机器人面前，机器人通过人脸识别技术识别出人脸；根据人脸在整个图幅中的位置，确定用户对摄像头是否偏移以及偏移位置；若用户不再摄像头正中间，则调整头部的上下左右角度使机器人头部正对用户；通过不断的追踪人脸并实时地调整机器人头部，使机器人头部一直正对用户，与用户面对面交流；识别出人脸后，从人脸数据库中进行比对，从而辨识用户分类，为不同类用户提供差异化服务；当不再捕获到人脸时，回正机器人头部。
以上所述仅是本实用新型的优选实施方式，并不用于限制本实用新型，应当指出，对于本技术领域的普通技术人员来说，在不脱离本实用新型技术原理的前提下，还可以做出若干改进和变型，这些改进和变型也应视为本实用新型的保护范围。
Claims (4)
1.一种基于人脸检测的互动机器人，其特征在于：包括
-摄像头，位于所述机器人头部正中间，用于采集含有人脸的图像或视频流；
-人脸识别模块，与摄像头连接，用于识别出图像或视频流中的人脸；
-距离传感器，用于检测用户相对机器人的距离；
-控制主机，连接所述人脸识别模块与距离传感器，根据所述距离传感器检测到用户相对机器人的距离，判断用户是否进入检测范围，并控制所述人脸识别模块是否进行人脸检测；
-人脸位置计算模块，与所述控制主机连接，根据人脸在图像中的位置，计算用户对摄像头是否偏移以及偏移位置；
-头部控制器，与所述人脸位置计算模块连接，并连接有电机转动角度计算模块，所述电机转动角度计算模块通过所述头部控制器根据所述人脸位置计算模块计算出的偏移数据换算出使机器人正对用户头部电机所要转动的角度；
-头部电机驱动器，与所述电机转动角度计算模块连接，根据电机转动角度计算模块计算出的角度驱动机器人头部电机转动相应的角度，使机器人的头部正对用户。
2.根据权利要求1所述的基于人脸检测的互动机器人，其特征在于：还包括与所述控制主机连接的云计算平台和动作表情互动模块，所述云计算平台具有人脸数据库，所述控制主机根据所述人脸识别模块检测出的人脸查询所述人脸数据库并进行比对，根据比对结果控制所述动作表情互动模块是否做出相应的动作与表情。
3.根据权利要求2所述的基于人脸检测的互动机器人，其特征在于：所述控制主机还连接有语音采集模块和语音输出模块；所述云计算平台还具有语音识别模块、语义解析模块和智能回答模块；所述控制主机根据所述语音采集模块采集的语音通过所述语音识别模块、语义解析模块和智能回答模块控制所述语音输出模块做出回答。
4.根据权利要求3所述的基于人脸检测的互动机器人，其特征在于：所述云计算平台与所述控制主机无线连接。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201621078446.7U CN206331472U (zh) | 2016-09-26 | 2016-09-26 | 一种基于人脸检测的互动机器人 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201621078446.7U CN206331472U (zh) | 2016-09-26 | 2016-09-26 | 一种基于人脸检测的互动机器人 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN206331472U true CN206331472U (zh) | 2017-07-14 |
Family
ID=59286650
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201621078446.7U Active CN206331472U (zh) | 2016-09-26 | 2016-09-26 | 一种基于人脸检测的互动机器人 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN206331472U (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106355242A (zh) * | 2016-09-26 | 2017-01-25 | 苏州小璐机器人有限公司 | 一种基于人脸检测的互动机器人 |
| CN107908008A (zh) * | 2017-12-28 | 2018-04-13 | 许峰 | 一种自移动ar显示屏 |
| CN109108968A (zh) * | 2018-08-17 | 2019-01-01 | 深圳市三宝创新智能有限公司 | 机器人头部运动调整的交互方法、装置、设备和存储介质 |
| CN109159129A (zh) * | 2018-08-03 | 2019-01-08 | 深圳市益鑫智能科技有限公司 | 一种基于人脸表情识别的智能陪伴机器人 |
-
2016
- 2016-09-26 CN CN201621078446.7U patent/CN206331472U/zh active Active
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106355242A (zh) * | 2016-09-26 | 2017-01-25 | 苏州小璐机器人有限公司 | 一种基于人脸检测的互动机器人 |
| CN107908008A (zh) * | 2017-12-28 | 2018-04-13 | 许峰 | 一种自移动ar显示屏 |
| CN109159129A (zh) * | 2018-08-03 | 2019-01-08 | 深圳市益鑫智能科技有限公司 | 一种基于人脸表情识别的智能陪伴机器人 |
| CN109108968A (zh) * | 2018-08-17 | 2019-01-01 | 深圳市三宝创新智能有限公司 | 机器人头部运动调整的交互方法、装置、设备和存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106355242A (zh) | 一种基于人脸检测的互动机器人 | |
| CN206331472U (zh) | 一种基于人脸检测的互动机器人 | |
| Luber et al. | People tracking in rgb-d data with on-line boosted target models | |
| CN109571499A (zh) | 一种智能导航引领机器人及其实现方法 | |
| WO2021068588A1 (zh) | 车位及其方向角度检测方法、装置、设备及介质 | |
| CN204480251U (zh) | 一种驾驶人身体条件自助检测系统 | |
| CN108055501A (zh) | 一种目标检测及跟踪的视频监控系统及方法 | |
| CN106682603B (zh) | 一种基于多源信息融合的实时驾驶员疲劳预警系统 | |
| CN107423674A (zh) | 一种基于人脸识别的寻人方法、电子设备及存储介质 | |
| CN113223035B (zh) | 笼养鸡智能巡检系统 | |
| CN110633612B (zh) | 一种巡检机器人的监控方法及系统 | |
| CN110032966A (zh) | 用于智能服务的人体接近检测方法、智能服务方法及装置 | |
| WO2011016649A2 (ko) | 얼굴변화 검출 시스템 및 얼굴변화 감지에 따른 지능형 시스템 | |
| CN106340071A (zh) | 一种基于云计算的智能教室系统 | |
| CN106227216B (zh) | 面向居家老人的家庭服务机器人 | |
| CN105022999A (zh) | 一种人码伴随实时采集系统 | |
| CN110059611A (zh) | 一种智能化教室空余座位识别方法 | |
| CN105759650A (zh) | 一种用于智能机器人系统实时跟踪人脸的方法 | |
| CN107133611A (zh) | 一种课堂学生点头率识别与统计方法及装置 | |
| CN113936340B (zh) | 一种基于训练数据采集的ai模型训练方法及装置 | |
| CN108737785B (zh) | 基于tof 3d摄像机的室内跌倒自动检测系统 | |
| CN108961276B (zh) | 基于视觉伺服的配电线路巡检数据自动采集方法及系统 | |
| CN107862713A (zh) | 针对轮询会场的摄像机偏转实时检测预警方法及模块 | |
| KR20180092033A (ko) | 부품 등록기 | |
| CN110716504B (zh) | 一种基于多闭环串级控制的滚球系统运动控制方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| GR01 | Patent grant | ||
| GR01 | Patent grant |