CN106182024A - 一种可利用图像进行步态检测的家用服务机器人 - Google Patents

一种可利用图像进行步态检测的家用服务机器人 Download PDF

Info

Publication number
CN106182024A
CN106182024A CN201610541834.2A CN201610541834A CN106182024A CN 106182024 A CN106182024 A CN 106182024A CN 201610541834 A CN201610541834 A CN 201610541834A CN 106182024 A CN106182024 A CN 106182024A
Authority
CN
China
Prior art keywords
gait
module
image
pedestrian
service robot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610541834.2A
Other languages
English (en)
Inventor
张德馨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TIANJIN ISECURE TECHNOLOGY Co Ltd
Original Assignee
TIANJIN ISECURE TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TIANJIN ISECURE TECHNOLOGY Co Ltd filed Critical TIANJIN ISECURE TECHNOLOGY Co Ltd
Priority to CN201610541834.2A priority Critical patent/CN106182024A/zh
Publication of CN106182024A publication Critical patent/CN106182024A/zh
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/008Manipulators for service tasks
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19613Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19617Surveillance camera constructional details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Image Analysis (AREA)
  • Manipulator (AREA)

Abstract

本发明涉及一种可利用图像进行步态检测的家用服务机器人,包括具有轮式行走机构的家用服务机器人本体;所述家用服务机器人本体包括电源模块、视频监控模块、存储模块、无线传输模块、控制器:所述电源模块、视频采集模块、存储模块、无线传输模块分别与所述控制器相连接;所述视频监控模块包括两个图像传感器,所述控制器包括基于图像的步态检测单元。本发明通过识别该行人目标的身份,并在识别为主人时输出问候语音,从而提高了机器人的智能化程度,提高了交互性。

Description

一种可利用图像进行步态检测的家用服务机器人
技术领域
本发明属于智能机器人技术领域,具体涉及一种可利用图像进行步态检测的家用服务机器人。
背景技术
目前,随着科技发展和社会进步,人们生活节奏加快,呆在家里的时间越来越少,因此产生了对家用服务机器人的需求,但目前的家用服务机器人功能单一,仅具有简单的视频监控功能,无法通过步态识别行人以判断行人身份,无法与主人有效进行主动交互。
发明内容
本发明的目的在于解决上述的技术问题而提供一种可利用图像进行步态检测的家用服务机器人。
为实现上述目的,本发明采用如下技术方案:
一种可利用图像进行步态检测的家用服务机器人,包括具有轮式行走机构的家用服务机器人本体;所述家用服务机器人本体包括电源模块、视频监控模块、存储模块、无线传输模块、控制器:所述电源模块、视频采集模块、存储模块、无线传输模块分别与所述控制器相连接;所述视频监控模块包括两个图像传感器,所述控制器包括基于图像的步态检测单元,用于从图像传感器采集的连续的图像中依次提取出单帧图像的行人目标轮廓,根据该行人目标轮廓确定该行人的步态特征,根据连续的步态特征建立该行人目标的步态变化模型,与预训练好的行人步态模型库中的步态变化模型进行对比,识别该行人目标的身份,并在识别为主人时输出问候语音。
所述提取出单帧图像的行人目标轮廓的步骤为:
首先对单帧图像进行灰度变换形成二值化图像,利用前景检测方法检测出前景图像,然后对前景图像通过边缘检测法提取人体目标轮廓。
所述在利用前景检测方法检测出前景图像后,对所述前景图像做多次腐蚀后连通成为一个区域,再通过边缘检测法获得所述前景图像的轮廓,从而获得人体目标轮廓。
所述基于图像的步态检测单元包括有:
行人目标轮廓提取模块,用于从图像传感器采集的连续的图像中依次提取出单帧图像的行人目标轮廓;
步态变化模型建立模块,用于根据该行人目标轮廓确定该行人的步态特征,根据连续的步态特征建立该行人目标的步态变化模型;
对比模块,用于将建立的该行人目标的步态变化模型与预训练好的行人步态模型库中的步态变化模型进行对比,识别该行人目标的身份;
语音输出模块,用于在识别为主人时输出问候语音。
本发明家用服务机器人通过视频监控模块采集图像后,通过基于图像的步态检测单元,从图像传感器采集的连续的图像中依次提取出单帧图像的行人目标轮廓,根据该行人目标轮廓确定该行人的步态特征,根据连续的步态特征建立该行人目标的步态变化模型,与预训练好的行人步态模型库中的步态变化模型进行对比,识别该行人目标的身份,并在识别为主人时输出问候语音,从而提高了机器人的智能化程度,提高了交互性。
附图说明
图1为本发明实施例提供的可利用图像进行步态检测的家用服务机器人的原理结构图;
图2为本发明实施例提供的基于图像的步态检测单元的检测流程图。
具体实施方式
下面,结合实例对本发明的实质性特点和优势作进一步的说明,但本发明并不局限于所列的实施例。
参见图1所示,一种可利用图像进行步态检测的家用服务机器人,包括具有轮式行走机构的家用服务机器人本体;所述家用服务机器人本体包括电源模块、视频监控模块、存储模块、无线传输模块、控制器:所述电源模块、视频采集模块、存储模块、无线传输模块分别与所述控制器相连接;所述视频监控模块包括两个图像传感器,所述控制器包括基于图像的步态检测单元,用于从图像传感器采集的连续的图像中依次提取出单帧图像的行人目标轮廓,根据该行人目标轮廓确定该行人的步态特征,根据连续的步态特征建立该行人目标的步态变化模型,与预训练好的行人步态模型库中的步态变化模型进行对比,识别该行人目标的身份,并在识别为主人时输出问候语音。
具体的,本发明中,所述提取出单帧图像的行人目标轮廓的步骤为:
首先对单帧图像进行灰度变换形成二值化图像,利用前景检测方法检测出前景图像,然后对前景图像通过边缘检测法提取人体目标轮廓。
具体的,本发明中,所述在利用前景检测方法检测出前景图像后,对所述前景图像做多次腐蚀后连通成为一个区域,再通过边缘检测法获得所述前景图像的轮廓,从而获得人体目标轮廓。
本发明中,所述基于图像的步态检测单元包括有:
行人目标轮廓提取模块,用于从图像传感器采集的连续的图像中依次提取出单帧图像的行人目标轮廓;
步态变化模型建立模块,用于根据该行人目标轮廓确定该行人的步态特征,根据连续的步态特征建立该行人目标的步态变化模型;
对比模块,用于将建立的该行人目标的步态变化模型与预训练好的行人步态模型库中的步态变化模型进行对比,识别该行人目标的身份;
语音输出模块,用于在识别为主人时输出问候语音。
具体实现上,本发明中,所述图像传感器包括高清CMOS或标清CCD,所述高清CMOS与标清CCD分别配备有镜头。
具体实现上,本发明中,所述轮式行走机构的上端设有壳体,所述壳体的上端安装云台装置,所述云台装置上安装所述视频监控模块。
所述云台装置可以采用现有视频监控器的监控云台,可以实现俯仰以及旋转,从而使得视频监控模块可以多角度进行图像采集实现全方位室内监控。
进一步的,本发明中,所述控制器还连接有补光灯、温湿度传感器以及显示屏。所述补光灯用于在图像采集模块采集图像的光线不足时,由控制器自动控制打开并调节相应的亮度,照射在监控区域进行图像的采集。
所述温湿度传感器可以用于检测室内的温湿度情况,并将检测的温湿度情况信息在显示屏上进行显示。
本发明中,所述存储模块为SD卡,所述无线传输模块为GPRS或GSM无线模块,分别通过相应的卡槽安装在机器人本体上。
进一步的,本发明中,所述控制器连接电源电量检测模块与音频输出报警模块。
所述电源电量监测模块采用电压检测传感器,所述电压检测传感器并与所述控制器相连接,用于实时监测电源模块的电压情况并传送电压信息给所述控制器,并在监测到电源电量低于预设的阈值时,由所述音频输出报警模块输出电量低的报警提示,或在显示屏上进行提示信息的显示。
本发明家用服务机器人通过视频监控模块采集图像后,通过基于图像的步态检测单元,从图像传感器采集的连续的图像中依次提取出单帧图像的行人目标轮廓,根据该行人目标轮廓确定该行人的步态特征,根据连续的步态特征建立该行人目标的步态变化模型,与预训练好的行人步态模型库中的步态变化模型进行对比,识别该行人目标的身份,并在识别为主人时输出问候语音,从而提高了机器人的智能化程度,提高了交互性。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (4)

1.一种可利用图像进行步态检测的家用服务机器人,其特征在于,包括具有轮式行走机构的家用服务机器人本体;所述家用服务机器人本体包括电源模块、视频监控模块、存储模块、无线传输模块、控制器:所述电源模块、视频采集模块、存储模块、无线传输模块分别与所述控制器相连接;所述视频监控模块包括两个图像传感器,所述控制器包括基于图像的步态检测单元,用于从图像传感器采集的连续的图像中依次提取出单帧图像的行人目标轮廓,根据该行人目标轮廓确定该行人的步态特征,根据连续的步态特征建立该行人目标的步态变化模型,与预训练好的行人步态模型库中的步态变化模型进行对比,识别该行人目标的身份,并在识别为主人时输出问候语音。
2.根据权利要求1所述可利用图像进行步态检测的家用服务机器人,其特征在于,所述提取出单帧图像的行人目标轮廓的步骤为:
首先对单帧图像进行灰度变换形成二值化图像,利用前景检测方法检测出前景图像,然后对前景图像通过边缘检测法提取人体目标轮廓。
3.根据权利要求2所述可利用图像进行步态检测的家用服务机器人,其特征在于,所述在利用前景检测方法检测出前景图像后,对所述前景图像做多次腐蚀后连通成为一个区域,再通过边缘检测法获得所述前景图像的轮廓,从而获得人体目标轮廓。
4.根据权利要求1-3任一项所述可利用图像进行步态检测的家用服务机器人,其特征在于,所述基于图像的步态检测单元包括有:
行人目标轮廓提取模块,用于从图像传感器采集的连续的图像中依次提取出单帧图像的行人目标轮廓;
步态变化模型建立模块,用于根据该行人目标轮廓确定该行人的步态特征,根据连续的步态特征建立该行人目标的步态变化模型;
对比模块,用于将建立的该行人目标的步态变化模型与预训练好的行人步态模型库中的步态变化模型进行对比,识别该行人目标的身份;
语音输出模块,用于在识别为主人时输出问候语音。
CN201610541834.2A 2016-07-11 2016-07-11 一种可利用图像进行步态检测的家用服务机器人 Pending CN106182024A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610541834.2A CN106182024A (zh) 2016-07-11 2016-07-11 一种可利用图像进行步态检测的家用服务机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610541834.2A CN106182024A (zh) 2016-07-11 2016-07-11 一种可利用图像进行步态检测的家用服务机器人

Publications (1)

Publication Number Publication Date
CN106182024A true CN106182024A (zh) 2016-12-07

Family

ID=57476228

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610541834.2A Pending CN106182024A (zh) 2016-07-11 2016-07-11 一种可利用图像进行步态检测的家用服务机器人

Country Status (1)

Country Link
CN (1) CN106182024A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106961576A (zh) * 2017-03-10 2017-07-18 盛视科技股份有限公司 视频防尾随方法、装置及系统
CN107718014A (zh) * 2017-11-09 2018-02-23 深圳市小村机器人智能科技有限公司 高仿真机器人头部结构及其动作控制方法
CN108813863A (zh) * 2018-06-22 2018-11-16 河海大学 一种基于步态识别算法的智能跟随旅行箱
WO2019242330A1 (zh) * 2018-06-19 2019-12-26 华为技术有限公司 一种监控方法、识别方法、相关装置及系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106961576A (zh) * 2017-03-10 2017-07-18 盛视科技股份有限公司 视频防尾随方法、装置及系统
CN107718014A (zh) * 2017-11-09 2018-02-23 深圳市小村机器人智能科技有限公司 高仿真机器人头部结构及其动作控制方法
WO2019242330A1 (zh) * 2018-06-19 2019-12-26 华为技术有限公司 一种监控方法、识别方法、相关装置及系统
CN108813863A (zh) * 2018-06-22 2018-11-16 河海大学 一种基于步态识别算法的智能跟随旅行箱

Similar Documents

Publication Publication Date Title
CN106182024A (zh) 一种可利用图像进行步态检测的家用服务机器人
CN105050247B (zh) 基于表情模型识别的灯光智能调节系统及其方法
CN105072740B (zh) 一种基于视频图像处理的照明灯智能控制方法及系统
CN102638013B (zh) 基于视觉注意机制的标靶图像识别输电线路状态监测系统
CN106998499A (zh) 能够智能待机的智能电视机及其控制系统和控制方法
CN102592288B (zh) 一种光照环境变化情况下的行人目标匹配跟踪方法
CN107529250A (zh) 一种led路灯调控装置及调控方法
CN108765611A (zh) 一种动态人脸识别考勤管理系统及其管理方法
CN107688774A (zh) 一种照明与图像采集的远程联动控制系统
CN101572803A (zh) 基于视频监控的可定制式自动跟踪系统
CN105467935A (zh) 一种建筑主动式节能监控系统及方法
CN206378870U (zh) 人脸识别智能终端设备
CN213152184U (zh) 基于卷积神经网络的动物识别型野外监控系统
CN206397397U (zh) 基于人脸识别的智能门
CN109711311B (zh) 一种基于动态人脸最优帧选取方法
CN205438578U (zh) 能提高拍照清晰度的变电站无盲区智能巡检机器人
CN106157512A (zh) 一种具有火灾检测功能的家用服务机器人
CN205812243U (zh) 一种可应答来访的家用服务装置
CN104464286A (zh) 节能型图形识别车位车辆停入检测装置
CN106341926B (zh) 基于图像识别控制照明的led数字驱动电源及其控制方法
CN104994650A (zh) 灯光节能控制装置
CN206162587U (zh) 一种人脸识别装置
CN204731864U (zh) 一种一体化门禁装置
CN104464287A (zh) 一种图形识别车位车辆停入检测系统
CN105513088A (zh) 一种运动目标检测与跟踪系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20161207