CN205334503U - 具有人脸识别功能的机器人 - Google Patents
具有人脸识别功能的机器人 Download PDFInfo
- Publication number
- CN205334503U CN205334503U CN201620064570.1U CN201620064570U CN205334503U CN 205334503 U CN205334503 U CN 205334503U CN 201620064570 U CN201620064570 U CN 201620064570U CN 205334503 U CN205334503 U CN 205334503U
- Authority
- CN
- China
- Prior art keywords
- robot
- face
- recognition
- unit
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Manipulator (AREA)
Abstract
本实用新型涉及一种具有人脸识别功能的机器人。该具有人脸识别功能的机器人与外部的服务器配合,包括图像采集单元、图像识别单元、通信单元以及控制器。图像采集单元用于捕捉一个以上的外部场景图像。图像识别单元用于从一个以上的外部场景图像中获取具备识别特征点的人脸图像。通信单元用于与外部的服务器进行通信。控制器连接该图像采集单元和该通信单元,用于将具备识别特征点的人脸图像通过该通信单元传输至外部的服务器进行人脸识别并接收外部的服务器回传的人脸识别结果,根据该人脸识别结果启动对应的互动模式。本实用新型通过人脸识别算法获得人脸识别结果,可以针对不同个体作出不同互动模式,从而实现了互动模式的个性化。
Description
技术领域
本实用新型涉及机器人,尤其涉及一种具有人脸识别功能的机器人。
背景技术
随着人类城市化进程的推进,人们的工作节奏不断加快,人口老龄化和空巢老人的出现,对于宠物陪伴的需求与日俱增。但是真实的宠物照料护理非常费时,而且需要一定的活动空间,对于居住面积不大的家庭是个难题。
最近几年,机器人正朝着智能化方向发展,开始具有感觉和感知等功能。因此能够与人交流的家庭陪伴型机器人逐渐成为可能。
目前家庭陪伴型机器人能够与人类进行简单的互动,例如动作的模仿和声音的模仿,但是其互动行为与真实的宠物相比还相去甚远。其中一个重要的缺失是,家庭陪伴型机器人不具备人脸识别功能,因此无法与家庭成员进行个性化的互动。
实用新型内容
本实用新型所要解决的技术问题是提供一种具有人脸识别功能的机器人,可以实现机器人尤其是家庭陪伴型机器人对人脸的识别。
本实用新型为解决上述技术问题而采用的技术方案是一种具有人脸识别功能的机器人,其与外部的服务器配合,包括图像采集单元、图像识别单元、通信单元以及控制器。图像采集单元用于捕捉一个以上的外部场景图像。图像识别单元用于从一个以上的外部场景图像中获取具备识别特征点的人脸图像。通信单元用于与外部的服务器进行通信。控制器连接该图像采集单元和该通信单元,用于将具备识别特征点的人脸图像通过该通信单元传输至外部的服务器进行人脸识别并接收外部的服务器回传的人脸识别结果,根据该人脸识别结果启动对应的互动模式。
在本实用新型的一实施例中,该控制器响应于人脸识别启动指令而开启该图像采集单元。
在本实用新型的一实施例中,该人脸识别启动指令包含在语音信号中,该机器人还包括语音信号采集单元、连接该语音信号采集单元和该控制器的语音信号识别单元,该语音信号采集单元用于采集外部输入的语音信号,该语音信号识别单元用于识别该语音信号中的人脸识别启动指令。
在本实用新型的一实施例中,该人脸识别启动指令包含在触摸信号中,该机器人还包括触摸信号检测单元、连接该触摸信号检测单元和该控制器的触摸信号识别单元,该触摸信号检测单元用于检测触摸动作以产生该触摸信号,该触摸信号识别单元用于识别该触摸信号中的人脸识别启动指令。
在本实用新型的一实施例中,该人脸识别启动指令包含在无线信号中,该机器人还包括无线信号通讯单元、连接该无线信号通讯单元和该控制器的无线信号识别单元,该无线信号通讯单元用于接收外部传输的无线信号,该无线信号识别单元用于识别该无线信号中的人脸识别启动指令。
在本实用新型的一实施例中,该控制器在选定多个图像中存在具备识别特征点的人脸图像之后还排除不具有识别特征点的人脸图像。
在本实用新型的一实施例中,该控制器用于载入与该人脸识别结果关联的特征资料库,该互动模式包含在该特征资料库中。
在本实用新型的一实施例中,该互动模式由以下参数至少其中之一定义:配合度、亲密度、以及智能度,其中该配合度表征机器人对个体的指令的配合程度,该亲密度表征机器人与个体接触的亲密程度,该智能度表征机器人的智能等级。
在本实用新型的一实施例中,该通信单元将该具备识别特征点的人脸图像传输至外部的服务器的方式包括以下其中之一:通过无线局域网传输该人脸图像到一本地服务器;通过接入互联网的无线局域网传输该人脸图像到一云端服务器;通过移动互联网传输该人脸图像到一云端服务器。
本实用新型由于采用以上技术方案,使之与现有技术相比,通过人脸识别算法获得人脸识别结果,可以针对不同个体作出不同互动模式,从而实现了互动模式的个性化。本实用新型的人脸识别的部分工作都不依赖机器人的资源进行,可以使得机器人的硬件配置和成本降低,而且提高了人脸识别的效率。
附图说明
为让本实用新型的上述目的、特征和优点能更明显易懂,以下结合附图对本实用新型的具体实施方式作详细说明,其中:
图1示出本实用新型一实施例的具有人脸识别功能的机器人的系统框图;
图2示出本实用新型另一实施例的具有人脸识别功能的机器人的系统框图;
图3示出本实用新型一实施例的人脸识别流程图。
具体实施方式
本实用新型的实施例描述机器人的人脸识别系统,该系统尤其适用于家庭陪伴型机器人。当然可以理解,该系统也可适用于其它具有高交互需求的机器人,例如商业服务机器人。在本实用新型的实施例中,将人脸识别与机器人的互动模式关联。根据识别出的不同个体,赋予机器人不同的互动模式,从而实现个性化的互动。
图1示出本实用新型一实施例的具有人脸识别功能的机器人的系统框图。参考图1所示,本实施例的机器人100包括图像采集单元101、图像识别单元102、通信单元103、执行单元104以及控制器105。图像采集单元101用于捕捉一个以上的外部场景图像,其实例是摄像头。图像采集单元101可以连续采集图像,也可以间隔一定时间采集一帧或几帧图像,视具体场合而定。图像识别单元102连接图像采集单元101,其用于从一个以上的外部场景图像中获取具备识别特征点的人脸图像。通信单元103配置为与一服务器200进行通信,以实现机器人的对外通信功能。控制器105连接图像采集单元101、通信单元103以及执行单元104,用于控制机器人的整体运作。例如控制器105可根据需要命令例如图像采集单元101的各个输入设备捕捉外部信息,或者命令例如执行单元104的设备执行相应动作。
在人脸识别的工作流程中,控制器105配置为执行如下步骤:将具备识别特征点的人脸图像通过通信单元103传输至外部的服务器200进行人脸识别;接收外部的服务器回传的人脸识别结果;根据人脸识别结果启动对应的互动模式。除此之外,控制器105还可配置为对人脸图像进行初步的处理。
本实施例的一个特点是,人脸识别的大部分工作并不利用机器人的内部资源完成,而是依靠外部的服务器。机器人100对捕捉的外部场景图像所进行的处理步骤是初步处理,旨在从中选定存在人脸的人脸图像,然后将这些人脸图像以及人脸识别请求发送给服务器200,请求执行人脸识别。服务器200配备了执行人脸识别算法的程序,可以响应于人脸识别请求,对图像进行特征点分析,并与人脸库进行比对,获得人脸识别信息。在此,服务器200中的人脸识别算法可以使用已知的算法,在此不再详细展开。
图2示出本实用新型另一实施例的具有人脸识别功能的机器人的系统框图。参考图2所示,本实施例的机器人100包括图像采集单元101、图像识别单元102、通信单元103、执行单元104以及控制器107。图像采集单元101用于捕捉一个以上的外部场景图像,其实例是摄像头。图像采集单元101可以连续采集图像,也可以间隔一定时间采集一帧或几帧图像,视具体场合而定。图像识别单元102连接图像采集单元101,其用于从一个以上的外部场景图像中获取具备识别特征点的人脸图像。语音信号采集单元106配置为采集语音信号,主要是人声信号。语音信号中包含了机器人感兴趣的各种指令。例如招呼机器人的指令、令机器人完成跑、跳等动作的指令。语音信号采集单元106的实例是麦克风。语音信号识别单元107连接语音信号采集单元106和控制器105,配置为识别语音信号中的指令。通信单元103配置为与一服务器200进行通信,以实现机器人的对外通信功能。控制器105连接图像采集单元101、语音信号采集单元106、语音信号识别单元107、通信单元103以及执行单元104,用于控制机器人的整体运作。例如控制器105可根据需要命令例如图像采集单元101、语音信号采集单元106的各个输入设备捕捉外部信息,或者命令例如执行单元104的设备执行相应动作。
在人脸识别的工作流程中,控制器105配置为执行如下步骤:将具备识别特征点的人脸图像通过通信单元103传输至外部的服务器200进行人脸识别;接收外部的服务器回传的人脸识别结果;根据人脸识别结果启动对应的互动模式。除此之外,控制器105还可配置为对人脸图像进行初步的处理。
机器人可常规地处于待机或休眠状态,等待使用者的启动(例如人声呼唤)。在一个实例中,语音信号采集单元106采集语音信号,语音信号识别单元106可以识别语音信号中的人脸识别启动指令并传输给控制器105,控制器105响应于这一启动指令,据此开启图像采集单元101开始工作。当然可以理解,控制器105可以在其它状况下开启图像采集单元101。例如控制器105响应于使用者的开关按钮开启图像采集单元101。
本实施例的一个特点是,人脸识别的大部分工作并不利用机器人的内部资源完成,而是依靠外部的服务器。机器人100对捕捉的外部场景图像所进行的处理步骤是初步处理,旨在从中选定存在人脸的人脸图像,然后将这些人脸图像以及人脸识别请求发送给服务器200,请求执行人脸识别。服务器200配备了执行人脸识别算法的程序,可以响应于人脸识别请求,对图像进行特征点分析,并与人脸库进行比对,获得人脸识别信息。在此,服务器200中的人脸识别算法可以使用已知的算法,在此不再详细展开。
在图像识别单元102中,还可以判断一外部场景图像是否包含具备识别特征点的人脸图像,如果有则获取该人脸图像,如果没有则通知图像采集单元101继续捕捉外部场景图像。
通信单元103可以使用多种方式来传输人脸图像给服务器200。例如通信单元103可通过无线局域网传输人脸图像到本地服务器。本地服务器的例子是设于家庭或者其它小型场所中的个人计算机或者工作站,其上运行人脸识别软件。人脸识别软件中可预先建立家庭成员的人脸库,供比对识别。通信单元105还可通过接入互联网的无线局域网传输人脸图像到云端服务器。云端服务器可预先获得并建立家庭成员的人脸库,供比对识别。作为替代,通信单元103还可通过移动互联网传输人脸图像到云端服务器。在商业服务机器人典型地使用云端服务器以存储足够容量的人脸库及提供足够强大的处理资源。
在上述的例子中,人脸识别启动指令是包含在语音信号中。在替代例子中,人脸识别启动指令也可以包含在触摸信号或者无线信号中。例如机器人包括触摸信号检测单元、连接该触摸信号检测单元和该控制器的触摸信号识别单元,该触摸信号检测单元用于检测触摸动作以产生该触摸信号,该触摸信号识别单元用于识别该触摸信号中的人脸识别启动指令;或者机器人包括无线信号通讯单元、连接该无线信号通讯单元和该控制器的无线信号识别单元,该无线信号通讯单元用于接收外部传输的无线信号,该无线信号识别单元用于识别该无线信号中的人脸识别启动指令。
执行单元104可包括行走机构、肢体动作机构、表情控制机构以及扬声器等。执行单元104将按照控制器105指定的各种不同互动模式与个人展开互动。可以用不同的维度来定义互动模式,例如配合度、亲密度、以及智能度。配合度表征机器人对个体的指令的配合程度。机器人可以对个体的一些指令给出积极配合,而对另一些指令不做出配合。亲密度表征机器人与个体接触的亲密程度,例如距离远近、友好动作(例如拥抱)/表情(例如笑脸)、不友好动作/表情的有无和/或频率等。智能度表征机器人的智能等级,例如记忆、运算、比较、判断、学习和逻辑推理等技能的多少。通过配合度、亲密度、以及智能度的配合,可以定义各种各样个性化的互动模式。这些互动模式还可随着机器人与个体的长期互动过程不断修正和演化,以体现互动的成果。
上述的互动模式的各个维度都可以通过执行单元104的行走机构、肢体动作机构、表情控制机构以及扬声器,或者其它可用的机构体现。例如亲密度中的距离远近可通过行走机构执行,友好/不友好动作可通过肢体动作机构执行,友好/不友好表情可通过表情控制机构执行。而机器人与人之间的语音互动可通过语音信号采集单元和扬声器执行。
当然可以理解,在不同的场合,互动模式的定义方式可以做出调整,例如在商业服务型机器人中,不同的互动模式可以反映机器人对不同个体的偏好、性格等方面的认知。无论在哪一种场合中,都可以建立不同的特征资料库,这些特征资料库可以与人脸识别结果(例如人脸识别结果指向的个体)关联,并在特征资料库中包含互动模式。控制器105可在人脸识别后载入特征资料库,从而启动其中包含的互动模式。
图3示出本实用新型一实施例的人脸识别流程图。该流程在图1、图2所示的系统中执行。参考图3所示,本实施例的一种机器人的人脸识别流程,包括以下步骤:
在步骤301,捕捉一个以上的外部场景图像;
在步骤302,从一个以上的外部场景图像中获取具备识别特征点的人脸图像;
在步骤303,将具备识别特征点的人脸图像传输至外部的服务器以供该服务器进行人脸识别;
在步骤304,接收从服务器回传的人脸识别结果;
在步骤305,根据人脸识别结果启动对应的互动模式。
在步骤302中,从一个以上的外部场景图像中获取具备识别特征点的人脸图像的步骤包括:a.判断一外部场景图像是否包含具备识别特征点的人脸图像;b.如果该外部场景图像包含具备识别特征点的人脸图像,则进入步骤d,否则进入步骤c;c.继续捕捉外部场景图像,并返回步骤a;d.获取该人脸图像。
在步骤305之前,可以载入与该人脸识别结果关联的特征资料库,该特征资料库中包含上述互动模式。
本实用新型上述实施例的具有人脸识别功能的机器人和人脸识别方法,通过搭载在机器人上的图像采集设备在场景中捕捉到图像,然后在本地做基本的人脸分析处理,找出人脸图像后上传到服务器,在服务器利用人脸识别算法对上传的人脸进行特征点分析,与人脸库进行比对,获得人脸识别结果。最后将人脸识别结果从服务器回传到机器人,可以针对不同个体作出不同互动模式,从而实现了互动模式的个性化。本实用新型的人脸识别的部分工作都不依赖机器人的资源进行,可以使得机器人的硬件配置和成本降低,而且提高了人脸识别的效率。
虽然本实用新型已参照当前的具体实施例来描述,但是本技术领域中的普通技术人员应当认识到,以上的实施例仅是用来说明本实用新型,在没有脱离本实用新型精神的情况下还可作出各种等效的变化或替换,因此,只要在本实用新型的实质精神范围内对上述实施例的变化、变型都将落在本申请的权利要求书的范围内。
Claims (9)
1.一种具有人脸识别功能的机器人,其与外部的服务器配合,其特征在于,包括:
图像采集单元,用于捕捉一个以上的外部场景图像;
图像识别单元,用于从一个以上的外部场景图像中获取具备识别特征点的人脸图像;
通信单元,用于与外部的服务器进行通信;
控制器,连接该图像识别单元和该通信单元,用于将具备识别特征点的人脸图像通过该通信单元传输至外部的服务器进行人脸识别并接收外部的服务器回传的人脸识别结果,根据该人脸识别结果启动对应的互动模式。
2.如权利要求1所述的具有人脸识别功能的机器人,其特征在于,该控制器响应于人脸识别启动指令而开启该图像采集单元。
3.如权利要求2所述的具有人脸识别功能的机器人,其特征在于,该人脸识别启动指令包含在语音信号中,该机器人还包括语音信号采集单元、连接该语音信号采集单元和该控制器的语音信号识别单元,该语音信号采集单元用于采集外部输入的语音信号,该语音信号识别单元用于识别该语音信号中的人脸识别启动指令。
4.如权利要求2所述的具有人脸识别功能的机器人,其特征在于,该人脸识别启动指令包含在触摸信号中,该机器人还包括触摸信号检测单元、连接该触摸信号检测单元和该控制器的触摸信号识别单元,该触摸信号检测单元用于检测触摸动作以产生该触摸信号,该触摸信号识别单元用于识别该触摸信号中的人脸识别启动指令。
5.如权利要求2所述的具有人脸识别功能的机器人,其特征在于,该人脸识别启动指令包含在无线信号中,该机器人还包括无线信号通讯单元、连接该无线信号通讯单元和该控制器的无线信号识别单元,该无线信号通讯单元用于接收外部传输的无线信号,该无线信号识别单元用于识别该无线信号中的人脸识别启动指令。
6.如权利要求1所述的具有人脸识别功能的机器人,其特征在于,该控制器在图像识别单元从一个以上的外部场景图像中获取具备识别特征点的人脸图像之后还排除不具备识别特征点的人脸图像。
7.如权利要求1所述的具有人脸识别功能的机器人,其特征在于,该控制器用于载入与该人脸识别结果关联的特征资料库,该互动模式包含在该特征资料库中。
8.如权利要求1所述的具有人脸识别功能的机器人,其特征在于,该互动模式由以下参数至少其中之一定义:配合度、亲密度、以及智能度,其中该配合度表征机器人对个体指令的配合程度,该亲密度表征机器人与个体接触的亲密程度,该智能度表征机器人的智能等级。
9.如权利要求1所述的具有人脸识别功能的机器人,其特征在于,该通信单元将该具备识别特征点的人脸图像传输至外部的服务器的方式包括以下其中之一:
通过无线局域网传输该人脸图像到一本地服务器;
通过接入互联网的无线局域网传输该人脸图像到一云端服务器;
通过移动互联网传输该人脸图像到一云端服务器。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201620064570.1U CN205334503U (zh) | 2016-01-22 | 2016-01-22 | 具有人脸识别功能的机器人 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201620064570.1U CN205334503U (zh) | 2016-01-22 | 2016-01-22 | 具有人脸识别功能的机器人 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN205334503U true CN205334503U (zh) | 2016-06-22 |
Family
ID=56318575
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201620064570.1U Expired - Fee Related CN205334503U (zh) | 2016-01-22 | 2016-01-22 | 具有人脸识别功能的机器人 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN205334503U (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106791681A (zh) * | 2016-12-31 | 2017-05-31 | 深圳市优必选科技有限公司 | 视频监控和人脸识别方法、装置及系统 |
-
2016
- 2016-01-22 CN CN201620064570.1U patent/CN205334503U/zh not_active Expired - Fee Related
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106791681A (zh) * | 2016-12-31 | 2017-05-31 | 深圳市优必选科技有限公司 | 视频监控和人脸识别方法、装置及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6816925B2 (ja) | 育児ロボットのデータ処理方法及び装置 | |
CN107894833B (zh) | 基于虚拟人的多模态交互处理方法及系统 | |
KR102558437B1 (ko) | 질의 응답 처리 방법 및 이를 지원하는 전자 장치 | |
WO2017215297A1 (zh) | 云端互动系统及其多感知型智能机器人和感知互动方法 | |
US8583287B2 (en) | Robotic system, robot control method and robot control program | |
CN109176535B (zh) | 基于智能机器人的交互方法及系统 | |
US8538750B2 (en) | Speech communication system and method, and robot apparatus | |
US20230305530A1 (en) | Information processing apparatus, information processing method and program | |
US20170185276A1 (en) | Method for electronic device to control object and electronic device | |
CN109623843B (zh) | 基于云计算智能决策算法的家庭智能服务机器人 | |
WO2018108176A1 (zh) | 机器人视频通话控制方法、装置及终端 | |
CN105042789B (zh) | 一种智能空调的控制方法及系统 | |
US8103382B2 (en) | Method and system for sharing information through a mobile multimedia platform | |
KR20170087142A (ko) | 센서 활용 방법 및 이를 구현한 전자 장치 | |
CN109857929A (zh) | 一种用于智能机器人的人机交互方法及装置 | |
US20220371178A1 (en) | Information processing apparatus, information processing method, and program | |
CN112437226A (zh) | 图像处理方法、设备及存储介质 | |
US20190193261A1 (en) | Information processing device, information processing method, and non-transitory computer-readable recording medium for acquiring information of target | |
CN107452381B (zh) | 一种多媒体语音识别装置及方法 | |
CN106997449A (zh) | 具有人脸识别功能的机器人和人脸识别方法 | |
CN108388399B (zh) | 虚拟偶像的状态管理方法及系统 | |
CN205334503U (zh) | 具有人脸识别功能的机器人 | |
WO2021036717A1 (zh) | 一种目标用户锁定方法及电子设备 | |
JP2018186326A (ja) | ロボット装置及びプログラム | |
CN114283453A (zh) | 流浪动物的信息获取方法、装置、存储介质及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160622 Termination date: 20210122 |
|
CF01 | Termination of patent right due to non-payment of annual fee |