CN210879684U - 一种水果识别机器人 - Google Patents
一种水果识别机器人 Download PDFInfo
- Publication number
- CN210879684U CN210879684U CN201921815470.8U CN201921815470U CN210879684U CN 210879684 U CN210879684 U CN 210879684U CN 201921815470 U CN201921815470 U CN 201921815470U CN 210879684 U CN210879684 U CN 210879684U
- Authority
- CN
- China
- Prior art keywords
- robot
- fruit
- identified
- image
- processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 235000013399 edible fruits Nutrition 0.000 title claims abstract description 225
- 230000014509 gene expression Effects 0.000 claims abstract description 68
- 210000003128 head Anatomy 0.000 claims description 74
- 238000013135 deep learning Methods 0.000 claims description 14
- 238000007781 pre-processing Methods 0.000 claims description 12
- 210000004709 eyebrow Anatomy 0.000 claims description 11
- 230000001681 protective effect Effects 0.000 claims description 7
- 230000003068 static effect Effects 0.000 claims description 7
- 238000001914 filtration Methods 0.000 claims description 5
- 230000009467 reduction Effects 0.000 claims description 5
- 239000011521 glass Substances 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 claims description 2
- 230000009471 action Effects 0.000 abstract description 14
- 230000008901 benefit Effects 0.000 description 10
- 230000000694 effects Effects 0.000 description 7
- CIWBSHSKHKDKBQ-JLAZNSOCSA-N Ascorbic acid Chemical compound OC[C@H](O)[C@H]1OC(=O)C(O)=C1O CIWBSHSKHKDKBQ-JLAZNSOCSA-N 0.000 description 6
- XEEYBQQBJWHFJM-UHFFFAOYSA-N Iron Chemical compound [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 description 6
- 238000004519 manufacturing process Methods 0.000 description 5
- 235000016709 nutrition Nutrition 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 239000004615 ingredient Substances 0.000 description 4
- OYPRJOBELJOOCE-UHFFFAOYSA-N Calcium Chemical compound [Ca] OYPRJOBELJOOCE-UHFFFAOYSA-N 0.000 description 3
- ZZZCUOFIHGPKAK-UHFFFAOYSA-N D-erythro-ascorbic acid Natural products OCC1OC(=O)C(O)=C1O ZZZCUOFIHGPKAK-UHFFFAOYSA-N 0.000 description 3
- OAICVXFJPJFONN-UHFFFAOYSA-N Phosphorus Chemical compound [P] OAICVXFJPJFONN-UHFFFAOYSA-N 0.000 description 3
- ZLMJMSJWJFRBEC-UHFFFAOYSA-N Potassium Chemical compound [K] ZLMJMSJWJFRBEC-UHFFFAOYSA-N 0.000 description 3
- 235000004789 Rosa xanthina Nutrition 0.000 description 3
- 241000220222 Rosaceae Species 0.000 description 3
- 229930003270 Vitamin B Natural products 0.000 description 3
- 229930003268 Vitamin C Natural products 0.000 description 3
- 210000001124 body fluid Anatomy 0.000 description 3
- 239000010839 body fluid Substances 0.000 description 3
- 210000004556 brain Anatomy 0.000 description 3
- 239000011575 calcium Substances 0.000 description 3
- 229910052791 calcium Inorganic materials 0.000 description 3
- 235000001465 calcium Nutrition 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 229910052742 iron Inorganic materials 0.000 description 3
- 238000012423 maintenance Methods 0.000 description 3
- 239000004579 marble Substances 0.000 description 3
- 238000000034 method Methods 0.000 description 3
- 239000011574 phosphorus Substances 0.000 description 3
- 229910052698 phosphorus Inorganic materials 0.000 description 3
- 235000014786 phosphorus Nutrition 0.000 description 3
- 239000011591 potassium Substances 0.000 description 3
- 229910052700 potassium Inorganic materials 0.000 description 3
- 235000007686 potassium Nutrition 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000001737 promoting effect Effects 0.000 description 3
- 210000000952 spleen Anatomy 0.000 description 3
- 235000019156 vitamin B Nutrition 0.000 description 3
- 239000011720 vitamin B Substances 0.000 description 3
- 235000019154 vitamin C Nutrition 0.000 description 3
- 239000011718 vitamin C Substances 0.000 description 3
- 239000000463 material Substances 0.000 description 2
- 208000013875 Heart injury Diseases 0.000 description 1
- 206010063385 Intellectualisation Diseases 0.000 description 1
- 235000014443 Pyrus communis Nutrition 0.000 description 1
- 208000027418 Wounds and injury Diseases 0.000 description 1
- NIXOWILDQLNWCW-UHFFFAOYSA-N acrylic acid group Chemical group C(C=C)(=O)O NIXOWILDQLNWCW-UHFFFAOYSA-N 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 230000033001 locomotion Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Landscapes
- Manipulator (AREA)
Abstract
本实用新型实施例公开了一种水果识别机器人,所述机器人包括:摄像头、处理器、控制部件和机器人本体;其中,所述摄像头用于采集待识别水果的图像;所述处理器与摄像头电连接,用于接收待识别水果的图像,并对待识别水果的图像进行图像识别,得到识别结果,以及根据所述识别结果确定机器人控制指令;所述控制部件与处理器电连接,用于接收机器人控制指令,并执行机器人控制指令;所述机器人本体包括至少一个具有自由度的机器人表情部件,所述至少一个机器人表情部件分别与所述控制部件电连接,至少一个机器人表情部件基于所述机器人控制指令的控制形成与所述识别结果对应的表情。实现了以表情动作的形式对识别水果的种类进行展示讲解的目的。
Description
技术领域
本实用新型实施例涉及人工智能机器人领域,尤其涉及一种水果识别机器人。
背景技术
随着计算机技术的不断向智能化方向发展,机器人应用领域的不断扩展和深化,机器人技术正在各行各业发挥着至关重要的影响,让机器人认识世界的深度学习技术更是未来发展的必然趋势。
目前,机器人通过深度学习技术可以对物体种类进行识别。但是现有的对物体种类的识别,都是完全机械化的识别,而对识别的物体没有针对性的丰富的展示讲解,对用户来说这种识别的结果形式比较单一,不利于用户对需识别的物体有详细和丰富的认识和了解。
实用新型内容
本实用新型实施例提供一种水果识别机器人,实现了以表情动作的形式对识别水果的种类进行展示讲解的目的。
本实用新型实施例提供一种水果识别机器人,所述机器人包括:摄像头、处理器、控制部件和机器人本体。
其中,所述摄像头用于采集待识别水果的图像;
所述处理器,与所述摄像头电连接,用于接收所述待识别水果的图像,并对待识别水果的图像进行图像识别,得到识别结果,以及根据所述识别结果确定机器人控制指令;
所述控制部件,与所述处理器电连接,用于接收所述机器人控制指令,并执行所述机器人控制指令;
所述机器人本体包括:至少一个具有自由度的机器人表情部件,所述至少一个机器人表情部件分别与所述控制部件电连接,所述至少一个机器人表情部件基于所述机器人控制指令的控制形成与所述识别结果对应的表情。
进一步的,所述机器人本体包括机器人本体头部和机器人本体身体部,所述机器人本体头部包括两个眉毛部件、两个眼部部件和一个嘴部部件;
所述处理器根据识别结果确定所述两个眉毛部件、所述两个眼部部件和所述嘴部部件的控制指令;
所述控制部件执行所述各部件的控制指令,以控制所述两个眉毛部件、所述两个眼部部件和所述嘴部部件形成与所述识别结果对应的表情。
进一步的,所述机器人本体头部还包括头部舵机组,所述头部舵机组用于根据机器人控制指令控制所述机器人本体头部在所述机器人头部所在平面周向转动。
进一步的,所述识别结果包括:所述待识别水果的种类,其中,所述待识别水果的种类与所述机器人本体头部中的各表情部件的控制指令对应关系预先存储于所述处理器中。
进一步的,所述处理器中包括图像预处理模块和深度学习计算平台;其中,
所述图像预处理模块,用于对接收到的所述待识别水果的图像进行预处理,其中,所述预处理包括图像缩放、剪裁、降噪、滤波的至少一项;
所述深度学习计算平台,用于将预处理后的待识别水果的图像进行分析和识别,得到所述待识别水果的识别结果。
进一步的,所述机器人还包括:
音响,所述音响为至少两个,分别与所述处理器电连接,用于接收所述待识别水果的识别结果,并进行语音播放;
LCD显示屏,与所述处理器电连接,用于接收所述待识别水果的识别结果,并显示。
进一步的,所述处理器还用于根据所述待识别水果的识别结果,确定所述待识别水果的属性信息,并将所述待识别水果的属性信息、所述识别结果和所述待识别水果的图像发送至所述音箱和所述LCD显示屏。
进一步的,所述摄像头采集的所述待识别水果的图像包括下述至少一项:所述待识别水果的静态图像和动态视频。
进一步的,所述机器人本体设置在机器人底座上,所述机器人底座还包括机器人本体防护罩;
其中,所述机器人本体防护罩为一圆形透明玻璃罩,用于将所述机器人本体罩住,保护所述机器人本体。
进一步的,所机器人底座设置在机器人台面上,所述机器人台面上设置有展示盘,所述展示盘用于承载待识别水果,其中所述展示盘在所述摄像头的拍摄范围内。
本实用新型实施例通过摄像头采集待识别水果的图像,处理器接收根据接收到的待识别水果的图像,对所述待识别水果的图像进行预处理,然后通过处理器中的深度学习平台对预处理后的待识别水果的图像进行分析和识别,确定待识别水果的种类,根据待识别水果的种类及待识别水果的种类与机器人本体头部中的各表情部件的控制指令的对应关系确定机器人的控制指令,控制部件根据接收到的机器人控制指令,控制机器人本体头部中的各表情部件形成与待识别水果种类对应的表情及控制机器人头部在机器人头部所在平面的周向转动。由于机器人不仅可对待识别水果的种类进行识别,还可根据待识别水果的种类控制机器人头部中各表情部件形成与待识别水果种类对应的表情及控制机器人头部在机器人头部所在平面的周向转动,机器人对待识别水果的种类以表情动作这种更丰富形象的方式进行展示讲解,使用户对待识别水果的种类有了更丰富和详细的认识和了解,实现了以表情动作的形式对识别水果的种类进行展示讲解的目的。
附图说明
图1是本实用新型实施例一中的识别水果机器人结构示意图;
图2是本实用新型实施例一中的识别水果机器人轴视结构示意图;
图3是本实用新型实施例二中的识别水果机器人的结构示意图;
图4是本实用新型实施例二中的机器人展台的结构示意图。
其中,1-摄像头;2-处理器;3-控制部件;4-机器人本体;5-表情部件;6-头部舵机组;7-音响;8-LCD显示屏;9-机器人底座;10-机器人本体防护罩;11-机器人台面;12-展示盘;13-固定支架;14-机器人展台;15-展台门;21-预处理模块;22-深度学习计算平台;41-机器人本体头部;42-机器人本体身体部;51-眉毛部件;52-眼部部件;53-嘴部部件。
具体实施方式
下面结合附图和实施例对本实用新型作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本实用新型,而非对本实用新型的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本实用新型相关的部分而非全部结构。
实施例一
图1为本实用新型实施例提供的识别水果机器人结构示意图,本实施例可适用于水果种类的识别的情况,如图1所示,该识别水果的机器人包括:处理器2、控制部件3和机器人本体4,参见图2,图2是本实用新型实施例提供的识别水果机器人的轴视结构示意图,其中,机器人还包括摄像头1。
其中,摄像头1,用于采集待识别水果的图像。示例性的,摄像头1可以是具有自动调光、自动对焦和自动旋转等一系列功能的摄像头,摄像头1可根据外界环境的不同自动调整光线的明暗,也可以根据待识别水果的位置自动调整摄像头的镜头,使摄像头的镜头可对准待识别水果;待识别水果可以是用户想知道的水果的种类的一个水果或几个水果。
可选的,摄像头1采集的待识别水果的图像包括下述至少一项:待识别水果的静态图像和动态视频。
示例性的,静态图像可以是摄像头拍摄的一张或几张待识别水果的照片,动态视频可以是摄像头拍摄的一段或者几段待识别水果的动态图像,例如,若待识别水果静止放置,这样摄像头采集的待识别水果的图像为待识别水果的静态图像,即待识别水果的一张或几张照片;若待识别水果放置于用户手中,在摄像头采集图像的过程中,用户的手有晃动或者移动,即待识别水果并非静止状态,那么摄像头采集的待识别水果的图像为待识别水果的动态视频,即待识别水果的一段或几段动态图像。
在上述实施例中,摄像头采集的待识别水果的图像为待识别水果的静态图像和动态视频中至少一种,这样设置的好处在于,本实用新型实施例提供的机器人不会因为待识别水果的放置状态而影响待识别水果的识别结果,可以最大程度满足用户的需求,提供了良好的用户体验。
处理器2,与摄像头1电连接,用于接收待识别水果的图像,并对待识别水果的图像进行图像识别,得到识别结果;可选的,识别结果包括:待识别水果的种类,其中,待识别水果的种类与机器人本体头部中的各表情部件的控制指令对应关系预先存储于处理器中。处理器2还用于根据识别结果确定机器人控制指令,具体的,基于待识别水果的种类与机器人本体头部中的各表情部件的控制指令对应关系、水果的识别结果确定机器人控制指令。
可选的,处理器2还用于根据待识别水果的识别结果,确定待识别水果的属性信息,其中,待识别水果的识别结果与待识别水果的属性信息的对应关系预先存储于处理器2中,示例性的,待识别水果的属性信息可以是待识别水果中所含营养成分和营养价值等信息。例如,待识别水果的识别结果为苹果,苹果的属性信息包括:苹果,又名频婆、天然子,有“智慧果”、“记忆果”的美称,苹果素来享有“水果之王”的美誉,苹果属于蔷薇科大宗水果,苹果富含维生素B、维生素C及钙、磷、钾和铁等构成大脑所必须的营养成分,苹果益脾、生津、醒酒。
在上述实施例中,处理器中预先存储有待识别水果的识别结果与待识别水果的属性信息的对应关系的好处在于,当机器人识别出待识别水果的种类后,根据待识别水果的识别结果可以详细的了解待识别水果的一些相关信息,使用户对待识别的水果有更加丰富和全面的认识和了解。
可选的,处理器2中包括图像预处理模块21和深度学习计算平台22。
其中,图像预处理模块21,用于对接收到的待识别水果的图像进行预处理,其中,预处理包括图像缩放、剪裁、降噪和滤波的至少一项。示例性的,处理器根据接收摄像头采集的待识别水果的图像,对图像进行缩放、剪裁、降噪和滤波等操作,若采集的图像是动态视频,则处理器首先将动态视频拆解成每一帧,然后再将动态视频的每一帧进行缩放、剪裁、降噪和滤波等操作,使图像的噪声减少,方便深度学习计算平台对图像进行分析与识别。
深度学习计算平台22,用于将预处理后的待识别水果的图像进行分析和识别,得到待识别水果的识别结果。示例性的,深度学习计算平台用于将预处理后的待识别水果的图像进行分析和识别,得到待识别水果的识别结果,可以是对预处理后的待识别水果进行特征提取,然后根据特征提取的结果来确定待识别水果的种类,例如,深度学习计算平台接收到预处理后的待识别水果的图像,对预处理后的待识别水果的图像进行特征提取,得出待识别水果是苹果的概率为0.7,待识别水果是梨的概率为0.2,待识别水果是橘子的概率为0.1,则处理器根据得出的结果确定待识别水果的种类为苹果。
在上述实施例中,在机器人中设置深度学习平台的好处在于,将机器人与深度学习计算平台相结合,使机器人可以识别多种种类的水果,实现了机器人和深度学习计算平台的结合,形成了一种可识别水果种类的人工智能机器人。
控制部件3,与处理器2电连接,用于接收机器人控制指令,并执行机器人控制指令;示例性的,控制部件可以为一控制器,用于接收机器人控制指令,并根据机器人控制指令控制机器人各表情部件和机器人本体头部形成与识别结果对应的表情和动作。
机器人本体4包括:至少一个具有自由度的机器人表情部件5,至少一个机器人表情部件5分别与控制部件3电连接,至少一个机器人表情部件5基于机器人控制指令的控制形成与识别结果对应的表情。示例性的,机器人本体4可以分为机器人本体头部41和机器人本体身体部42,机器人本体头部41设置有表情部件5,表情部件5可以是两个眉毛部件51、两个眼部部件52和一个嘴部部件53,待识别水果的种类与机器人本体头部中的各表情部件的控制指令对应关系可以是开发者在开发机器人时预设的,还可以是根据目标用户的需求设置,其中,目标用户可以是机器人的使用者,具体的,水果种类对应的控制指令可以是基于目标用户对水果的喜好程度确定,示例性的,两个眉毛部件51、两个眼部部件52和一个嘴部部件53形成的表情可以包括但不限于不同程度的开心和不同程度的伤心等。例如,若目标用户对待识别水果的种类喜爱,则根据喜好程度设置各表情部件一个控制指令,以形成对应的开心表情。
示例性的,控制部件执行各表情部件的控制指令,以控制各表情部件形成与识别结果对应的表情,可以是这样一个过程,比如,用户识别一个待识别水果,该用户喜欢苹果,讨厌橘子,那么在处理器中会预设这样的控制指令:当处理器识别出待识别水果的种类为苹果时,设置两个眼部部件眯起并上挑和一个嘴部部件张开并向上弯曲,表情部件形成开心表情;当处理器识别出待识别水果的种类为橘子时,设置两个眉毛部件向下弯曲成“八”字、两个眼部部件眯起并下弯和一个嘴部部件闭合并向下弯曲,表情部件形成伤心表情。这样当该用户识别待识别水果时,控制部件根据识别水果的识别结果和预设的控制指令,控制机器人表情部件形成与识别结果对应的表情,即若识别结果是苹果,则机器人两个眼部部件眯起并上挑和一个嘴部部件张开并向上弯曲,表情部件形成开心表情;若识别结果是橘子,则机器人两个眉毛部件向下弯曲成“八”字、两个眼部部件眯起并下弯和一个嘴部部件闭合并向下弯曲,表情部件形成伤心表情。
在上述实施例中,机器人设置表情部件的好处在于,机器人可根据待识别水果的识别结果和机器人本体头部中的各表情部件的控制指令对应关系,形成与识别结果对应的表情,使机器人具有丰富的表情动作展示识别的待识别水果的种类,使用户对待识别水果的种类有了更丰富和详细的认识和了解,达到了以丰富表情的形式对识别水果的种类进行展示的效果。
可选的,机器人本体头部41还包括头部舵机组6,头部舵机组6用于根据机器人控制指令控制机器人本体头部41在机器人头部41所在平面周向转动。其中,待识别水果的种类与头部舵机组的控制指令对应关系可以是开发者在开发机器人时预设的,还可以是根据目标用户的需求设置,其中,目标用户可以是机器人的使用者,具体的,水果种类对应的控制指令可以是基于目标用户对水果的喜好程度确定,示例性的,机器人本体头部在机器人头部所在平面周向转动可以是机器人本体头部在机器人本体头部所在的平面可以向前、向后、向左和向右呈360°旋转,即机器人本体头部与机器人本体身体部连接处有两个自由度。可选的,头部舵机组6可控制机器人本体头部41进行不同幅度的摇头动作,头部舵机组控制机器人本体头部在机器人本体头部所在平面周向转动。
示例性的,控制部件执行头部舵机组的控制指令,以控制机器人本体头部形成与识别结果对应的动作,可以是这样一个过程,比如,用户识别一个待识别水果,该用户喜欢苹果,讨厌橘子,那么在处理器中会预设这样的控制指令:当处理器识别出待识别水果的种类为苹果时,设置机器人本体头部向左或者向右摇头;当处理器识别出待识别水果的种类为橘子时,设置机器人本体头部向后转动,机器人本体头部背向用户。这样当该用户识别待识别水果时,控制部件根据识别水果的识别结果和预设的控制指令,控制机器人本体头部形成与识别结果对应的动作,即若识别结果是苹果,则机器人的机器人本体头部向左或者向右摇头;若识别结果是橘子,则机器人的机器人本体头部向后动作,机器人本体头部背向用户。
在上述实施例中,机器人设置头部舵机组的好处在于,机器人可根据待识别水果的识别结果和头部舵机组的控制指令对应关系,形成与识别结果对应的机器人本体头部的转动动作,使机器人具有丰富的机器人本体头部的转动动作展示识别的待识别水果的种类,达到了以机器人本体头部的转动动作的形式对识别水果的种类进行展示的效果,提高了用户体验。
在上述实施例的基础上,机器人还包括音响7,音响7为至少两个,分别与处理器2电连接,用于接收待识别水果的识别结果,并进行语音播放。可选的,音响7还用于接收处理器2发送的根据待识别水果的识别结果确定的待识别水果的属性信息,并进行语音播放。
在上述实施例的基础上,机器人还包括LCD显示屏8,与处理器2电连接,用于接收待识别水果的识别结果,并显示。可选的,LCD显示屏8还用于接收处理器2发送的根据待识别水果的识别结果确定的待识别水果的属性信息和摄像头1采集的待识别水果的图像,并显示。
示例性的,音响将接收到的经处理器传输的待识别水果的属性信息和识别结果进行语音播放。例如,待识别水果识别完成后,音响中播放的内容是:本次识别图像为苹果,苹果,又名频婆、天然子,有“智慧果”、“记忆果”的美称,苹果素来享有“水果之王”的美誉,苹果属于蔷薇科大宗水果,苹果富含维生素B、维生素C及钙、磷、钾和铁等构成大脑所必须的营养成分,苹果益脾、生津、醒酒。
示例性的,LCD显示屏将接收到的经处理器传输的待识别水果的属性信息、识别结果和待识别水果的图像进行显示。例如,待识别水果识别完成后,LCD显示屏上显示的内容有文字内容和图像内容,其中,LCD显示屏上显示的图像内容是待识别水果的图像,LCD显示屏上显示的文字内容是:苹果,又名频婆、天然子,有“智慧果”、“记忆果”的美称,苹果素来享有“水果之王”的美誉,苹果属于蔷薇科大宗水果,苹果富含维生素B、维生素C及钙、磷、钾和铁等构成大脑所必须的营养成分,苹果益脾、生津、醒酒。
在上述实施例中,机器人设置音响和LCD显示屏的好处在于,机器人可根据待识别水果的识别结果,将待识别水果的属性信息、识别结果和待识别水果的图像进行语音播放和内容显示,使机器人可以以语音播放和内容显示的方式展示讲解待识别水果的识别结果,展示讲解的方式更加丰富形象,使用户对待识别水果的种类有了更丰富和详细的认识和了解,达到了以语音播放和内容显示的形式对识别水果的种类进行展示的效果,提供了良好的用户体验。
可选的,处理器2、控制部件3和音响7可以放置于机器人本体4内部。这样就不需要在机器人本体外部再设置用于放置处理器、控制部件和音响的结构,节省了机器人制作的材料,降低了机器人制作过程中的成本。
可选的,机器人本体4设置在机器人底座9上,机器人底座9还包括机器人本体防护罩10,其中,机器人本体防护罩10为一圆形透明玻璃罩,用于将机器人本体4罩住,保护机器人本体4。
可选的,机器人本体防护罩10可以是亚克力材质。
设置机器人本体防护罩的好处在于,机器人防护罩用于保护机器人本体,避免机器人本体因人为或环境因素受到破坏,便于对机器人本体的维护;机器人本体防护罩设置为透明玻璃罩的好处在于,用户在使用机器人识别水果时,可以很直观的观察到机器人的表情动作,提供了良好的用户体验。
可选的,机器人底座9设置在机器人台面11上,机器人台面11上设置有展示盘12,展示盘12用于承载待识别水果,其中展示盘12在摄像头1的拍摄范围内。
在上述实施例中,机器人台面上设置有展示盘的好处在于,用于引导用户可将待识别水果放置在展示盘中,以使摄像头可以采集待识别水果的图像,避免了用户在放置待识别水果时,不知道水果放置的位置。
在上述实施例的技术方案中,待识别水果可以放置在展示盘中,也可以直接放置于机器人台面上,本实施例中不对此进行限定。
可选的,机器人台面11可以为白色大理石,展示盘12可以为透明白色塑料板。
在上述实施例中,机器人台面设置为白色大理石,展示盘设置为透明白色塑料板的好处在于,摄像头采集到的放置于白色大理石的机器人台面或者透明白色塑料板的展示盘上的待识别水果的图像背景干净,噪声少,方便处理器对图像的预处理,加快了处理器对图像的处理工作,提高了机器人对待识别水果的识别效率。
本实施例的方案,通过摄像头采集待识别水果的图像,处理器接收根据接收到的待识别水果的图像,对待识别水果的图像进行预处理,然后通过处理器中的深度学习平台对预处理后的待识别水果的图像进行分析和识别,确定待识别水果的种类,根据待识别水果的种类及待识别水果的种类与机器人本体头部中的各表情部件的控制指令的对应关系确定机器人的控制指令,控制部件根据接收到的机器人控制指令,控制机器人本体头部中的各表情部件形成与待识别水果种类对应的表情及控制机器人头部在机器人头部所在平面的周向转动。由于机器人不仅可对待识别水果的种类进行识别,还可根据待识别水果的种类控制机器人头部中各表情部件形成与待识别水果种类对应的表情及控制机器人头部在机器人头部所在平面的周向转动,机器人对待识别水果的种类以表情动作这种更丰富形象的方式进行展示讲解,此外,机器人还可根据待识别水果的识别结果,将待识别水果的属性信息、识别结果和待识别水果的图像进行语音播放和内容显示,使机器人可以以语音播放和内容显示的方式展示讲解待识别水果的识别结果,使展示讲解的方式更加丰富形象,使用户对待识别水果的种类有了更丰富和详细的认识和了解,提供了良好的用户体验,实现了以语音播放、内容显示和表情动作展示讲解待识别水果的种类的效果。
实施例二
图3为本实用新型实施例提供的另一种识别水果的机器人结构示意图,本实施可使用于水果种类的识别的情况,如图3所示,该识别水果的机器人包括:摄像头1和机器人本体4,参见图4,图4是本实用新型实施例提供的机器人展台14结构示意图,其中机器人展台14内部设置有处理器2和控制部件3。
可选的,如图3所示,机器人台面11上还可安装有一固定支架13,固定支架13用于将LCD显示屏8固定于机器人台面11上。
在上述实施例中,在机器人台面上安装有一个固定支架的好处在于,固定支架可以将LCD显示屏固定于机器人台面上,方便用户观看LCD显示屏上显示的内容,提供了良好的用户体验。
可选的,在机器人台面11下还可以设置一机器人展台14,用于放置处理器2、控制部件3和音响7,机器人展台14两侧还可以设置有展台门15。
在上述实施例中,设置机器人展台的好处在于,维护和检修处理器、控制部件和音响时,不需要将整个机器人本体进行拆卸,只需将展台门打开,对需进行维护和检修的装置进行维护和检修即可,有利于后期对处理器、控制部件和音响的维护和检修。
本实施例的方案,通过摄像头采集待识别水果的图像,处理器接收根据接收到的待识别水果的图像,对待识别水果的图像进行预处理,然后通过处理器中的深度学习平台对预处理后的待识别水果的图像进行分析和识别,确定待识别水果的种类,根据待识别水果的种类及待识别水果的种类与机器人本体头部中的各表情部件的控制指令的对应关系确定机器人的控制指令,控制部件根据接收到的机器人控制指令,控制机器人本体头部中的各表情部件形成与待识别水果种类对应的表情及控制机器人头部在机器人头部所在平面的周向转动。由于机器人不仅可对待识别水果的种类进行识别,还可根据待识别水果的种类控制机器人头部中各表情部件形成与待识别水果种类对应的表情及控制机器人头部在机器人头部所在平面的周向转动,机器人对待识别水果的种类以表情动作这种更丰富形象的方式进行展示讲解,此外,机器人还可根据待识别水果的识别结果,将待识别水果的属性信息、识别结果和待识别水果的图像进行语音播放和内容显示,使机器人可以以语音播放和内容显示的方式展示讲解待识别水果的识别结果,使展示讲解的方式更加丰富形象,使用户对待识别水果的种类有了更丰富和详细的认识和了解,提供了良好的用户体验,实现了以语音播放、内容显示和表情动作展示讲解待识别水果的种类的效果。
注意,上述仅为本实用新型的较佳实施例及所运用技术原理。本领域技术人员会理解,本实用新型不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本实用新型的保护范围。因此,虽然通过以上实施例对本实用新型进行了较为详细的说明,但是本实用新型不仅仅限于以上实施例,在不脱离本实用新型构思的情况下,还可以包括更多其他等效实施例,而本实用新型的范围由所附的权利要求范围决定。
Claims (10)
1.一种水果识别机器人,其特征在于,所述机器人包括:
摄像头,用于采集待识别水果的图像;
处理器,与所述摄像头电连接,用于接收所述待识别水果的图像,并对待识别水果的图像进行图像识别,得到识别结果,以及根据所述识别结果确定机器人控制指令;
控制部件,与所述处理器电连接,用于接收所述机器人控制指令,并执行所述机器人控制指令;
机器人本体,包括至少一个具有自由度的机器人表情部件,所述至少一个机器人表情部件分别与所述控制部件电连接,所述至少一个机器人表情部件基于所述机器人控制指令的控制形成与所述识别结果对应的表情。
2.根据权利要求1所述的机器人,其特征在于,所述机器人本体包括机器人本体头部和机器人本体身体部,所述机器人本体头部包括两个眉毛部件、两个眼部部件和一个嘴部部件;
所述处理器根据识别结果确定所述两个眉毛部件、所述两个眼部部件和所述嘴部部件的控制指令;
所述控制部件执行各部件的控制指令,以控制所述两个眉毛部件、所述两个眼部部件和所述嘴部部件形成与所述识别结果对应的表情。
3.根据权利要求2所述的机器人,其特征在于,所述机器人本体头部还包括头部舵机组,所述头部舵机组用于根据机器人控制指令控制所述机器人本体头部在所述机器人本体头部所在平面周向转动。
4.根据权利要求2所述的机器人,其特征在于,所述识别结果包括:所述待识别水果的种类,其中,所述待识别水果的种类与所述机器人本体头部中的各表情部件的控制指令对应关系预先存储于所述处理器中。
5.根据权利要求1所述的机器人,其特征在于,所述处理器中包括图像预处理模块和深度学习计算平台;其中,
所述图像预处理模块,用于对接收到的所述待识别水果的图像进行预处理,其中,所述预处理包括图像缩放、剪裁、降噪和滤波的至少一项;
所述深度学习计算平台,用于将预处理后的待识别水果的图像进行分析和识别,得到所述待识别水果的识别结果。
6.根据权利要求1所述的机器人,其特征在于,所述机器人还包括:
音响,所述音响为至少两个,分别与所述处理器电连接,用于接收所述待识别水果的识别结果,并进行语音播放;
LCD显示屏,与所述处理器电连接,用于接收所述待识别水果的识别结果,并显示。
7.根据权利要求6所述的机器人,其特征在于,所述处理器还用于根据所述待识别水果的识别结果,确定所述待识别水果的属性信息,并将所述待识别水果的属性信息、所述识别结果和所述待识别水果的图像发送至所述音响和所述LCD显示屏。
8.根据权利要求6所述的机器人,其特征在于,所述摄像头采集的所述待识别水果的图像包括下述至少一项:所述待识别水果的静态图像和动态视频。
9.根据权利要求1所述的机器人,其特征在于,所述机器人本体设置在机器人底座上,所述机器人底座还包括机器人本体防护罩;
其中,所述机器人本体防护罩为一圆形透明玻璃罩,用于将所述机器人本体罩住,保护所述机器人本体。
10.根据权利要求9所述的机器人,其特征在于,所机器人底座设置在机器人台面上,所述机器人台面上设置有展示盘,所述展示盘用于承载待识别水果,其中所述展示盘在所述摄像头的拍摄范围内。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201921815470.8U CN210879684U (zh) | 2019-10-25 | 2019-10-25 | 一种水果识别机器人 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201921815470.8U CN210879684U (zh) | 2019-10-25 | 2019-10-25 | 一种水果识别机器人 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN210879684U true CN210879684U (zh) | 2020-06-30 |
Family
ID=71332670
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201921815470.8U Active CN210879684U (zh) | 2019-10-25 | 2019-10-25 | 一种水果识别机器人 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN210879684U (zh) |
-
2019
- 2019-10-25 CN CN201921815470.8U patent/CN210879684U/zh active Active
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109085966B (zh) | 一种基于云计算的三维展示系统及方法 | |
Betancourt et al. | The evolution of first person vision methods: A survey | |
CN108012081B (zh) | 智能美颜方法、装置、终端和计算机可读存储介质 | |
EP3023937A1 (en) | Image segmentation method and image segmentation device | |
US8885882B1 (en) | Real time eye tracking for human computer interaction | |
CN203178918U (zh) | 一种电子设备 | |
Szwoch | FEEDB: a multimodal database of facial expressions and emotions | |
US20210150774A1 (en) | Method, device, and system for delivering recommendations | |
CN110035236A (zh) | 图像处理方法、装置和电子设备 | |
CN105807917A (zh) | 一种辅助用户识字的方法及装置 | |
US20230330541A1 (en) | Method and apparatus for man-machine interaction based on story scene, device and medium | |
US20220091809A1 (en) | Information processing device and information processing method | |
CN109074487A (zh) | 使用神经学读数将场景分割成语义分量 | |
CN210879684U (zh) | 一种水果识别机器人 | |
Lemley et al. | Eye tracking in augmented spaces: A deep learning approach | |
CN109240510B (zh) | 基于视线追踪的增强现实人机交互设备及控制方法 | |
Nakajima et al. | Incorporating audio signals into constructing a visual saliency map | |
Gupta et al. | Deep learning model based multimedia retrieval and its optimization in augmented reality applications | |
CN118587623A (zh) | 利用视觉语言模型的实例级场景识别 | |
Tzovaras | Multimodal user interfaces: from signals to interaction | |
Lomaliza et al. | Detecting pulse from head motions using smartphone camera | |
CN115731326A (zh) | 虚拟角色生成方法及装置、计算机可读介质和电子设备 | |
CN108960130A (zh) | 视频文件智能处理方法和装置 | |
CN105487660A (zh) | 基于虚拟现实技术的沉浸式舞台表演交互方法及系统 | |
US11328187B2 (en) | Information processing apparatus and information processing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
GR01 | Patent grant | ||
GR01 | Patent grant |