CN104772748B - 一种社交机器人 - Google Patents

一种社交机器人 Download PDF

Info

Publication number
CN104772748B
CN104772748B CN201510156046.7A CN201510156046A CN104772748B CN 104772748 B CN104772748 B CN 104772748B CN 201510156046 A CN201510156046 A CN 201510156046A CN 104772748 B CN104772748 B CN 104772748B
Authority
CN
China
Prior art keywords
binocular vision
vision camera
gripper shoe
support column
user terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201510156046.7A
Other languages
English (en)
Other versions
CN104772748A (zh
Inventor
张新宇
符国和
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
East China Normal University
Original Assignee
East China Normal University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by East China Normal University filed Critical East China Normal University
Priority to CN201510156046.7A priority Critical patent/CN104772748B/zh
Publication of CN104772748A publication Critical patent/CN104772748A/zh
Application granted granted Critical
Publication of CN104772748B publication Critical patent/CN104772748B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Manipulator (AREA)

Abstract

本发明属于人机交互智能领域,涉及一种针对室内人员进行实时检测并通过拍照记录下当前人员的形态分享到社交网络的机器人,包括底盘,底盘设有动力装置,底盘顶上设置有一支撑装置,支撑装置上设有一用户终端;动力装置可在用户终端的控制下带动底盘运动;支撑装置上端设有双目视觉摄像头,双目视觉摄像头与支撑装置上端铰接,且双目视觉摄像头可相对于支撑装置转动至不同的角度,双目视觉摄像头获取前方环境的深度路径信息,双目视觉摄像头在用户终端的控制下对人脸进行拍照并传输至用户终端,用户终端将双目视觉摄像头拍得的照片存储并分享至社交网络。本发明造价成本低,灵活性好,操作简单,人机交互多元化充分。

Description

一种社交机器人
技术领域
本发明属于智能机器人技术领域,涉及一种社交互动的机器人。
背景技术
随着社会经济的发展,在许多公共场所高度智能性和交互性越来越吸引更多的消费者,比如在大型商场,消费者们往往需要一些导购或者娱乐来打发时间。比如在景区,旅客们需要拍照留影,了解当地的风土人情,景区文化等。在老年化已经很严重的中国,更多的老人需要更多的关照和监护,越来越多的老人需要另一半陪伴在老人左右,解决孤守老人所带来的家庭问题,这是迫在眉睫的事情。
目前的家庭服务机器人或者社交机器人造价成本比较昂贵,综合能力表现差,操作复杂,灵活性差。
发明内容
本发明目的是针对现有社会和技术上存在的上述问题,提供一种社交机器人,本发明所要解决的技术问题是如何提供一种造价成本低,灵活性好,操作简单,人机交互多元化的社交机器人。
本发明目的可通过下列技术方案来实现:
一种社交机器人,包括底盘,底盘设有动力装置,底盘顶上设置有一支撑装置,支撑装置上设有一用户终端;动力装置可在用户终端的控制下带动底盘运动;支撑装置上端设有双目视觉摄像头,双目视觉摄像头与支撑装置上端铰接,且双目双目视觉摄像头可相对于支撑装置转动至不同的角度,双目视觉摄像头获取前方环境的深度路径信息,双目视觉摄像头在用户终端的控制下对人脸进行拍照并传输至用户终端,用户终端将双目视觉摄像头拍得的照片存储并分享至社交网络。
双目视觉摄像头在用户终端的控制下对人脸进行拍照并传输至用户终端的步骤包括以下步骤:
(S101),用户终端读取双目视觉摄像头的深度路径信息;
(S102),用户终端对双目视觉摄像头的深度路径信息进行处理;
(S103),用户终端判断前方是不是障碍物,若不是障碍物,则进行步骤(S101);若是障碍物,则进行步骤(S103);
(S104),对障碍物进行判断是不是人脸;
(S105),若障碍物不是人脸,则进行规避动作;
(S106),若障碍物是人脸,则进行拍照。
本发明还包括麦克风,其接收外部的声音信息,并将该声音信息进行识别转换,用户终端接收识别转换后的声音信息并根据该声音信息控制动力装置和双目视觉摄像头。
底盘为主-从轮式驱动底盘,底盘顶部设有带螺纹的螺孔。
用户终端为平板电脑或者笔记本电脑。
所述的双目视觉摄像头通过获取当前环境的深度信息,等到前面物体的XYZ等数据,将XYZ等数据通过规避算法转换成底盘所需的线速度和角速度,从而到达机器人避障的目的。
所述支撑装置包括支撑板一、支撑柱一、支撑板二、支撑柱二、支撑板三、支撑柱三及支撑板四,支撑板一设有螺孔,支撑板一通过其上设有的螺孔与底盘和支撑柱一固定连接,支撑柱一的上端与支撑板二固定连接,支撑板二下层面通过螺孔与支撑柱一上端固定连接,支撑板二上层面通过螺孔与支撑柱二下端固定连接,支撑柱二的上端与支撑板三固定连接,支撑板三下层面通过螺孔与支撑柱二上端固定连接,支撑板三上层面通过螺孔与支撑柱三下端固定连接,支撑柱三上端与支撑板四固定连接,支撑板四上层面圆心位置设置有支架,所述支架下端支脚与支撑板四上层面固定连接,
所述的支撑柱一为铝管,铝管整体长度为60mm,上下两端都带有螺纹,支撑柱一下端通过螺丝与支撑板一固定连接,支撑柱一上端通过螺杆与支撑板二和支撑柱二固定连接。
支撑柱二为铝管,整体长为100mm,上下两端都带有螺纹,所述支撑柱二通过螺杆与支撑板二及支撑板三固定连接。
所述的双目视觉摄像头与支架铰接,可以自由调整双目视觉摄像头的角度,形成不同的仰俯视角。
本发明的工作原理是:本社交机器人的用户终端通过USB线连接双目视觉摄像头和底盘,通过双目视觉摄像头获取当前环境下的深度信息,并将信息通过处理得出环境的目标物体和障碍物信息,若是障碍物,则通过规避算法处理并转换成角速度和线速度控制底盘进行避障行走,若是检测是目标物体,则停止行走,并进行拍照筛选清晰的照片上传社交网站,比如新浪微博,QQ空间等。通过可以语音识别,进行语音控制机器人的行为,其中包括行走,暂停,拍照等等。
附图说明
下面结合实施例和附图对本发明进行详细说明,其中:
图1是本社交机器人正面立体结构示意图。
图2是本社交机器人侧面立体结构示意图。
图3是本社交机器人主要工作流程示意图。
具体实施方式
下面结合附图进一步阐述本发明的具体实施方式:
下面结合一个实例和附图对于发明进一步说明,对本发明的技术方案作进一步的描述,但本发明并不限制于这些实施。
实施例一
如图1、图2,图3所示,一种社交机器人,包括底盘1,底盘1设有动力装置,底盘1顶上设置有一支撑装置12,支撑装置12上设有一用户终端11;动力装置可在用户终端的控制下带动底盘运动;支撑装置12上端设有双目视觉摄像头10,双目视觉摄像头10与支撑装置12上端铰接,且双目视觉摄像头10可相对于支撑装置12转动至不同的角度,双目视觉摄像头10获取前方环境的深度路径信息,双目视觉摄像头10在用户终端11的控制下对人脸进行拍照并传输至用户终端11,用户终端11将双目视觉摄像头10拍得的照片存储并分享至社交网络。
本发明还包括麦克风,其接收外部的声音信息,并将该声音信息进行识别转换,用户终端接收识别转换后的声音信息并根据该声音信息控制动力装置和双目视觉摄像头。
底盘1为主-从轮式驱动底盘,底盘顶部设有带螺纹的螺孔。用户终端11为平板电脑或者笔记本电脑。所述的双目视觉摄像头10通过获取当前环境的深度信息,等到前面物体的XYZ等数据,将XYZ等数据通过规避算法转换成底盘1所需的线速度和角速度,从而到达机器人避障的目的。
本发明中的支撑装置12包括支撑板一2、支撑柱一3、支撑板二4、支撑柱二5、支撑板三6、支撑柱三7及支撑板四8,支撑板一2设有螺孔,支撑板一2通过其上设有的螺孔与底盘1和支撑柱一3固定连接,支撑柱一3的上端与支撑板二4固定连接,支撑板二4下层面通过螺孔与支撑柱一3上端固定连接,支撑板二4上层面通过螺孔与支撑柱二5下端固定连接,支撑柱二5的上端与支撑板三6固定连接,支撑板三6下层面通过螺孔与支撑柱二5上端固定连接,支撑板三6上层面通过螺孔与支撑柱三7下端固定连接,支撑柱三7上端与支撑板四8固定连接,支撑板四8上层面圆心位置设置有支架9,所述支架9下端支脚与支撑板四8上层面固定连接。
本实施例中,支撑柱一3为铝管,铝管整体长度为60mm,上下两端都带有螺纹,支撑柱一3下端通过螺丝与支撑板一2固定连接,支撑柱一3上端通过螺杆与支撑板二4和支撑柱二5固定连接,支撑柱二5为铝管,整体长为100mm,上下两端都带有螺纹,所述支撑柱二5通过螺杆与支撑板二4及支撑板三6固定连接,双目视觉摄像头10与支架9铰接,可以自由调整双目视觉摄像头的角度,形成不同的仰俯视角。
双目视觉摄像头10在用户终端11的控制下对人脸进行拍照并传输至用户终端11的步骤包括以下步骤:
(S101),用户终端读取双目视觉摄像头的深度路径信息;
(S102),用户终端对双目视觉摄像头的深度路径信息进行处理;
(S103),用户终端判断前方是不是障碍物,若不是障碍物,则进行步骤(S101);若是障碍物,则进行步骤(S103);
(S104),对障碍物进行判断是不是人脸;,
(S105),若障碍物不是人脸,则进行规避动作;
(S106),若障碍物是人脸,则进行拍照。
还包括步骤(S107),其设于步骤(S103)之前,麦克风接收外部的语音信息,并根据该语音信息控制动力装置和双目视觉摄像头。
本社交机器人包括底盘,底盘可以是扫地机器人,其顶上设有三层或者多层圆形车体,每层车体采用不同长度的支撑柱固定连接,车体其中一层可安置一台用户终端,用户终端安置Ubuntu虚拟机和ROS系统,车体的最顶层设置双目视觉摄像头,双目视觉摄像头可以根据需求调整仰角。双目视觉摄像头和底盘通过USB线与用户终端比如PC电脑相连,通过启动双目视觉摄像头获取当前环境的PCL点云深度数据,来计算出当前环境下的障碍物和目标物体的位置信息,并转换成相应的线速度和角速度指令驱动底盘的运动,若是障碍物,则进行规避,若是人脸,则进行拍照并上传社交网站如新浪微博,QQ空间等;若障碍物和人脸都没有,则进行直走动作;在整个过程中可以进行语音控制社交机器人暂停、行走、拍照等相应的动作,并进行语音提示功能。
本发明能够准确的进行规避,准确率达到100%,人脸检测准确率高达90%,本社交机器人具有结构搭建简单,造价成本低,操作简单,维修方便等优点,适合应用到大型商场、会议场所、景区等公共场合,同时也可以应用到家庭中,成为家庭中一位亲密的伴侣。
本发明的一种针对室内人员进行实时检测并通过拍照记录下当前人员的形态分享到社交网络的机器人,该机器人携带一个用户终端,利用自身携带的双目视觉传感器获取环境深度信息进行准确的路径规划避障,并通过人脸检测技术对环境中的人员进行检测并拍照分享到社交网站,及同时能够简单的进行语音交互功能。本发明采用主-从轮式底盘驱动方式,设有三层不同高度车体,能够很好的适用于室内自主移动;另外,还能够利用自身携带的双目视觉传感器计算出前方环境的障碍物的距离、体积面的大小、高度等相关信息,并做出准确的路径规划进行自主避障行走操作。同时实时进行人脸检测,若检测到人脸,则停止行走,语音提醒将要进行拍照。将获取的照片筛选出清晰的照片上传到社交网络分享给其他好友,在人机交互过程中通过语音、图像、人脸识别等技术实现人与机器人之间智能的交互及达到实时高效的社交模式。
本文所描述的具体实施例不仅仅是对本发明精神作举例说明。本发明所属技术领域的技术人员可以对所描述的具有实例做各种各样的修改或补充或采用类似的方式替代,但并不会偏离本发明的精神或者超越所附权利要求书所定义的范围。

Claims (9)

1.一种社交机器人,其特征在于,包括底盘(1),底盘(1)设有动力装置,底盘(1)顶上设置有一支撑装置(12),支撑装置(12)上设有一用户终端(11);动力装置在用户终端的控制下带动底盘运动;支撑装置(12)上端设有双目视觉摄像头(10),双目视觉摄像头(10)与支撑装置(12)上端铰接,且双目视觉摄像头(10)相对于支撑装置(12)转动至不同的角度,双目视觉摄像头(10)获取前方环境的深度路径信息,双目视觉摄像头(10)在用户终端(11)的控制下对人脸进行拍照并传输至用户终端(11),用户终端(11)将双目视觉摄像头(10)拍得的照片存储并分享至社交网络;
双目视觉摄像头(10)在用户终端(11)的控制下对人脸进行拍照并传输至用户终端(11)的步骤包括以下步骤:
(S101),用户终端读取双目视觉摄像头的深度路径信息;
(S102),用户终端对双目视觉摄像头的深度路径信息进行处理;
(S103),用户终端判断前方是不是障碍物,若不是障碍物,则进行步骤(S101);
若是障碍物,则进行步骤(S103);
(S104),对障碍物进行判断是不是人脸;
(S105),若障碍物不是人脸,则进行规避动作;
(S106),若障碍物是人脸,则进行拍照。
2.根据权利要求1所述的社交机器人,其特征在于,步骤(S105)中,所述的双目视觉摄像头(10)通过获取当前环境的深度信息,得到物体的位置数据,将位置数据通过规避算法转换成底盘(1)所需的线速度和角速度,从而到达机器人避障的目的。
3.根据权利要求1所述的社交机器人,其特征在于,还包括麦克风,其接收外部的声音信息,并将该声音信息进行识别转换,用户终端接收识别转换后的声音信息并根据该声音信息控制动力装置和双目视觉摄像头。
4.根据权利要求3所述的社交机器人,其特征在于,底盘(1)为主-从轮式驱动底盘,底盘顶部设有带螺纹的螺孔。
5.根据权利要求4所述的社交机器人,其特征在于,用户终端(11)为平板电脑或者笔记本电脑。
6.根据权利要求1至5中任意一项所述的社交机器人,其特征在于,所述支撑装置(12)包括支撑板一(2)、支撑柱一(3)、支撑板二(4)、支撑柱二(5)、支撑板三(6)、支撑柱三(7)及支撑板四(8),支撑板一(2)设有螺孔,支撑板一(2)通过其上设有的螺孔与底盘(1)和支撑柱一(3)固定连接,支撑柱一(3)的上端与支撑板二(4)固定连接,支撑板二(4)下层面通过螺孔与支撑柱一(3)上端固定连接,支撑板二(4)上层面通过螺孔与支撑柱二(5)下端固定连接,支撑柱二(5)的上端与支撑板三(6)固定连接,支撑板三(6)下层面通过螺孔与支撑柱二(5)上端固定连接,支撑板三(6)上层面通过螺孔与支撑柱三(7)下端固定连接,支撑柱三(7)上端与支撑板四(8)固定连接,支撑板四(8)上层面圆心位置设置有支架(9),所述支架(9)下端支脚与支撑板四(8)上层面固定连接。
7.根据权利要求6所述的社交机器人,其特征在于,所述的支撑柱一(3)为铝管,铝管整体长度为60mm,上下两端都带有螺纹,支撑柱一(3)下端通过螺丝与支撑板一(2)固定连接,支撑柱一(3)上端通过螺杆与支撑板二(4)和支撑柱二(5)固定连接。
8.根据权利要求7所述的社交机器人,其特征在于,支撑柱二(5)为铝管,整体长为100mm,上下两端都带有螺纹,所述支撑柱二(5)通过螺杆与支撑板二(4)及支撑板三(6)固定连接。
9.根据权利要求8所述的社交机器人,其特征在于,所述的双目视觉摄像头(10)与支架(9)铰接,以自由调整双目视觉摄像头的角度,形成不同的仰俯视角。
CN201510156046.7A 2015-04-03 2015-04-03 一种社交机器人 Expired - Fee Related CN104772748B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510156046.7A CN104772748B (zh) 2015-04-03 2015-04-03 一种社交机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510156046.7A CN104772748B (zh) 2015-04-03 2015-04-03 一种社交机器人

Publications (2)

Publication Number Publication Date
CN104772748A CN104772748A (zh) 2015-07-15
CN104772748B true CN104772748B (zh) 2016-11-09

Family

ID=53614672

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510156046.7A Expired - Fee Related CN104772748B (zh) 2015-04-03 2015-04-03 一种社交机器人

Country Status (1)

Country Link
CN (1) CN104772748B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105945995B (zh) * 2016-05-26 2018-03-09 三个爸爸家庭智能环境科技(北京)有限公司 机器人的语音控制拍照系统
CN106527469A (zh) * 2016-12-29 2017-03-22 新奥(中国)燃气投资有限公司 交互式智能机器人控制系统、控制方法及交互式智能机器人
CN108334802B (zh) * 2017-01-20 2022-10-28 腾讯科技(深圳)有限公司 道路特征物的定位方法及装置
CN106846379A (zh) * 2017-02-07 2017-06-13 成都电科创品机器人科技有限公司 多目视觉系统及其使用方法
CN107088871B (zh) * 2017-05-19 2023-08-04 深圳市优必选科技有限公司 机器人内部层叠结构及机器人
CN107398906A (zh) * 2017-07-28 2017-11-28 安徽爱依特科技有限公司 基于机器人的自主发朋友圈方法
CN108582115B (zh) * 2018-07-05 2024-05-31 深圳市证通电子股份有限公司 一种显示3d动画的机器人
CN108908283A (zh) * 2018-07-24 2018-11-30 安徽省勤业科技服务有限公司 一种移动稳定的智能语音机器人
CN109048850A (zh) * 2018-10-19 2018-12-21 刘焓 一种全向四驱的智能拍照机器人
CN111385529A (zh) * 2018-12-29 2020-07-07 杭州登虹科技有限公司 一种可快速移动的家用监控系统
CN109822582B (zh) * 2019-01-03 2021-04-02 广州大学 一种基于ros的家庭服务机器人
CN110232922A (zh) * 2019-04-29 2019-09-13 北京云迹科技有限公司 机器人语音叫停控制方法及装置
CN110815174A (zh) * 2019-10-10 2020-02-21 汕头大学 跟随机器人

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100926783B1 (ko) * 2008-02-15 2009-11-13 한국과학기술연구원 물체인식 및 인식된 물체를 포함하는 주변 환경 정보를바탕으로 한 로봇의 자기 위치 추정 방법
JP5732632B2 (ja) * 2011-02-03 2015-06-10 株式会社国際電気通信基礎技術研究所 ロボットシステムおよびそれに用いる空間陣形認識装置
CN202753149U (zh) * 2011-12-26 2013-02-27 尚娜 具有人脸识别功能的智能机器人
CN102672702A (zh) * 2012-04-18 2012-09-19 艾利和电子科技(中国)有限公司 一种多功能的智能机器人
CN102837313A (zh) * 2012-10-03 2012-12-26 南京大五教育科技有限公司 礼貌机器人
CN103802108A (zh) * 2012-11-07 2014-05-21 山东省普来特能源与电器研究院 远程辅助办公机器人
CN103640019A (zh) * 2013-11-20 2014-03-19 中山市大谷电子科技有限公司 一种多功能服务机器人
CN104175308A (zh) * 2014-08-12 2014-12-03 湖南信息职业技术学院 自主服务机器人

Also Published As

Publication number Publication date
CN104772748A (zh) 2015-07-15

Similar Documents

Publication Publication Date Title
CN104772748B (zh) 一种社交机器人
US11020294B2 (en) Mobility and mobility system
JP6526613B2 (ja) 可動式ロボットシステム
EP4023200B1 (en) Guide robot and method and system for operating the same
US9902069B2 (en) Mobile robot system
CN105058389A (zh) 一种机器人系统、机器人控制方法及机器人
CN204814723U (zh) 一种导盲系统
JP4630146B2 (ja) 位置管理システムおよび位置管理プログラム
CN105798922A (zh) 一种家庭服务机器人
AU2011256720B2 (en) Mobile human interface robot
CN104111655A (zh) 一种基于远程控制的智能家居服务机器人系统
CN105058393A (zh) 一种迎宾机器人
CN105578058A (zh) 一种面向智能机器人的拍摄控制方法、装置及机器人
KR20180067724A (ko) 이동형 원격현전 로봇과의 인터페이싱
CN204856204U (zh) 一种餐厅服务机器人行走系统
CN109093633A (zh) 一种可分体式机器人及其控制方法
CN106548231A (zh) 移动控制装置、可移动机器人和移动到最佳交互点的方法
CN208930273U (zh) 一种可分体式机器人
KR20190104488A (ko) 인공 지능을 이용하여, 오브젝트의 이동을 관리하는 인공 지능 로봇 및 그의 동작 방법
CN102895093A (zh) 一种基于rgb-d传感器的助行机器人跟踪系统及方法
CN206200992U (zh) 一种基于机器视觉的餐厅机器人
CN105997447A (zh) 一种轮腿结构的导盲机器人及其使用方法
CN205521430U (zh) 一种高度方位自适应的服务机器人
CN109662830A (zh) 一种语言导盲手杖、基于该手杖的深度神经网络优化方法
Cai et al. Navigating Real-World Challenges: A Quadruped Robot Guiding System for Visually Impaired People in Diverse Environments

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20161109

Termination date: 20170403

CF01 Termination of patent right due to non-payment of annual fee