CN110385721A - 基于语音交互及自主移动的机器人排队取号方法 - Google Patents

基于语音交互及自主移动的机器人排队取号方法 Download PDF

Info

Publication number
CN110385721A
CN110385721A CN201810346759.3A CN201810346759A CN110385721A CN 110385721 A CN110385721 A CN 110385721A CN 201810346759 A CN201810346759 A CN 201810346759A CN 110385721 A CN110385721 A CN 110385721A
Authority
CN
China
Prior art keywords
robot
client
taking
autonomous
recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810346759.3A
Other languages
English (en)
Inventor
孙非凡
王华洋
黄华
周院平
孙信中
矫人全
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NANJING AOTUO ELECTRONIC SCIENCE & TECHNOLOGY Co Ltd
Original Assignee
NANJING AOTUO ELECTRONIC SCIENCE & TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NANJING AOTUO ELECTRONIC SCIENCE & TECHNOLOGY Co Ltd filed Critical NANJING AOTUO ELECTRONIC SCIENCE & TECHNOLOGY Co Ltd
Priority to CN201810346759.3A priority Critical patent/CN110385721A/zh
Publication of CN110385721A publication Critical patent/CN110385721A/zh
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/0005Manipulators having means for high-level communication with users, e.g. speech generator, face recognition means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/008Manipulators for service tasks

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Collating Specific Patterns (AREA)

Abstract

本发明公开了一种基于人脸识别、可切换离在线语音交互系统及自主移动的机器人排队取号方法,机器人配置了麦克风阵列、摄像头、IC卡、身份证阅读器,可以在多个大厅之间来回巡游,当有客户需要取号时,只需要唤醒机器人,机器人通过人脸识别获取客户身份信息后,当客户命令机器人“我要取号”时,机器人弹出业务界面,并与客户确认需要办理哪些业务,通过确认机器人打印相应等级和业务的号票。或者客户通过刷卡、身份证方式鉴权,弹出业务菜单,客户点击取号。机器人与网点的排队机通过Zigbee无线通信,数据通过SM4国密算法加密传输,保证了网点内外网穿透的安全。

Description

基于语音交互及自主移动的机器人排队取号方法
技术领域
本发明涉及智能机器人,具体而言,涉及基于人脸识别、语音交互及自主移动的机器人排队取号方法。
背景技术
在银行、商场、机关等大厅场所,排队机为网点提供有效的排队叫号功能基础上,实现科学分流排队客户,强调资源配置的最优化,“先到先服务,公平服务,优质客户优先服务,高端客户一对一服务”等理念,最终提高厅堂工作效率,减小客户等候时间,从而提升客户满意度。传统排队机取号方式一般可分为,介质取号,非介质取号两种,介质包括,磁条卡、IC卡、身份证、手机卡等。
传统的取号方式中,目前越来越多的传统网点转型智能、智慧化网点,随着网点大厅日益增多,服务种类众多,网点自助设备日益增多,网点面积也逐渐增大,厅堂一般都配置一到多台排队取号机,来满足网点不同业务大厅的排队需求。如何能够解决一个网点多个大厅的排队需求,银行资源配置最优化等问题,是值得我们思考的问题。传统取号方式存在很多问题,例如贵宾客户没有带身份证和银行卡时,无法获取客户真实身份。客户的身份证被其他人借用或者盗用,导致贵宾服务资源被滥用。
发明内容
为解决上述问题,本专利设计了一种基于人脸识别、语音交互及自主移动的机器人排队取号方法。机器人配置了麦克风阵列、摄像头、IC卡与身份证阅读器,并且具有自主移动功能;当有客户需要取号时,只需要唤醒机器人,机器人通过人脸识别获取客户身份信息后,当客户命令机器人“我要取号”时,机器人弹出业务界面,并与客户确认需要办理业务类型,机器人打印相应等级和业务的号票。或者客户通过刷卡、身份证方式鉴权,弹出业务界面,客户点击取号。
机器人与网点的排队机直接通过Zigbee无线通信,数据通过SM4国密算法加密传输,保证了网点内外
网穿透的安全。
机器人通过人脸识别结合语音交互取号。
机器人采用可切换离在线语音交互系统(语音识别,语音合成)实现语音交互,默认有网络连接采用离在线并行模式,无网络采用纯离线模式。可手动切换在有网络连接时为纯离线模式。
机器人通过室内巡游导航、自动避障等技术自主在厅堂巡游,可以充当移动排队取号机。
有益效果:
解决贵宾客户没有带身份证和银行卡时,无法获取客户真实身份。客户的身份证被其他人借用或者盗用,导致贵宾服务资源被滥用。
解决网点资源配置最优化的问题,避免浪费。
附图说明
图1为本发明实施例的机器人排队取号流程图。
图2为本发明实施例的取号示意图。
具体实施方式
以下结合附图和具体实施例对本发明作进一步详细说明。
图1为本发明实施例的机器人排队取号流程图。本实施例基于人脸识别技术、离在线可切换语音交互系统及自主移动的机器人的排队取号方法,机器人配置了麦克风阵列、摄像头、IC卡、身份证阅读器等智能外设,可以在多个大厅之间来回巡游,通过前置激光扫描、前置摄像头以及底盘环绕超声传感器实现主动避障功能,当有客户需要取号时,只需要唤醒机器人,机器人通过人脸识别技术获取客户身份信息后,当客户命令机器人“我要取号”时,机器人弹出相应等级业务界面,并与客户确认需要办理哪些业务,机器人通过确认打印相应等级和业务的号票。或者客户通过刷卡、身份证方式鉴权,弹出业务界面,客户点击取号。
图2为本发明实施例的取号示意图。机器人与网点的排队机直接通过Zigbee无线通信,数据通过SM4国密算法加密传输,保证了网点内外网穿透的安全。
以上所述,仅为本发明的较佳实施例而已,并非对本发明作任何形式上的限制,任何熟悉本专业的技术人员,在不脱离本发明技术方案范围内,依据本发明的技术实质对以上实施例所作的任何简单修改,等同变化与修饰,均仍属于本发明技术方案的保护范围内。

Claims (5)

1.一种基于语音交互及自主移动的机器人排队取号方法,其特征在于:
步骤一、机器人按照预先手动控制扫描的地图在室内自主巡游;
步骤二、运动控制模块结合扫描地图与外置的摄像头、超声传感器与激光扫描等智能硬件实现在自主巡游中的避障功能;
步骤三、客户通过唤醒词语音唤醒机器人,机器人自主转向客户,开启人脸识别,转为可交互模式;
步骤四、机器人基于人脸检测与追踪、人脸识别等技术对客户进行人脸识别,支持黑/白名单识别;
步骤五、客户发起“我要取号”命令,机器人通过内置可切换的离在线语音识别技术获取客户“我要取号”指令,弹出取号业务界面,并通过可切换离在线TTS(Text To Speech)技术询问客户办理业务类型;
步骤六、机器人获取客户办理业务类型,结合步骤四人脸识别获取的客户信息,打印相应等级及业务的排队号票;
步骤七、或者在步骤三机器人转为可交互模式后,客户通过刷卡、身份证方式鉴权,弹出业务界面,客户点击取号。
2.根据权利要求1所述的基于语音交互及自主移动的机器人排队取号方法,其特征在于:
机器人配置麦克风阵列、摄像头、IC卡、身份证阅读器等智能外设,在多个大厅之间来回自主巡游。机器人通过底盘的sick激光扫描仪、超声波传感器以及中部的深度摄像头进行扫描周围环境。机器人实现了高鲁棒性即时定位、2D/3D地图构建、自主功能臂章等功能。其中sick激光扫描仪只使用了一个传感器即可监控达1470m2,通过HDDM确保高环境光抗扰度,激光角度为270°,可识别几乎任何物体的形状,扫描频率为15Hz,激光扫描范围最高可达10m,借助防护等级IP 67,确保了其耐用性。
3.根据权利要求1所述的基于语音交互及自主移动的机器人排队取号方法,其特征在于:
机器人与网点的排队机直接通过Zigbee无线通信,数据通过SM4国密算法加密传输,保证了网点内外网穿透的安全。
4.根据权利要求1所述的基于语音交互及自主移动的机器人排队取号方法,其特征在于:
机器人通过人脸识别技术结合可切换离在线语音交互系统实现语音取号。
5.根据权利要求1所述的基于语音交互及自主移动的机器人排队取号方法,其特征在于:
机器人采用可切换离在线语音交互系统(语音识别,语音合成)实现语音交互,默认有网络连接采用离在线并行模式,无网络采用纯离线模式。可手动切换在有网络连接时为纯离线模式。
CN201810346759.3A 2018-04-18 2018-04-18 基于语音交互及自主移动的机器人排队取号方法 Pending CN110385721A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810346759.3A CN110385721A (zh) 2018-04-18 2018-04-18 基于语音交互及自主移动的机器人排队取号方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810346759.3A CN110385721A (zh) 2018-04-18 2018-04-18 基于语音交互及自主移动的机器人排队取号方法

Publications (1)

Publication Number Publication Date
CN110385721A true CN110385721A (zh) 2019-10-29

Family

ID=68283289

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810346759.3A Pending CN110385721A (zh) 2018-04-18 2018-04-18 基于语音交互及自主移动的机器人排队取号方法

Country Status (1)

Country Link
CN (1) CN110385721A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111105545A (zh) * 2019-11-25 2020-05-05 南京奥拓电子科技有限公司 一种排队方法、系统、客户端、装置及其服务器

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202584257U (zh) * 2012-03-16 2012-12-05 深圳市奥拓电子股份有限公司 一种排队机系统
CN206216705U (zh) * 2016-11-23 2017-06-06 中国民生银行股份有限公司 一种银行智能业务机器人
CN106826855A (zh) * 2017-03-14 2017-06-13 山东大学 一种基于云数据身份识别的银行业务助理机器人
CN107065863A (zh) * 2017-03-13 2017-08-18 山东大学 一种基于人脸识别技术的导览解说机器人及方法
CN206605496U (zh) * 2017-01-20 2017-11-03 广州蓝海机器人系统有限公司 一种公共服务大厅的智能服务机器人
CN206795817U (zh) * 2017-05-03 2017-12-26 山东大学 一种基于多生物识别信息的银行业务助理机器人
CN107742260A (zh) * 2017-11-24 2018-02-27 福建网能科技开发有限责任公司 一种用于电力服务领域的人工智能机器人系统
CN107808440A (zh) * 2016-09-09 2018-03-16 腾讯科技(深圳)有限公司 排队业务处理方法及装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202584257U (zh) * 2012-03-16 2012-12-05 深圳市奥拓电子股份有限公司 一种排队机系统
CN107808440A (zh) * 2016-09-09 2018-03-16 腾讯科技(深圳)有限公司 排队业务处理方法及装置
CN206216705U (zh) * 2016-11-23 2017-06-06 中国民生银行股份有限公司 一种银行智能业务机器人
CN206605496U (zh) * 2017-01-20 2017-11-03 广州蓝海机器人系统有限公司 一种公共服务大厅的智能服务机器人
CN107065863A (zh) * 2017-03-13 2017-08-18 山东大学 一种基于人脸识别技术的导览解说机器人及方法
CN106826855A (zh) * 2017-03-14 2017-06-13 山东大学 一种基于云数据身份识别的银行业务助理机器人
CN206795817U (zh) * 2017-05-03 2017-12-26 山东大学 一种基于多生物识别信息的银行业务助理机器人
CN107742260A (zh) * 2017-11-24 2018-02-27 福建网能科技开发有限责任公司 一种用于电力服务领域的人工智能机器人系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111105545A (zh) * 2019-11-25 2020-05-05 南京奥拓电子科技有限公司 一种排队方法、系统、客户端、装置及其服务器

Similar Documents

Publication Publication Date Title
US10630866B2 (en) Electronic devices and methods for blurring and revealing persons appearing in images
CN106488001B (zh) 移动终端以及该移动终端的控制方法
US7725547B2 (en) Informing a user of gestures made by others out of the user's line of sight
US20080170749A1 (en) Controlling a system based on user behavioral signals detected from a 3d captured image stream
CN109571499A (zh) 一种智能导航引领机器人及其实现方法
CN107230476A (zh) 一种自然的人机语音交互方法和系统
JP6455977B2 (ja) 飛行体
US8436789B2 (en) Surface puck
US20200293639A1 (en) Methods and systems for ensuring that an individual is authorized to conduct an activity
CN108492551A (zh) 出租车排队管理方法、系统及计算机可读存储介质
CN109366504A (zh) 一种智能展会服务机器人系统
US20220163334A1 (en) Method for providing navigation service using mobile terminal, and mobile terminal
WO2021185375A1 (zh) 一种分享数据的方法及设备
CN206216705U (zh) 一种银行智能业务机器人
CN108989752A (zh) 一种海关缉私集群指挥控制方法
KR20190059151A (ko) 이동 단말기
CN109242398A (zh) 基于无人机与智能设备的快递包裹快速定位系统及方法
CN110385721A (zh) 基于语音交互及自主移动的机器人排队取号方法
EP4138355A1 (en) In-vehicle voice interaction method and device
CN109556625A (zh) 基于前挡风玻璃的导航方法、装置、导航设备及存储介质
CN106384058A (zh) 发布图片的方法和装置
CN109445732A (zh) 基于身份识别的车用信息显示方法及其显示系统
CN109495863A (zh) 交互方法及相关设备
CN209265599U (zh) 一种使用手机端进行人脸识别的智能储物柜
CN102194318A (zh) 城市行人交通智能导向系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191029

RJ01 Rejection of invention patent application after publication