CN112975944A - 一种银行预填单服务机器人 - Google Patents

Abstract

本发明属于智能服务机器人领域，具体说是一种银行预填单服务机器人。本发明包括填单软件、pad、填单系统控制板卡、触摸屏、降噪麦克风、扬声器、摄像头、外部设备和键盘鼠标。所述填单软件包括：人脸识别模块，用于识别用户，得到用户身份信息；语音交互模块，用于根据用户所提语音问题，进行解答，引导用户办理业务；外设管理模块，用于管理机器人的外部设备，采集用户的个人信息、银行卡信息和签名结果在内的用户数据信息；填单模块，用于帮助用户进行填单业务，和人脸识别模块、语音交互模块、外设管理模块进行数据交互。本发明可以替代人工为用户办理预填单业务，提高了工作效率，降低人力成本的。

Description

一种银行预填单服务机器人

技术领域

本发明属于智能服务机器人领域，具体说是一种银行预填单服务机器人。

背景技术

随着经济的发展，人们去银行办理业务变得越来越频繁。大部分银行业务，例如开卡或转账，都需要客户首先填写申请表，然后再去窗口办理。据统计，填单的时间占用了整个业务办理时间的60％，甚至更高。一款能够完成预填单工作的机器人成为了一个需求。

目前现有方法是人工协助用户填写纸质单据和用户自行使用自助填单设备。人工(大堂经理)指导和协助填单，是一项繁重而又重复的工作，不仅费时费力，效率还不高。另一种方法是，使用自助填单机填单，用户根据填单机页面说明填写，如有困难再去找人工咨询，然后返回继续填写。这种方式对于受教育水平较高的人群相对有效，对于农民工，老年人等群体来说使用困难，难以普及。即使会操作自助设备，由于银行业务中专业术语和新概念较多，经常会在填写过程中产生疑问，担心自己填错或者选错，需要不断的找大堂经理帮忙解答。预填单服务机器人结合了人工服务的语言交互能力和自助设备的高效率特点，实现可以一边填单，一边询问，有效的解决了这一痛点。

发明内容

本发明旨在解决上述现有技术中存在的问题，结合现在流行的机器人技术和人工智能技术，通过机器人协助完成预填单业务。

本发明为实现上述目的所采用的技术方案是：

一种银行预填单服务机器人，包括填单软件，所述填单软件包括：

人脸识别模块，用于识别用户，得到用户身份信息，并将用户身份信息发送给填单模块；

语音交互模块，用于根据用户所提语音问题，进行答案获取，并将获取到的答案信息由填单模块控制并传递给用户；

外设管理模块，用于管理机器人的外部设备，采集用户的个人信息、银行卡信息和签名结果在内的用户数据信息，并将用户数据信息进行解析和格式化后发送给填单模块；

填单模块，用于帮助用户进行填单业务，和人脸识别模块、语音交互模块、外设管理模块进行数据交互，从银行后台业务系统获取表单模板并将用户填写后的模板返回给银行后台业务系统。

所述人脸识别模块包括：

人脸检测模块，用于将服务机器人的摄像头采集到的视频流通过检测，区分视频流中的人脸图像和物品图像，提取并储存人脸图像中人脸部位的图像信息，并发送给人脸特征提取模块；

人脸特征提取模块，用于提取人脸部位的图像信息中的人脸特征值，并发送给人脸信息查询模块；

人脸信息查询模块，用于将人脸特征值发送给银行后台业务系统，并接收银行后台业务系统返回的识别后用户姓名，并将识别后的用户姓名发送给填单模块。

所述语音交互模块包括：

语音识别模块，用于将服务机器人的降噪麦克风采集到的用户提问的音频信息转换成对应的文字信息并发送给查询模块；

查询模块，用于将问题的文字信息上传给银行后台知识库，从银行后台知识库中获取答案信息，并返回给填单模块，由填单模块控制语音合成模块，将其转换为音频，传递给用户；

语音合成模块，用于接收填单模块发送的文字信息并将其转换为音频，通过扬声器传递给用户，所述接收的文字信息包括问题答案，问候语，填单提示。

所述外设管理模块工作流程为：当需要外部设备读取用户数据信息时，填单模块发送控制指令给外设管理模块，外设管理模块解析控制指令，将读取指令转发给对应的外部设备，并接收外部设备返回的用户数据信息，将用户数据信息进行解析和格式化后，返回给填单模块。

还包括：填单系统控制板卡以及分别与填单系统控制板卡相连的pad、触摸屏、降噪麦克风、扬声器、摄像头、外部设备和键盘鼠标。

所述填单软件在填单系统控制板卡上运行。

本发明具有以下有益效果及优点：

本发明可以替代人工为用户办理预填单业务，提高了工作效率，降低人力成本的。同时，本发明简化了自助填单设备的易用性差，难以普及的问题。可作为智能化设备在各银行网点中进行推广。

附图说明

图1为预填单机器人系统结构图。

图2为系统软件模块划分及数据流传递示意图。

具体实施方式

本发明预填单机器人系统结构图如图1所示，主要包括pad(android系统)，填单系统控制板卡(windows系统)，触摸屏，降噪麦克风，扬声器，摄像头，外部设备和键盘鼠标。其中pad用于显示机器人表情，机器人表情由gif文件做成。系统板卡主要用于运行填单软件。触摸屏用来操作填单软件，键盘和鼠标用来辅助。降噪麦克风用于收集用户语音，扬声器用于向用户输出声音提示。摄像头用于采集机器人视野范围内的视频流。外部设备包括身份证识别仪，银行卡读卡器和电子签名笔，用于读取用户身份信息，银行卡卡片信息和签字结果。

填单软件按模块化设计，主要包括人脸识别，语音交互，外设管理和填单四个模块，如图2所示。填单模块主要实现用户填单业务和对其他三个模块的调度。填单模块从银行后台业务系统获取表单模板并将填写完的表单返回给银行业务系统。

语音模块用于引导用户办理填单业务，这个过程是模拟人工(大堂经理)的。语音模块包括语音识别，问题查询和语音合成三部分。用户对于填写过程中的疑问可以直接向机器人提问。机器人首先将用户的声音录制成音频，然后将问题音频通过语音识别模块转换成对应的文字信息，将文字信息传递给查询模块上传给银行后台知识库，在银行后台知识库中获取问题答案并返回给填单模块。填单模块将答案传给语音合成模块，转换为音频后，通过扬声器传递给用户。这就相当于，用户虽然表面面对的是一台机器人设备，但是背后是有强大的知识库支持，比有一个大堂经理的服务还要专业，及时。

人脸识别模块，用于主动识别用户，吸引其办理预填单业务。人脸识别模块主要包括人脸检测模块，人脸特征值提取模块和人脸信息查询模块。机器人通过摄像头不间断的采集其视野范围内的视频流，并将视频流传递给人脸检测模块。人脸检测模块通过算法，区分视频流中的人脸和物品。当检测到人脸后，提取和存储人脸部位的图像信息，将图像信息传递给人脸特征值提取模块。后者完成对于人脸特征值提取，并通过查询模块将特征值上传到银行后台人脸数据管理系统。人脸识别模块将后台返回的识别姓名返回给填单软件。填单软件接收后，利用语音合成模块，实现对用户的问候。

外设管理模块用来控制身份证识别仪，银行卡读卡器和签名笔，读取用户信息，银行卡卡片信息和签名结果。在需要外设读取信息时，填单模块发送控制指令给外设管理模块，后者解析控制指令，将读取指令转发给对应外设模块。接收其返回的数据信息，将数据信息进行解析和格式化后，返回给填单模块使用。

本发明工作流程为：

首先，机器人在检测到用户后，语音询问“王XX，您好，我是预填单机器人，是否需要我帮助您填写？”。用户回答“需要你的帮助，我想开卡。”填单模块从银行业务系统获取并展示“个人账户开卡申请表”。语音提示“开卡，请将居民二代身份证放置在读卡区，我将帮您填写。”用户放置身份证，机器人通过身份证模块读取用户身份信息，并通过摄像头抓取用户面部照片，将照片上传给银行后台人脸数据库，接收其返回的识别结果。将银行后台人脸数据库返回的姓名和身份证模块读取的姓名进行比对。若两者一致，填单模块将身份信息填入申请表对应位置。若不一致，将提示“请确认是否为本人身份证，开卡业务需本人持身份证办理”。

然后，语音提示用户“请阅读相关协议，如果同意，请勾选，代表您已知悉并同意本协议。”用户勾选后，机器人语音引导用户在界面的下拉列表内选择开卡种类。此时，用户对卡种有疑问，可以询问机器人“XX卡和XX卡的区别是什么？”。机器人通过语音模块将该问题上传至银行后台知识库，匹配到答案后，返回并告知用户，“XX卡是今年新推出的卡种，和之前的XX卡相比在线上商城等支付场景有更多优惠政策。”用户选择完成开卡种类选择后，机器人提示用户“输入手机号码”，用户说出手机号码“13812345678”，机器人通过语音模块识别出对应数字并填写在表格当中。

至此，个人账户开卡申请表填写完成。填单软件展示已完成填写的申请表，语音提示“您的表单已经填写完成，请查看，如果没有问题，您可以对我说，信息已确认”。用户说“信息已确认”后，机器人再次语音提示“您已确认信息？请说是或不是”。这轮对话的目的在于二次确认，避免误操作。在用户说“是”以后，机器人通过填单模块将表单上传至银行业务系统。通过语音模块提示客户“您可以去XX号窗口取卡，感谢您的使用”。

Claims (6)

1.一种银行预填单服务机器人，其特征在于，包括填单软件，所述填单软件包括：

人脸识别模块，用于识别用户，得到用户身份信息，并将用户身份信息发送给填单模块；

语音交互模块，用于根据用户所提语音问题，进行答案获取，并将获取到的答案信息由填单模块控制并传递给用户；

外设管理模块，用于管理机器人的外部设备，采集用户的个人信息、银行卡信息和签名结果在内的用户数据信息，并将用户数据信息进行解析和格式化后发送给填单模块；

填单模块，用于帮助用户进行填单业务，和人脸识别模块、语音交互模块、外设管理模块进行数据交互，从银行后台业务系统获取表单模板并将用户填写后的模板返回给银行后台业务系统。

2.根据权利要求1所述的一种银行预填单服务机器人，其特征在于，所述人脸识别模块包括：

人脸检测模块，用于将服务机器人的摄像头采集到的视频流通过检测，区分视频流中的人脸图像和物品图像，提取并储存人脸图像中人脸部位的图像信息，并发送给人脸特征提取模块；

人脸特征提取模块，用于提取人脸部位的图像信息中的人脸特征值，并发送给人脸信息查询模块；

人脸信息查询模块，用于将人脸特征值发送给银行后台业务系统，并接收银行后台业务系统返回的识别后用户姓名，并将识别后的用户姓名发送给填单模块。

3.根据权利要求1所述的一种银行预填单服务机器人，其特征在于，所述语音交互模块包括：

语音识别模块，用于将服务机器人的降噪麦克风采集到的用户提问的音频信息转换成对应的文字信息并发送给查询模块；

查询模块，用于将问题的文字信息上传给银行后台知识库，从银行后台知识库中获取答案信息，并返回给填单模块，由填单模块控制语音合成模块，将其转换为音频，传递给用户；

语音合成模块，用于接收填单模块发送的文字信息并将其转换为音频，通过扬声器传递给用户，所述接收的文字信息包括问题答案，问候语，填单提示。

4.根据权利要求1所述的一种银行预填单服务机器人，其特征在于，所述外设管理模块工作流程为：当需要外部设备读取用户数据信息时，填单模块发送控制指令给外设管理模块，外设管理模块解析控制指令，将读取指令转发给对应的外部设备，并接收外部设备返回的用户数据信息，将用户数据信息进行解析和格式化后，返回给填单模块。

5.根据权利要求1所述的一种银行预填单服务机器人，其特征在于，还包括：填单系统控制板卡以及分别与填单系统控制板卡相连的pad、触摸屏、降噪麦克风、扬声器、摄像头、外部设备和键盘鼠标。

6.根据权利要求1所述的一种银行预填单服务机器人，其特征在于，所述填单软件在填单系统控制板卡上运行。

Images