CN113635324A - 智能协调服务方法及系统 - Google Patents
智能协调服务方法及系统 Download PDFInfo
- Publication number
- CN113635324A CN113635324A CN202110961641.3A CN202110961641A CN113635324A CN 113635324 A CN113635324 A CN 113635324A CN 202110961641 A CN202110961641 A CN 202110961641A CN 113635324 A CN113635324 A CN 113635324A
- Authority
- CN
- China
- Prior art keywords
- information
- service
- user
- preset
- face
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 238000012216 screening Methods 0.000 claims abstract description 25
- 230000000977 initiatory effect Effects 0.000 claims abstract description 20
- 238000005516 engineering process Methods 0.000 claims abstract description 14
- 238000004364 calculation method Methods 0.000 claims abstract description 11
- 238000012544 monitoring process Methods 0.000 claims abstract description 10
- 238000004458 analytical method Methods 0.000 claims description 21
- 238000004590 computer program Methods 0.000 claims description 16
- 230000008921 facial expression Effects 0.000 claims description 12
- 238000003860 storage Methods 0.000 claims description 11
- 238000005520 cutting process Methods 0.000 claims description 7
- 238000010191 image analysis Methods 0.000 claims description 6
- 238000003062 neural network model Methods 0.000 claims description 6
- 239000000284 extract Substances 0.000 claims description 3
- 230000003993 interaction Effects 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 11
- 238000012545 processing Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 230000009471 action Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 238000007639 printing Methods 0.000 description 5
- 239000000872 buffer Substances 0.000 description 4
- 230000036651 mood Effects 0.000 description 4
- 239000010970 precious metal Substances 0.000 description 4
- 238000000151 deposition Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000008451 emotion Effects 0.000 description 3
- 208000019901 Anxiety disease Diseases 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000003032 molecular docking Methods 0.000 description 2
- RWSOTUBLDIXVET-UHFFFAOYSA-N Dihydrogen sulfide Chemical compound S RWSOTUBLDIXVET-UHFFFAOYSA-N 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J11/00—Manipulators not otherwise provided for
- B25J11/008—Manipulators for service tasks
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1602—Programme controls characterised by the control system, structure, architecture
- B25J9/161—Hardware, e.g. neural networks, fuzzy logic, interfaces, processor
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1656—Programme controls characterised by programming, planning systems for manipulators
- B25J9/1661—Programme controls characterised by programming, planning systems for manipulators characterised by task planning, object-oriented languages
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1679—Programme controls characterised by the tasks executed
Landscapes
- Engineering & Computer Science (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Manipulator (AREA)
Abstract
本发明提供了一种智能协调服务方法及系统，涉及人机交互领域，可应用于金融领域和其他领域，所述方法包含：通过边缘计算技术获取预设区域内的各用户的第一人脸信息和位置信息，根据所述第一人脸信息生成标识信息；根据所述标识信息和所述位置信息监控获得预定周期内各用户的移动轨迹信息；根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息；根据所述服务机器人信息和所述移动轨迹信息，调用对应的服务机器人移动至对应用户位置，并采集对应用户的第二人脸信息；将所述第一人脸信息与所述第二人脸信息比较，根据比较结果向对应用户发起服务。
Description
技术领域
本发明涉及人机交互领域，可应用于金融领域和其他领域，尤指一种智能协调服务方法及系统。
背景技术
现有技术中，服务机器人技术已经被应用到越来越多的场景当中，通过服务机器人与传统工作人员的协同使用可大大提高工作效率且降低运营成本，因此，相关行业及大多智能网点均已引入服务机器人作为工作人员的助手代为解答客户问题或服务客户，活跃网点气氛。
但是服务机器人在使用过程中，管理模式仍然较为被动，需要用户主动提问或申请才能获取相关服务；由此，使得用户使用体验并未达到预期，同时服务机器人的性能也存在较大浪费。
为此，业内亟需一种高效的服务机器人设备利用方法，以帮助场景内工作人员完成作业的同时，提高服务机器人的使用便利，帮助用户快捷完成业务办理和相关服务处理。
发明内容
本发明目的在于提供一种智能协调服务方法及系统，予以提升机器人智能服务水平，主动获取现场情况，发起相应的服务动作，拟引入边缘计算技术，通过网点边缘计算摄像头获取人员分布情况以及等待情况，由服务机器人根据具体情况进行智能化的分析，并为客户提供适合的服务，以此缓解客户等待的厌烦情绪，提高网点厅堂管理效率。
为达上述目的，本发明所提供的一种智能协调服务方法，所述方法包含：通过边缘计算技术获取预设区域内的各用户的第一人脸信息和位置信息，根据所述第一人脸信息生成标识信息；根据所述标识信息和所述位置信息监控获得预定周期内各用户的移动轨迹信息；根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息；根据所述服务机器人信息和所述移动轨迹信息，调用对应的服务机器人移动至对应用户位置，并采集对应用户的第二人脸信息；将所述第一人脸信息与所述第二人脸信息比较，根据比较结果向对应用户发起服务。
在上述智能协调服务方法中，优选的，获取预设区域内的各用户的第一人脸信息和位置信息包含：通过预定的多个摄像设备采集预设区域的视频数据，利用视频切帧技术将所述视频数据转换为帧序列数据；通过预设神经网络模型分析所述帧序列数据获得预设区域内的各用户的第一人脸信息和位置信息。
在上述智能协调服务方法中，优选的，根据所述标识信息和所述位置信息监控获得预定周期内各用户的移动轨迹信息包含：获取预设周期内所述标识信息对应用户的多个位置信息，根据所述位置信息构建所述移动轨迹信息。
在上述智能协调服务方法中，优选的，根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息还包含：根据所述第一人脸信息通过图像分析获得面部表情数据；利用预设的人脸三维模型分析所述面部表情数据获得用户表情状态；根据用户表情状态通过预设规则对各用户进行优先级排序生成服务序列表；根据所述服务序列表和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。
在上述智能协调服务方法中，优选的，根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息还包含：根据所述第一人脸信息通过人脸比对分析获得用户的身份信息；将所述身份信息与预设权限信息中一个或多个身份信息比较确定用户的优先级；根据各用户的优先级和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。
在上述智能协调服务方法中，优选的，根据比较结果向对应用户发起服务还包含：根据所述移动轨迹信息和预设区域内的布局信息提取获得对应用户在各设备区域的停留时间信息；根据所述停留时间信息分析获得用户的倾向需求信息，根据所述倾向需求信息生成服务列表；根据所述服务列表向对应用户发起服务。
本发明还提供一种智能协调服务系统，所述系统包含图像采集装置、边缘计算装置、协同管理装置和服务机器人；所述图像采集装置用于通过边缘计算技术获取预设区域内的各用户的第一人脸信息和位置信息，根据所述第一人脸信息生成标识信息；所述边缘计算装置用于根据所述标识信息和所述位置信息监控获得预定周期内各用户的移动轨迹信息；所述协同管理装置用于根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息；以及，根据所述服务机器人信息和所述移动轨迹信息，调用对应的服务机器人移动至对应用户位置；所述服务机器人用于采集对应用户的第二人脸信息；以及，将所述第一人脸信息与所述第二人脸信息比较，根据比较结果向对应用户发起服务。
在上述智能协调服务系统中，优选的，所述图像采集装置包含分析模块，所述分析模块用于通过预定的多个摄像设备采集预设区域的视频数据，利用视频切帧技术将所述视频数据转换为帧序列数据；通过预设神经网络模型分析所述帧序列数据获得预设区域内的各用户的第一人脸信息和位置信息。
在上述智能协调服务系统中，优选的，所述边缘计算装置包含轨迹分析单元，所述轨迹分析单元用于获取预设周期内所述标识信息对应用户的多个位置信息，根据所述位置信息构建所述移动轨迹信息。
在上述智能协调服务系统中，优选的，所述协同管理装置还包含调度单元，所述调度单元用于根据所述第一人脸信息通过图像分析获得面部表情数据；利用预设的人脸三维模型分析所述面部表情数据获得用户表情状态；根据用户表情状态通过预设规则对各用户进行优先级排序生成服务序列表；根据所述服务序列表和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。
在上述智能协调服务系统中，优选的，所述协同管理装置还包含调度单元，所述调度单元用于根据所述第一人脸信息通过人脸比对分析获得用户的身份信息；将所述身份信息与预设权限信息中一个或多个身份信息比较确定用户的优先级；根据各用户的优先级和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。
在上述智能协调服务系统中，优选的，所述服务机器人还包含服务单元，所述服务单元根据所述移动轨迹信息和预设区域内的布局信息提取获得对应用户在各设备区域的停留时间信息；根据所述停留时间信息分析获得用户的倾向需求信息，根据所述倾向需求信息生成服务列表；根据所述服务列表向对应用户发起服务。
本发明还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述方法。
本发明还提供一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述方法的计算机程序。
本发明的有益技术效果在于：提升场景内机器人的服务效率，现有厅堂机器人服务模式为被动等待，需要客户主动询问才能提供服务；能自动发现客户需求，并驱动机器人主动提供服务；有效提升客户体验，通过主动发现客户需求，让客户体验到被关注，缓解等待焦急情绪，进一步场景智能化服务水平。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，并不构成对本发明的限定。在附图中：
图1为本发明一实施例所提供的智能协调服务方法的流程示意图；
图2为本发明一实施例所提供的人脸信息和位置信息的获取流程的示意图；
图3为本发明一实施例所提供的服务机器人信息的获取流程的示意图；
图4为本发明一实施例所提供的服务机器人信息的获取流程的示意图；
图5为本发明一实施例所提供的发起服务的流程示意图；
图6为本发明一实施例所提供的发起服务的流程示意图；
图7为本发明一实施例所提供的智能协调服务系统的结构示意图；
图8为本发明一实施例所提供的电子设备的结构示意图。
具体实施方式
以下将结合附图及实施例来详细说明本发明的实施方式，借此对本发明如何应用技术手段来解决技术问题，并达成技术效果的实现过程能充分理解并据以实施。需要说明的是，只要不构成冲突，本发明中的各个实施例及各实施例中的各个特征可以相互结合，所形成的技术方案均在本发明的保护范围之内。
另外，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
请参考图1所示，本发明所提供的一种智能协调服务方法，所述方法包含：
S101通过边缘计算技术获取预设区域内的各用户的第一人脸信息和位置信息，根据所述第一人脸信息生成标识信息；
S102根据所述标识信息和所述位置信息监控获得预定周期内各用户的移动轨迹信息；
S103根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息；
S104根据所述服务机器人信息和所述移动轨迹信息，调用对应的服务机器人移动至对应用户位置，并采集对应用户的第二人脸信息；
S105将所述第一人脸信息与所述第二人脸信息比较，根据比较结果向对应用户发起服务。
以此，在类似于银行类网点时，利用上述智能协调服务方法，可通过摄像头捕捉网点客户人脸信息以及位置信息，并创建人脸ID，通过10s刷新并记录同一个人脸信息所处的位置信息，并进一步分析该信息。当判断该ID在同一位置等待时间超过10MIN时，即生成机器人服务指令(包含客户位置以及服务内容指令)，发送至智能服务机器人服务器；机器人收到该指令后，通过位置信息找到客户，人脸比对后，为客户提供智能服务。
请参考图2所示，在本发明一实施例中，获取预设区域内的各用户的第一人脸信息和位置信息包含：
S201通过预定的多个摄像设备采集预设区域的视频数据，利用视频切帧技术将所述视频数据转换为帧序列数据；
S202通过预设神经网络模型分析所述帧序列数据获得预设区域内的各用户的第一人脸信息和位置信息。
在实际工作中，可将网点的摄像头通过RTSP流接入网点智能视频分析系统云踪E，由该网点智能视频分析系统通过视频切帧技术，把视频流变成帧序列，通过神经网络对于帧序列进行目标检测，特征提取，人员追踪。其中，利用帧序列数据获得人员的人脸信息和位置信息可通过现有技术实现，本发明在此不再详述。在上述实施例中，还可包含采集网点工作人员的帧序列，将该帧序列发送至预设动作识别模型中进行动作识别获得动作数据，将所述动作数据与预设规范性动作比较，获得工作人员的行为数据，根据所述行为数据，网点的人流情况和各业务处理的时间可有效分析获得该网点的运行状态，给后续分析提供有效的数据支持。
在本发明一实施例中，根据所述标识信息和所述位置信息监控获得预定周期内各用户的移动轨迹信息包含：获取预设周期内所述标识信息对应用户的多个位置信息，根据所述位置信息构建所述移动轨迹信息。具体的，可按预设的时间周期采集多个位置点，根据各位置点的采集时间将位置点串联构成轨迹路线，基于轨迹路线和采集时间获得用户的所述移动轨迹信息；当然，实际工作中也存在其他移动轨迹信息构建方法，本发明在此并不做进一步限定。
请参考图3所示，在本发明一实施例中，根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息还包含：
S301根据所述第一人脸信息通过图像分析获得面部表情数据；
S302利用预设的人脸三维模型分析所述面部表情数据获得用户表情状态；
S303根据用户表情状态通过预设规则对各用户进行优先级排序生成服务序列表；
S304根据所述服务序列表和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。
在上述实施例中，可分析用户的人脸信息所对应的表情，根据表情确定是否用户的心情，根据所述心情确定用户的情绪，根据确定情绪予以分析优先级安排提前进行服务。该过程中人脸三维模型可采用现有技术实现，本发明在此就不再一一详述；而针对用户不同情绪确定优先级的方式，可根据实际需要选择设定，本发明在此不做进一步限定；实际工作中表情模型可分为01开心、02正常、03伤心、04厌恶、05生气，表情模型前面的数字+等待时间构成优先级判断要素。如果同一个表情类别，等待时间越长，优先级越高；同一等待时间，表情模型数字越大，优先级越高。其次分析客户在店内轨迹，在ATM、VTM、回单打印机等自助设备停留时间；以及在店内广告屏停留时间以及观看的内容，进行综合分析，判断客户的倾向性需求内容。系统设置个类型的倾向性需求，回单打印、存取款、个人理财、贵金属(倾向性需求内容可根据店内布置及业务发展不断扩充)。
请参考图4所示，在本发明另一实施例中，根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息还包含：
S401根据所述第一人脸信息通过人脸比对分析获得用户的身份信息；
S402将所述身份信息与预设权限信息中一个或多个身份信息比较确定用户的优先级；
S403根据各用户的优先级和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。
在实际工作中，当确定用户的移动轨迹信息后，对于在同一位置等待时间达到阈值的用户，可触发后台进行告警提示；基于告警提示对对应用户进行进一步分析确定用户的身份信息，根据预存的权限信息确定用户的优先级别，基于该优先级别即可安排对应的服务，本发明在此不再一一详述。
请参考图5所示，在本发明一实施例中，根据比较结果向对应用户发起服务还包含：
S501根据所述移动轨迹信息和预设区域内的布局信息提取获得对应用户在各设备区域的停留时间信息；
S502根据所述停留时间信息分析获得用户的倾向需求信息，根据所述倾向需求信息生成服务列表；
S503根据所述服务列表向对应用户发起服务。
在该实施例中，主要利用所述移动轨迹信息中用户停留位置确定用户的兴趣点，基于该兴趣点和用户的优先级安排对应的服务；例如用户对基金项目感兴趣，且客户级别较高，此时服务可安排高级基金项目策略进行推送交互；或，安排相关重要服务工作人员予以对接服务。
请参考图6所示，在本发明一实施例中，根据比较结果向对应用户发起服务还包含：
S601根据所述移动轨迹信息和预设区域内的布局信息提取获得对应用户在各设备区域的停留时间信息；
S602根据所述停留时间信息分析获得用户的倾向需求信息，根据所述倾向需求信息生成服务列表；
S603根据所述服务列表向对应用户发起服务。
在实际工作中，可根据当前优先级最高的客户位置、倾向性需求信息、人脸信息生成服务列表，并为对应用户提供相应服务，该服务列表可包含如下：
如果客户无倾向性需求信息，则机器人对客户进行关心问候，主动询问客户想要办理的业务。
如果客户的倾向性需求为回单打印，则机器人主动询问客户是否要进行回单打印，并介绍客户回单打印流程，询问所需证件是否携带，指导客户可通过自助柜员机进行回单打印处理。
如果客户的倾向性需求为存取款，则机器人主动询问客户是否要存取款以及取款金额等信息，并介绍存取款流程，取款方式，指导客户可通过ATM机进行相关业务处理。
如果客户的倾向性需求为个人理财，则机器人主动向客户介绍热门理财产品类型，并询问客户是否感兴趣，如果有兴趣则进一步介绍理财产品详细信息。
如果客户的倾向性需求为贵金属，则机器人主动介绍相关贵金属产品，并询问客户是否感兴趣，如果有兴趣则进一步介绍贵金属详细信息。
机器人当前服务指令执行完毕后，更新服务结果状态，并发送至协同处理平台。
请参考图7所示，本发明还提供一种智能协调服务系统，所述系统包含图像采集装置、边缘计算装置、协同管理装置和服务机器人；所述图像采集装置用于通过边缘计算技术获取预设区域内的各用户的第一人脸信息和位置信息，根据所述第一人脸信息生成标识信息；所述边缘计算装置用于根据所述标识信息和所述位置信息监控获得预定周期内各用户的移动轨迹信息；所述协同管理装置用于根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息；以及，根据所述服务机器人信息和所述移动轨迹信息，调用对应的服务机器人移动至对应用户位置；所述服务机器人用于采集对应用户的第二人脸信息；以及，将所述第一人脸信息与所述第二人脸信息比较，根据比较结果向对应用户发起服务。
在实际工作中，各装置以Restful API接口、RTSP流访问的方式来实现集成对接。图像采集装置中的视频采集设备(摄像头)采用RTSP流的方式进行对接，以此，通过该智能协调服务系统提升银行厅堂机器人的服务效率，现有厅堂机器人服务模式为被动等待，需要客户主动询问才能提供服务。该系统能自动发现客户需求，并驱动机器人主动提供服务。同时，有效提升客户体验。通过主动发现客户需求，让客户体验到被关注，缓解等待焦急情绪，进一步银行网点智能化服务水平。
在本发明一实施例中，所述图像采集装置包含分析模块，所述分析模块用于通过预定的多个摄像设备采集预设区域的视频数据，利用视频切帧技术将所述视频数据转换为帧序列数据；通过预设神经网络模型分析所述帧序列数据获得预设区域内的各用户的第一人脸信息和位置信息。基于该位置信息，在另一实施例中，所述边缘计算装置包含轨迹分析单元，所述轨迹分析单元用于获取预设周期内所述标识信息对应用户的多个位置信息，根据所述位置信息构建所述移动轨迹信息。具体实施方式已在前述实施例中详细说明，在此就不再一一详述。
在本发明一实施例中，所述协同管理装置还包含调度单元，所述调度单元用于根据所述第一人脸信息通过图像分析获得面部表情数据；利用预设的人脸三维模型分析所述面部表情数据获得用户表情状态；根据用户表情状态通过预设规则对各用户进行优先级排序生成服务序列表；根据所述服务序列表和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。在另一实施例中，所述协同管理装置还包含调度单元，所述调度单元用于根据所述第一人脸信息通过人脸比对分析获得用户的身份信息；将所述身份信息与预设权限信息中一个或多个身份信息比较确定用户的优先级；根据各用户的优先级和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。实际工作中，该优先级确定可利用结合予以确定，本领域相关技术人员可根据实际需要选择设置，本发明在此不做进一步限定。
在本发明一实施例中，所述服务机器人还包含服务单元，所述服务单元根据所述移动轨迹信息和预设区域内的布局信息提取获得对应用户在各设备区域的停留时间信息；根据所述停留时间信息分析获得用户的倾向需求信息，根据所述倾向需求信息生成服务列表；根据所述服务列表向对应用户发起服务。该实施例中，所述倾向需求信息除了单独根据停留时间信息确定还可加入用户的表情状态和人员身份信息确定，本领域相关技术人员可根据实际需要选择设定，本发明在此并不做进一步限定。
本发明的有益技术效果在于：提升场景内机器人的服务效率，现有厅堂机器人服务模式为被动等待，需要客户主动询问才能提供服务；能自动发现客户需求，并驱动机器人主动提供服务；有效提升客户体验，通过主动发现客户需求，让客户体验到被关注，缓解等待焦急情绪，进一步场景智能化服务水平。
本发明还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述方法。
本发明还提供一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述方法的计算机程序。
如图8所示，该电子设备600还可以包括：通信模块110、输入单元120、音频处理单元130、显示器160、电源170。值得注意的是，电子设备600也并不是必须要包括图8中所示的所有部件；此外，电子设备600还可以包括图8中没有示出的部件，可以参考现有技术。
如图8所示，中央处理器100有时也称为控制器或操作控件，可以包括微处理器或其他处理器装置和/或逻辑装置，该中央处理器100接收输入并控制电子设备600的各个部件的操作。
其中，存储器140，例如可以是缓存器、闪存、硬驱、可移动介质、易失性存储器、非易失性存储器或其它合适装置中的一种或更多种。可储存上述与失败有关的信息，此外还可存储执行有关信息的程序。并且中央处理器100可执行该存储器140存储的该程序，以实现信息存储或处理等。
输入单元120向中央处理器100提供输入。该输入单元120例如为按键或触摸输入装置。电源170用于向电子设备600提供电力。显示器160用于进行图像和文字等显示对象的显示。该显示器例如可为LCD显示器，但并不限于此。
该存储器140可以是固态存储器，例如，只读存储器(ROM)、随机存取存储器(RAM)、SIM卡等。还可以是这样的存储器，其即使在断电时也保存信息，可被选择性地擦除且设有更多数据，该存储器的示例有时被称为EPROM等。存储器140还可以是某种其它类型的装置。存储器140包括缓冲存储器141(有时被称为缓冲器)。存储器140可以包括应用/功能存储部142，该应用/功能存储部142用于存储应用程序和功能程序或用于通过中央处理器100执行电子设备600的操作的流程。
存储器140还可以包括数据存储部143，该数据存储部143用于存储数据，例如联系人、数字数据、图片、声音和/或任何其他由电子设备使用的数据。存储器140的驱动程序存储部144可以包括电子设备的用于通信功能和/或用于执行电子设备的其他功能(如消息传送应用、通讯录应用等)的各种驱动程序。
通信模块110即为经由天线111发送和接收信号的发送机/接收机110。通信模块(发送机/接收机)110耦合到中央处理器100，以提供输入信号和接收输出信号，这可以和常规移动通信终端的情况相同。
基于不同的通信技术，在同一电子设备中，可以设置有多个通信模块110，如蜂窝网络模块、蓝牙模块和/或无线局域网模块等。通信模块(发送机/接收机)110还经由音频处理器130耦合到扬声器131和麦克风132，以经由扬声器131提供音频输出，并接收来自麦克风132的音频输入，从而实现通常的电信功能。音频处理器130可以包括任何合适的缓冲器、解码器、放大器等。另外，音频处理器130还耦合到中央处理器100，从而使得可以通过麦克风132能够在本机上录音，且使得可以通过扬声器131来播放本机上存储的声音。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (14)
1.一种智能协调服务方法，其特征在于，所述方法包含：
通过边缘计算技术获取预设区域内的各用户的第一人脸信息和位置信息，根据所述第一人脸信息生成标识信息；
根据所述标识信息和所述位置信息监控获得预定周期内各用户的移动轨迹信息；
根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息；
根据所述服务机器人信息和所述移动轨迹信息，调用对应的服务机器人移动至对应用户位置，并采集对应用户的第二人脸信息；
将所述第一人脸信息与所述第二人脸信息比较，根据比较结果向对应用户发起服务。
2.根据权利要求1所述的智能协调服务方法，其特征在于，获取预设区域内的各用户的第一人脸信息和位置信息包含：
通过预定的多个摄像设备采集预设区域的视频数据，利用视频切帧技术将所述视频数据转换为帧序列数据；
通过预设神经网络模型分析所述帧序列数据获得预设区域内的各用户的第一人脸信息和位置信息。
3.根据权利要求1所述的智能协调服务方法，其特征在于，根据所述标识信息和所述位置信息监控获得预定周期内各用户的移动轨迹信息包含：
获取预设周期内所述标识信息对应用户的多个位置信息，根据所述位置信息构建所述移动轨迹信息。
4.根据权利要求1所述的智能协调服务方法，其特征在于，根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息还包含：
根据所述第一人脸信息通过图像分析获得面部表情数据；
利用预设的人脸三维模型分析所述面部表情数据获得用户表情状态；
根据用户表情状态通过预设规则对各用户进行优先级排序生成服务序列表；
根据所述服务序列表和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。
5.根据权利要求1所述的智能协调服务方法，其特征在于，根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息还包含：
根据所述第一人脸信息通过人脸比对分析获得用户的身份信息；
将所述身份信息与预设权限信息中一个或多个身份信息比较确定用户的优先级；
根据各用户的优先级和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。
6.根据权利要求1所述的智能协调服务方法，其特征在于，根据比较结果向对应用户发起服务还包含：
根据所述移动轨迹信息和预设区域内的布局信息提取获得对应用户在各设备区域的停留时间信息；
根据所述停留时间信息分析获得用户的倾向需求信息，根据所述倾向需求信息生成服务列表；
根据所述服务列表向对应用户发起服务。
7.一种智能协调服务系统，其特征在于，所述系统包含图像采集装置、边缘计算装置、协同管理装置和服务机器人；
所述图像采集装置用于通过边缘计算技术获取预设区域内的各用户的第一人脸信息和位置信息，根据所述第一人脸信息生成标识信息；
所述边缘计算装置用于根据所述标识信息和所述位置信息监控获得预定周期内各用户的移动轨迹信息；
所述协同管理装置用于根据所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息；以及，根据所述服务机器人信息和所述移动轨迹信息，调用对应的服务机器人移动至对应用户位置；
所述服务机器人用于采集对应用户的第二人脸信息；以及，将所述第一人脸信息与所述第二人脸信息比较，根据比较结果向对应用户发起服务。
8.根据权利要求7所述的智能协调服务系统，其特征在于，所述图像采集装置包含分析模块，所述分析模块用于通过预定的多个摄像设备采集预设区域的视频数据，利用视频切帧技术将所述视频数据转换为帧序列数据；通过预设神经网络模型分析所述帧序列数据获得预设区域内的各用户的第一人脸信息和位置信息。
9.根据权利要求7所述的智能协调服务系统，其特征在于，所述边缘计算装置包含轨迹分析单元，所述轨迹分析单元用于获取预设周期内所述标识信息对应用户的多个位置信息，根据所述位置信息构建所述移动轨迹信息。
10.根据权利要求7所述的智能协调服务系统，其特征在于，所述协同管理装置还包含调度单元，所述调度单元用于根据所述第一人脸信息通过图像分析获得面部表情数据；利用预设的人脸三维模型分析所述面部表情数据获得用户表情状态；根据用户表情状态通过预设规则对各用户进行优先级排序生成服务序列表；根据所述服务序列表和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。
11.根据权利要求7所述的智能协调服务系统，其特征在于，所述协同管理装置还包含调度单元，所述调度单元用于根据所述第一人脸信息通过人脸比对分析获得用户的身份信息；将所述身份信息与预设权限信息中一个或多个身份信息比较确定用户的优先级；根据各用户的优先级和所述移动轨迹信息筛选获得预设区域内符合预设条件的服务机器人信息。
12.根据权利要求7所述的智能协调服务系统，其特征在于，所述服务机器人还包含服务单元，所述服务单元根据所述移动轨迹信息和预设区域内的布局信息提取获得对应用户在各设备区域的停留时间信息；根据所述停留时间信息分析获得用户的倾向需求信息，根据所述倾向需求信息生成服务列表；根据所述服务列表向对应用户发起服务。
13.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至6任一所述方法。
14.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有由计算机执行权利要求1至6任一所述方法的计算机程序。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110961641.3A CN113635324A (zh) | 2021-08-20 | 2021-08-20 | 智能协调服务方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110961641.3A CN113635324A (zh) | 2021-08-20 | 2021-08-20 | 智能协调服务方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113635324A true CN113635324A (zh) | 2021-11-12 |
Family
ID=78423133
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110961641.3A Pending CN113635324A (zh) | 2021-08-20 | 2021-08-20 | 智能协调服务方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113635324A (zh) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106826855A (zh) * | 2017-03-14 | 2017-06-13 | 山东大学 | 一种基于云数据身份识别的银行业务助理机器人 |
| CN108764932A (zh) * | 2018-04-09 | 2018-11-06 | 国网山东省电力公司 | 基于人脸识别的电力营业厅智能分级调度方法和系统 |
| CN109866230A (zh) * | 2019-01-17 | 2019-06-11 | 深圳壹账通智能科技有限公司 | 客服机器人控制方法、装置、计算机设备及存储介质 |
| CN110298683A (zh) * | 2019-05-22 | 2019-10-01 | 深圳壹账通智能科技有限公司 | 基于微表情的信息推广方法、装置、设备及介质 |
| CN110309716A (zh) * | 2019-05-22 | 2019-10-08 | 深圳壹账通智能科技有限公司 | 基于人脸和体态的服务跟踪方法、装置、设备及存储介质 |
| CN112184497A (zh) * | 2020-09-30 | 2021-01-05 | 重庆天智慧启科技有限公司 | 一种客户到访轨迹追踪及客流分析系统及方法 |
-
2021
- 2021-08-20 CN CN202110961641.3A patent/CN113635324A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106826855A (zh) * | 2017-03-14 | 2017-06-13 | 山东大学 | 一种基于云数据身份识别的银行业务助理机器人 |
| CN108764932A (zh) * | 2018-04-09 | 2018-11-06 | 国网山东省电力公司 | 基于人脸识别的电力营业厅智能分级调度方法和系统 |
| CN109866230A (zh) * | 2019-01-17 | 2019-06-11 | 深圳壹账通智能科技有限公司 | 客服机器人控制方法、装置、计算机设备及存储介质 |
| CN110298683A (zh) * | 2019-05-22 | 2019-10-01 | 深圳壹账通智能科技有限公司 | 基于微表情的信息推广方法、装置、设备及介质 |
| CN110309716A (zh) * | 2019-05-22 | 2019-10-08 | 深圳壹账通智能科技有限公司 | 基于人脸和体态的服务跟踪方法、装置、设备及存储介质 |
| CN112184497A (zh) * | 2020-09-30 | 2021-01-05 | 重庆天智慧启科技有限公司 | 一种客户到访轨迹追踪及客流分析系统及方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10984226B2 (en) | Method and apparatus for inputting emoticon | |
| CN112653902B (zh) | 说话人识别方法、装置及电子设备 | |
| CN105518712A (zh) | 基于字符识别的关键词通知方法及设备、计算机程序产品 | |
| CN107078917A (zh) | 托管电话会议 | |
| KR20120108501A (ko) | 식별 코드 운용 시스템과 방법 및 이를 지원하는 장치 | |
| CN106227860A (zh) | 一种信息推送处理方法、装置及终端设备 | |
| CN106034170A (zh) | 群组生成方法及装置 | |
| CN106228374A (zh) | 排队服务方法和装置 | |
| CN111078011A (zh) | 手势控制方法、装置、计算机可读存储介质及电子设备 | |
| US9152707B2 (en) | System and method for creating and providing media objects in a navigable environment | |
| CN104170375A (zh) | 用于群组视频分发的体系结构和系统 | |
| CN104407981B (zh) | 内存管理方法和装置 | |
| AU2018432003B2 (en) | Video processing method and device, and terminal and storage medium | |
| CN114880062A (zh) | 聊天表情展示方法、设备、电子设备及存储介质 | |
| CN114153362A (zh) | 信息处理方法及装置 | |
| US20240046279A1 (en) | Systems and methods for providing user emotion information to a customer service provider | |
| CN110992958B (zh) | 内容记录方法、装置、电子设备及存储介质 | |
| CN112052391A (zh) | 数据推送方法、装置及系统 | |
| CN107037989A (zh) | 分布式计算系统中的数据处理方法和装置 | |
| CN113635324A (zh) | 智能协调服务方法及系统 | |
| CN115941869A (zh) | 音频处理方法、装置及电子设备 | |
| CN109101964A (zh) | 确定多媒体文件中首尾区域的方法、设备及存储介质 | |
| CN113763137A (zh) | 信息推送方法及计算机设备 | |
| CN111626834B (zh) | 智能税务处理方法、装置、终端和介质 | |
| CN106412199A (zh) | 用于编辑联系人信息的方法、装置、移动终端和服务器 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20211112 |