CN115297025A - 基于rpa和ai的ia机器人监控方法及装置 - Google Patents
基于rpa和ai的ia机器人监控方法及装置 Download PDFInfo
- Publication number
- CN115297025A CN115297025A CN202210887777.9A CN202210887777A CN115297025A CN 115297025 A CN115297025 A CN 115297025A CN 202210887777 A CN202210887777 A CN 202210887777A CN 115297025 A CN115297025 A CN 115297025A
- Authority
- CN
- China
- Prior art keywords
- rpa
- rpa robot
- robot
- monitoring
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 233
- 238000000034 method Methods 0.000 title claims abstract description 83
- 230000001960 triggered effect Effects 0.000 claims description 28
- 230000004044 response Effects 0.000 claims description 27
- 238000003058 natural language processing Methods 0.000 claims description 23
- 238000004590 computer program Methods 0.000 claims description 9
- 238000012806 monitoring device Methods 0.000 claims description 4
- 238000012423 maintenance Methods 0.000 abstract description 12
- 238000013473 artificial intelligence Methods 0.000 description 30
- 230000008569 process Effects 0.000 description 19
- 238000010586 diagram Methods 0.000 description 13
- 238000004801 process automation Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 12
- 238000004891 communication Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 230000000670 limiting effect Effects 0.000 description 3
- 238000012216 screening Methods 0.000 description 3
- 238000013480 data collection Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000005065 mining Methods 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000002829 reductive effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/10—Active monitoring, e.g. heartbeat, ping or trace-route
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
- H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Environmental & Geological Engineering (AREA)
- Health & Medical Sciences (AREA)
- Cardiology (AREA)
- General Health & Medical Sciences (AREA)
- Manipulator (AREA)
Abstract
本公开提出一种基于RPA和AI的IA机器人监控方法。其中，该方法包括：对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态后，可以根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。由此，通过识别确定RPA机器人当前的运行状态，并根据RPA机器人当前的运行状态自动更新RPA监控界面，从而实现了IA的对机器人监控，提高了对RPA机器人运维的效率。
Description
技术领域
本公开涉及自动化技术领域，尤其涉及一种基于RPA和AI的IA机器人监控方法及装置。
背景技术
机器人流程自动化(Robotic Process Automation)简称RPA，是通过特定的“机器人软件”，模拟人在计算机上的操作，按规则自动执行流程任务。
人工智能(Artificial Intelligence，AI)是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门技术科学。
智能自动化(Intelligent Automation，IA)是一系列从机器人流程自动化到人工智能的技术总称，将RPA与光学字符识别(Optical Character Recognition，OCR)、智能字符识别(Intelligent Character Recognition，ICR)、流程挖掘(Process Mining)、深度学习(Deep Learning，DL)、机器学习(Machine Learning，ML)、自然语言处理(NaturalLanguage Processing，NLP)、语音识别(Automatic Speech Recognition，ASR)、语音合成(Text To Speech，TTS)、计算机视觉(Computer Vision，CV)等多种AI技术相结合，以创建能够思考、学习及自适应的端到端的业务流程，涵盖从流程发现、流程自动化，到通过自动而持续的数据收集、理解数据的含义，使用数据来管理和优化业务流程的整个历程。
随着自动化技术的不断发展，RPA机器人在企业内越来越多的应用，随之而来的对于机器人管控的难度越来越大。由于RPA机器人可能部署在在企业内的各个地区、各个办公室，运维人员无法统一对RPA机器人的运行状态进行监控，导致无法及时发现RPA机器人可能出现的故障，运维效率较低。
发明内容
本申请实施例提供一种基于RPA和AI的IA机器人监控方法，技术方案如下：
第一方面，本申请实施例提供了一种基于RPA和AI的IA机器人监控方法，包括：
对当前从每个虚拟网络控制台VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态；
根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。
在一种实施方式中，对当前从每个虚拟网络控制台VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态，包括：
响应于数据信息对应的自然语言处理NLP结果指示任一VNC服务端发送的关联的RPA机器人当前对应的运行画面截图，确定关联的RPA机器人当前处于运行状态；和/或，
响应于任一VNC服务端关联的RPA机器人与控制台的连接状态对应的NLP结果指示连接断开，确定任一VNC服务端关联的RPA机器人处于离线状态。
在一种实施方式中，根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片，包括：
响应于任一RPA机器人处于运行状态，利用任一RPA机器人当前对应的运行画面截图，更新RPA监控界面中任一RPA机器人对应的监控卡片；和/或，
响应于任一RPA机器人处于运行超时状态，基于任一RPA机器人当前的运行超时时长，更新RPA监控界面中任一RPA机器人对应的监控卡片；和/或，
响应于任一RPA机器人处于离线状态，基于任一RPA机器人当前的已离线时长，更新RPA监控界面中任一RPA机器人对应的监控卡片。
在一种实施方式中，还包括：
响应于RPA监控界面中第一预设控件被触发，在RPA监控界面中显示第一预设控件关联的候选项列表；
响应于候选项列表中任一候选项被选中，获取与任一候选项指示的运行状态相同的第一RPA机器人；
在RPA监控界面中显示第一RPA机器人对应的监控卡片。
在一种实施方式中，还包括：
响应于RPA监控界面中第二预设控件被触发，获取第二预设控件中输入的目标搜索词；
确定与目标搜索词匹配的第二RPA机器人；
在RPA监控界面中显示第二RPA机器人对应的监控卡片。
在一种实施方式中，根据当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态，确定每个VNC服务端对应的每个RPA机器人当前的运行状态，包括：
响应于RPA监控界面中的第三预设控件被触发，根据当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态，确定每个VNC服务端对应的每个RPA机器人当前的运行状态。
在一种实施方式中，在更新RPA监控界面中每个RPA机器人对应的监控卡片之后，还包括：
响应于任一RPA机器人对应的监控卡片被触发，在显示界面显示任一RPA机器人的运行数据和/或任一RPA机器人的第一属性信息。
在一种实施方式中，在显示界面显示任一RPA机器人的运行数据和/或任一RPA机器人的第一属性信息，包括：
响应于任一RPA机器人处于运行状态，在显示界面显示任一RPA机器人的实时运行画面和/或第一属性信息；或者，
响应于任一RPA机器人处于离线状态，在显示界面显示任一RPA机器人的历史运行数据和/或第一属性信息。
在一种实施方式中，历史运行数据，包括以下至少一项：历史录屏数据，历史运行结果，历史运行任务名称，历史运行时间。
在一种实施方式中，在在显示界面显示任一RPA机器人的运行数据和/或任一RPA机器人的属性信息之后，还包括：
响应于显示界面中的第四预设控件被触发，启动与任一RPA机器人关联的VNC服务端间的远程控制连接；或者，
响应于显示界面中的第五预设控件被触发，在显示界面显示虚拟输入控件；或者，
响应于显示界面中的第六预设控件被触发，在显示界面显示当前监控任一RPA机器人的对象的数量和/或对象的属性信息。
在一种实施方式中，第一属性信息，包括以下至少一项：任一RPA机器人中运行的任务名称，任务编号，开始运行时间。
在一种实施方式中，VNC服务端与VNC服务端关联的RPA机器人独立部署。
第二方面，本申请实施例提供了一种基于RPA和AI的IA机器人监控装置，包括：
确定模块，对当前从每个虚拟网络控制台VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态；
更新模块，用于根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。
在一种实施方式中，上述确定模块，用于：
响应于数据信息对应的自然语言处理NLP结果指示任一VNC服务端发送的关联的RPA机器人当前对应的运行画面截图，确定关联的RPA机器人当前处于运行状态；和/或，
响应于任一VNC服务端关联的RPA机器人与控制台的连接状态对应的NLP结果指示连接断开，确定任一VNC服务端关联的RPA机器人处于离线状态。
在一种实施方式中，上述更新模块，用于：
响应于任一RPA机器人处于运行状态，利用任一RPA机器人当前对应的运行画面截图，更新RPA监控界面中任一RPA机器人对应的监控卡片；和/或，
响应于任一RPA机器人处于运行超时状态，基于任一RPA机器人当前的运行超时时长，更新RPA监控界面中任一RPA机器人对应的监控卡片；和/或，
响应于任一RPA机器人处于离线状态，基于任一RPA机器人当前的已离线时长，更新RPA监控界面中任一RPA机器人对应的监控卡片。
在一种实施方式中，还包括：
显示模块，用于响应于RPA监控界面中第一预设控件被触发，在RPA监控界面中显示第一预设控件关联的候选项列表；
获取模块，用于响应于候选项列表中任一候选项被选中，获取与任一候选项指示的运行状态相同的第一RPA机器人；
上述显示模块，用于在RPA监控界面中显示第一RPA机器人对应的监控卡片。
在一种实施方式中，上述获取模块，还用于：
响应于RPA监控界面中第二预设控件被触发，获取第二预设控件中输入的目标搜索词；
上述确定模块，还用于确定与目标搜索词匹配的第二RPA机器人；
上述显示模块，还用于在RPA监控界面中显示第二RPA机器人对应的监控卡片。
在一种实施方式中，上述确定模块，用于：
响应于RPA监控界面中的第三预设控件被触发，根据当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态，确定每个VNC服务端对应的每个RPA机器人当前的运行状态。
在一种实施方式中，上述显示模块，还用于：
响应于任一RPA机器人对应的监控卡片被触发，在显示界面显示任一RPA机器人的运行数据和/或任一RPA机器人的第一属性信息。
在一种实施方式中，上述显示模块，用于：
响应于任一RPA机器人处于运行状态，在显示界面显示任一RPA机器人的实时运行画面和/或第一属性信息；或者，
响应于任一RPA机器人处于离线状态，在显示界面显示任一RPA机器人的历史运行数据和/或第一属性信息。
在一种实施方式中，历史运行数据，包括以下至少一项：历史录屏数据，历史运行结果，历史运行任务名称，历史运行时间。
在一种实施方式中，还包括：
启动模块，用于响应于显示界面中的第四预设控件被触发，启动与任一RPA机器人关联的VNC服务端间的远程控制连接；或者，
上述显示模块，还用于响应于显示界面中的第五预设控件被触发，在显示界面显示虚拟输入控件；或者，
上述显示模块，还用于响应于显示界面中的第六预设控件被触发，在显示界面显示当前监控任一RPA机器人的对象的数量和/或对象的属性信息。
在一种实施方式中，第一属性信息，包括以下至少一项：任一RPA机器人中运行的任务名称，任务编号，开始运行时间。
在一种实施方式中，VNC服务端与VNC服务端关联的RPA机器人独立部署。
第三方面，本申请实施例提供了一种基于RPA和AI的IA机器人监控装置，该装置包括：存储器和处理器。其中，该存储器和该处理器通过内部连接通路互相通信，该存储器用于存储指令，该处理器用于执行该存储器存储的指令，并且当该处理器执行该存储器存储的指令时，使得该处理器执行上述各方面任一种实施方式中的方法。
第四方面，本申请实施例提供了一种计算机可读存储介质，计算机可读存储介质存储计算机程序，当计算机程序在计算机上运行时，上述各方面任一种实施方式中的方法被执行。
上述技术方案中的优点或有益效果至少包括：对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态后，可以根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。由此，通过识别确定RPA机器人当前的运行状态，并根据RPA机器人当前的运行状态自动更新RPA监控界面，从而实现了IA的对机器人监控，提高了对RPA机器人运维的效率。
上述概述仅仅是为了说明书的目的，并不意图以任何方式进行限制。除上述描述的示意性的方面、实施方式和特征之外，通过参考附图和以下的详细描述，本申请进一步的方面、实施方式和特征将会是容易明白的。
附图说明
在附图中，除非另外规定，否则贯穿多个附图相同的附图标记表示相同或相似的部件或元素。这些附图不一定是按照比例绘制的。应该理解，这些附图仅描绘了根据本申请公开的一些实施方式，而不应将其视为是对本申请范围的限制。
图1为本公开实施例提供的一种基于RPA和AI的IA机器人监控方法的流程示意图；
图2为本公开实施例提供的一种VNC集成示意图；
图3为本公开实施例提供的一种RPA监控界面的示意图；
图4为本公开实施例提供的另一种基于RPA和AI的IA机器人监控方法的流程示意图；
图5为本公开实施例提供的另一种基于RPA和AI的IA机器人监控方法的流程示意图；
图6为本公开实施例提供的另一种基于RPA和AI的IA机器人监控方法的流程示意图；
图7为本公开实施例提供的另一种基于RPA和AI的IA机器人监控方法的流程示意图；
图8为本公开实施例提供的另一种基于RPA和AI的IA机器人监控方法的流程示意图；
图9为本公开实施例提供的一种RPA监控界面的示意图；
图10为本公开实施例提供的一种RPA监控界面的示意图；
图11为本公开实施例提供的另一种基于RPA和AI的IA机器人监控方法的流程示意图；
图12为本公开实施例提供的另一种RPA监控界面的示意图；
图13为本公开实施例提供的一种基于RPA和AI的IA机器人监控装置的结构示意图；
图14为本公开实施例提供的一种基于RPA和AI的IA机器人监控方法的计算机设备的框图。
具体实施方式
下面详细描述本公开的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本公开，而不能理解为对本公开的限制。
在本公开的描述中，术语“多个”指两个或两个以上。
在本公开的描述中，术语“RPA机器人”为任一可以调用RPA程序，以实现对应服务或功能的机器人。
在本公开的描述中，术语“控制台”是一款B/S架构的服务器产品，主要用于管理企业内的所有自动化流程，将流程远程分配给企业内的各个机器人运行。
在本公开的描述中，术语“数据信息”是数据信息可以包括RPA机器人对应的运行画面截图等运行数据信息。
在本公开的描述中，术语“运行状态”是RPA机器人运行的工作状况，可以包括离线状态、在线状态、未激活状态等。
在本公开的描述中，术语“监控卡片”是用于展示各RPA机器人的数据信息的模块。
在本公开的描述中，术语“运行画面”是RPA机器人运行时，在所在设备的桌面中显示的画面。
在本公开的描述中，术语“第一预设控件”是通过运行状态筛选RPA机器人的控件。
在本公开的描述中，术语“候选项列表”是包含RPA机器人所有的运行状态的列表。
在本公开的描述中，术语“第二预设控件”是为通过RPA机器人名称筛选RPA机器人的控件。
在本公开的描述中，术语“目标搜索词”是控制台获取的第二预设控件对应的输入框中的搜索词。
在本公开的描述中，术语“第三预设控件”是用于刷新监控卡片的控件。
在本公开的描述中，术语“第一属性信息”是RPA机器人的性质信息，可以包括以下至少一项：任一RPA机器人中运行的任务名称，任务编号，开始运行时间等信息。
在本公开的描述中，术语“第四预设控件”是为用于控制进入远程控制模式的控件。
在本公开的描述中，术语“第五预设控件”是用于控制启动模拟输入控件的控件。
在本公开的描述中，术语“第六预设控件”是用于查看监控RPA机器人的对象信息的控件。
在本公开的描述中，术语“对象的属性信息”是用于确定监控RPA机器人的对象的信息，可以包括对象的名称、对象对应的IP等信息。
在本公开的描述中，术语“虚拟输入控件”是用于实现虚拟键盘部分功能的控件。
在本公开的描述中，术语“第七预设控件”是用于控制全屏显示实时运行画面的控件。
参照下面的描述和附图，将清楚本公开的实施例的这些和其他方面。在这些描述和附图中，具体公开了本公开的实施例中的一些特定实施方式，来表示实施本公开的实施例的原理的一些方式，但是应当理解，本公开的实施例的范围不受此限制。相反，本公开的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
本公开中，通过增加远程监控功能，使得用户能够远程查看RPA机器人环境，并远程控制RPA机器人，从而不再需要到RPA机器人所在地点对RPA机器人进行维护，提高了维护RPA机器人的效率。
以下结合附图描述根据本公开实施例的基于机器人流程自动化(RoboticProcess Automation，RPA)和人工智能(Artificial Intelligence，AI)的智能自动化(Intelligent Automation，IA)机器人监控方法及装置。
图1是本公开一个实施例的基于机器人流程自动化(Robotic ProcessAutomation，RPA)和人工智能(Artificial Intelligence，AI)的智能自动化(IntelligentAutomation，IA)机器人监控方法的流程图，如图1所示，该方法可包括以下步骤：
步骤S101：对当前从每个虚拟网络控制台VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态。
其中，数据信息可以包括RPA机器人对应的运行画面截图等运行数据信息，本公开对此不作限制。
如图2所示，本公开中，为了实现远程监控RPA机器人的功能，可以基于开源的虚拟网络控制台(Virtual Network Console，VNC)技术，在每个RPA机器人所在设备部署VNC的服务端，在控制台服务器中部署VNC的客户端，并将VNC服务嵌入到控制台服务中，控制台可以调用VNC客户端的接口，以从各VNC服务端获取对应RPA机器人的数据信息，从而实现在任何设备上通过浏览器进入控制台页面时，即可获取RPA机器人对应的数据信息，实现对RPA机器人进行监控。其中，RPA机器人所在设备部署的VNC服务端与RPA机器人相互独立部署，能够有效避免RPA机器人进程崩溃时对VNC服务进程的影响。
本公开中，为了节省网络资源，在控制台和RPA机器人设备部署完成VNC服务后，每个VNC服务端可以按照预设的时间间隔，向VNC客户端发送其对应RPA机器人的数据信息，控制台可以对该数据信息进行识别，比如，对数据信息进行自然语言处理(Natural LanguageProcessing，NLP)等，以获取该数据信息中的关键数据，并根据该关键数据确定每个RPA机器人当前的运行状态。其中，关键数据可以包括用于确定RPA机器人运行状态的标识信息等，本公开对此不作限制。
或者，控制台可根据各RPA机器人发送的心跳信息，确定该各RPA机器人与控制台的连接状态，并根据连接状态，确定每个VNC服务端对应的每个RPA机器人当前的运行状态。比如，当RPA机器人与控制台的连接状态为正常连接状态时，可以确定该RPA机器人当前的运行状态为在线状态(即运行状态)。
步骤S102：根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。
本公开中，不同的RPA机器人运行状态，对应的数据信息可能不同，从而在各RPA机器人对应的监控卡片中展示的信息可能不同，因此，可以根据每个RPA机器人当前的运行状态，对RPA监控界面中每个RPA机器人对应的监控卡片进行更新。其中，监控卡片可以用于展示各RPA机器人的数据信息。
如图3所示，各RPA机器人可以对应一个监控卡片，监控卡片中可以包含RPA机器人的名称、RPA机器人的运行状态信息(比如图3中，在线、离线、断开连接时间等)等，可以根据每个RPA机器人当前的运行状态，对RPA监控界面中每个RPA机器人对应的监控卡片进行更新，以实现远程监控各RPA机器人的功能。
需要说明的是，上述图3中的RPA监控界面的示意图的样式、及图中各控件的名称，仅是示意性说明，本公开对RPA监控界面中各控件的名称、位置及显示样式等不作限定。
本公开中，控制台对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态后，可以根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。由此，通过识别确定RPA机器人当前的运行状态，并根据RPA机器人当前的运行状态自动更新RPA监控界面，从而实现了IA的对机器人监控，提高了对RPA机器人运维的效率。
图4是本公开一个实施例的基于机器人流程自动化(Robotic ProcessAutomation，RPA)和人工智能(Artificial Intelligence，AI)的智能自动化(IntelligentAutomation，IA)机器人监控方法的流程图，如图4所示，该方法可包括以下步骤：
步骤S401：响应于数据信息对应的NLP结果指示任一VNC服务端发送的关联的RPA机器人当前对应的运行画面截图，确定关联的RPA机器人当前处于运行状态。
本公开中，当RPA机器人运行时，会在RPA机器人所在设备的桌面中，显示运行画面，此时，VNC服务端向VNC客户端发送的数据信息中包含RPA机器人当前对应的运行画面截图，之后，控制台在获取到数据信息后，可以将该数据信息与预设的参考数据进行对比，确定该数据信息为RPA机器人当前对应的运行画面截图，即可确定该RPA机器人当前处于运行状态，也即在线状态。其中，参考数据可以为RPA机器人运行画面数据。
或者，控制台可以对数据信息进行NLP，以获取该数据信息中的关键数据，当关键数据中用于确定RPA机器人运行状态的标识信息为运行状态标识时，可以确定关联的RPA机器人当前处于运行状态。
可选的，在数据信息对应的NLP结果指示不为任一VNC服务端发送的关联的RPA机器人当前对应的运行画面截图，可以确定该RPA机器人当前处于空闲状态。
可选的，RPA机器人在执行完任务后，可以向控制台发送任务执行结果，当控制台在预设时间内未接收到某一RPA机器人发送的运行结果数据时，可以确定该RPA机器人处于运行超时状态。
可选的，当任一VNC服务端关联的RPA机器人与控制台的连接状态对应的NLP结果指示连接断开时，确定任一VNC服务端关联的RPA机器人处于离线状态。
本公开中，RPA机器人启动后，可以以预设的时间间隔向控制台上报一次心跳信息，以指示RPA机器人是否在线，当控制台在预设的时间段内未接收到RPA机器人发送的心跳信息时，确定该RPA机器人与控制台的连接状态为断开连接，该RPA机器人即处于离线状态。
可选的，当任一VNC服务端关联的RPA机器人未被激活时，可以确定任一VNC服务端关联的RPA机器人处于未激活状态。
可选的，控制台可以在RPA监控界面中的第三预设控件被触发时，根据当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态，确定每个VNC服务端对应的每个RPA机器人当前的运行状态。其中，第三预设控件可以为用于刷新监控卡片的控件，当用户点击RPA监控界面中的第三预设控件时，比如点击图3中“刷新”按钮，控制台即可确定第三预设控件被触发。
步骤S402：根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。
本公开中，步骤S402的具体实现过程，可参见本公开任一实施例的详细描述，在此不再赘述。
本公开中，当数据信息为任一VNC服务端发送的关联的RPA机器人当前对应的运行画面截图时，可以确定关联的RPA机器人当前处于运行状态，之后，可以根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。由此，通过VNC服务，获取RPA机器人的运行数据信息，从而实现对RPA机器人的监控，提高了对RPA机器人运维的效率。
图5是本公开一个实施例的基于机器人流程自动化(Robotic ProcessAutomation，RPA)和人工智能(Artificial Intelligence，AI)的智能自动化(IntelligentAutomation，IA)机器人监控方法的流程图，如图5所示，该方法可包括以下步骤：
步骤S501：对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态。
本公开中，步骤501的具体实现过程，可参见本公开任一实施例的详细描述，在此不再赘述。
步骤S502：响应于任一RPA机器人处于运行状态，利用任一RPA机器人当前对应的运行画面截图，更新RPA监控界面中任一RPA机器人对应的监控卡片。
本公开中，当RPA机器人处于运行状态时，也即在线状态，可以在该RPA机器人对应的监控卡片中展示该RPA机器人当前对应的运行画面截图，以实现对RPA机器人的监控。
如图3所示，RPA机器人Worker1的运行状态为在线状态，可以在RPA机器人Worker1对应的监控卡片中显示该RPA机器人当前对应的运行画面截图。
可选的，当某一RPA机器人处于运行超时状态时，可以基于该RPA机器人当前的运行超时时长，更新RPA监控界面中该RPA机器人对应的监控卡片。比如，可以在该RPA机器人对应的监控卡片中展示该RPA机器人当前的运行超时时长，以提示该RPA机器人运行超时。
可选的，当某一RPA机器人处于离线状态时，基于该RPA机器人当前的已离线时长，更新RPA监控界面中任一RPA机器人对应的监控卡片。
比如，可以在该RPA机器人对应的监控卡片中展示该RPA机器人当前的离线时长，以提示该RPA机器人已离线。或者，还可以在该RPA机器人对应的监控卡片中展示该RPA机器人断开连接的具体时刻。或者，当离线时长超过预设阈值时，可以在该RPA机器人对应的监控卡片中展示“离线时间过长”的提醒信息。或者，当控制台监测到因网络原因导致RPA机器人离线时，可以在该RPA机器人对应的监控卡片中展示“未响应”的提醒信息。
如图3所示，RPA机器人Worker2的运行状态为离线状态，可以在RPA机器人Worker2对应的监控卡片中显示断开连接时间为2022-04-24 19:45:52，并显示“未响应”。
可选的，当某一RPA机器人处于未激活状态时，基于该RPA机器人当前的未激活时长，更新RPA监控界面中任一RPA机器人对应的监控卡片。
比如，可以在该RPA机器人对应的监控卡片中展示该RPA机器人当前的未激活时长，以提示该RPA机器人未激活。或者，可以在该RPA机器人对应的监控卡片中展示该RPA机器人的创建时刻，以提示该RPA机器人未激活。或者，当未激活时长超过预设阈值时，可以在该RPA机器人对应的监控卡片中展示“长时间未激活”的提醒信息。
如图3所示，RPA机器人Worker4的运行状态为未激活状态，可以在RPA机器人Worker4对应的监控卡片中显示创建时间为2022-04-01 19:45:52，并显示“长时间未激活”。
本公开中，在对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态后，当任一RPA机器人处于运行状态时，利用任一RPA机器人当前对应的运行画面截图，更新RPA监控界面中任一RPA机器人对应的监控卡片。由此，通过VNC服务，获取RPA机器人的运行数据信息，从而实现对RPA机器人的监控，提高了对RPA机器人运维的效率。
图6是本公开一个实施例的基于机器人流程自动化(Robotic ProcessAutomation，RPA)和人工智能(Artificial Intelligence，AI)的智能自动化(IntelligentAutomation，IA)机器人监控方法的流程图，如图6所示，该方法可包括以下步骤：
步骤S601：对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态。
步骤S602：根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。
本公开中，步骤S601-步骤S602的具体实现过程，可参见本公开任一实施例的详细描述，在此不再赘述。
步骤S603：响应于RPA监控界面中第一预设控件被触发，在RPA监控界面中显示第一预设控件关联的候选项列表。
其中，第一预设控件可以为通过运行状态筛选RPA机器人的控件。
本公开中，当用户点击RPA监控界面中的第一预设控件时，比如点击图3中“所有状态”控件，控制台可以确定第一预设控件被触发，此时，控制台可以在RPA监控界面中显示第一预设控件关联的候选项列表，以供用户选择。其中，候选选项列表中可以包含RPA机器人所有的运行状态。
步骤S604：响应于候选项列表中任一候选项被选中，获取与任一候选项指示的运行状态相同的第一RPA机器人。
本公开中，用户点击候选项列表中某一候选项被选时，说明用户需要筛选出处于该候选项对应运行状态的所有RPA机器人，控制台即可根据该候选项对应运行状态，筛选出处于该运行状态的第一RPA机器人。
步骤S605：在RPA监控界面中显示第一RPA机器人对应的监控卡片。
本公开中，当用户选中某一候选项时，说明用户需要查看被选中候选项对应的运行状态中的RPA机器人，所以，控制台可以只在RPA监控界面中显示第一RPA机器人对应的监控卡片，以便用户快速查看被选中候选项对应的运行状态中的所有RPA机器人。
本公开中，在对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态后，可以根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片，在RPA监控界面中第一预设控件被触发的情况下，可以在RPA监控界面中显示第一预设控件关联的候选项列表，在候选项列表中任一候选项被选中时，可以获取与任一候选项指示的运行状态相同的第一RPA机器人，并在RPA监控界面中显示第一RPA机器人对应的监控卡片。由此，通过VNC服务，获取RPA机器人的运行数据信息，从而实现对RPA机器人的监控，提高了对RPA机器人运维的效率。
图7是本公开一个实施例的基于机器人流程自动化(Robotic ProcessAutomation，RPA)和人工智能(Artificial Intelligence，AI)的智能自动化(IntelligentAutomation，IA)机器人监控方法的流程图，如图7所示，该方法可包括以下步骤：
步骤S701：对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态。
步骤S702：根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。
本公开中，步骤S701-步骤S702的具体实现过程，可参见本公开任一实施例的详细描述，在此不再赘述。
步骤S703：响应于RPA监控界面中第二预设控件被触发，获取第二预设控件中输入的目标搜索词。
其中，第二预设控件可以为通过RPA机器人名称筛选RPA机器人的控件。
本公开中，用户可以在第二预设控件对应的输入框中输入搜索词，比如，要搜索的RPA机器人的名称，之后，点击第二预设控件时，比如，点击图3中搜索图标按钮，控制台可以确定第二预设控件被触发，并获取第二预设控件对应的输入框中的目标搜索词。
步骤S704：确定与目标搜索词匹配的第二RPA机器人。
本公开中，控制台可以计算目标搜索词对应的向量，与控制台中所有RPA机器人名称对应的向量之间的距离，并根据该距离，确定对应的匹配度，当目标搜索词与某一RPA机器人名称配度大于阈值时，说明该RPA机器人名称对应的RPA机器人可能为用户搜索的RPA机器人，可以确定该RPA机器人为第二RPA机器人。
需要说明的是，与目标搜索词匹配的RPA机器人名称可能为多个，因此第二RPA机器人可能为多个。
步骤S705：在RPA监控界面中显示第二RPA机器人对应的监控卡片。
本公开中，当用户触发第二预设控件时，说明用户需要查看目标搜索词对应的运行状态中的RPA机器人，所以，控制台可以在RPA监控界面中只显示第二RPA机器人对应的监控卡片，以便用户快速查看目标搜索词对应的运行状态中的RPA机器人。
本公开中，在对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态后，可以根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片，当RPA监控界面中第二预设控件被触发时，可以获取第二预设控件中输入的目标搜索词，并确定与目标搜索词匹配的第二RPA机器人，然后，可以在RPA监控界面中显示第二RPA机器人对应的监控卡片。由此，通过VNC服务，获取RPA机器人的运行数据信息，从而实现对RPA机器人的监控，提高了对RPA机器人运维的效率。
图8是本公开一个实施例的基于机器人流程自动化(Robotic ProcessAutomation，RPA)和人工智能(Artificial Intelligence，AI)的智能自动化(IntelligentAutomation，IA)机器人监控方法的流程图，如图8所示，该方法可包括以下步骤：
步骤S801：对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态。
步骤S802：根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。
本公开中，步骤S801-步骤S802的具体实现过程，可参见本公开任一实施例的详细描述，在此不再赘述。
步骤S803：响应于任一RPA机器人对应的监控卡片被触发，在显示界面显示任一RPA机器人的运行数据和/或任一RPA机器人的第一属性信息。
其中，第一属性信息可以包括以下至少一项：任一RPA机器人中运行的任务名称，任务编号，开始运行时间等信息，本公开对此不作限制。
运行数据可以包括实时运行画面等信息，本公开对此不作限制。
本公开中，当用户点击某一RPA机器人对应的监控卡片时，说明用户需要查看该RPA机器人的运行情况，因此，控制台可以在显示界面中显示该RPA机器人对应的运行数据和/或第一属性信息。
可选的，当某一RPA机器人处于运行状态时，可以在显示界面显示该RPA机器人的实时运行画面和/或第一属性信息。
如图9所示，当RPA机器人处于运行状态时，可以在显示界面中的实时监控窗口中显示该RPA机器人的实时运行画面，在右侧窗格中，显示该RPA机器人正在运行的任务列表、和待运行的任务列表等，在底部窗格中显示RPA机器人名称Worker1、RPA机器人对应的网际互连协议(Internet Protocol，IP)等信息。其中，正在运行的任务列表中可以包括各正在运行的任务对应的任务编号、任务名称等第一属性信息。
此外，当各正在运行的任务对应的操作栏中的查看详情控件被触发时，控制台可以在显示界面中显示各正在运行的任务对应的任务日志等信息。
可选的，当某一RPA机器人处于离线状态时，可以在显示界面显示该RPA机器人的历史运行数据和/或第一属性信息。
其中，历史运行数据可以包括以下至少一项：历史录屏数据，历史运行结果，历史运行任务名称，历史运行时间。
本公开中，当RPA机器人处于离线状态时，用户更关注该RPA机器人的历史运行数据，因此，可以在显示界面显示RPA机器人的历史运行数据和/或第一属性信息，以供用户查阅该RPA机器人历史运行数据。
如图10所示，当RPA机器人处于离线状态时，控制台可以在底部窗格中显示RPA机器人名称Worker2、RPA机器人对应的IP等信息，可以在显示界面中右侧窗格中，显示该RPA机器人的历史运行记录列表，每条历史运行记录包括RPA机器人历史运行任务对应的历史运行时间，历史运行任务名称、历史运行结果等信息。比如，第一条历史运行记录对应的任务名称为Test1，历史运行运行时间为2022-04-21 19:20:22，“√”标识运行结果为成功，相应的“√”标识历史运行任务Test2的运行结果为失败。
此外，当某一条历史运行记录对应的查看控件被触发时，如图10中，当用户点击历史运行记录Test1对应的查看控件时，控制台可以展示该历史运行任务的详细历史运行数据，当详细历史运行数据中包含历史录屏文件时，当历史录屏数据对应的查看控件被触发时，控制台可以在实时监控窗口中播放该历史录屏。
可选的，当显示界面中实时监控控件被触发时，比如当用户点击图9中“实时监控”控件，在显示界面中显示该RPA机器人的实时运行画面和/或第一属性信息，当显示界面中历史记录控件被触发时，比如当用户点击图9中“历史记录”控件，在显示界面中显示该RPA机器人的历史运行数据和/或第一属性信息。
需要说明的是，上述图9、图10中A、B、C、D、E、F等可以表示不同的数字，或者字符。图9、图10中的RPA监控界面的示意图的样式、及图中各控件的名称，仅是示意性说明，本公开对RPA监控界面中各控件的名称、位置及显示样式等不作限定。
本公开中，在对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态后，可以根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片，当任一RPA机器人对应的监控卡片被触发，在显示界面显示任一RPA机器人的运行数据和/或任一RPA机器人的第一属性信息。由此，由此，通过VNC服务，获取RPA机器人的运行数据信息，从而实现对RPA机器人的监控，提高了对RPA机器人运维的效率。
图11是本公开一个实施例的基于机器人流程自动化(Robotic ProcessAutomation，RPA)和人工智能(Artificial Intelligence，AI)的智能自动化(IntelligentAutomation，IA)机器人监控方法的流程图，如图11所示，该方法可包括以下步骤：
步骤S1101：对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态。
步骤S1102：根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。
步骤S1103：响应于任一RPA机器人对应的监控卡片被触发，在显示界面显示任一RPA机器人的运行数据和/或任一RPA机器人的第一属性信息。
本公开中，步骤S1101-步骤S1103的具体实现过程，可参见本公开任一实施例的详细描述，在此不再赘述。
步骤S1104：响应于显示界面中的第四预设控件被触发，启动与任一RPA机器人关联的VNC服务端间的远程控制连接。
其中，第四预设控件可以为用于控制进入远程控制模式的控件。
本公开中，为了防止监控人员误操作导致影响机器人运行环境，远程控制功能的初始状态为禁止状态，当用户点击第四预设控件时，控制台可以进入远程控制模式，在此远程控制模式下，用户可以实现对RPA机器人的远程控制。
如图9所示，在实时监控窗口的右侧，设置隐藏操作菜单控件，当用户点击该控件时，控制台可以显示被隐藏的操作菜单，当再次点击该控件时，控制台可以隐藏操作菜单，其中，操作菜单中可以包括用于控制进入远程控制模式的控件、用于控制启动模拟输入控件的控件、用于控制全屏显示运行监控窗口的控件等，本公开对此不做限制。
当用户点击“远程控制”控件时，控制台即可启动与该RPA机器人关联的VNC服务端间的远程控制连接，支持用户对该RPA机器人进行远程控制。
可选的，当显示界面中的第五预设控件被触发时，比如点击图9中的“虚拟键盘”控件，控制台可以在显示界面显示虚拟输入控件，以供用户通过虚拟输入控件输入对应的RPA机器人的控制命令，比如图12中所示的各虚拟输入控件。其中，第五预设控件可以为用于控制启动模拟输入控件的控件，虚拟输入控件可以包括Ctrl键、Alt键、Windows键、Tab键、Esc键、Ctrl+Alt+Del组合键等，各虚拟输入控件和第五预设控件的初始状态为未选中状态，当被点击时，变为选中状态。
需要说明的是，上述图12中的RPA监控界面的示意图的样式、及图中各控件的名称，仅是示意性说明，本公开对RPA监控界面中各控件的名称、位置及显示样式等不作限定。
可选的，控制台可以对监控RPA机器人的对象进行监控，当用户点击第六预设控件时，比如点击图9中的“用户”控件，控制台可以在显示界面显示当前监控该RPA机器人的对象的数量和/或对象的属性信息。其中，第六预设控件可以为用于查看监控RPA机器人的对象信息的控件，属性信息可以包括对象的名称、对象对应的IP等信息，本公开对此不作限制。
可选的，当显示界面中的第七预设控件被触发时，比如点击图9中的“全屏”控件，在显示界面中全屏显示实时运行画面。其中，第七预设控件可以为用于控制全屏显示实时运行画面的控件。
本公开中，在对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态后，可以根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片，当任一RPA机器人对应的监控卡片被触发时，可以在显示界面显示任一RPA机器人的运行数据和/或任一RPA机器人的第一属性信息，在显示界面中的第四预设控件被触发时，可以启动与任一RPA机器人关联的VNC服务端间的远程控制连接。由此，由此，通过VNC服务，可以实现对RPA机器人的控制，从而提高了对RPA机器人运维的效率。
为了实现上述实施例，本申请实施例还提出一种基于机器人流程自动化(RoboticProcess Automation，RPA)和人工智能(Artificial Intelligence，AI)的智能自动化(Intelligent Automation，IA)机器人监控装置。图13为本申请实施例提供的一种基于机器人流程自动化(Robotic Process Automation，RPA)和人工智能(ArtificialIntelligence，AI)的智能自动化(Intelligent Automation，IA)机器人监控装置的结构示意图。
如图13所示，该基于机器人流程自动化(Robotic Process Automation，RPA)和人工智能(Artificial Intelligence，AI)的智能自动化(Intelligent Automation，IA)机器人监控装置包括：确定模块1310、更新模块1320。
确定模块1310，对当前从每个虚拟网络控制台VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态；
更新模块1320，用于根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。
可选的，上述确定模块1310，用于：
响应于数据信息对应的自然语言处理NLP结果指示任一VNC服务端发送的关联的RPA机器人当前对应的运行画面截图，确定关联的RPA机器人当前处于运行状态；和/或，
响应于任一VNC服务端关联的RPA机器人与控制台的连接状态对应的NLP结果指示连接断开，确定任一VNC服务端关联的RPA机器人处于离线状态。
在一种实施方式中，上述更新模块1320，用于：
响应于任一RPA机器人处于运行状态，利用任一RPA机器人当前对应的运行画面截图，更新RPA监控界面中任一RPA机器人对应的监控卡片；和/或，
响应于任一RPA机器人处于运行超时状态，基于任一RPA机器人当前的运行超时时长，更新RPA监控界面中任一RPA机器人对应的监控卡片；和/或，
响应于任一RPA机器人处于离线状态，基于任一RPA机器人当前的已离线时长，更新RPA监控界面中任一RPA机器人对应的监控卡片。
在一种实施方式中，还包括：
显示模块，用于响应于RPA监控界面中第一预设控件被触发，在RPA监控界面中显示第一预设控件关联的候选项列表；
获取模块，用于响应于候选项列表中任一候选项被选中，获取与任一候选项指示的运行状态相同的第一RPA机器人；
上述显示模块，用于在RPA监控界面中显示第一RPA机器人对应的监控卡片。
在一种实施方式中，上述获取模块，还用于：
响应于RPA监控界面中第二预设控件被触发，获取第二预设控件中输入的目标搜索词；
上述确定模块1310，还用于确定与目标搜索词匹配的第二RPA机器人；
上述显示模块，还用于在RPA监控界面中显示第二RPA机器人对应的监控卡片。
在一种实施方式中，上述确定模块1310，用于：
响应于RPA监控界面中的第三预设控件被触发，根据当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态，确定每个VNC服务端对应的每个RPA机器人当前的运行状态。
在一种实施方式中，上述显示模块，还用于：
响应于任一RPA机器人对应的监控卡片被触发，在显示界面显示任一RPA机器人的运行数据和/或任一RPA机器人的第一属性信息。
在一种实施方式中，上述显示模块，用于：
响应于任一RPA机器人处于运行状态，在显示界面显示任一RPA机器人的实时运行画面和/或第一属性信息；或者，
响应于任一RPA机器人处于离线状态，在显示界面显示任一RPA机器人的历史运行数据和/或第一属性信息。
在一种实施方式中，历史运行数据，包括以下至少一项：历史录屏数据，历史运行结果，历史运行任务名称，历史运行时间。
在一种实施方式中，还包括：
启动模块，用于响应于显示界面中的第四预设控件被触发，启动与任一RPA机器人关联的VNC服务端间的远程控制连接；或者，
上述显示模块，还用于响应于显示界面中的第五预设控件被触发，在显示界面显示虚拟输入控件；或者，
上述显示模块，还用于响应于显示界面中的第六预设控件被触发，在显示界面显示当前监控任一RPA机器人的对象的数量和/或对象的属性信息。
在一种实施方式中，第一属性信息，包括以下至少一项：任一RPA机器人中运行的任务名称，任务编号，开始运行时间。
在一种实施方式中，VNC服务端与VNC服务端关联的RPA机器人独立部署。
本公开中，对当前从每个VNC服务端获取到的数据信息，和/或每个VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个RPA机器人当前的运行状态后，可以根据每个RPA机器人当前的运行状态，更新RPA监控界面中每个RPA机器人对应的监控卡片。由此，通过VNC服务，获取RPA机器人的运行数据信息，从而实现对RPA机器人的监控，提高了对RPA机器人运维的效率。
本公开实施例各装置中的各模块的功能可以参见上述方法中的对应描述，在此不再赘述。
图14示出根据本公开一实施例的计算机设备的结构框图。如图14所示，该计算机设备包括：存储器1410和处理器1420，存储器1410内存储有可在处理器1420上运行的计算机程序。处理器1420执行该计算机程序时实现上述实施例中的基于RPA和AI的IA机器人监控方法。存储器1410和处理器1420的数量可以为一个或多个。
该计算机设备还包括：
通信接口1430，用于与外界设备进行通信，进行数据交互传输。
如果存储器1410、处理器1420和通信接口1430独立实现，则存储器1410、处理器1420和通信接口1430可以通过总线相互连接并完成相互间的通信。该总线可以是工业标准体系结构(Industry Standard Architecture，ISA)总线、外部设备互连(PeripheralComponent Interconnect，PCI)总线或扩展工业标准体系结构(Extended IndustryStandard Architecture，EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示，图14中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
可选的，在具体实现上，如果存储器1410、处理器1420及通信接口1430集成在一块芯片上，则存储器1410、处理器1420及通信接口1430可以通过内部接口完成相互间的通信。
本公开实施例提供了一种计算机可读存储介质，其存储有计算机程序，该程序被处理器执行时实现本申请实施例中提供的方法。
本申请实施例还提供了一种芯片，该芯片包括，包括处理器，用于从存储器中调用并运行存储器中存储的指令，使得安装有芯片的通信设备执行本申请实施例提供的方法。
本申请实施例还提供了一种芯片，包括：输入接口、输出接口、处理器和存储器，输入接口、输出接口、处理器以及存储器之间通过内部连接通路相连，处理器用于执行存储器中的代码，当代码被执行时，处理器用于执行申请实施例提供的方法。
应理解的是，上述处理器可以是中央处理器(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(digital signal processing，DSP)、专用集成电路(application specific integrated circuit，ASIC)、现场可编程门阵列(fieldprogrammablegate array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者是任何常规的处理器等。值得说明的是，处理器可以是支持进阶精简指令集机器(advanced RISC machines，ARM)架构的处理器。
进一步地，可选的，上述存储器可以包括只读存储器和随机存取存储器，还可以包括非易失性随机存取存储器。该存储器可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以包括只读存储器(read-onlymemory，ROM)、可编程只读存储器(programmable ROM，PROM)、可擦除可编程只读存储器(erasable PROM，EPROM)、电可擦除可编程只读存储器(electrically EPROM，EEPROM)或闪存。易失性存储器可以包括随机存取存储器(random access memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用。例如，静态随机存取存储器(static RAM，SRAM)、动态随机存取存储器(dynamic random access memory，DRAM)、同步动态随机存取存储器(synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(double data date SDRAM，DDR SDRAM)、增强型同步动态随机存取存储器(enhancedSDRAM，ESDRAM)、同步连接动态随机存取存储器(synchlink DRAM，SLDRAM)和直接内存总线随机存取存储器(direct rambus RAM，DR RAM)。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时，全部或部分地产生按照本申请的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包括于本申请的至少一个实施例或示例中。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或隐含地包括至少一个该特征。在本申请的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分。并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。
应理解的是，本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。上述实施例方法的全部或部分步骤是可以通过程序来指令相关的硬件完成，该程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。
此外，在本申请各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。上述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读存储介质中。该存储介质可以是只读存储器，磁盘或光盘等。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到其各种变化或替换，这些都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。
Claims (20)
1.一种基于RPA和AI的IA机器人监控方法，其特征在于，包括：
对当前从每个虚拟网络控制台VNC服务端获取到的数据信息，和/或每个所述VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个所述RPA机器人当前的运行状态；
根据每个所述RPA机器人当前的运行状态，更新RPA监控界面中每个所述RPA机器人对应的监控卡片。
2.如权利要求1所述的方法，其特征在于，所述对当前从每个虚拟网络控制台VNC服务端获取到的数据信息，和/或每个所述VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个所述RPA机器人当前的运行状态，包括：
响应于所述数据信息对应的自然语言处理NLP结果指示任一VNC服务端发送的关联的RPA机器人当前对应的运行画面截图，确定所述关联的RPA机器人当前处于运行状态；和/或，
响应于任一VNC服务端关联的RPA机器人与控制台的连接状态对应的NLP结果指示连接断开，确定所述任一VNC服务端关联的RPA机器人处于离线状态。
3.如权利要求1所述的方法，其特征在，所述根据每个所述RPA机器人当前的运行状态，更新RPA监控界面中每个所述RPA机器人对应的监控卡片，包括：
响应于任一RPA机器人处于运行状态，利用所述任一RPA机器人当前对应的运行画面截图，更新RPA监控界面中所述任一RPA机器人对应的监控卡片；和/或，
响应于任一RPA机器人处于运行超时状态，基于所述任一RPA机器人当前的运行超时时长，更新RPA监控界面中所述任一RPA机器人对应的监控卡片；和/或，
响应于任一RPA机器人处于离线状态，基于所述任一RPA机器人当前的已离线时长，更新RPA监控界面中所述任一RPA机器人对应的监控卡片。
4.如权利要求1所述的方法，其特征在于，还包括：
响应于所述RPA监控界面中第一预设控件被触发，在所述RPA监控界面中显示所述第一预设控件关联的候选项列表；
响应于所述候选项列表中任一候选项被选中，获取与所述任一候选项指示的运行状态相同的第一RPA机器人；
在所述RPA监控界面中显示所述第一RPA机器人对应的监控卡片。
5.如权利要求1所述的方法，其特征在于，还包括：
响应于所述RPA监控界面中第二预设控件被触发，获取所述第二预设控件中输入的目标搜索词；
确定与所述目标搜索词匹配的第二RPA机器人；
在所述RPA监控界面中显示所述第二RPA机器人对应的监控卡片。
6.如权利要求1所述的方法，其特征在于，所述根据当前从每个VNC服务端获取到的数据信息，和/或每个所述VNC服务端关联的RPA机器人与控制台的连接状态，确定每个所述VNC服务端对应的每个RPA机器人当前的运行状态，包括：
响应于所述RPA监控界面中的第三预设控件被触发，根据当前从每个VNC服务端获取到的数据信息，和/或每个所述VNC服务端关联的RPA机器人与控制台的连接状态，确定每个所述VNC服务端对应的每个RPA机器人当前的运行状态。
7.如权利要求1-6任一所述的方法，其特征在，在所述更新RPA监控界面中每个所述RPA机器人对应的监控卡片之后，还包括：
响应于任一RPA机器人对应的监控卡片被触发，在显示界面显示所述任一RPA机器人的运行数据和/或所述任一RPA机器人的第一属性信息。
8.如权利要求7所述的方法，其特征在于，所述在显示界面显示所述任一RPA机器人的运行数据和/或所述任一RPA机器人的第一属性信息，包括：
响应于所述任一RPA机器人处于运行状态，在所述显示界面显示所述任一RPA机器人的实时运行画面和/或所述第一属性信息；或者，
响应于所述任一RPA机器人处于离线状态，在所述显示界面显示所述任一RPA机器人的历史运行数据和/或所述第一属性信息。
9.如权利要求8所述的方法，其特征在于，所述历史运行数据，包括以下至少一项：历史录屏数据，历史运行结果，历史运行任务名称，历史运行时间。
10.如权利要求7所述的方法，其特征在于，在所述在显示界面显示所述任一RPA机器人的运行数据和/或所述任一RPA机器人的属性信息之后，还包括：
响应于所述显示界面中的第四预设控件被触发，启动与所述任一RPA机器人关联的VNC服务端间的远程控制连接；或者，
响应于所述显示界面中的第五预设控件被触发，在所述显示界面显示虚拟输入控件；或者，
响应于所述显示界面中的第六预设控件被触发，在所述显示界面显示当前监控所述任一RPA机器人的对象的数量和/或对象的属性信息。
11.如权利要求7所述的方法，其特征在于，所述第一属性信息，包括以下至少一项：所述任一RPA机器人中运行的任务名称，任务编号，开始运行时间。
12.如权利要求1所述的方法，其特征在于，所述VNC服务端与所述VNC服务端关联的RPA机器人独立部署。
13.一种基于RPA和AI的IA机器人监控装置，其特征在于，包括：
确定模块，对当前从每个VNC服务端获取到的数据信息，和/或每个所述VNC服务端关联的RPA机器人与控制台的连接状态进行识别，以确定每个所述RPA机器人当前的运行状态；
更新模块，用于根据每个所述RPA机器人当前的运行状态，更新RPA监控界面中每个所述RPA机器人对应的监控卡片。
14.如权利要求13所述的装置，其特征在于，所述确定模块，用于：
响应于所述数据信息对应的自然语言处理NLP结果指示任一VNC服务端发送的关联的RPA机器人当前对应的运行画面截图，确定所述关联的RPA机器人当前处于运行状态；和/或，
响应于任一VNC服务端关联的RPA机器人与控制台的连接状态对应的NLP结果指示连接断开，确定所述任一VNC服务端关联的RPA机器人处于离线状态。
15.如权利要求13所述的装置，其特征在，所述更新模块，用于：
响应于任一RPA机器人处于运行状态，利用所述任一RPA机器人当前对应的运行画面截图，更新RPA监控界面中所述任一RPA机器人对应的监控卡片；和/或，
响应于任一RPA机器人处于运行超时状态，基于所述任一RPA机器人当前的运行超时时长，更新RPA监控界面中所述任一RPA机器人对应的监控卡片；和/或，
响应于任一RPA机器人处于离线状态，基于所述任一RPA机器人当前的已离线时长，更新RPA监控界面中所述任一RPA机器人对应的监控卡片。
16.如权利要求13所述的装置，其特征在于，还包括：
显示模块，用于响应于所述RPA监控界面中第一预设控件被触发，在所述RPA监控界面中显示所述第一预设控件关联的候选项列表；
获取模块，用于响应于所述候选项列表中任一候选项被选中，获取与所述任一候选项指示的运行状态相同的第一RPA机器人；
所述显示模块，用于在所述RPA监控界面中显示所述第一RPA机器人对应的监控卡片。
17.如权利要求13所述的装置，其特征在于，所述确定模块，用于：
响应于所述RPA监控界面中的第三预设控件被触发，根据当前从每个VNC服务端获取到的数据信息，和/或每个所述VNC服务端关联的RPA机器人与控制台的连接状态，确定每个所述VNC服务端对应的每个RPA机器人当前的运行状态。
18.如权利要求13-17任一所述的装置，其特征在，所述显示模块，还用于：
响应于任一RPA机器人对应的监控卡片被触发，在显示界面显示所述任一RPA机器人的运行数据和/或所述任一RPA机器人的第一属性信息。
19.一种计算机设备，其特征在于，包括：处理器和存储器，所述存储器中存储指令，所述指令由处理器加载并执行，以实现如权利要求1至12任一项所述的方法。
20.一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1-12中任一项所述的方法。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210887777.9A CN115297025A (zh) | 2022-07-26 | 2022-07-26 | 基于rpa和ai的ia机器人监控方法及装置 |
| PCT/CN2023/109386 WO2024022399A1 (zh) | 2022-07-26 | 2023-07-26 | 基于rpa和ai的ia机器人监控方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210887777.9A CN115297025A (zh) | 2022-07-26 | 2022-07-26 | 基于rpa和ai的ia机器人监控方法及装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115297025A true CN115297025A (zh) | 2022-11-04 |
Family
ID=83824680
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210887777.9A Pending CN115297025A (zh) | 2022-07-26 | 2022-07-26 | 基于rpa和ai的ia机器人监控方法及装置 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN115297025A (zh) |
| WO (1) | WO2024022399A1 (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024022399A1 (zh) * | 2022-07-26 | 2024-02-01 | 北京来也网络科技有限公司 | 基于rpa和ai的ia机器人监控方法及装置 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109118347A (zh) * | 2018-07-20 | 2019-01-01 | 苏宁易购集团股份有限公司 | 一种自动化协作方法及系统 |
| US20190124114A1 (en) * | 2017-10-25 | 2019-04-25 | Bank Of America Corporation | Network security system with cognitive engine for dynamic automation |
| US20190132229A1 (en) * | 2017-11-02 | 2019-05-02 | Bank Of America Corporation | Individual application flow isotope tagging within a network infrastructure |
| CN112073262A (zh) * | 2020-08-26 | 2020-12-11 | 中国建设银行股份有限公司 | 一种云平台监控方法、装置、设备及系统 |
| US20210019574A1 (en) * | 2019-07-19 | 2021-01-21 | UiPath, Inc. | Retraining a computer vision model for robotic process automation |
| CN113836264A (zh) * | 2021-09-18 | 2021-12-24 | 北京来也网络科技有限公司 | 基于rpa及ai的流程监控方法、装置、设备及介质 |
| CN114386734A (zh) * | 2020-10-21 | 2022-04-22 | 埃森哲环球解决方案有限公司 | 使用人工智能和机器学习用于技术分析的企业管理系统 |
| CN114448693A (zh) * | 2022-01-24 | 2022-05-06 | 来也科技(北京)有限公司 | 结合rpa和ai的安全控制方法、装置、电子设备和介质 |
| CN114619462A (zh) * | 2022-02-21 | 2022-06-14 | 达而观信息科技（上海）有限公司 | 一种基于机器人流程自动化的远程桌面控制方法 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021019787A1 (ja) * | 2019-08-01 | 2021-02-04 | オムロン株式会社 | タスク配信装置、タスク配信システム、方法、およびプログラム |
| CN112192564B (zh) * | 2020-09-14 | 2021-10-15 | 珠海格力电器股份有限公司 | 一种机器人的远端控制方法、装置、设备和存储介质 |
| CN112276946A (zh) * | 2020-10-20 | 2021-01-29 | 昆山同日工业自动化有限公司 | 一种基于工业互联网平台的机器人应用系统 |
| KR200495361Y1 (ko) * | 2020-11-23 | 2022-05-10 | 주식회사 뉴로메카 | 협동 로봇 모니터링 시스템 |
| CN115297025A (zh) * | 2022-07-26 | 2022-11-04 | 来也科技(北京)有限公司 | 基于rpa和ai的ia机器人监控方法及装置 |
-
2022
- 2022-07-26 CN CN202210887777.9A patent/CN115297025A/zh active Pending
-
2023
- 2023-07-26 WO PCT/CN2023/109386 patent/WO2024022399A1/zh unknown
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20190124114A1 (en) * | 2017-10-25 | 2019-04-25 | Bank Of America Corporation | Network security system with cognitive engine for dynamic automation |
| US20190132229A1 (en) * | 2017-11-02 | 2019-05-02 | Bank Of America Corporation | Individual application flow isotope tagging within a network infrastructure |
| CN109118347A (zh) * | 2018-07-20 | 2019-01-01 | 苏宁易购集团股份有限公司 | 一种自动化协作方法及系统 |
| US20210019574A1 (en) * | 2019-07-19 | 2021-01-21 | UiPath, Inc. | Retraining a computer vision model for robotic process automation |
| CN112073262A (zh) * | 2020-08-26 | 2020-12-11 | 中国建设银行股份有限公司 | 一种云平台监控方法、装置、设备及系统 |
| CN114386734A (zh) * | 2020-10-21 | 2022-04-22 | 埃森哲环球解决方案有限公司 | 使用人工智能和机器学习用于技术分析的企业管理系统 |
| CN113836264A (zh) * | 2021-09-18 | 2021-12-24 | 北京来也网络科技有限公司 | 基于rpa及ai的流程监控方法、装置、设备及介质 |
| CN114448693A (zh) * | 2022-01-24 | 2022-05-06 | 来也科技(北京)有限公司 | 结合rpa和ai的安全控制方法、装置、电子设备和介质 |
| CN114619462A (zh) * | 2022-02-21 | 2022-06-14 | 达而观信息科技（上海）有限公司 | 一种基于机器人流程自动化的远程桌面控制方法 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024022399A1 (zh) * | 2022-07-26 | 2024-02-01 | 北京来也网络科技有限公司 | 基于rpa和ai的ia机器人监控方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2024022399A1 (zh) | 2024-02-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7386807B2 (en) | System and method for monitoring application response and providing visual treatment | |
| US6727926B1 (en) | Displaying method in information processing apparatus that permits execution of either object or task oriented processings | |
| EP2919496B1 (en) | Method for realizing downloading of mobile terminal application program and mobile terminal | |
| CN104769554A (zh) | 用于提供移动设备支持服务的系统、方法、设备以及计算机程序产品 | |
| CN112817656B (zh) | 小程序运行方法和装置 | |
| CN110119290A (zh) | 应用程序备用页面切换方法、装置、计算机设备和存储介质 | |
| WO2024022399A1 (zh) | 基于rpa和ai的ia机器人监控方法及装置 | |
| CN113836264A (zh) | 基于rpa及ai的流程监控方法、装置、设备及介质 | |
| AU7854598A (en) | Method and system for facilitating navigation among software applications and improved screen viewing | |
| EP1603023A2 (en) | Methods and apparatus for providing menu data to a storage automation library | |
| CN112612393B (zh) | 界面功能的交互方法及装置 | |
| CN109240928A (zh) | 一种测试方法、装置、设备及存储介质 | |
| CN113760138A (zh) | 一种分屏应用的配置方法及相关设备 | |
| CN113032075A (zh) | 一种信息处理方法及电子装置 | |
| US20230259251A1 (en) | Systems and methods for managing security events using a graphical user interface | |
| CN111414309A (zh) | 应用程序的自动化测试方法、计算机设备和存储介质 | |
| CN115942064A (zh) | 直播引导信息显示方法及其装置、设备、介质 | |
| CN112486376A (zh) | 用于显示家居设备列表的方法、装置和智能终端 | |
| US11507992B1 (en) | Systems and methods for displaying filters and intercepts leveraging a predictive analytics architecture | |
| CN113722534B (zh) | 视频推荐方法和装置 | |
| CN113110401B (zh) | 一种智能生成机器人故障解决方案的方法 | |
| CN113126865B (zh) | 视频学习过程中的笔记生成方法及装置、电子设备和介质 | |
| US20240104002A1 (en) | Conversational Agent for System Troubleshooting and Problem Resolution | |
| CN111201509B (zh) | 创建软件应用时对使用者进行支持的方法和实现该方法的计算机程序及在该方法中可用的编程接口 | |
| US20230074570A1 (en) | Industrial Plant Operator Intervention System for Use in an Industrial Plant |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |