CN115633025A - 基于USBServer的智能一体化设备及应用方法 - Google Patents

基于USBServer的智能一体化设备及应用方法 Download PDF

Info

Publication number
CN115633025A
CN115633025A CN202211529025.1A CN202211529025A CN115633025A CN 115633025 A CN115633025 A CN 115633025A CN 202211529025 A CN202211529025 A CN 202211529025A CN 115633025 A CN115633025 A CN 115633025A
Authority
CN
China
Prior art keywords
equipment
usb
programmable
kbot
usbhub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211529025.1A
Other languages
English (en)
Other versions
CN115633025B (zh
Inventor
唐永
黄颖志
符传运
王冻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beicai Online Technology Beijing Co ltd
Original Assignee
Beicai Online Technology Beijing Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beicai Online Technology Beijing Co ltd filed Critical Beicai Online Technology Beijing Co ltd
Priority to CN202211529025.1A priority Critical patent/CN115633025B/zh
Publication of CN115633025A publication Critical patent/CN115633025A/zh
Application granted granted Critical
Publication of CN115633025B publication Critical patent/CN115633025B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/083—Network architectures or network communication protocols for network security for authentication of entities using passwords
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0853—Network architectures or network communication protocols for network security for authentication of entities using an additional device, e.g. smartcard, SIM or a different communication terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/34—Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters 
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Manipulator (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明提供基于USBServer的智能一体化设备及应用方法，涉及机器人技术领域，包括计算控制设备，所述计算控制设备通过其上部署运行的轨道机械臂控制程序、KBOT管理控制台、KBOT客户端（命令行和GUI）、USB类设备远程共享及挂载服务端、服务管理Agent端、动态口令识别模块，控制管理与其连接的可编程USBHUB主板、轨道机械臂、可编程摄像设备。本发明支持网银U盾等设备的多点连续点击按压（如在U盾上输入密码）、侧边点击按压、动态口令识别回填，且可以直接当作多个银行银企直联前置机，还可运行不同类型的RPA流程机器人，功能高度丰富和集成，通过程序远程调度或操作来完成对应的功能。

Description

基于USBServer的智能一体化设备及应用方法
技术领域
本发明属于机器人技术领域，涉及一种基于USBServer的智能一体化设备及应用方法，尤其是涉及一种基于虚拟化和轨道机械臂及USBServer的智能一体化设备及应用方法。
背景技术
当前，财资数智化相关产品和解决方案已经受到越来越多企业青睐，尤其是财资领域通过自动化智能化替代那些有规则、重复、量大、低效的相关方面工作。比如通过RPA流程机器人实现非银企直联模式下网银自动登录、网银流水自动下载、回单自动下载、对账单自动下载、网银账户余额自动查询、网银账户支付自动提单，银企自动对账、资金日报自动生成等。而要实现例举的RPA流程机器人，现有的做法是借助可编程USBHUB或可编程USBServer，并通过将USBHUB或USBServer连接到计算机设备上，通过程序调度插在USBHUB或USBServer上的U盾，使RPA机器人能顺利在计算上自动运行；在需要物理按压U盾等设备上的单个按键（比如OK/确认键）时，通过外接一个单臂机械臂或单臂矩阵机械臂来实现按键的点击和按压，单臂机械臂固定对准U盾按键到按压器上。
以上类型场景的RPA机器人需单独运行在独立的计算机设备上，USBHUB或USBServer通过串口或USB口与计算机设备相连，单臂机械臂或矩阵机械臂也是通过串口或USB口与计算机设备相连，并由相应 的程序控制，接受控制端的调用和管理。
上述自动化智能化场景无法解决的问题有：（1）现有的USBHUB或USBServer不支持U盾等设备的多点连续的点击按压、侧边点击按压、动态口令识别回填、程序窗口独占锁定下的点击按压等；（2）现有的USBHUB或USBServer设备不支持直接运行RPA流程机器人；（3）现有的USBHUB或USBServer设备不支持直接作为银企直联的前置机；（4）现有的USBHUB或USBServer单台设备接口有限，无法支持127个以上的USB设备接入。
由于以上问题的存在，目前计算机设备、USBHUB或USBServer设备、机械臂及USB设备都需要独立的数据传输和交互接入接口、串口和供电接口、或网络接口等，整体性较差，组合协调工作复杂，用户部署结构复杂，占用端口多，稳定性和易用性也不完善。
发明内容
针对上述问题，本发明提供了一种基于USBServer的智能一体化设备及应用方法，实现一个设备既支持多点连续点击按压、侧边点击按压、动态口令识别回填，又可以直接当多个银企直联前置机使用，同时可直接运行RPA流程机器人，单个设备支持127个以上的USB设备接入，从而简化用户使用的部署结构，减少外置接口的数量，提升整个设备的稳定性、易用性和扩展性。
为实现上述目的，本发明提供了一种基于USBServer的智能一体化设备，包括：计算控制设备及与其连接的一个或多个可编程USBHUB主板、一个或多个轨道机械臂、可编程摄像设备；所述计算控制设备上部署运行有轨道机械臂控制程序、KBOT管理控制台、KBOT客户端、USB类设备远程共享及挂载服务端、服务管理Agent端、动态口令识别模块；
所述可编程USBHUB主板，用于：
提供支持USB设备的插入和单口供断电，所述USB设备包括U盾；
所述计算控制设备，用于：
控制管理与其连接的设备；
为虚拟化提供硬件资源；
辅助开发和运行RPA流程机器人；
所述轨道机械臂控制程序，用于：
控制一个或多个所述轨道机械臂运动和点击按压；
所述轨道机械臂，用于：
在横纵方向上运动并点击按压所述USB设备上的按键；
所述可编程摄像设备，用于：
拍照抓取所述USB设备屏幕上的动态口令，并发送至所述计算控制设备；
所述动态口令识别模块，用于：
识别所述可编程摄像设备拍照抓取的动态口令；
所述KBOT管理控制台，用于：
所述轨道机械臂的控制管理；
所述可编程USBHUB主板上USB端口的管理及所述USB端口上连接的USB设备的管理；
虚拟系统和虚拟机的创建和管理；
所述USB类设备远程共享及挂载服务端，用于：
与所述计算控制设备连接的USB设备的远程共享；
对访问所述KBOT客户端的授权和接入管理；
所述服务管理Agent端，用于：
虚拟化资源创建；
与计算控制设备连接的硬件设备的接口调用；
服务封装；
所述KBOT客户端，用于：
授权用户在终端计算设备上远程访问和挂载USB设备、实现触发点击按压所述USB设备指令、在USB设备上输入密码指令、动态口令获取和识别指令。
作为本发明的进一步改进，还包括双输出电源；
所述双输出电源，用于接入交流电源，并为不同电压需求的所述计算控制设备、所述可编程USBHUB主板及所述轨道机械臂供电。
作为本发明的进一步改进，所述计算控制设备上还部署有语音识别模块；
所述语音识别模块，用于：
接收用户的语音指令并触发任务。
作为本发明的进一步改进，所述可编程USBHUB主板上还连接有ARM微型计算控制设备，所述ARM微型计算控制设备用于运行移动端的RPA流程机器人。
作为本发明的进一步改进，所述计算控制设备还连接有无线AP接入设备、可编程智能键鼠、可编程加密Key；
所述无线AP接入设备，用于：
在计算控制设备上无线接入设备；
所述可编程智能键鼠，用于：
通过编程调用模拟真实物理键盘鼠标的操作；
所述可编程加密Key，用于：
加密敏感数据时密钥的管理。
作为本发明的进一步改进，多个所述可编程USBHUB主板分别通过USB线接入到所述计算控制设备，所述计算控制设备上通过系统绑定各可编程USBHUB主板，创建所述可编程USBHUB主板的软链接，并修改链接所述可编程USBHUB主板文件的权限；
查看所述计算控制设备支持的最大USB设备接入数量，自动从系统解绑没有工作的可编程USBHUB主板，并绑定需要工作的可编程USBHUB主板。
本发明还提供了一种基于USBServer的智能一体化设备的应用方法，包括：
在服务管理Agent端封装VM管理调用服务；
启动一个本地WEB服务，登录KBOT管理控制台，调用所述VM管理调用服务，创建和管理不同类型的VM系统；
在不同类型的所述VM系统中安装不同的银行前置机程序、对应银行的网银USB设备驱动或客户端、KBOT客户端，调试与可编程USBHUB主板上连接的USB设备的连通性，使银行前置机程序能正常运行；
设计开发不同业务功能的RPA流程机器人，并部署到智能一体化设备中的VM虚拟机上；
在KBOT管理控制台设置不同业务功能的所述RPA流程机器人的定时调度执行策略，使智能一体化设备上定时运行各RPA流程机器人。
作为本发明的进一步改进，所述智能一体化设备运行RPA流程机器人，过程包括：
将RPA流程机器人运行过程中需操作的USB设备连接到可编程USBHUB主板上，其中，需点击按压操作的USB设备固定于轨道机械臂的操作台上；
登陆KBOT管理控制台，配置轨道机械臂信息、需操作的USB设备信息，其中，对需点击按压操作的USB设备还需配置按键坐标信息；
在KBOT管理控制台的KBOT节点配置各所述USB设备的端口；
所述VM虚拟机运行RPA流程机器人，登录所述KBOT客户端，选择需操作的所述USB设备，根据所述USB设备的端口打开和调用挂载授权的所述USB设备，选择对应的操作，包括即时按压、侧按、延时按压、输入密码或动态口令获取；
需要在所述USB设备输入密码时，调用所述KBOT客户端提供的输入密码接口，计算控制设备通过轨道机械臂控制程序控制轨道机械臂移动，并按输入密码的顺序依次运行至各按键位置，通过点击按压器点击按压各按键；
需要在所述USB设备屏幕上获取动态口令时，调用所述KBOT客户端提供的动态口令拍照识别回填接口，轨道机械臂带动可编程摄像设备移动到所述USB设备屏幕上方，拍照抓取所述USB设备屏幕上的动态口令，并发送所述计算控制设备，动态口令识别模块识别动态口令，并回填至所述VM虚拟机中的网银登录界面，完成登录；
通过登录后的网银信息，执行RPA流程机器人的后续操作。
作为本发明的进一步改进，所述银行前置机程序能正常运行后，将所述银行前置机程序注册为系统服务，定时心跳检测USB设备的挂载状态并自动挂载USB设备。
作为本发明的进一步改进，
为调试后能正常运行所述银行前置机程序的VM系统创建VM快照，并按业务功能命名；同时设置VM健康检测策略，自动检测VM系统的状态，若出现退出或关机的情况，则通过VM快照自动重启VM系统；
调试部署在VM虚拟机上的RPA流程机器人，调试验证成功后，在KBOT管理控制台对VM虚拟机创建VM快照，并按业务功能命名。
与现有技术相比，本发明的有益效果为：
本发明一体化设备可以作为多个银行的银企直联前置机使用，可以运行不同类型的RPA流程机器人，实现了KOBT设备结构的简化和节约化、功能的丰富和集成；同时在RPA流程机器人运行过程中，本发明的一体化设备支持U盾等设备的多点连续点击按压、侧边点击按压、动态口令识别回填，可以运行RPA流程机器人。
本发明解决了U盾等设备不同按键点击按压（单点按压、长按、侧按、多点连续按压、延时按压）和动态口令识别、短信验证收识别回填、U盾等设备远程共享挂载、U盾等设备授权管理等的一体化管理和调用。
本发明解决了USBHUB或USBServer不能运行RPA机器人的问题，极大的提高了产品的功能丰富性、扩展性和智能化。
本发明解决了USBHUB或USBServer不能当银企直联前置机使用，提高了产品支持的应用场景，丰富了产品功能。
本发明解决了单台设备不支持127个USB设备的接入，降低了USB类设备的管理难度，增加了单台设备承载USB设备的数量。
本发明简化了用户使用USBHUB或USBServer实现网银流水自动下载RPA机器人等场景的部署结构、降低了用户使用复杂度。
附图说明
图1为本发明一种实施例公开的基于USBServer的智能一体化设备示意图；
图2为本发明一种实施例公开的基于USBServer的智能一体化设备软件功能逻辑示意图。
附图标记说明：
1、双输出电源；2、12V/12A电压输出电源接线接口；3、5V/12A电压输出电源接线接口；4、计算控制设备；5、可编程USBHUB主板；6、轨道机械臂；7、可编程摄像设备；8、轨道机械臂控制程序接入串口；9、可编程加密Key；10、无线AP接入设备；11、USB2.0/USB3.0接口；12、电源接入端口；13、网卡接入口；14、电源交流电接入口；15、可编程智能键鼠；16、ARM微型计算控制设备。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
下面结合附图对本发明做进一步的详细描述：
USBServer是一种基于USB Over Network技术的设备，主要实现了网络模式（通过TCP/IP协议）下，USB设备的远程挂载、共享、访问和操作，实现和本地访问和操作USB设备一样的功能。核心包含客户端和服务端两部分，服务端负责USB设备的集中管理和授权，客户端负责具体USB设备授权后的挂载或访问等。USBServer解决了任何可访问可授权的网络环境下USB设备的访问和操作等。
如图1、2所示，本发明提供的基于USBServer的智能一体化设备，包括：布设于智能一体化设备外箱中的计算控制设备4，及与其连接的一个或多个可编程USBHUB主板5、一个或多个轨道机械臂6、可编程摄像设备7、双输出电源1；计算控制设备4上部署运行有轨道机械臂控制程序、KBOT管理控制台、KBOT客户端、USB类设备远程共享及挂载服务端、服务管理Agent端、动态口令识别模块、语音识别模块；计算控制设备4上设有多个USB2.0/USB3.0接口11，多模短信接收器和轨道机械臂6均通过串口转USB线接入到计算控制设备4，可编程加密Key9、可编程智能键鼠15、无线AP接入设备10、可编程摄像设备7、可编程USBHUB主板5均通过USB线接入计算控制设备4；计算控制设备4上还设有网卡接入口13；智能一体化设备外箱中还设有多个低功耗散热风扇，外箱上设有电源插口及开关、网线接入口，多个低功耗散热风扇均连接双输出电源1的12V/12A电压输出电源接线接口，电源插口及开关连接双输出电源1的电源交流电接入口14，为双输出电源1充电，网线接入口连接计算控制设备4的网卡接入口13。
可编程USBHUB主板5，用于：
提供支持USB设备的插入和单口供断电，USB设备包括U盾；
计算控制设备4，用于：
控制管理与其连接的设备；
为虚拟化提供硬件资源；
辅助开发和运行RPA流程机器人；
轨道机械臂控制程序，用于：
控制一个或多个轨道机械臂6运动和点击按压；
轨道机械臂6，用于：
在横纵方向上运动并点击按压USB设备上的按键；
可编程摄像设备7，用于：
拍照抓取USB设备屏幕上的动态口令，并发送至计算控制设备4；
动态口令识别模块，用于：
识别可编程摄像设备7拍照抓取的动态口令；
KBOT管理控制台，用于：
轨道机械臂6的控制管理；
可编程USBHUB主板5上USB端口的管理及USB端口上连接的USB设备的管理；
虚拟系统和虚拟机的创建和管理；
网络接入管理、用户权限分配、日志记录等功能实现；
USB类设备远程共享及挂载服务端，用于：
与计算控制设备4连接的USB设备的远程共享；
对访问KBOT客户端的授权和接入管理；
服务管理Agent端，用于：
虚拟化资源创建；
与计算控制设备4连接的硬件设备的接口调用；
服务封装；
KBOT客户端，用于：
授权用户在终端计算设备上远程访问和挂载USB设备、实现触发点击按压USB设备指令、在USB设备上输入密码指令、动态口令获取和识别指令。
双输出电源1，用于：
通过电源交流电接入口14接入交流电源，设置12V/12A电压输出电源接线接口2和5V/12A电压输出电源接线接口3，并通过可编程USBHUB主板5及轨道机械臂6上的电源接入端口12为不同电压（5V/12V）需求的计算控制设备4、可编程USBHUB主板5及轨道机械臂6供电。
语音识别模块，用于：
接收用户的语音指令并触发任务。
进一步的，
可编程USBHUB主板5上还连接有ARM微型计算控制设备16，ARM微型计算控制设备16通过USB线接入可编程USBHUB主板5，用于运行移动端的RPA流程机器人。
计算控制设备4还连接有无线AP接入设备10、可编程智能键鼠15、可编程加密Key9；
无线AP接入设备10，用于：
在计算控制设备4上无线接入设备；
可编程智能键鼠15，用于：
通过编程调用模拟真实物理键盘鼠标的操作；
可编程加密Key9，用于：
加密敏感数据时密钥的管理。
另外，
多个可编程USBHUB主板5分别通过USB线接入到计算控制设备4，计算控制设备4上通过系统绑定各可编程USBHUB主板5，创建可编程USBHUB主板5的软链接，并修改链接可编程USBHUB主板5文件的权限；查看计算控制设备4支持的最大USB设备接入数量，自动从系统解绑没有工作的可编程USBHUB主板5，并绑定需要工作的可编程USBHUB主板5。
具体过程为：
第一步，设计USBHUB，每7个端口一组，通过树形结构串联,单口有可独立供断电逻辑电路；
第二步，多个USBHUB（以49口为例）通过USB线接入到计算控制设备4；
第三步，在计算控制设备4上的Linux操作系统上绑定USBHUB设备；
第四步，创建USBHUB设备的软链接，并修改链接设备文件权限；
第五步，查看系统内核或主板支持的最大USB接入设备数量；
第六步，根据第五步的数量和业务量，自动从Linux内核解绑没有工作的USBHUB设备；
（比如echo -n "0000:04:00.3" > /sys/bus/pci/drivers/xhci_hcd/unbind）；
第七步，根据第五第六步，以及业务需要，自动调度解绑其他没有工作的USBHUB，绑定需要工作的USBHUB（比如echo -n "0000:04:00.3" > /sys/bus/pci/drivers/xhci_hcd/bind）；
第八步，依次类推，该设备只要外部设计支持更多USBHUB（增大箱体各面体积即可），只要同时工作USBHUB所有端口总数不超过127个即可，单台设备就可以支持多于127个USB设备接入。
如图2所示，其中，
服务管理Agent端，负责提供相关硬件等设备或组件统一调用接口；
KBOT管理控制台后端，负责后端业务逻辑功能的实现；
KBOT管理控制台前端，按业务或需求生成有特定功能的系统快照的存放仓库；
K8S，部署和运行KBOT管理控制台前端及KBOT管理控制台前端，以及部署和运行其他服务的运行体系；
KBOT命令行客户端，是KBOT客户端的一种形式，供授权前置机或RPA机器人远程挂载调用U盾使用；
KBOT GUI客户端，也是KBOT客户端的一种形式，供授权用户远程挂载调用U盾等USB设备的GUI客户端；
服务管理Agent端下方是与各相关硬件交互的接口服务；
本发明还提供了一种基于USBServer的智能一体化设备的应用方法，包括：
在服务管理Agent端封装VM管理调用服务，具体的：封装VM管理命令行为RESTFUL接口，其中，VM管理命令行包含创建管理VM主机、VM快照、调整修改VM资源配置、VM远程桌面HTML5接入网关服务等；
启动一个本地WEB服务，用Nginx做服务和端口代理，登录KBOT管理控制台，调用VM管理调用服务，创建和管理不同类型的VM系统；
在不同类型的VM系统中安装不同的银行前置机程序、对应银行的网银USB设备驱动或客户端、KBOT客户端，调试与可编程USBHUB主板5上连接的USB设备的连通性，使银行前置机程序能正常运行；银行前置机程序能正常运行后，将银行前置机程序注册为系统服务，定时心跳检测USB设备的挂载状态并自动挂载USB设备；为调试后能正常运行银行前置机程序的VM系统创建VM快照，并按业务功能命名；同时设置VM健康检测策略，自动检测VM系统的状态，若出现退出或关机的情况，则通过VM快照自动重启VM系统。
设计开发不同业务功能的RPA流程机器人，并部署到智能一体化设备中的VM虚拟机上，调试部署在VM虚拟机上的RPA流程机器人，调试验证成功后，在KBOT管理控制台对VM虚拟机创建VM快照，并按业务功能命名；
在KBOT管理控制台设置不同业务功能的RPA流程机器人的定时调度执行策略，使智能一体化设备上定时运行各RPA流程机器人。
其中，智能一体化设备运行RPA流程机器人，过程包括：
将RPA流程机器人运行过程中需操作的USB设备连接到可编程USBHUB主板5上，其中，需点击按压操作的USB设备固定于轨道机械臂6的操作台上；
登陆KBOT管理控制台（首次可以通过无线AP接入kbot_000x），配置轨道机械臂6信息（包含机械臂名称、处于计算控制设备4的位置、类型、IP地址、所属者、机械臂初始位置偏移量等信息）、需操作的USB设备信息（包含所在端口位置号，序列号，领用人，使用人，到期时间，是否需要按压、是否输入密码、是否需要充电、需要输入密码和按压需配置按压位置，是否需要长按及长按时间、U盾用户权限等），其中，对需点击按压操作的USB设备还需配置按键坐标信息（包含名称、X轴坐标、Y轴坐标，多个按键需要配置多个位置坐标），配置完成后可以点测试按压，验证机械臂是否可以准确点击按压对应的按键，若不准确可以反复调试验证；
在KBOT管理控制台的KBOT节点配置各USB设备的端口；
VM虚拟机运行RPA流程机器人，登录KBOT客户端，选择需操作的USB设备，根据USB设备的端口打开和调用挂载授权的USB设备，选择对应的操作，包括即时按压、侧按、延时按压（延时按压针对程序独占锁定屏幕窗体的情况，设置延时按压时间）、输入密码或动态口令获取；
需要在USB设备输入密码时，调用KBOT客户端提供的输入密码接口，计算控制设备4通过轨道机械臂控制程序控制轨道机械臂6移动（轨道机械臂上设有轨道机械臂控制程序接入串口8，用于连接计算控制设备上的轨道机械臂控制程序），并按输入密码的顺序依次运行至各按键位置，通过点击按压器点击按压各按键；
需要在USB设备屏幕上获取动态口令时，调用KBOT客户端提供的动态口令拍照识别回填接口，轨道机械臂6带动可编程摄像设备7移动到USB设备屏幕上方，拍照抓取USB设备屏幕上的动态口令，并发送计算控制设备4，动态口令识别模块识别动态口令，并回填至VM虚拟机中的网银登录界面，完成登录；
通过登录后的网银信息，执行RPA流程机器人的后续操作。
实施例：
在本发明的KBOT一体化设备上实现辅助开发并运行调度交通银行网银流水自动下载RPA流程机器人；
RPA流程机器人运行过程包括：先按压交通银行U盾开机键，在U盾上输入密码，U盾屏幕上出现动态口令、识别动态口令后输入交通银行企业网银登录界面的口令输入框中完成网银登录、及登录后的流水下载过程。
前置条件：交通银行网银流水下载RPA机器人运行在Windows10虚拟系统中，Windows10系统镜像已安装了RPA Agent和RPA执行器，以及KBOT客户端，已开启了系统的远程桌面服务。
辅助开发流水自动下载RPA流程机器人，过程包括：
步骤1、在本发明的智能一体化设备上登录KBOT管理控制台，新建一个用户，并设置用户信息（属于用户管理）、角色访问权限（属于角色管理）和访问地址白名单等；
步骤2、用双面胶带将一个磁铁块固定贴到交通银行U盾背面，交通银行U盾背面向下，通过磁铁块与轨道机械臂6工作面板强力吸附，对交通银行U盾进行固定；且交通银行U盾的数据接口与USBHUB主板相连接；
步骤3、在KBOT管理控制台的轨道机械臂6配置里添加交通银行网银U盾开机键和数字键盘各数字键的横纵坐标，以及对应的按键名称（属于机械臂管理），数字按键的按键名称要按规则混淆定义，避免直接显示数字键数字本身（如：U盾密码加入为124683，对应的U盾位置名称设置为JH_0X03，JH_0B06，JH_0D10，JH_0E14，JH_0F11，JH_0C04）；
步骤4、在KBOT管理控制台的KBOT节点配置一个U盾端口，端口位置为8，端口名称、交通银行网银U盾开机键、密码数字键盘数字键点击位置名称等信息（属于KBOT节点管理）；
步骤5、用RPA设计器在Windows10系统中开发设计交通银行网银流水自动下载RPA流程机器人，运行到本发明智能一体化设备中的Windows10虚拟系统中；
步骤6、交通银行网银流水自动下载RPA流程机器人通过KBOT客户端提供的接口，打开挂载授权后的交通银行U盾，包括：一体化设备接收KBOT客户端输入的打开U盾指令，获取开机键坐标传输至轨道机械臂6控制设备，轨道机械臂6控制设备控制轨道机械臂6带动点击按压器到达开机键的坐标位置，点击开机键（属于轨道机械臂6调用服务）；
步骤7、需要在交通银行U盾输入密码时，调用KBOT客户端提供的输入密码等点击按压接口，一体化设备接收KBOT客户端输入的密码，获取各数字按键的坐标传输至轨道机械臂6控制设备，轨道机械臂6控制设备控制轨道机械臂6带动点击按压器依次移动至密码中各数字按键对应坐标位置，连续点击按压密码中的各数字按键（属于轨道机械臂6调用服务）；
步骤8、在需要在交通银行U盾屏幕上获取动态口令时，调用KBOT客户端提供的动态口令拍照识别回填接口；包括：轨道机械臂6控制设备控制轨道机械臂6带动可编程摄像设备7到交通银行U盾电子屏幕位置，并拍照识别动态口令（属于摄像拍照设备调用服务和动态口令识别调用服务）；
步骤9、把拍照识别的动态口令自动回填到交通银行网银U盾登陆界面的动态口令输入窗口；
步骤10、动态口令输入后识别，重复执行步骤9和步骤10，直到能成功登陆交通银行网银系统；（注：交通银行网银流水自动下载RPA流程机器人后面的流水下载过程为登陆交通银行网银系统后的信息获取过程，与本发明智能一体化设备无关，此处不再赘述。）
运行流水自动下载RPA流程机器人，过程包括：
步骤11、交通银行网银流水自动下载RPA流程机器人设计开发测试完成后发布；
步骤12、在一体化设备中的计算控制设备4中创建Windows虚拟机，并通过Windows虚拟机中的RPA Agent获取刚发布的交行网银流水自动下载RPA流程机器人（属于VM管理调用服务）；
步骤13、在KBOT管理控制台设置调度策略，配置交通银行网银流水自动下载RPA流程机器人的执行时间、周期、数据存放位置等信息；
步骤14、交通银行网银流水自动下载RPA流程机器人根据执行时间、周期定时执行按压交通银行U盾开机键，在U盾上输入密码，U盾屏幕上出现动态口令、识别动态口令后输入交通银行企业网银登录界面的口令输入框中完成网银登录、及登录后的流水下载过程；
步骤15、在RPA管理控制台配置网银流水下载RPA流程机器人和其他RPA流程机器人（企业日记账下载RPA流程机器人，余额调节表自动生成RPA流程机器人）的文件共享目录和权限，供RPA流程机器人之间数据的共享和读写。
（注：本实施例中涉及的RPA设计器、RPA执行器，RPA Agent、轨道机械臂、点击按压器等非本发明申请的主要内容，他们均为本实施例中的配套支持软件或方法。）
本发明的优点：
（1）通过在智能一体化设备中内置轨道机械臂6、摄像设备、短信接收器等，实现U盾等相关USB设备不同按键点击按压（单点按压、长按、侧按、多点连续按压、延时按压）和动态口令识别、短信验证收识别回填、U盾等设备远程共享挂载、U盾等设备授权管理等的一体化管理和调用。
（2）借助虚拟化技术，在计算控制设备上创建、管理调度VM和VM系统快照，实现了设备可以直接作为多个银行的银企直联前置机使用，同时也可以支持运行、管理和调度RPA流程机器人。
（3）借助USB设备接入自动监控和调度策略实现单台设备可以支持127个USB设备的接入，降低了USB类设备的管理难度，提升了单台设备的承载量。
（4）采用高度灵活的集成和服务化的方式，实现一套软硬件设备、只需接入网和电源，即可实现U盾等USB设备集中管理、远程共享挂载调用，U盾等设备的不同类型按键的点击按压等，U盾等设备屏幕上动态口令的识别，键鼠物理操作模拟等。
以上仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于USBServer的智能一体化设备，其特征在于，包括：计算控制设备及与其连接的一个或多个可编程USBHUB主板、一个或多个轨道机械臂、可编程摄像设备；所述计算控制设备上部署运行有轨道机械臂控制程序、KBOT管理控制台、KBOT客户端、USB类设备远程共享及挂载服务端、服务管理Agent端、动态口令识别模块；
所述可编程USBHUB主板，用于：
提供支持USB设备的插入和单口供断电，所述USB设备包括U盾；
所述计算控制设备，用于：
控制管理与其连接的设备；
为虚拟化提供硬件资源；
辅助开发和运行RPA流程机器人；
所述轨道机械臂控制程序，用于：
控制一个或多个所述轨道机械臂运动和点击按压；
所述轨道机械臂，用于：
在横纵方向上运动并点击按压所述USB设备上的按键；
所述可编程摄像设备，用于：
拍照抓取所述USB设备屏幕上的动态口令，并发送至所述计算控制设备；
所述动态口令识别模块，用于：
识别所述可编程摄像设备拍照抓取的动态口令；
所述KBOT管理控制台，用于：
所述轨道机械臂的控制管理；
所述可编程USBHUB主板上USB端口的管理及所述USB端口上连接的USB设备的管理；
虚拟系统和虚拟机的创建和管理；
所述USB类设备远程共享及挂载服务端，用于：
与所述计算控制设备连接的USB设备的远程共享；
对访问所述KBOT客户端的授权和接入管理；
所述服务管理Agent端，用于：
虚拟化资源创建；
与计算控制设备连接的硬件设备的接口调用；
服务封装；
所述KBOT客户端，用于：
授权用户在终端计算设备上远程访问和挂载USB设备、实现触发点击按压所述USB设备指令、在USB设备上输入密码指令、动态口令获取和识别指令。
2.根据权利要求1所述的基于USBServer的智能一体化设备，其特征在于： 还包括双输出电源；
所述双输出电源，用于接入交流电源，并为不同电压需求的所述计算控制设备、所述可编程USBHUB主板及所述轨道机械臂供电。
3.根据权利要求1所述的基于USBServer的智能一体化设备，其特征在于：所述计算控制设备上还部署有语音识别模块；
所述语音识别模块，用于：
接收用户的语音指令并触发任务。
4.根据权利要求1所述的基于USBServer的智能一体化设备，其特征在于：所述可编程USBHUB主板上还连接有ARM微型计算控制设备，所述ARM微型计算控制设备用于运行移动端的RPA流程机器人。
5.根据权利要求1所述的基于USBServer的智能一体化设备，其特征在于：所述计算控制设备还连接有无线AP接入设备、可编程智能键鼠、可编程加密Key；
所述无线AP接入设备，用于：
在计算控制设备上无线接入设备；
所述可编程智能键鼠，用于：
通过编程调用模拟真实物理键盘鼠标的操作；
所述可编程加密Key，用于：
加密敏感数据时密钥的管理。
6.根据权利要求1所述的基于USBServer的智能一体化设备，其特征在于：多个所述可编程USBHUB主板分别通过USB线接入到所述计算控制设备，所述计算控制设备上通过系统绑定各可编程USBHUB主板，创建所述可编程USBHUB主板的软链接，并修改链接所述可编程USBHUB主板文件的权限；
查看所述计算控制设备支持的最大USB设备接入数量，自动从系统解绑没有工作的可编程USBHUB主板，并绑定需要工作的可编程USBHUB主板。
7.一种如权利要求1~6任一项所述的基于USBServer的智能一体化设备的应用方法，其特征在于，包括：
在服务管理Agent端封装VM管理调用服务；
启动一个本地WEB服务，登录KBOT管理控制台，调用所述VM管理调用服务，创建和管理不同类型的VM系统；
在不同类型的所述VM系统中安装不同的银行前置机程序、对应银行的网银USB设备驱动或客户端、KBOT客户端，调试与可编程USBHUB主板上连接的USB设备的连通性，使银行前置机程序能正常运行；
设计开发不同业务功能的RPA流程机器人，并部署到智能一体化设备中的VM虚拟机上；
在KBOT管理控制台设置不同业务功能的所述RPA流程机器人的定时调度执行策略，使智能一体化设备上定时运行各RPA流程机器人。
8.根据权利要求7所述的应用方法，其特征在于：所述智能一体化设备运行RPA流程机器人，过程包括：
将RPA流程机器人运行过程中需操作的USB设备连接到可编程USBHUB主板上，其中，需点击按压操作的USB设备固定于轨道机械臂的操作台上；
登陆KBOT管理控制台，配置轨道机械臂信息、需操作的USB设备信息，其中，对需点击按压操作的USB设备还需配置按键坐标信息；
在KBOT管理控制台的KBOT节点配置各所述USB设备的端口；
所述VM虚拟机运行RPA流程机器人，登录所述KBOT客户端，选择需操作的所述USB设备，根据所述USB设备的端口打开和调用挂载授权的所述USB设备，选择对应的操作，包括即时按压、侧按、延时按压、输入密码或动态口令获取；
需要在所述USB设备输入密码时，调用所述KBOT客户端提供的输入密码接口，计算控制设备通过轨道机械臂控制程序控制轨道机械臂移动，并按输入密码的顺序依次运行至各按键位置，通过点击按压器点击按压各按键；
需要在所述USB设备屏幕上获取动态口令时，调用所述KBOT客户端提供的动态口令拍照识别回填接口，轨道机械臂带动可编程摄像设备移动到所述USB设备屏幕上方，拍照抓取所述USB设备屏幕上的动态口令，并发送所述计算控制设备，动态口令识别模块识别动态口令，并回填至所述VM虚拟机中的网银登录界面，完成登录；
通过登录后的网银信息，执行RPA流程机器人的后续操作。
9.据权利要求7所述的应用方法，其特征在于：所述银行前置机程序能正常运行后，将所述银行前置机程序注册为系统服务，定时心跳检测USB设备的挂载状态并自动挂载USB设备。
10.根据权利要求7所述应用方法，其特征在于：
为调试后能正常运行所述银行前置机程序的VM系统创建VM快照，并按业务功能命名；同时设置VM健康检测策略，自动检测VM系统的状态，若出现退出或关机的情况，则通过VM快照自动重启VM系统；
调试部署在VM虚拟机上的RPA流程机器人，调试验证成功后，在KBOT管理控制台对VM虚拟机创建VM快照，并按业务功能命名。
CN202211529025.1A 2022-12-01 2022-12-01 基于USBServer的智能一体化设备及应用方法 Active CN115633025B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211529025.1A CN115633025B (zh) 2022-12-01 2022-12-01 基于USBServer的智能一体化设备及应用方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211529025.1A CN115633025B (zh) 2022-12-01 2022-12-01 基于USBServer的智能一体化设备及应用方法

Publications (2)

Publication Number Publication Date
CN115633025A true CN115633025A (zh) 2023-01-20
CN115633025B CN115633025B (zh) 2023-02-28

Family

ID=84910220

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211529025.1A Active CN115633025B (zh) 2022-12-01 2022-12-01 基于USBServer的智能一体化设备及应用方法

Country Status (1)

Country Link
CN (1) CN115633025B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118094510A (zh) * 2024-04-23 2024-05-28 北财在线科技(北京)有限公司 一种u盾集中管理身份认证和安全增强的系统及实现方法
CN118114231A (zh) * 2024-04-23 2024-05-31 北财在线科技(北京)有限公司 一种rpa机器人自动化操作密码的安全防护方法和系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017041716A1 (zh) * 2015-09-07 2017-03-16 天地融科技股份有限公司 远程开户方法和系统及其身份验证方法和系统
CN111432989A (zh) * 2018-12-04 2020-07-17 深圳前海达闼云端智能科技有限公司 人工增强基于云的机器人智能框架及相关方法
CN212541280U (zh) * 2020-08-04 2021-02-12 杭州九咕科技有限公司 一种用于自动化业务的u盾按钮点击装置
CN113282527A (zh) * 2021-05-08 2021-08-20 珠海金智维信息科技有限公司 一种实现usb设备切换管理的方法、装置和主机
US20210387347A1 (en) * 2020-06-12 2021-12-16 Selfie Snapper, Inc. Robotic arm camera
CN113901406A (zh) * 2021-09-18 2022-01-07 达而观数据(成都)有限公司 一种远程自动控制u盾的系统
CN215576653U (zh) * 2021-07-30 2022-01-18 河北中医学院 基于usb hub的网上银行交易装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017041716A1 (zh) * 2015-09-07 2017-03-16 天地融科技股份有限公司 远程开户方法和系统及其身份验证方法和系统
CN111432989A (zh) * 2018-12-04 2020-07-17 深圳前海达闼云端智能科技有限公司 人工增强基于云的机器人智能框架及相关方法
US20210387347A1 (en) * 2020-06-12 2021-12-16 Selfie Snapper, Inc. Robotic arm camera
CN212541280U (zh) * 2020-08-04 2021-02-12 杭州九咕科技有限公司 一种用于自动化业务的u盾按钮点击装置
CN113282527A (zh) * 2021-05-08 2021-08-20 珠海金智维信息科技有限公司 一种实现usb设备切换管理的方法、装置和主机
CN215576653U (zh) * 2021-07-30 2022-01-18 河北中医学院 基于usb hub的网上银行交易装置
CN113901406A (zh) * 2021-09-18 2022-01-07 达而观数据(成都)有限公司 一种远程自动控制u盾的系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118094510A (zh) * 2024-04-23 2024-05-28 北财在线科技(北京)有限公司 一种u盾集中管理身份认证和安全增强的系统及实现方法
CN118114231A (zh) * 2024-04-23 2024-05-31 北财在线科技(北京)有限公司 一种rpa机器人自动化操作密码的安全防护方法和系统

Also Published As

Publication number Publication date
CN115633025B (zh) 2023-02-28

Similar Documents

Publication Publication Date Title
CN115633025B (zh) 基于USBServer的智能一体化设备及应用方法
JP6083244B2 (ja) リモートデスクトップセッションにおいて複数のマウス入力を提供する方法
CN102567074B (zh) 一种面向虚拟机的usb设备重定向方法
CN100498719C (zh) 一种执行批处理作业的方法及装置
CN111930521A (zh) 用于部署应用的方法、装置、电子设备及可读存储介质
CN104299466A (zh) 一种基于云计算平台的远程硬件实验方法及系统
CN108509333A (zh) 调试方法及装置
CN103425511A (zh) 云计算环境中应用软件安装部署的系统及方法
CN110222119B (zh) 一种异构数据库的数据转换同步方法、设备及存储介质
US10178170B2 (en) Browser-based virtual media administration
CN104615487A (zh) 并行任务优化系统和方法
CN102385523A (zh) 一种云操作系统的驱动安装和管理方法
CN104572227A (zh) 一种基于安腾平台通过bmc刷新cpld fw方法
WO2017124799A1 (zh) 固件管理方法和装置
CN115629843A (zh) 一种云端异构虚拟化数字仿真平台
CN103634353A (zh) 一种用电信息采集终端及其实现方法
CN112379963A (zh) 远程应用窗口控制方法、装置及计算机设备
CN111104336A (zh) 一种基于容器和vnc的服务接口在线测试方法及装置
CN102884515A (zh) 串口重定向处理方法、设备和系统
CN116701285A (zh) 远程访问控制装置、方法、设备及计算机可读介质
CN101021791A (zh) 实现分布式对象持久化的方法、装置及编译单元
CN115580616A (zh) 一种多租户架构多云平台下的云rpa系统及应用方法
CN102843417B (zh) 电子设备的远程操作方法
CN115525391A (zh) 嵌入式云平台管理监控系统
CN110825370A (zh) 移动端应用开发方法、装置及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant