CN115857782A - 一种基于人工智能的自动化信息录入方法和系统 - Google Patents

一种基于人工智能的自动化信息录入方法和系统 Download PDF

Info

Publication number
CN115857782A
CN115857782A CN202211656366.5A CN202211656366A CN115857782A CN 115857782 A CN115857782 A CN 115857782A CN 202211656366 A CN202211656366 A CN 202211656366A CN 115857782 A CN115857782 A CN 115857782A
Authority
CN
China
Prior art keywords
input
signal
computer interface
control key
chip
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211656366.5A
Other languages
English (en)
Inventor
张瑾丞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Broadway Electronic Shenzhen Co ltd
Original Assignee
Broadway Electronic Shenzhen Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Broadway Electronic Shenzhen Co ltd filed Critical Broadway Electronic Shenzhen Co ltd
Priority to CN202211656366.5A priority Critical patent/CN115857782A/zh
Publication of CN115857782A publication Critical patent/CN115857782A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Input From Keyboards Or The Like (AREA)

Abstract

本发明公开了一种基于人工智能的自动化信息录入方法,包括:获取计算机输入设备的输入信号在计算机界面的对应的显示信号,并接收第一控制键的录制指令;根据所述录制指令对所述显示信号进行图像识别,识别出计算机界面上显示的字符、图片、字符坐标和图片坐标,得到模拟输入信号;接收第二控制键的释放指令,将所述模拟输入信号自动化输入显示在所述计算机界面上。本方案能够提高信息重复性录入的准确性和效率。

Description

一种基于人工智能的自动化信息录入方法和系统
技术领域
本发明涉及计算机辅助设计技术领域,具体涉及一种基于人工智能的自动化信息录入方法、系统、计算设备及存储介质。
背景技术
在日常使用计算机时经常需要一些重复而且固定的输入动作,这些重复性输入动作影响工作效率,有时甚至会因为重复性工作疲劳造成工作失误。目前可以通过键盘宏设置的方式自动完成部分连续输入动作,但是宏按键的方式只能完成一次重复使用,不能完成交互重复动作,输入局限性大。
人工智能是研究开发用于模拟、延伸和扩展人的智能的技术。基于AI的自动化处理不仅可以把人从繁重重复的体力劳动中解放出来,而且可以提高劳动生产率。
在信息录入场景中,为了减少重复性人工录入导致的工作失误,需要一种基于人工智能的自动化信息录入方法,能够自动对信息进行重复性录入,提高信息录入效率。
发明内容
鉴于上述问题,本方案提出了一种基于人工智能的自动化信息录入方法、系统、计算设备及存储介质,能够通过人工智能图像识别算法对计算机界面上的显示信息进行图像识别,并将图像识别结果进行自动化重复录入,能够大幅度降低人工录入和校验成本,提高信息录入的准确性和效率。
根据本发明的第一方面,提供一种基于人工智能的自动化信息录入方法,包括:获取计算机输入设备的输入信号在计算机界面的对应的显示信号,并接收第一控制键的录制指令;根据所述录制指令对所述显示信号进行图像识别,识别出计算机界面上显示的字符、图片、字符坐标和图片坐标,得到模拟输入信号;接收第二控制键的释放指令,将所述模拟输入信号自动化输入显示在所述计算机界面上。
通过上述方案,可以通过人工智能识别算法对计算机界面上的输入的显示信号进行识别,将识别出的字符、字符坐标、图片、图片坐标等信息作为与实际输入信号对应的模拟输入信号,然后通过一键触发的方式将模拟输入信号自动化输入显示在计算机界面上,实现了信息的自动化输入动作。
可选地,在上述方法中,接收第二控制键的重复释放指令,将所述模拟输入信号自动化重复输入显示在计算机界面上,直到再次接收到所述第二控制键的释放指令时停止自动化输入动作
在完成信号自动化输入动作后,就可以通过一键触发重复释放指令实现信号的自动化重复输入,实现了信息录入的自动化。
可选地,在上述方法中,输入设备为键盘、鼠标、触控板、图像输入设备、语音输入设备中任意一种,所述第一控制键用于控制信号处理芯片对计算机界面进行录制,得到包含显示信号的区域图像;所述第二控制键适于控制缓存芯片在释放指令从1到0变化时停止信号输入,在释放指令从0到1变化时继续信号输入。
可选地,在上述方法中,可以获取计算机界面上包含显示信号的区域图像;基于AI识别芯片中的字符识别模型将所述区域图像中的字符转换为可编辑的文本,并返回字符坐标;基于AI识别芯片中图像识别模型对所述区域图像中的图片进行识别,并返回图片坐标。
可选地,在上述方法中,可以获取所述输入信号的交互输入时间间隔,减小所述交互输入时间间隔后得到预设时间间隔;将识别出的字符、图片、字符坐标和图片坐标作为模拟输入信号存储在缓存芯片中;将缓存芯片中存储的模拟输入信号按照所述预设时间间隔重复输入显示在计算机界面上。
由于实际信号输入时时间间隔可能较长,为了提高自动化信号输入的效率,可以对实际交互时间间隔设定余量时间后减少多余的交互时间间隔。
可选地,在上述方法中,还可以将模拟输入信号按照预设时间间隔依次或同时重复输入显示在多个计算机界面上。
这样便可以实现在多个计算机界面上同时实现自动化重复信息录入操作。
根据本发明的又一个方面,提供了一种基于人工智能的自动化信息录入系统,包括:第一控制键,用于向信号处理芯片发出录制指令;信号处理芯片,用于获取计算机输入设备的输入信号在计算机界面的对应的显示信号,并接收第一控制键的录制指令;AI识别芯片,用于根据所述录制指令对所述显示信号进行图像识别,识别出计算机界面上显示的字符、图片、字符坐标和图片坐标,得到模拟输入信号;第二控制键,用于向缓存芯片发送释放指令;缓存芯片,用于接收第二控制键的释放指令,将所述模拟输入信号自动化输入显示在所述计算机界面上。
可选地,在上述系统中,缓存芯片还用于接收第二控制键的重复释放指令,将所述模拟输入信号自动化重复输入显示在计算机界面上,直到再次接收到所述第二控制键的释放指令时停止自动化输入动作。
根据本发明的另一个方面,提供一种计算设备,包括:至少一个处理器;和存储有程序指令的存储器,其中,程序指令被配置为适于由至少一个处理器执行,程序指令包括用于执行上述基于人工智能的自动化信息录入方法的指令。
根据本发明的又一个方面,提供一种存储有程序指令的可读存储介质,当程序指令被计算设备读取并执行时,使得计算设备执行上述的基于人工智能的自动化信息获取方法。
根据本发明的方案,通过人工智能识别算法对计算机界面上的输入的显示信号进行识别,将识别出的字符、字符坐标、图片、图片坐标等信息作为与实际输入信号对应的模拟输入信号,然后通过一键触发的方式将模拟输入信号自动化重复输入显示在计算机界面上,实现了信息的自动化重复录入。并且通过对交互输入时间间隔进行适当减小,可以提高了信息录入的效率和准确性。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了根据本发明一个实施例的计算设备100的结构示意图;
图2示出了根据本发明一个实施例的基于人工智能的自动化信息录入系统200的结构示意图;
图3示出了根据本发明一个实施例的基于人工智能的自动化信息录入方法300的流程示意图
图4示出了根据本发明一个实施例的自动化信息录入方法的逻辑流程图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
在实际工作中,尝尝采用手动输入的方式进行数据录入,这种方式存在效率低、易出错等缺点,随着数据量增加,这些缺点越发严重的显示出来。自动数据录入系统是利用具有键盘和鼠标等设备的输入指令实现数据录入自动化,但是现有的自动数据录入系统一般只针对于表格,无法应用于多样化的信息录入场景。
基于AI的自动化处理不仅可以把人从繁重重复的体力劳动中解放出来,而且可以提高劳动生产率。为了减少重复性信息录入工作的人工操作,适应多样化的信息录入场景,本方案提供了一种基于人工智能的自动化信息录入方法和系统,能够提高重复性信息录入的效率和准确性,实现计算机自动化交互输入。
图1示出了根据本发明一个实施例的计算设备100的结构示意图。如图1所示,在基本配置102中,计算设备100典型地包括系统存储器106和一个或者多个处理器104。存储器总线108可以用于在处理器104和系统存储器106之间的通信。
取决于期望的配置,处理器104可以是任何类型的处理器,包括但不限于:微处理器(µP)、微控制器(µC)、数字信息处理器(DSP)或者它们的任何组合。处理器104可以包括诸如一级高速缓存110和二级高速缓存112之类的一个或者多个级别的高速缓存、处理器核心114和寄存器116。示例的处理器核心114可以包括运算逻辑单元(ALU)、浮点数单元(FPU)、数字信号处理核心(DSP核心)或者它们的任何组合。示例的存储器控制器118可以与处理器104一起使用,或者在一些实现中,存储器控制器118可以是处理器104的一个内部部分。
取决于期望的配置,系统存储器106可以是任意类型的存储器,包括但不限于:易失性存储器(诸如RAM)、非易失性存储器(诸如ROM、闪存等)或者它们的任何组合。计算设备中的物理内存通常指的是易失性存储器RAM,磁盘中的数据需要加载至物理内存中才能够被处理器104读取。系统存储器106可以包括操作系统120、一个或者多个应用122以及程序数据124。在一些实施方式中,应用122可以布置为在操作系统上由一个或多个处理器104利用程序数据124执行指令。操作系统120例如可以是Linux、Windows等,其包括用于处理基本系统服务以及执行依赖于硬件的任务的程序指令。应用122包括用于实现各种用户期望的功能的程序指令,应用122例如可以是浏览器、即时通讯软件、软件开发工具(例如集成开发环境IDE、编译器等)等,但不限于此。当应用122被安装到计算设备100中时,可以向操作系统120添加驱动模块。
在计算设备100启动运行时,处理器104会从存储器106中读取操作系统120的程序指令并执行。应用122运行在操作系统120之上,利用操作系统120以及底层硬件提供的接口来实现各种用户期望的功能。当用户启动应用122时,应用122会加载至存储器106中,处理器104从存储器106中读取并执行应用122的程序指令。
计算设备100还包括储存设备132,储存设备132包括可移除储存器136和不可移除储存器138,可移除储存器136和不可移除储存器138均与储存接口总线134连接。
计算设备100还可以包括有助于从各种接口设备(例如,输出设备142、外设接口144和通信设备146)到基本配置102经由总线/接口控制器130的通信的接口总线140。示例的输出设备142包括图形处理单元148和音频处理单元150。它们可以被配置为有助于经由一个或者多个A/V端口152与诸如显示器或者扬声器之类的各种外部设备进行通信。示例外设接口144可以包括串行接口控制器154和并行接口控制器156,它们可以被配置为有助于经由一个或者多个I/O端口158和诸如输入设备(例如,键盘、鼠标、笔、语音输入设备、触摸输入设备)或者其他外设(例如打印机、扫描仪等)之类的外部设备进行通信。示例的通信设备146可以包括网络控制器160,其可以被布置为便于经由一个或者多个通信端口164与一个或者多个其他计算设备162通过网络通信链路的通信。
网络通信链路可以是通信介质的一个示例。通信介质通常可以体现为在诸如载波或者其他传输机制之类的调制数据信号中的计算机可读指令、数据结构、程序模块,并且可以包括任何信息递送介质。“调制数据信号”可以这样的信号,它的数据集中的一个或者多个或者它的改变可以在信号中编码信息的方式进行。作为非限制性的示例,通信介质可以包括诸如有线网络或者专线网络之类的有线介质,以及诸如声音、射频(RF)、微波、红外(IR)或者其它无线介质在内的各种无线介质。这里使用的术语计算机可读介质可以包括存储介质和通信介质二者。在根据本发明的计算设备100中,应用122包括用于执行本发明的基于人工智能的自动化信息录入方法300的指令。
图2示出了根据本发明一个实施例的基于人工智能的自动化信息录入系统200的结构示意图。如图2所示,该系统200包括信号处理芯片、AI识别芯片、缓存芯片、第一控制键和第二控制键。
其中,信号处理芯片一端连接计算机输入设备,另一端连接第一控制键。信号处理芯片可以对计算机输入设备输入的信号进行信号转换和处理,例如,将语音信息转换为文字信息,将模拟信号转换为为数字信号等。
第一控制键用于控制信号处理芯片对计算机界面进行屏幕录制,得到包含显示信号的区域图像。AI识别芯片自动接收计算机输入设备的输入信号和计算机界面上的显示信号,并对包含显示信号的区域图像进行识别,识别出区域图像中为文字、图像、文字坐标、图像坐标等信息。AI识别芯片可以将处理后的输入信号存储在缓存芯片中。
第二控制键与缓存芯片连接,第二控制键可以发出释放指令,其中释放包括从1到0变化的停止信号和从0到1变化的继续信号。当缓存芯片接收到第二控制键发出的释放指令(从0到1变化)后,将AI识别芯片处理后的输入信号输入计算机界面上进行自动化输入显示。这样便可以实现信号的自动化输入操作。
当缓存芯片接收到第二控制键的重复释放指令(从0到1变化)时,将AI识别芯片处理后的输入信号重复自动化输入显示在计算机界面,完成重复的信号自动输入操作,直到再次接收到第二控制器的释放指令(从1到0变化)时停止信号输入。
缓存芯片还可以同时连接到多个计算机,这样便可以完成在多个计算机的自动化重复输入操作。
接下来结合上述基于人工智能的自动化信息录入系统200详细介绍本方案提供的自动化信息录入方法。图3示出了根据本发明一个实施例的基于人工智能的自动化信息录入方法300的流程示意图。如图3所示,该方法始于步骤S310,获取计算机界面上的显示信号,并接收第一控制键的录制指令。
其中,计算机界面上的显示信号是根据计算机输入设备的输入信号在计算机界面上对应显示的信号。
计算机输入设备可以是键盘、鼠标、触控板、扫描仪、语音输入设备、图像输入设备等计算机交互输入设备。因此,输入信号可以是文字、符号、图像、语音等各种形式的数字或模拟信号。计算机输入设备通过计算机输入输出接口(I/O接口)与计算机连接,信号处理芯片可以对输入信号存储后进行信号转换和处理,转换为在计算机界面上显示的显示信号,并对输入信号进行分流控制。
也就是说,输入信号和显示信号的形式可能是不同的,例如,如果是语音输入设备输入的语音信号,可以将语音信号转换为对应的文字信号显示在计算机界面,也就是说输入信号和显示信号可以以不同的信号形式表示同一信息。如果输入信号是图像,可以将图像转换为预设格式和尺寸的图片。
第一控制键可以是用于对计算机屏幕进行录制的快捷键,如“Ctrl+alt+s”“Win+Alt+R”,或者同时控制多个组合键的外置控制键。
随后执行步骤S320,根据录制指令对显示信号进行图像识别,识别出计算机界面上显示的字符、图片、字符坐标和图片坐标,得到模拟输入信号。
信号处理芯片接收到第一控制键的录制指令后,AI识别芯片自动接收信号处理芯片传输的输入信号并获取计算机界面上的显示信号。
例如,通过分析鼠标、光标所在的待识别的区域图像,基于AI识别芯片中的基于人工智能算法的识别模型对区域图像进行识别,将区域图像中的文字转换为可编辑的文本,并返回文本坐标,并识别区域图像中的图片和图片坐标。如果区域图像中未识别到文字,则返回当前输入位置坐标和当前坐标的标识符号。
例如,区域图像中包含图片、文字信息,可以通过识别模型识别出图片、图片坐标、文字内容和文字坐标,因此,通过人工智能识别算法可以获取计算机界面显示信号的全部信息,得到的模拟输入信号与实际输入信号内容和坐标是一致的。
根据本发明的一个实施例,还可以记录输入设备输入信号的交互输入时间间隔,设定余量时间后自动减少多余的交互输入时间间隔,并把处理后的输入信号存储在缓存芯片(flash芯片)中。
最后执行步骤S330,接收第二控制键的释放指令,将所述模拟输入信号自动化输入显示在计算机界面上。
其中第二控制键可以通过触发按键引起电平变化的方式发出释放指令。缓存芯片接收到第二控制键发出的释放指令时,将AI识别芯片处理后的与实际输入信号一致或对应的模拟输入信号显示在计算机界面上,无需人工操作,只需通过一键触发的方式就可实现信号的自动化输入。
在本发明的一个实施例中,在完成信号自动化输入动作后,缓存芯片还可以在接收到第二控制键发出的重复释放指令后,将模拟输入信号自动化重复显示在计算机界面上。也就是说,释放指令可以是一系列高低变化的电平信号。直到再次接收到第二控制键的停止释放指令后,则停止自动化重复输入动作。可以将模拟输入信号按照预设时间间隔依次或同时重复输入显示在多个计算机界面上。
为了减少不必要的交互时间间隔,可以获取所述输入信号的交互输入时间间隔,减小所述交互输入时间间隔后得到预设时间间隔;将识别出的字符、图片、字符坐标和图片坐标作为模拟输入信号存储在缓存芯片中;将缓存芯片中存储的模拟输入信号按照所述预设时间间隔重复输入显示在计算机界面上。
为了实现多个计算机设备同时完成自动化输入操作,可以将缓存芯片同时连接到多个计算机,这样当缓存芯片接收到释放指令后,可以同时在多个计算机界面上完成自动化重复输入动作,从而提高信息录入的效率和准确性。
图4示出了根据本发明一个实施例的自动化信息录入方法的逻辑流程图。如图4所示,键盘、鼠标、触控板等输入信号①链接到信号处理IC②;
信号处理IC②把输入信号复制后,一端直连PC 01⑩,正常输入键盘、鼠标、触控板信号;另一端信号受外置录制键③控制。
当外置录制键③输入录制指令,AI IC④自动接收信号处理IC的键盘、鼠标、触控板等的输入信号①以及PC 01⑩的显示信号。AI IC④结合PC 01⑩的显示信号记录并分析鼠标、光标当前识别区域图像⑤,AI IC④会优先把区域文字作为记录坐标,当位置无文字时记录当前坐标以及当前坐标的标识符号。
AI IC④记录键盘、鼠标、触控输入信号并自动分析交互输入时间间隔,设定余量时间后自动减少多余的交互输入时间间隔,并把处理后的输入信号存储到缓存IC⑧。
当缓存IC⑧接收到外置按键⑨的释放指令后,会把AI IC④优化过的键盘、鼠标、触控板等输入信号①输出给PC 01⑩。此时PC 01⑩将无需人工操作,自动接收到缓存IC⑧经过AI IC④处理后的模拟人工键盘、鼠标、触控板等输入信号①,完成的信号自动化输入动作。
当缓存IC⑧接收到外置按键⑨的重复释放指令后,会把AI IC④优化过的键盘、鼠标、触控板等输入信号①输出给PC 01⑩。此时PC 01⑩将无需人工操作,自动接收到缓存IC⑧经过AI IC④处理后的模拟人工键盘、鼠标、触控板等输入信号①完成重复的信号输入动作,直至再次接收到外置按键⑨的信号后则停止信号输出。
缓存IC⑧信号也可以链接PC群(PC 02,PC 03......)⑪,完成PC群的自动化输入或自动化重复输入。
根据本发明技术方案,通过人工智能识别算法对计算机界面上的输入的显示信号进行识别,将识别出的字符、字符坐标、图片、图片坐标等信息作为与实际输入信号对应的模拟输入信号,然后通过一键触发的方式将模拟输入信号自动化重复输入显示在计算机界面上,实现了信息的自动化重复录入。并且通过对交互输入时间间隔进行适当减小,可以提高了信息录入的效率和准确性。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下被实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员应当理解在本文所公开的示例中的设备的模块或单元或组件可以布置在如该实施例中所描述的设备中,或者可替换地可以定位在与该示例中的设备不同的一个或多个设备中。前述示例中的模块可以组合为一个模块或者此外可以分成多个子模块。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
此外,实施例中的一些在此被描述成可以由计算机系统的处理器或者由执行功能的其它装置实施的方法或方法元素的组合。因此,具有用于实施方法或方法元素的必要指令的处理器形成用于实施该方法或方法元素的装置。此外,装置实施例的在此所述的元素是如下装置的例子:该装置用于实施由为了实施该发明的目的的元素所执行的功能。
如在此所使用的那样,除非另行规定,使用序数词“第一”、“第二”、“第三”等等来描述普通对象仅仅表示涉及类似对象的不同实例,并且并不意图暗示这样被描述的对象必须具有时间上、空间上、排序方面或者以任意其它方式的给定顺序。
尽管根据有限数量的实施例描述了本发明,但是受益于上面的描述,本技术领域内的技术人员明白,在由此描述的本发明的范围内,可以设想其它实施例。此外,应当注意,本说明书中使用的语言主要是为了可读性和教导的目的而选择的,而不是为了解释或者限定本发明的主题而选择的。因此,在不偏离所附权利要求书的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围,对本发明所做的公开是说明性的而非限制性的,本发明的范围由所附权利要求书限定。

Claims (10)

1.一种基于人工智能的自动化信息录入方法,适于在计算设备中执行,其特征在于,所述方法包括:
获取计算机界面上的显示信号,并接收第一控制键的录制指令;
根据所述录制指令对所述显示信号进行图像识别,识别出计算机界面上显示的字符、图片、字符坐标和图片坐标,得到模拟输入信号;
接收第二控制键的释放指令,将所述模拟输入信号自动化输入显示在所述计算机界面上。
2.根据权利要求1所述的自动化信息录入方法,其特征在于,所述还方法包括:
接收第二控制键的重复释放指令,将所述模拟输入信号自动化重复输入显示在计算机界面上,直到再次接收到所述第二控制键的释放指令时停止自动化输入动作。
3.根据权利要求1所述的自动化信息录入方法,其特征在于,所述输入设备为键盘、鼠标、触控板、图像输入设备、语音输入设备中任意一种,所述第一控制键用于控制信号处理芯片对计算机界面进行录制,得到包含显示信号的区域图像;所述第二控制键用于控制缓存芯片在释放指令从1到0变化时停止信号输入,在释放指令从0到1变化时继续信号输入。
4.根据权利要求3所述的自动化信息录入方法,其特征在于,所述根据所述录制指令对所述显示信号进行图像识别,识别出计算机界面上显示的字符、图片、字符坐标和图片坐标,得到模拟输入信号的步骤包括:
获取计算机界面上包含显示信号的区域图像;
基于AI识别芯片中的字符识别模型将所述区域图像中的字符转换为可编辑的文本,并返回字符坐标;
基于AI识别芯片中图像识别模型对所述区域图像中的图片进行识别,并返回图片坐标。
5.根据权利要求1所述的自动化信息录入方法,其特征在于,所述方法还包括:
获取所述输入信号的交互输入时间间隔,减小所述交互输入时间间隔后得到预设时间间隔;
将识别出的字符、图片、字符坐标和图片坐标作为模拟输入信号存储在缓存芯片中;
将缓存芯片中存储的模拟输入信号按照所述预设时间间隔重复输入显示在计算机界面上。
6.根据权利要求5所述的自动化信息录入方法,其特征在于,所述将缓存芯片中存储的模拟输入信号按照输入时间间隔重复输入显示在计算机界面上的步骤包括:
将模拟输入信号按照预设时间间隔依次或同时重复输入显示在多个计算机界面上。
7.一种基于人工智能的自动化信息录入系统,其特征在于,包括:
第一控制键,用于向信号处理芯片发出录制指令;
信号处理芯片,用于获取计算机输入设备的输入信号在计算机界面的对应的显示信号,并接收第一控制键的录制指令;
AI识别芯片,用于根据所述录制指令对所述显示信号进行图像识别,识别出计算机界面上显示的字符、图片、字符坐标和图片坐标,得到模拟输入信号;
第二控制键,用于向缓存芯片发送释放指令;
缓存芯片,用于接收第二控制键的释放指令,将所述模拟输入信号自动化输入显示在所述计算机界面上。
8.根据权利要求7所述的自动化信息录入系统,其特征在于,
所述缓存芯片还用于接收第二控制键的重复释放指令,将所述模拟输入信号自动化重复输入显示在计算机界面上,直到再次接收到所述第二控制键的释放指令时停止自动化输入动作。
9.一种计算设备,包括:
至少一个处理器;和
存储有程序指令的存储器,其中,所述程序指令被配置为适于由所述至少一个处理器执行,所述程序指令包括用于执行如权利要求1-6中任一项所述的基于人工智能的自动化信息录入方法的指令。
10.一种存储有程序指令的可读存储介质,当所述程序指令被计算设备读取并执行时,使得所述计算设备执行如权利要求1-6中任一项所述的基于人工智能的自动化信息录入方法。
CN202211656366.5A 2022-12-22 2022-12-22 一种基于人工智能的自动化信息录入方法和系统 Pending CN115857782A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211656366.5A CN115857782A (zh) 2022-12-22 2022-12-22 一种基于人工智能的自动化信息录入方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211656366.5A CN115857782A (zh) 2022-12-22 2022-12-22 一种基于人工智能的自动化信息录入方法和系统

Publications (1)

Publication Number Publication Date
CN115857782A true CN115857782A (zh) 2023-03-28

Family

ID=85653859

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211656366.5A Pending CN115857782A (zh) 2022-12-22 2022-12-22 一种基于人工智能的自动化信息录入方法和系统

Country Status (1)

Country Link
CN (1) CN115857782A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013081453A1 (en) * 2011-11-30 2013-06-06 Vas Holding B.V. Method and device for automatically repeating computer-actions
CN114296559A (zh) * 2021-12-29 2022-04-08 捷玛计算机信息技术(上海)股份有限公司 条码录入方法、装置、系统、电子设备及介质
CN114581916A (zh) * 2022-02-18 2022-06-03 来也科技(北京)有限公司 结合rpa和ai的基于图像的字符识别方法、装置及设备
CN114637662A (zh) * 2022-05-13 2022-06-17 杭州未斯科技有限公司 一种rpa流程自动化录制控制方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013081453A1 (en) * 2011-11-30 2013-06-06 Vas Holding B.V. Method and device for automatically repeating computer-actions
CN114296559A (zh) * 2021-12-29 2022-04-08 捷玛计算机信息技术(上海)股份有限公司 条码录入方法、装置、系统、电子设备及介质
CN114581916A (zh) * 2022-02-18 2022-06-03 来也科技(北京)有限公司 结合rpa和ai的基于图像的字符识别方法、装置及设备
CN114637662A (zh) * 2022-05-13 2022-06-17 杭州未斯科技有限公司 一种rpa流程自动化录制控制方法及系统

Similar Documents

Publication Publication Date Title
CN108763068B (zh) 一种基于机器学习的自动化测试方法及终端
JP2993673B2 (ja) 電子ファイル装置
US6999061B2 (en) Electronic whiteboard system
CN106445344A (zh) 一种截图处理方法及装置
CN114373460A (zh) 车载语音助手的指令确定方法、装置、设备及介质
JP2008241736A (ja) 学習端末およびその制御方法、正誤判定サーバおよびその制御方法、学習システム、学習端末制御プログラム、正誤判定サーバ制御プログラム、並びに、該プログラムを記録した記録媒体
CN105345822A (zh) 智能机器人控制方法及装置
JP2003044214A (ja) 手書き文字入力装置及びそれを実現するプログラム
CN115857782A (zh) 一种基于人工智能的自动化信息录入方法和系统
CN110659193B (zh) 测试系统
CN115858049A (zh) Rpa流程组件化编排方法、装置、设备和介质
JP2000295406A (ja) 画像処理方法、装置及び記憶媒体
CN113849118A (zh) 一种应用于电子白板的图像识别方法及相关装置
CN103049097A (zh) 一种手写输入法的突出显示方法及手写输入法
JP2019016379A (ja) データ入力装置及びデータ入力プログラム
JP4963633B2 (ja) 情報処理装置及び情報処理方法
CN113688835A (zh) 一种基于物体检测与ocr的系统及应用故障弹框图片信息提取方法
JP2001005806A (ja) 文字入力装置及び入力制御方法
JPH07334611A (ja) 非認識文字の表示方法
CN117253165A (zh) 一种基于实验操作视频的智能赋分方法和系统
JP2001291055A (ja) 帳票認識装置およびそのプログラム記録媒体
CN115617230A (zh) 一种应用分屏显示方法、装置、计算设备及存储介质
CN117951009A (zh) 一种测试脚本生成方法、装置、计算设备及存储介质
CN114419393A (zh) 一种应用控件的标注方法、标注装置及计算设备
JPH1166232A (ja) 帳票定義方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination