CN116645672A - 基于图像框选识别与自动录入的方法、系统、终端及介质 - Google Patents
基于图像框选识别与自动录入的方法、系统、终端及介质 Download PDFInfo
- Publication number
- CN116645672A CN116645672A CN202310668656.XA CN202310668656A CN116645672A CN 116645672 A CN116645672 A CN 116645672A CN 202310668656 A CN202310668656 A CN 202310668656A CN 116645672 A CN116645672 A CN 116645672A
- Authority
- CN
- China
- Prior art keywords
- screenshot
- user
- recognition
- screen
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 230000008569 process Effects 0.000 claims abstract description 22
- 230000000977 initiatory effect Effects 0.000 claims abstract description 7
- 238000004088 simulation Methods 0.000 claims abstract description 5
- 238000004590 computer program Methods 0.000 claims description 10
- 230000009191 jumping Effects 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000004044 response Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 235000019800 disodium phosphate Nutrition 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011017 operating method Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/14—Image acquisition
- G06V30/146—Aligning or centring of the image pick-up or image-field
- G06V30/147—Determination of region of interest
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
- G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
- G06F3/0233—Character input methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
- G06V30/41—Analysis of document content
- G06V30/412—Layout analysis of documents structured with printed lines or input boxes, e.g. business forms or tables
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种基于图像框选识别与自动录入的方法,包括:获取用户对键盘的操作指令;判断操作指令与预设的截图识别快捷键是否相同;若是,则保存当前桌面顶层活动窗口信息,进行屏幕拷贝得到屏幕拷贝图片,将屏幕拷贝图片显示在桌面顶层,获取用户对屏幕拷贝图片进行区域截图操作;对截图图片进行文字识别,将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口;将文字识别结果复制到操作系统剪切板,模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框。通过快捷键框选图像及对图像中的文字进行识别,将文字识别结果自动录入到目标输入框中,用户使用更加方便,操作步骤简化,提高用户的工作效率。
Description
技术领域
本发明涉及图像识别技术领域,具体涉及一种基于图像框选识别与自动录入的方法、系统、终端及介质。
背景技术
图像识别技术日趋完善,但是在实际应用过程中却面临很多不便。常规应用模式通常采用定制开发或者采用通用识别后将识别结果手工粘贴两种方式。采用通用识别通常是选择文件或框选需要识别的区域通过图像文字识别后将识别结果展示到识别程序识别结果区域,或将识别结果复制到操作系统剪切板;实际应用场景中再将识别结果拷贝到需要录入的地方,这样操作繁琐,导致工作效率低。
发明内容
针对现有技术中的缺陷,本发明提供的一种基于图像框选识别与自动录入的方法、系统、终端及介质,通过快捷键框选图像,并对图像中的文字进行识别,将文字识别结果自动录入到目标输入框中,操作步骤简化,提高了在实际应用过程中的工作效率。
第一方面,本发明实施例提供的一种基于图像框选识别与自动录入的方法,包括:
获取用户对键盘的操作指令;
判断所述操作指令与预设的截图识别快捷键是否相同;
若否,则不执行操作;
若是,则保存当前桌面顶层活动窗口信息,并进行屏幕拷贝得到屏幕拷贝图片,将所述屏幕拷贝图片显示在桌面顶层供用户框选识别区域,获取用户对屏幕拷贝图片进行区域截图操作,得到截图图片;
对所述截图图片进行文字识别,得到文字识别结果,并隐藏屏幕拷贝图片展示窗口,将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口;
获取文字识别结果,并将文字识别结果复制到操作系统剪切板,模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框。
第二方面,本发明实施例提供的一种基于图像框选识别与自动录入的系统,包括:指令获取模块、判断模块、截图模块、文字识别模块和录入模块,
所述指令获取模块用于获取用户对键盘的操作指令;
所述判断模块用于判断操作指令与预设的截图识别快捷键是否相同;
所述截图模块用于操作指令与预设的截图识别快捷键相同时,保存当前桌面顶层活动窗口信息,并进行屏幕拷贝得到屏幕拷贝图片,将所述屏幕拷贝图片显示在桌面顶层供用户框选识别区域,获取用户对屏幕拷贝图片进行区域截图操作,得到截图图片;
所述文字识别模块对所述截图图片进行文字识别,得到文字识别结果,并隐藏屏幕拷贝图片展示窗口,将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口;
所述自动录入模块用于获取文字识别结果,并将文字识别结果复制到操作系统剪切板,模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框。
第三方面,本发明实施例提供的一种智能终端,包括处理器、输入设备、输出设备和存储器,所述处理器分别与输入设备、输出设备和存储器连接,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行上述实施例描述的方法。
第四方面,本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行上述实施例描述的方法。
本发明的有益效果:
本发明实施例提供的一种基于图像框选识别与自动录入的方法、系统、终端及介质,通过快捷键框选图像,并对图像中的文字进行识别,将文字识别结果自动录入到目标输入框中,无需用户手动复制粘贴,用户使用更加方便,操作步骤简化,提高了用户在实际应用过程中的工作效率。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍。在所有附图中,类似的元件或部分一般由类似的附图标记标识。附图中,各元件或部分并不一定按照实际的比例绘制。
图1示出了本发明第一实施例所提供的一种基于图像框选识别与自动录入的方法的流程示意图;
图2示出了本发明第一实施例的示例应用场景图;
图3示出了本发明另一实施例提供的一种基于图像框选识别与自动录入的系统的结构示意图;
图4示出了本发明另一实施例提供的一种智能终端的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解,本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
如在本说明书和所附权利要求书中所使用的那样,术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地,短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
需要注意的是,除非另有说明,本申请使用的技术术语或者科学术语应当为本发明所属领域技术人员所理解的通常意义。
如图1所示,示出了本发明第一实施例所提供的一种基于图像框选识别与自动录入的方法的流程示意图,该方法包括以下步骤:
获取用户对键盘的操作指令;
判断所述操作指令与预设的截图识别快捷键是否相同;
若否,则不执行操作;
若是,则保存当前桌面顶层活动窗口信息,并进行屏幕拷贝得到屏幕拷贝图片,将所述屏幕拷贝图片显示在桌面顶层供用户框选识别区域,获取用户对屏幕拷贝图片进行区域截图操作,得到截图图片;
对所述截图图片进行文字识别,得到文字识别结果,并隐藏屏幕拷贝图片展示窗口,将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口;
获取文字识别结果,并将文字识别结果复制到操作系统剪切板,模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框。
具体地,获取用户在识别区域进行区域截图操作具体包括:获取用户在识别区域按下鼠标左键时的坐标作为起始点,追踪鼠标的移动位置,获取用户在识别区域释放鼠标左键时的坐标作为截止点,根据所述起始点与截止点确定截取区域。
本实施例提供的一种基于图像框选识别与自动录入的方法,可以以应用程序方式在Windows桌面系统运行,在应用程序设置中预先配置截图识别快捷键以及识别成功后的后续处理,后续处理包括:是否自动录入、录入后是否切换输入框或模拟光标向下键等。
在实际运行中,应用程序启动时读取配置文件,设置键盘钩子处理程序,然后自动隐藏当前应用程序窗口。当用户按下键盘时,键盘钩子程序检查是否是截图识别快捷键。若用户按键为预先设置的截图识别快捷键时,应用程序记录保存当前桌面顶层活动窗口信息,然后进行屏幕拷贝并将屏幕拷贝图片展示在桌面最顶层供用户框选识别区域;用户将鼠标移动到识别区域的起点时按下鼠标左键,拖动鼠标到截止区域时释放鼠标左键完成识别区域的选择。截屏文字识别程序将用户框选区域截图给文字识别模块进行识别,同时隐藏屏幕拷贝图片展示窗口,将活动窗口和进程均切换回按下快捷键前的桌面进程窗口。文字识别模块识别成功返回后,截图识别程序将文字识别结果复制到操作系统剪切板;然后模拟键盘发起Ctrl+V将文字识别结果自动录入到截屏前的活动窗口,根据配置可选项还可将光标自动跳转到下一个输入框(模拟键盘按键Tab键)。通过将文字识别结果自动录入到输入框,无需用户手动复制粘贴,用户使用更加方便,操作步骤简化,提升工作效率。
以下采用一个具体的应用场景(参见图2)对上述实施例进行说明:
用户X在应用程序中配置截图识别快捷键:Ctrl+1,后续处理设置为自动录入。用户X在进行某信息系统信息录入时,需要识别图像中的文字,将识别的文字输入到对应的输入框中。用户X按下快捷键:Ctrl+1,应用程序判断出用户按下的快捷键与预设的截图识别快捷键相同,保存当前桌面顶层活动窗口信息,并进行屏幕拷贝得到屏幕拷贝图片,将屏幕拷贝图片显示在桌面顶层,用户X在屏幕拷贝图片进行区域截图,得到截图图片,应用程序对截图图片进行文字识别,得到文字识别结果,隐藏屏幕拷贝图片展示窗口,将当前桌面顶层活动窗口和进程均切换至用户按下快捷键前时的桌面进程窗口。应用程序将文字识别结果复制到操作系统剪切板,模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的输入框。
若用户后续处理设置为录入后切换输入框,在文字识别结果自动录入到截屏前的输入框中后,光标自动跳转到下一个输入框,起到模拟键盘按键Tab键。若用户将后续处理设置为录入后模拟光标向下键,在文字识别结果自动录入到截屏前的输入框中后,模拟光标向下键。
本发明实施例提供的一种基于图像框选识别与自动录入的方法,通过快捷键框选图像,并对图像中的文字进行识别,将文字识别结果自动录入到目标输入框中,无需用户手动复制粘贴,用户使用更加方便,操作步骤简化,提高了用户在实际应用过程中的工作效率。
在上述的第一实施例中,提供了一种基于图像框选识别与自动录入的方法,与之相对应的,本申请还提供一种基于图像框选识别与自动录入的系统。请参考图3,其为本发明第二实施例提供的一种基于图像框选识别与自动录入的系统的结构示意图。由于装置实施例基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。下述描述的装置实施例仅仅是示意性的。
如图3所示,本发明实施例提供的一种基于图像框选识别与自动录入的系统的结构示意图,该系统包括:指令获取模块、判断模块、截图模块、文字识别模块和录入模块,指令获取模块用于获取用户对键盘的操作指令;判断模块用于判断操作指令与预设的截图识别快捷键是否相同;截图模块用于操作指令与预设的截图识别快捷键相同时,保存当前桌面顶层活动窗口信息,并进行屏幕拷贝得到屏幕拷贝图片,将所述屏幕拷贝图片显示在桌面顶层供用户框选识别区域,获取用户对屏幕拷贝图片进行区域截图操作,得到截图图片;文字识别模块对所述截图图片进行文字识别,得到文字识别结果,并隐藏屏幕拷贝图片展示窗口,将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口;自动录入模块用于获取文字识别结果,并将文字识别结果复制到操作系统剪切板,模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框。截图模块包括截图区域确定单元,所述截图区域确定单元用于获取用户在识别区域按下鼠标左键时的坐标作为起始点,追踪鼠标的移动位置,获取用户在识别区域释放鼠标左键时的坐标作为截止点,根据所述起始点与截止点确定截取区域。
在本发明另一实施例中,系统还包括自动跳转模块,所述自动跳转模块用于将光标自动跳转到下一个输入框中。
在本发明另一实施例中,系统还包括光标模拟模块,所述光标模拟模块用于模拟光标向下键。
本发明实施例提供的一种基于图像框选识别与自动录入的系统,通过快捷键框选图像,并对图像中的文字进行识别,将文字识别结果自动录入到目标输入框中,无需用户手动复制粘贴,用户使用更加方便,操作步骤简化,提高了用户在实际应用过程中的工作效率。
如图4所示,本发明另一实施例提供一种智能终端的结构示意图,该终端包括处理器、输入设备、输出设备和存储器,所述处理器分别与输入设备、输出设备和存储器连接,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行上述实施例描述的方法。
应当理解,在本发明实施例中,所称处理器可以是中央处理单元(CentralProcessing Unit,CPU),该处理器还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
输入设备可以包括触控板、指纹采传感器(用于采集用户的指纹信息和指纹的方向信息)、麦克风等,输出设备可以包括显示器(LCD等)、扬声器等。
该存储器可以包括只读存储器和随机存取存储器,并向处理器提供指令和数据。存储器的一部分还可以包括非易失性随机存取存储器。例如,存储器还可以存储设备类型的信息。
具体实现中,本发明实施例中所描述的处理器、输入设备、输出设备可执行本发明实施例提供的方法实施例所描述的实现方式,也可执行本发明实施例所描述的系统实施例的实现方式,在此不再赘述。
在本发明还提供一种计算机可读存储介质的实施例,计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,程序指令当被处理器执行时使所述处理器执行上述实施例描述的方法。
所述计算机可读存储介质可以是前述实施例所述的终端的内部存储单元,例如终端的硬盘或内存。所述计算机可读存储介质也可以是所述终端的外部存储设备,例如所述终端上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(SecureDigital,SD)卡,闪存卡(Flash Card)等。进一步地,所述计算机可读存储介质还可以既包括所述终端的内部存储单元也包括外部存储设备。所述计算机可读存储介质用于存储所述计算机程序以及所述终端所需的其他程序和数据。所述计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的终端和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露终端和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接,也可以是电的,机械的或其它的形式连接。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围,其均应涵盖在本发明的权利要求和说明书的范围当中。
Claims (10)
1.一种基于图像框选识别与自动录入的方法,其特征在于,包括:
获取用户对键盘的操作指令;
判断所述操作指令与预设的截图识别快捷键是否相同;
若否,则不执行操作;
若是,则保存当前桌面顶层活动窗口信息,并进行屏幕拷贝得到屏幕拷贝图片,将所述屏幕拷贝图片显示在桌面顶层供用户框选识别区域,获取用户对屏幕拷贝图片中进行区域截图操作,得到截图图片;
对所述截图图片进行文字识别,得到文字识别结果,并隐藏屏幕拷贝图片展示窗口,将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口;
获取文字识别结果,并将文字识别结果复制到操作系统剪切板,模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框。
2.如权利要求1所述的方法,其特征在于,在所述模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框步骤之后还包括:根据预先配置信息将光标自动跳转到下一个输入框中。
3.如权利要求1所述的方法,其特征在于,在所述模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框步骤之后还包括:根据预先配置信息模拟光标向下键。
4.如权利要求1所述的方法,其特征在于,所述获取用户在识别区域进行区域截图操作具体包括:获取用户在识别区域按下鼠标左键时的坐标作为起始点,追踪鼠标的移动位置,获取用户在识别区域释放鼠标左键时的坐标作为截止点,根据所述起始点与截止点确定截取区域。
5.一种基于图像框选识别与自动录入的系统,其特征在于,包括:指令获取模块、判断模块、截图模块、文字识别模块和自动录入模块,
所述指令获取模块用于获取用户对键盘的操作指令;
所述判断模块用于判断操作指令与预设的截图识别快捷键是否相同;
所述截图模块用于操作指令与预设的截图识别快捷键相同时,保存当前桌面顶层活动窗口信息,并进行屏幕拷贝得到屏幕拷贝图片,将所述屏幕拷贝图片显示在桌面顶层供用户框选识别区域,获取用户在对屏幕拷贝图片进行区域截图操作,得到截图图片;
所述文字识别模块对所述截图图片进行文字识别,得到文字识别结果,并隐藏屏幕拷贝图片展示窗口,将当前桌面顶层活动窗口和进程均切换至用户按下快捷键之前的桌面进程窗口;
所述自动录入模块用于获取文字识别结果,并将文字识别结果复制到操作系统剪切板,模拟键盘发起粘贴操作将文字识别结果自动录入到截屏前的活动窗口中的输入框。
6.如权利要求5所述的系统,其特征在于,所述系统还包括自动跳转模块,所述自动跳转模块用于将光标自动跳转到下一个输入框中。
7.如权利要求5所述的系统,其特征在于,所述系统还包括光标模拟模块,所述光标模拟模块用于模拟光标向下键。
8.如权利要求5所述的系统,其特征在于,所述截图模块包括截图区域确定单元,所述截图区域确定单元用于获取用户在识别区域按下鼠标左键时的坐标作为起始点,追踪鼠标的移动位置,获取用户在识别区域释放鼠标左键时的坐标作为截止点,根据所述起始点与截止点确定截取区域。
9.一种智能终端,包括处理器、输入设备、输出设备和存储器,所述处理器分别与输入设备、输出设备和存储器连接,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,其特征在于,所述处理器被配置用于调用所述程序指令,执行如权利要求1-4任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行如权利要求1-4任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310668656.XA CN116645672A (zh) | 2023-06-07 | 2023-06-07 | 基于图像框选识别与自动录入的方法、系统、终端及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310668656.XA CN116645672A (zh) | 2023-06-07 | 2023-06-07 | 基于图像框选识别与自动录入的方法、系统、终端及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116645672A true CN116645672A (zh) | 2023-08-25 |
Family
ID=87624517
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310668656.XA Pending CN116645672A (zh) | 2023-06-07 | 2023-06-07 | 基于图像框选识别与自动录入的方法、系统、终端及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116645672A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117215418A (zh) * | 2023-10-12 | 2023-12-12 | 广东魅视科技股份有限公司 | 一种输入文字的方法及设备 |
-
2023
- 2023-06-07 CN CN202310668656.XA patent/CN116645672A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117215418A (zh) * | 2023-10-12 | 2023-12-12 | 广东魅视科技股份有限公司 | 一种输入文字的方法及设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10534509B2 (en) | Electronic device having touchscreen and input processing method thereof | |
WO2015043382A1 (zh) | 一种适用于触屏设备的截图装置和方法 | |
CN108829371B (zh) | 界面控制方法、装置、存储介质及电子设备 | |
CN105264480A (zh) | 用于在相机界面之间进行切换的设备、方法和图形用户界面 | |
US10291843B2 (en) | Information processing apparatus having camera function and producing guide display to capture character recognizable image, control method thereof, and storage medium | |
EP2747057A1 (en) | Text-enlargement display method | |
WO2015176385A1 (zh) | 数据录入方法及终端 | |
US20140354540A1 (en) | Systems and methods for gesture recognition | |
CN107748615B (zh) | 屏幕的控制方法、装置、存储介质及电子设备 | |
CN107360375B (zh) | 一种拍摄方法及移动终端 | |
CN108984089B (zh) | 触控操作方法、装置、存储介质及电子设备 | |
US10409478B2 (en) | Method, apparatus, and recording medium for scrapping content | |
CN116645672A (zh) | 基于图像框选识别与自动录入的方法、系统、终端及介质 | |
CN114779977A (zh) | 界面显示方法、装置、电子设备及存储介质 | |
US11770603B2 (en) | Image display method having visual effect of increasing size of target image, mobile terminal, and computer-readable storage medium | |
CN106845190B (zh) | 显示控制系统及方法 | |
WO2018205392A1 (zh) | 控制响应区域显示控制方法、电子装置及存储介质 | |
CN110737417B (zh) | 一种演示设备及其标注线的显示控制方法和装置 | |
CN112822394A (zh) | 显示控制方法、装置、电子设备及可读存储介质 | |
CN108984024B (zh) | 触控操作方法、装置、存储介质及电子设备 | |
CN112889020A (zh) | 基于截屏的交互方法、电子设备及计算机可读存储介质 | |
CN112286430B (zh) | 图像处理方法、装置、设备及介质 | |
JP5950633B2 (ja) | 情報処理装置、コンピュータプログラム、情報処理方法 | |
CN115437736A (zh) | 一种笔记记录方法和装置 | |
CN111796733B (zh) | 图像显示方法、图像显示装置和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |