CN117148981B - 墨水屏的文字输入方法、装置、设备以及存储介质 - Google Patents
墨水屏的文字输入方法、装置、设备以及存储介质 Download PDFInfo
- Publication number
- CN117148981B CN117148981B CN202311094266.2A CN202311094266A CN117148981B CN 117148981 B CN117148981 B CN 117148981B CN 202311094266 A CN202311094266 A CN 202311094266A CN 117148981 B CN117148981 B CN 117148981B
- Authority
- CN
- China
- Prior art keywords
- text input
- writing
- handwriting
- window structure
- touch operation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 57
- 238000003860 storage Methods 0.000 title claims abstract description 21
- 230000008859 change Effects 0.000 claims description 10
- 238000001514 detection method Methods 0.000 claims description 7
- 238000013515 script Methods 0.000 claims description 7
- 239000000203 mixture Substances 0.000 claims description 6
- 230000010365 information processing Effects 0.000 claims 2
- 239000000976 ink Substances 0.000 description 62
- 230000008569 process Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 10
- 238000012790 confirmation Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 238000004590 computer program Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 239000003094 microcapsule Substances 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 239000000049 pigment Substances 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 239000002245 particle Substances 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 244000025254 Cannabis sativa Species 0.000 description 1
- 235000012766 Cannabis sativa ssp. sativa var. sativa Nutrition 0.000 description 1
- 235000012765 Cannabis sativa ssp. sativa var. spontanea Nutrition 0.000 description 1
- 235000009120 camo Nutrition 0.000 description 1
- 235000005607 chanvre indien Nutrition 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000005684 electric field Effects 0.000 description 1
- 238000001962 electrophoresis Methods 0.000 description 1
- 239000011487 hemp Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 239000008188 pellet Substances 0.000 description 1
- 238000007639 printing Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
- G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
- G06F3/0233—Character input methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/32—Digital ink
- G06V30/333—Preprocessing; Feature extraction
- G06V30/347—Sampling; Contour coding; Stroke extraction
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了墨水屏的文字输入方法、装置、设备以及存储介质，该方法通过在生成应用窗口的过程中记录窗口结构信息，当有触控操作的落点位置位于记录的窗口结构信息中的文本输入控件时，进入书写模式并置顶设置手写区域，手写区域中的触控操作均识别为书写操作并对应生成书写笔迹，在书写操作结束时通过文字识别的方式在文本输入控件添加文字，完成当前书写操作对应的文字输入，以自动触发手写输入的方式提升了手写输入法的切换速度，减少了切换迟滞，提高了用户的使用体验。
Description
技术领域
本申请实施例涉及电子设备技术领域，尤其涉及墨水屏的文字输入方法、装置、设备以及存储介质。
背景技术
电子墨水屏技术最早可以追溯到1996年，它基于美国麻省理工学院媒体实验室的一项研究，利用电泳技术实现显示，这类屏幕的显示效果十分接近传统纸张，因此也被成为“电子纸”。
电子墨水与印刷使用的墨水很相似，都是用颜料所制，这也是肉眼看到电子墨水屏和传统纸张显示效果相似的原因。电子墨水通常会制成薄膜，由大量微囊组成，这些微囊只有人类头发的直径大小。微囊中的黑白小球是带不同电荷的色素颗粒，初始状态下，色素颗粒悬浮在微囊中，当施加一定方向的电场后，相应的色素颗粒被推到顶部，微囊就会显示不同的颜色，而不同颜色的微囊组成了各种文字和图案。
随着当前搭载电子墨水屏幕的设备增多，越来越多人开始使用这些设备。而又因为电子墨水的技术特性，用户会大量地在这类型的设备上使用手写输入作为主要的文字输入模式。但同样地，由于电子墨水屏的技术特性，对比普通液晶屏幕在显示更新速度上的劣势，用户使用手写输入法进行交互会有比较明显的迟滞感，而大量的手写输入法均基于普通液晶屏幕进行开发，同时亦由于通用性的问题，针对电子墨水屏幕做特殊优化乃至制作专版软件的难度较大，成本也相对较高。而现有墨水屏的实现手写输入，也需要在输入法应用的交互窗口进行操作，主动切换为手写输入法才能实现手写输入，因此切换存在迟滞的问题，影响了用户的使用体验。
发明内容
本申请实施例提供了墨水屏的文字输入方法、装置、设备以及存储介质，解决了墨水屏的手写输入法在手写模式和非手写模式之间需要进行主动切换，切换和切换后的文字输入存在迟滞，影响了用户的使用体验的技术问题。
第一方面，本申请实施例提供了墨水屏的文字输入方法，该文字输入方法，包括：
对在墨水屏显示的应用窗口的窗口结构变化进行实时检测，并记录最新的窗口结构信息；
接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构；
在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域；
将在所述手写区域检测到的触控操作识别为书写操作并对应生成书写笔迹；
在确认所述书写操作的结束时长达到第一预设时长的情况下，对所述书写笔迹进行文字识别，将识别出的文字添加显示到所述文本输入控件并结束显示所述书写笔迹；
在确认所述书写操作的结束时长达到第二预设时长的情况下，取消设置所述手写区域。
其中，所述对在墨水屏显示的应用窗口的窗口结构变化进行实时检测，并记录最新的窗口结构信息，包括：
获取到当前应用发送的界面结构信息时，对所述界面结构信息携带的界面组成控件信息进行类型识别；
在所述类型识别的结果显示存在文本输入控件的情况下，记录最新的文本输入控件的信息，所述文本输入控件的信息包括控件位置信息。
其中，接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构，包括：
接收到触控操作时，根据所述触控操作的落点位置确认是否对应在所述控件位置信息对应的位置范围内；
当所述触控操作的落点位置在所述控件位置信息对应的位置范围，确认所述触控操作的起始窗口结构为文本输入控件。
其中，所述将在所述手写区域检测到的触控操作识别为书写操作并对应生成书写笔迹，包括：
将在所述手写区域检测到的触控操作识别为书写操作，并根据所述手写区域当前的笔迹配置参数生成书写笔迹。
其中，所述将识别出的文字添加显示到所述文本输入控件并结束显示所述书写笔迹，包括：
将识别出的文字以所述文本输入控件当前的配置的文字参数，在所述文本输入控件进行显示，并结束显示所述书写笔迹。
其中，该文字输入方法，还包括：
统计所述手写区域处于设置状态下，所述书写操作的间隔时长，根据所述间隔时长的统计结果对所述第一预设时长进行更新。
其中，所述在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域之前，还包括：
确认所述触控操作为笔尖产生的触控操作。
其中，所述接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构之后，还包括：
在所述起始窗口结构为文本输入控件，且所述触控操作为笔帽产生的触控操作的情况下，在所述文本输入控件根据所述触控操作的接触位置删除文字。
第二方面，本申请实施例还提供了墨水屏的文字输入装置，该文字输入装置，包括：
窗口结构检测单元，用于对在墨水屏显示的应用窗口的窗口结构变化进行实时检测，并记录最新的窗口结构信息；
落点位置确认单元，用于接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构；
手写区域设置单元，用于在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域；
书写笔迹生成单元，用于将在所述手写区域检测到的触控操作识别为书写操作并对应生成书写笔迹；
文字识别添加单元，用于在确认所述书写操作的结束时长达到第一预设时长的情况下，对所述书写笔迹进行文字识别，将识别出的文字添加显示到所述文本输入控件并结束显示所述书写笔迹；
手写区域取消单元，用于在确认所述书写操作的结束时长达到第二预设时长的情况下，取消设置所述手写区域。
其中，所述窗口结构检测单元，包括：
信息获取模块，用于获取到当前应用发送的界面结构信息时，对所述界面结构信息携带的界面组成控件信息进行类型识别；
信息记录模块，用于在所述类型识别的结果显示存在文本输入控件的情况下，记录最新的文本输入控件的信息，所述文本输入控件的信息包括控件位置信息。
其中，所述落点位置确认单元，包括：
范围确认模块，用于接收到触控操作时，根据所述触控操作的落点位置确认是否对应在所述控件位置信息对应的位置范围内；
书写确认模块，用于当所述触控操作的落点位置在所述控件位置信息对应的位置范围，确认所述触控操作的起始窗口结构为文本输入控件。
其中，所述书写笔迹生成单元，包括：
笔迹参数适配模块，用于将在所述手写区域检测到的触控操作识别为书写操作，并根据所述手写区域当前的笔迹配置参数生成书写笔迹。
其中，所述文字识别添加单元，包括：
文字参数适配模块，用于将识别出的文字以所述文本输入控件当前的配置的文字参数，在所述文本输入控件进行显示，并结束显示所述书写笔迹。
其中，所述文字输入装置，还包括：
第一时长更新单元，用于统计所述手写区域处于设置状态下，所述书写操作的间隔时长，根据所述间隔时长的统计结果对所述第一预设时长进行更新。
其中，所述文字输入装置，还包括：
笔尖输入确认单元，用于所述在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域之前，确认所述触控操作为笔尖产生的触控操作。
其中，所述文字输入装置，还包括：
笔帽删除确认单元，用于所述接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构之后，在所述起始窗口结构为文本输入控件，且所述触控操作为笔帽产生的触控操作的情况下，在所述文本输入控件根据所述触控操作的接触位置删除文字。
第三方面，本申请实施例还提供了一种电子设备，所述电子设备包括：
墨水屏；
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述电子设备实现如本申请第一方面任一所述的墨水屏的文字输入方法。
第四方面，本申请实施例还提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行本申请第一方面任一所述的墨水屏的文字输入方法。
本申请实施例提供了墨水屏的文字输入方法、装置、设备以及存储介质，该方法对在墨水屏显示的应用窗口的窗口结构变化进行实时检测，并记录最新的窗口结构信息；接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构；在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域；将在所述手写区域检测到的触控操作识别为书写操作并对应生成书写笔迹；在确认所述书写操作的结束时长达到第一预设时长的情况下，对所述书写笔迹进行文字识别，将识别出的文字添加显示到所述文本输入控件并结束显示所述书写笔迹；在确认所述书写操作的结束时长达到第二预设时长的情况下，取消设置所述手写区域。通过在生成应用窗口的过程中记录窗口结构信息，当有触控操作的落点位置位于记录的窗口结构信息中的文本输入控件时，进入书写模式并置顶设置手写区域，手写区域中的触控操作均识别为书写操作并对应生成书写笔迹，在书写操作结束时通过文字识别的方式在文本输入控件添加文字，完成当前书写操作对应的文字输入，以自动触发手写输入的方式提升了手写输入法的切换速度，减少了切换迟滞，提高了用户的使用体验。
附图说明
图1为本申请实施例提供的一种墨水屏的文字输入方法的流程图；
图2为本申请实施例提供的一种墨水屏的文字输入装置的结构示意图；
图3为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本申请实施例作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本申请实施例，而非对本申请实施例的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本申请实施例相关的部分而非全部结构。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个，也不能理解为指示或暗示相对重要性。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。此外，除非另有明确的规定和限定，术语“设置”、“安装”、“相连”、“连接”，“串联”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本申请中的具体含义。
图1为本申请实施例提供的一种墨水屏的文字输入方法的流程图。该笔记处理方法，用于电子设备，例如用于使用电子墨水屏进行显示的电子设备，即墨水屏设备。如图1所示，该墨水屏的文字输入方法，包括步骤S110-步骤S160：
步骤S110：对在墨水屏显示的应用窗口的窗口结构变化进行实时检测，并记录最新的窗口结构信息。
用户在使用墨水屏设备的过程中，交互对象通常是具体的应用窗口，应该窗口的显示可以是对应的应用运行过程中，将组成应用窗口的多个控件的信息发送到处理器，由处理器根据控件的信息中携带的类型、位置、层叠关系等进行组合得到最终显示的应用窗口，在本申请实施例中，将组成应用窗口的控件定义为应用窗口的界面结构，相应的信息为界面结构信息，在具体进行实时检测过程中，获取到当前应用发送的界面结构信息时，对所述界面结构信息携带的界面组成控件信息进行类型识别；在所述类型识别的结果显示存在文本输入控件的情况下，记录最新的文本输入控件的信息，所述文本输入控件的信息包括控件位置信息。通过这种方式可以快速简洁记录实现手写自动切换所需的信息。
当然，在实际处理过程中，也可以是记录所有的窗口结构信息，在接收到触控操作时，根据落点位置先确认起始窗口结构，然后确认该窗口结构是否为文本输入控件。
步骤S120：接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构。
起始窗口结构是指触控操作的起点在应用窗口中对应的具体的控件，在记录的是文本输入控件的信息的情况下，可以在接收到触控操作时，直接根据所述触控操作的落点位置确认是否对应在所述控件位置信息对应的位置范围内；当所述触控操作的落点位置在所述控件位置信息对应的位置范围，确认所述触控操作的起始窗口结构为文本输入控件。对于应用窗口而言，通常只有数量不多的文本输入控件，仅有文本输入控件的信息的情况下，进行判断时可以更快速确认落点位置是否在文本输入控件的范围内。
步骤S130：在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域。
如果触控操作的落点位置，即触控操作的起始位置在文本输入控件对应的范围内，即可以确认是需要进行文字输入，相应可以直接进入书写模式。书写模式一方面是在墨水屏设置可用于接收手写操作的手写区域，另一方面是切换到提高手写刷新效果的对应刷新模式，具体手写对应刷新模式在现有技术已有实现，本方案对此不展开说明。在应用窗口中，文本输入控件对应的显示区域可能较小，尤其对于手指书写而言，二者的大小比例关系不足以支持完整良好的书写体验，在此可以设置大于文本输入控件的手写区域，例如手写区域可以是墨水屏的大部分或者墨水屏的全部。
另外，为进一步丰富书写体验，可以为墨水屏设备配置书写笔，墨水屏设备可以通过压感、电容、电感、NFC等各种可行的识别方式区分出书写笔的笔尖和笔帽，由此可以区分出书写操作或擦除操作。相应的，所述在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域之前，还包括：确认所述触控操作为笔尖产生的触控操作。另外，在所述起始窗口结构为文本输入控件，且所述触控操作为笔帽产生的触控操作的情况下，在所述文本输入控件根据所述触控操作的接触位置删除文字。
除了对已有文字的删除，如果手写区域处于设置状态，则书写笔的笔帽用于对已有书写笔迹的删除。通过在不同状态下对不同接触部位的检测，可以实现丰富的书写操作体验。
步骤S140：将在所述手写区域检测到的触控操作识别为书写操作并对应生成书写笔迹。
手写区域可以设置笔迹配置参数，例如颜色、粗细等，在将在所述手写区域检测到的触控操作识别为书写操作生成书写笔迹时，根据所述手写区域当前的笔迹配置参数生成书写笔迹。书写笔迹在显示阶段，相应的数据保持缓存，以供后续在缓存基础上进行修改或标记等调整。
步骤S150：在确认所述书写操作的结束时长达到第一预设时长的情况下，对所述书写笔迹进行文字识别，将识别出的文字添加显示到所述文本输入控件并结束显示所述书写笔迹。
书写操作的中断包括笔划间的中断、文字间的中断和结束的中断，不同的中断有对应的间隔时长特点，本申请实施例中，将文字间的中断对应的一般时长定义为第一预设时长，相应在确认所述书写操作的结束时长达到第一预设时长的情况下，对所述书写笔迹进行文字识别，将识别出的文字添加显示到所述文本输入控件并结束显示所述书写笔迹。具体识别方式例如OCR(Optical Character Recognition，光学字符识别)或其他现有的字符识别方式。文本输入控件可以是纯文本输入控件，也可以是富文本输入控件，还可以是受限文本输入控件。如果是纯文本输入控件，则输入默认统一格式的文本。如果是富文本输入控件，则将识别出的文字以所述文本输入控件当前的配置的文字参数，在所述文本输入控件进行显示，并结束显示所述书写笔迹；除了配置的文字参数，还可以根据具体输入的书写笔迹对富文本做进一步配置。举例而言，当多个书写笔迹组成表格的显示效果，则根据既定的表格识别规则可以将该多个书写笔迹识别为标准的表格，并在富文本输入控件中对应添加显示标准的表格；又例如，当多个书写笔迹组成列表形式的文本，则根据既定的列表识别规则可以将该多个书写笔迹识别为列表格式的文本内容，并富文本输入控件中对应添加显示列表格式的文本内容。如果是受限文本输入控件，则识别结果在限制范围之外的文本无法在受限文本输入控件中添加显示，例如仅限于数字输入的受限文本输入控件中不能添加显示字母。具体的添加显示通常不影响文本输入控件中已有文本的显示。
在具体实现过程中，为进一步提高用户体验，在手写输入过程中，还会统计所述手写区域处于设置状态下，所述书写操作的间隔时长，根据所述间隔时长的统计结果对所述第一预设时长进行更新。最终实现用户可以输入较多文字之后再进行文字识别。当然，具体识别过程中也可以判断书写范围，如果手写区域接近写满，则可以进行文字识别和对应显示变化。应当理解，具体显示过程是系统层面将输入信息给到应用之后，由应用提供具体的控件信息重新生成应用窗口进行显示。
步骤S160：在确认所述书写操作的结束时长达到第二预设时长的情况下，取消设置所述手写区域。
当书写操作的结束时长得到第二预设时长(通常比第一预设时长更长)，大体可以确认用户需要结束书写，则取消设置手写区域，直至基于步骤S120再次确认进入书写模式。
另外，在具体书写过程中，可以通过特定的书写笔迹添加高亮、下划线等文字效果，对富文本效果进行编辑不是本申请实施例的描述重点，在此不做展开说明。
上述，在墨水屏显示的应用窗口的窗口结构变化进行实时检测，并记录最新的窗口结构信息；接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构；在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域；将在所述手写区域检测到的触控操作识别为书写操作并对应生成书写笔迹；在确认所述书写操作的结束时长达到第一预设时长的情况下，对所述书写笔迹进行文字识别，将识别出的文字添加显示到所述文本输入控件并结束显示所述书写笔迹；在确认所述书写操作的结束时长达到第二预设时长的情况下，取消设置所述手写区域。通过在生成应用窗口的过程中记录窗口结构信息，当有触控操作的落点位置位于记录的窗口结构信息中的文本输入控件时，进入书写模式并置顶设置手写区域，手写区域中的触控操作均识别为书写操作并对应生成书写笔迹，在书写操作结束时通过文字识别的方式在文本输入控件添加文字，完成当前书写操作对应的文字输入，以自动触发手写输入的方式提升了手写输入法的切换速度，减少了切换迟滞，提高了用户的使用体验。
图2为本发明实施例提供的一种墨水屏的文字输入装置的结构示意图。该墨水屏的文字输入装置用于墨水屏设备，请参考图2，其包括窗口结构检测单元210、落点位置确认单元220、手写区域设置单元230、书写笔迹生成单元240、文字识别添加单元250和手写区域取消单元260。
其中，窗口结构检测单元210，用于对在墨水屏显示的应用窗口的窗口结构变化进行实时检测，并记录最新的窗口结构信息；落点位置确认单元220，用于接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构；手写区域设置单元230，用于在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域；书写笔迹生成单元240，用于将在所述手写区域检测到的触控操作识别为书写操作并对应生成书写笔迹；文字识别添加单元250，用于在确认所述书写操作的结束时长达到第一预设时长的情况下，对所述书写笔迹进行文字识别，将识别出的文字添加显示到所述文本输入控件并结束显示所述书写笔迹；手写区域取消单元260，用于在确认所述书写操作的结束时长达到第二预设时长的情况下，取消设置所述手写区域。
在上述实施例的基础上，所述窗口结构检测单元，包括：
信息获取模块，用于获取到当前应用发送的界面结构信息时，对所述界面结构信息携带的界面组成控件信息进行类型识别；
信息记录模块，用于在所述类型识别的结果显示存在文本输入控件的情况下，记录最新的文本输入控件的信息，所述文本输入控件的信息包括控件位置信息。
在上述实施例的基础上，所述落点位置确认单元，包括：
范围确认模块，用于接收到触控操作时，根据所述触控操作的落点位置确认是否对应在所述控件位置信息对应的位置范围内；
书写确认模块，用于当所述触控操作的落点位置在所述控件位置信息对应的位置范围，确认所述触控操作的起始窗口结构为文本输入控件。
在上述实施例的基础上，所述书写笔迹生成单元，包括：
笔迹参数适配模块，用于将在所述手写区域检测到的触控操作识别为书写操作，并根据所述手写区域当前的笔迹配置参数生成书写笔迹。
其中，所述文字识别添加单元，包括：
文字参数适配模块，用于将识别出的文字以所述文本输入控件当前的配置的文字参数，在所述文本输入控件进行显示，并结束显示所述书写笔迹。
在上述实施例的基础上，所述文字输入装置，还包括：
第一时长更新单元，用于统计所述手写区域处于设置状态下，所述书写操作的间隔时长，根据所述间隔时长的统计结果对所述第一预设时长进行更新。
在上述实施例的基础上，所述文字输入装置，还包括：
笔尖输入确认单元，用于所述在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域之前，确认所述触控操作为笔尖产生的触控操作。
在上述实施例的基础上，所述文字输入装置，还包括：
笔帽删除确认单元，用于所述接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构之后，在所述起始窗口结构为文本输入控件，且所述触控操作为笔帽产生的触控操作的情况下，在所述文本输入控件根据所述触控操作的接触位置删除文字。
本发明实施例提供的墨水屏的文字输入装置包含在电子设备中，且可用于执行上述实施例中提供的墨水屏的文字输入方法，具备相应的功能和有益效果。
值得注意的是，上述墨水屏的文字输入装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
图3为本申请实施例提供的一种电子设备的结构示意图，如图3所示，该电子设备包括处理器310、存储器320、输入装置330、输出装置340以及通信装置350；电子设备中处理器310的数量可以是一个或多个，图3中以一个处理器310为例；电子设备中的处理器310、存储器320、输入装置330、输出装置340以及通信装置350可以通过总线或其他方式连接，图3中以通过总线连接为例。
存储器320作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的墨水屏的文字输入对应的程序指令/模块(例如，墨水屏的文字输入装置中的窗口结构检测单元210、落点位置确认单元220、手写区域设置单元230、书写笔迹生成单元240、文字识别添加单元250和手写区域取消单元260)。处理器310通过运行存储在存储器320中的软件程序、指令以及模块，从而执行电子设备的各种功能应用以及数据处理，即实现上述的墨水屏的文字输入。
存储器320可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据电子设备的使用所创建的数据等。此外，存储器320可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器320可进一步包括相对于处理器310远程设置的存储器，这些远程存储器可以通过网络连接至电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置330可用于接收输入的数字或字符信息，以及产生与电子设备的用户设置以及功能控制有关的键信号输入。本方案中的输出装置340可以为液晶屏，另外还可以有声音输出设备或其它显示设备。
上述电子设备包含墨水屏的文字输入装置，可以用于执行任意墨水屏的文字输入方法，具备相应的功能和有益效果。
本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现本申请任意实施例中提供的墨水屏的文字输入方法中的相关操作，且具备相应的功能和有益效果。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。
因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。
Claims (9)
1.墨水屏的文字输入方法，其特征在于，包括：
对在墨水屏显示的应用窗口的窗口结构变化进行实时检测，并记录最新的窗口结构信息，其中，包括获取到当前应用发送的界面结构信息时，对所述界面结构信息携带的界面组成控件信息进行类型识别，在所述类型识别的结果显示存在文本输入控件的情况下，记录最新的文本输入控件的信息，所述文本输入控件的信息包括控件位置信息；
接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构，其中，包括接收到触控操作时，根据所述触控操作的落点位置确认是否对应在所述控件位置信息对应的位置范围内，当所述触控操作的落点位置在所述控件位置信息对应的位置范围，确认所述触控操作的起始窗口结构为文本输入控件；
在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域；
将在所述手写区域检测到的触控操作识别为书写操作并对应生成书写笔迹；
在确认所述书写操作的结束时长达到第一预设时长的情况下，对所述书写笔迹进行文字识别，将识别出的文字添加显示到所述文本输入控件并结束显示所述书写笔迹；
在确认所述书写操作的结束时长达到第二预设时长的情况下，取消设置所述手写区域。
2.根据权利要求1所述的文字输入方法，其特征在于，所述将在所述手写区域检测到的触控操作识别为书写操作并对应生成书写笔迹，包括：
将在所述手写区域检测到的触控操作识别为书写操作，并根据所述手写区域当前的笔迹配置参数生成书写笔迹。
3.根据权利要求1所述的文字输入方法，其特征在于，所述将识别出的文字添加显示到所述文本输入控件并结束显示所述书写笔迹，包括：
将识别出的文字以所述文本输入控件当前的配置的文字参数，在所述文本输入控件进行显示，并结束显示所述书写笔迹。
4.根据权利要求1所述的文字输入方法，其特征在于，还包括：
统计所述手写区域处于设置状态下，所述书写操作的间隔时长，根据所述间隔时长的统计结果对所述第一预设时长进行更新。
5.根据权利要求1所述的文字输入方法，其特征在于，所述在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域之前，还包括：
确认所述触控操作为笔尖产生的触控操作。
6.根据权利要求1所述的文字输入方法，其特征在于，所述接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构之后，还包括：
在所述起始窗口结构为文本输入控件，且所述触控操作为笔帽产生的触控操作的情况下，在所述文本输入控件根据所述触控操作的接触位置删除文字。
7.墨水屏的文字输入装置，其特征在于，包括：
窗口结构检测单元，用于对在墨水屏显示的应用窗口的窗口结构变化进行实时检测，并记录最新的窗口结构信息，其中，包括获取到当前应用发送的界面结构信息时，对所述界面结构信息携带的界面组成控件信息进行类型识别，在所述类型识别的结果显示存在文本输入控件的情况下，记录最新的文本输入控件的信息，所述文本输入控件的信息包括控件位置信息；
落点位置确认单元，用于接收到触控操作时，根据所述触控操作的落点位置和所述窗口结构信息确认所述触控操作的起始窗口结构，其中，包括接收到触控操作时，根据所述触控操作的落点位置确认是否对应在所述控件位置信息对应的位置范围内，当所述触控操作的落点位置在所述控件位置信息对应的位置范围，确认所述触控操作的起始窗口结构为文本输入控件；
手写区域设置单元，用于在所述起始窗口结构为文本输入控件的情况下，进入书写模式，并在所述墨水屏置顶设置手写区域；
书写笔迹生成单元，用于将在所述手写区域检测到的触控操作识别为书写操作并对应生成书写笔迹；
文字识别添加单元，用于在确认所述书写操作的结束时长达到第一预设时长的情况下，对所述书写笔迹进行文字识别，将识别出的文字添加显示到所述文本输入控件并结束显示所述书写笔迹；
手写区域取消单元，用于在确认所述书写操作的结束时长达到第二预设时长的情况下，取消设置所述手写区域。
8.一种电子设备，其特征在于，所述电子设备包括：
墨水屏；
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述电子设备实现如权利要求1-6任一项所述的墨水屏的文字输入方法。
9.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1-6中任一项所述的墨水屏的文字输入方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311094266.2A CN117148981B (zh) | 2023-08-28 | 2023-08-28 | 墨水屏的文字输入方法、装置、设备以及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311094266.2A CN117148981B (zh) | 2023-08-28 | 2023-08-28 | 墨水屏的文字输入方法、装置、设备以及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN117148981A CN117148981A (zh) | 2023-12-01 |
| CN117148981B true CN117148981B (zh) | 2024-05-24 |
Family
ID=88883634
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311094266.2A Active CN117148981B (zh) | 2023-08-28 | 2023-08-28 | 墨水屏的文字输入方法、装置、设备以及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117148981B (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019233212A1 (zh) * | 2018-06-07 | 2019-12-12 | Oppo广东移动通信有限公司 | 文本识别方法、装置、移动终端以及存储介质 |
| WO2021218203A1 (zh) * | 2020-04-27 | 2021-11-04 | 广州视源电子科技股份有限公司 | 智能交互平板的页面编辑方法、装置、设备和存储介质 |
| CN115048027A (zh) * | 2022-05-06 | 2022-09-13 | 合肥讯飞读写科技有限公司 | 手写输入方法、装置、系统、电子设备和存储介质 |
| WO2023273700A1 (zh) * | 2021-06-29 | 2023-01-05 | 北京字跳网络技术有限公司 | 一种交互窗口显示方法、装置、设备及存储介质 |
| CN115859936A (zh) * | 2021-09-23 | 2023-03-28 | 广州视源电子科技股份有限公司 | 书写内容的重新排版方法、装置、存储介质以及电子设备 |
-
2023
- 2023-08-28 CN CN202311094266.2A patent/CN117148981B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019233212A1 (zh) * | 2018-06-07 | 2019-12-12 | Oppo广东移动通信有限公司 | 文本识别方法、装置、移动终端以及存储介质 |
| WO2021218203A1 (zh) * | 2020-04-27 | 2021-11-04 | 广州视源电子科技股份有限公司 | 智能交互平板的页面编辑方法、装置、设备和存储介质 |
| WO2023273700A1 (zh) * | 2021-06-29 | 2023-01-05 | 北京字跳网络技术有限公司 | 一种交互窗口显示方法、装置、设备及存储介质 |
| CN115859936A (zh) * | 2021-09-23 | 2023-03-28 | 广州视源电子科技股份有限公司 | 书写内容的重新排版方法、装置、存储介质以及电子设备 |
| CN115048027A (zh) * | 2022-05-06 | 2022-09-13 | 合肥讯飞读写科技有限公司 | 手写输入方法、装置、系统、电子设备和存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 藏文联机手写识别的研究与实现;索南尖措;关白;李雷;山发富;;计算机时代;20170715(第07期);全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN117148981A (zh) | 2023-12-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102225192B1 (ko) | 보안 질문들을 생성하고 아이덴티티들을 검증하기 위한 방법 및 장치 | |
| CN102331907B (zh) | 用于具有触摸屏的终端的字符删除方法、装置及终端 | |
| CN106502493A (zh) | 一种分屏显示方法及终端 | |
| CN111752419A (zh) | 智能黑板的交互控制方法、装置、智能黑板及存储介质 | |
| CN103092910A (zh) | 用于使用终端管理阅读的方法和设备 | |
| CN105468282B (zh) | 一种图标编辑的启动方法及终端设备 | |
| CN110941373B (zh) | 智能交互平板的交互方法、装置、终端设备和存储介质 | |
| CN106325663B (zh) | 移动终端及其截屏方法 | |
| CN107305459A (zh) | 语音和多媒体消息的发送方法及装置 | |
| CN105446572A (zh) | 一种用于屏幕显示设备的文字编辑方法及装置 | |
| CN104636029A (zh) | 控件的显示控制方法和系统 | |
| JP2017515241A (ja) | タッチパネルに基づく要素削除方法及び装置 | |
| CN109976599A (zh) | 一种应用程序的未读消息处理方法、装置和设备 | |
| CN110580319A (zh) | 网页标签的显示方法、装置、电子设备及存储介质 | |
| CN104077050A (zh) | 一种终端操作方法 | |
| CN108681431A (zh) | 隐藏空间的控制方法、装置及移动终端 | |
| CN117148981B (zh) | 墨水屏的文字输入方法、装置、设备以及存储介质 | |
| CN106598610A (zh) | 基于网页应用的刷新实现方法及装置 | |
| CN106201399A (zh) | 一种分屏窗口显示方法及终端 | |
| CN103699243B (zh) | 一种利用电磁笔进行快速屏幕截图的方法及装置 | |
| CN101431550A (zh) | 一种记录信息的方法、装置和移动终端 | |
| CN103885787A (zh) | 一种操作指令分层设计方法及装置 | |
| CN103870013A (zh) | 信息处理方法、装置和电子设备 | |
| CN109101297A (zh) | 一种页面的标识方法及装置 | |
| CN111694451A (zh) | 操作数据处理方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |