CN114253435A - 笔迹显示方法、装置、电子设备和存储介质 - Google Patents
笔迹显示方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN114253435A CN114253435A CN202111552758.2A CN202111552758A CN114253435A CN 114253435 A CN114253435 A CN 114253435A CN 202111552758 A CN202111552758 A CN 202111552758A CN 114253435 A CN114253435 A CN 114253435A
- Authority
- CN
- China
- Prior art keywords
- handwriting
- writing
- image
- track
- nib
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 66
- 238000011156 evaluation Methods 0.000 claims description 62
- 238000004590 computer program Methods 0.000 claims description 11
- 230000005484 gravity Effects 0.000 claims description 10
- 238000005457 optimization Methods 0.000 abstract description 4
- 238000004891 communication Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012216 screening Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000003796 beauty Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011897 real-time detection Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
- G06T11/203—Drawing of straight lines or curves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/32—Indexing scheme for image data processing or generation, in general involving image mosaicing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供一种笔迹显示方法、装置、电子设备和存储介质,其中方法包括:基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹;对所述书写轨迹以及书写时采集的笔迹图像中的笔迹进行对准,得到所述书写轨迹对应的目标笔迹图像;对所述目标笔迹图像进行显示。本发明提供的方法、装置、电子设备和存储介质,通过对书写轨迹以及采集到的笔迹图像中的笔迹进行对准,得到目标笔迹图像并对其进行展示,克服了传统方案中单一书写轨迹仅能展示出用户所书写内容的轨迹路线,无法展示真实笔迹特色的问题,目标笔迹图像能够反映真实的书写笔迹,并且保证用户看到的笔迹与自己所写笔迹的方向、大小等也都一致,有助于优化用户体验。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种笔迹显示方法、装置、电子设备和存储介质。
背景技术
传统的书写是直接在纸张上进行书写,以完成信息的记录。随着科技的进步,开始出现利用电子设备同步显示并记录用户在纸张上书写的内容,不仅应用方便,且能实现书写内容的数字化存储。
目前,对书写内容进行显示的方案,多是利用智能笔在设置有点阵码的纸张上进行书写,并利用显示设备实时显示用户在点阵码纸张上的书写内容。然而,上述方案只能显示书写轨迹路线,书写轨迹路线是用曲线连接离散点形成的,与实际的书写笔迹有很大的差距,存在较大失真。
发明内容
本发明提供一种笔迹显示方法、装置、电子设备和存储介质,用以解决现有技术中无法反映真实的书写笔迹的缺陷,实现反映真实的书写笔迹。
本发明提供一种笔迹显示方法,包括:
基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹;
对所述书写轨迹以及书写时采集的笔迹图像中的笔迹进行对准,得到所述书写轨迹对应的目标笔迹图像;
对所述目标笔迹图像进行显示。
根据本发明提供的一种笔迹显示方法,所述对所述目标笔迹图像进行显示,包括:
基于所述书写轨迹对应文字的标准轨迹,对所述书写轨迹进行评价,得到所述书写轨迹的评价结果;
对所述目标笔迹图像,以及所述书写轨迹的评价结果进行显示。
根据本发明提供的一种笔迹显示方法,所述基于所述书写轨迹对应文字的标准轨迹,对所述书写轨迹进行评价,得到所述书写轨迹的评价结果,包括:
将所述书写轨迹与所述标准轨迹进行对比,并基于对比结果,以及评价指标,对所述书写轨迹进行评价,得到所述评价结果;
所述评价指标包括字面大小、间架结构和字形重心中的至少一种。
根据本发明提供的一种笔迹显示方法,所述笔迹图像是基于如下步骤确定的:
获取书写时采集的多帧书写区域图像;
对所述多帧书写区域图像进行拼接,得到拼接图像;
基于所述拼接图像,确定所述笔迹图像。
根据本发明提供的一种笔迹显示方法,所述基于所述拼接图像,确定所述笔迹图像,包括:
对所述拼接图像进行文字识别,得到所述拼接图像的识别结果;
基于所述拼接图像的识别结果,从所述拼接图像中截取所述笔迹图像。
根据本发明提供的一种笔迹显示方法,所述基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹,包括:
从所述笔尖位置点序列中剔除笔尖压力小于等于压力阈值的笔尖位置点,并基于剔除的笔尖位置点将笔尖位置点序列拆分成多个轨迹点序列;
基于各个轨迹点序列,确定所述书写轨迹的各个笔画段。
根据本发明提供的一种笔迹显示方法,所述压力阈值基于用户的历史笔尖位置点序列中各笔尖位置点对应的笔尖压力确定。
本发明还提供一种笔迹显示装置,包括:
轨迹确定单元,用于基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹;
图像确定单元,用于对所述书写轨迹以及书写时采集的笔迹图像中的笔迹进行对准,得到所述书写轨迹对应的目标笔迹图像;
笔迹显示单元,用于对所述目标笔迹图像进行显示。
本发明还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述笔迹显示方法的步骤。
本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述笔迹显示方法的步骤。
本发明提供的笔迹显示方法、装置、电子设备和存储介质,通过笔尖位置点序列中各笔尖位置点对应的笔尖压力确定书写轨迹,对书写轨迹以及采集到的笔迹图像中的笔迹进行对准,得到目标笔迹图像并对其进行展示,克服了传统方案中单一书写轨迹仅能展示出用户所书写内容的轨迹路线,无法展示真实笔迹特色的问题,目标笔迹图像能够反映真实的书写笔迹,并且保证用户看到的笔迹与自己所写笔迹的方向、大小等也都一致,有助于优化用户体验。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明提供的笔迹显示方法的流程示意图之一;
图2是本发明提供的笔迹显示方法的流程示意图之二;
图3是本发明提供的笔迹图像的确定方法的流程示意图之一;
图4是本发明提供的笔迹图像的确定方法的流程示意图之二;
图5是本发明提供的书写轨迹的确定方法的流程示意图;
图6是本发明提供的笔迹显示装置的结构示意图;
图7是本发明提供的电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
目前,对书写内容进行显示的方案,多是利用智能笔在设置有点阵码的纸张上进行书写,并利用显示设备实时显示用户在点阵码纸张上的书写内容。然而,上述方案只能显示书写轨迹路线,且所有书写轨迹的线条粗细相同,并不能显示真实书写字迹的粗细、笔锋等字迹特点,无法显示出书法的优美,应用十分受限,并且,书写轨迹路线是用曲线连接离散点形成的,与实际的书写笔迹有很大的差距,存在较大失真。
针对上述问题,本发明提供一种笔迹显示方法。图1是本发明提供的笔迹显示方法的流程示意图之一,如图1所示,该方法包括:
步骤110,基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹。
具体地,用户可以应用书写用笔在书写介质上进行书写,可以理解的是,书写用笔不同,所对应的书写介质也不同,例如,书写用笔为点阵笔,则书写介质可以为设置有点阵码的纸张,又例如,书写用笔为触屏笔,则书写介质可以为触摸屏。另外,书写用笔应具备书写检测功能,并且能够在书写状态下通过笔上设置的图像采集设备采集笔尖位置点,通过笔尖处设置的压力传感设备采集笔尖处承受的压力值。
当用户在进行书写时,可以连续采集笔尖位置点,在此基础上,按照各笔尖位置点被采集的先后顺序即书写顺序排列各个笔尖位置点,即可得到笔尖位置点序列。此处,笔尖位置点为书写过程中笔尖所在的位置点,可以是笔尖在书写介质上划过的位置点,也可以是笔尖在书写介质上停留的位置点,还可以是笔尖抬起时所在的位置点,本发明实施例对此不作具体限定。
在得到笔尖位置点序列之后,即可根据笔尖位置点序列中各笔尖位置点对应的笔尖压力生成书写轨迹,例如,可以根据各笔尖位置点对应的笔尖压力对各笔尖位置点进行筛选过滤,再将剩余的笔尖位置点以平滑曲线进行连接,从而得到书写轨迹,在绘制书写轨迹的过程中,还可以进一步根据剩余笔尖位置点的笔尖压力,确定书写轨迹中对应点处的轨迹粗细、轨迹深浅,本发明实施例对此也不作具体限定。
此处,笔尖压力即在书写过程中,笔尖在各笔尖位置点处时承受的压力值,笔尖压力可以通过设置在书写用笔上的压力传感设备实现,例如可以直接在书写用笔的笔尖弹性连接压力传感设备,当书写用笔的笔尖在书写时,笔尖与书写介质之间的作用力会直接反馈到压力传感设备,进而可以利用压力传感设备实时检测笔尖压力。
步骤120,对书写轨迹以及书写时采集的笔迹图像中的笔迹进行对准,得到书写轨迹对应的目标笔迹图像;
步骤130,对目标笔迹图像进行显示。
具体地,考虑到勾连出来的书写轨迹仍然可能与实际的书写笔迹有一定差距,存在失真,因此,本发明实施例当用户在进行书写时,笔上设置的图像采集设备除了采集笔尖位置点之外,还可以采集笔迹图像,以期通过实际图像显示体现用户书写的真实笔迹,避免失真问题,优化用户体验。此处,笔迹图像为包含用户完整书写笔迹的图像,图像采集设备可以设置于书写用笔的笔尖处,也可以设置于书写用笔上的其他位置,本发明实施例对此不作具体限定。
基于此,又考虑到由于拍摄角度、距离等因素的影响,获取到的笔迹图像中的笔迹相比于真实笔迹可能存在倾斜、尺寸不匹配等问题,影响用户体验,因此,本发明实施例在获取到笔迹图像之后,可以对步骤110中得到的书写轨迹和笔迹图像中的笔迹进行对准,以使笔迹图像中的笔迹线条与书写轨迹大致重合,在对准过程中,可以对笔迹图像进行缩放、旋转等调整操作,从而得到书写轨迹对应的目标笔迹图像。在此基础上,即可对该目标笔迹图像进行显示,从而可以保证用户看到与自己所写笔迹方向、大小完全一致的目标笔迹图像,进一步提升用户体验。
此处,对目标笔迹图像进行显示的方式有多种,例如,通过预置的显示设备进行显示、通过与书写介质连接的终端设备进行显示等,可以仅显示目标笔迹图像,也可以在显示目标笔迹图像的同时,根据书写轨迹中各点的笔尖压力,对目标笔迹图像中的对应点标注笔尖压力,还可以在显示目标笔迹图像的同时,对目标笔迹图像中的笔迹标注书写评价结果,本发明实施例对此也不作具体限定。
需要说明的是,对目标笔迹图像进行显示,使得用户看到的是所书写笔迹的实际图像,而不是用曲线连接的离散点,从而能体现用户书写时的笔锋、轻重等真实笔迹特色,这种使用体验是单一书写轨迹无法表现的。目标笔迹图像能够反映真实的书写笔迹,不存在失真的问题,并且,目标笔迹图像是经过对书写轨迹以及笔迹图像中的笔迹进行对准得到的,能够保证用户看到的笔迹与自己所写笔迹的方向、大小等完全一致,进一步提升了用户体验。
本发明实施例提供的方法,通过笔尖位置点序列中各笔尖位置点对应的笔尖压力确定书写轨迹,对书写轨迹以及采集到的笔迹图像中的笔迹进行对准,得到目标笔迹图像并对其进行展示,克服了传统方案中单一书写轨迹仅能展示出用户所书写内容的轨迹路线,无法展示真实笔迹特色的问题,目标笔迹图像能够反映真实的书写笔迹,并且保证用户看到的笔迹与自己所写笔迹的方向、大小等也都一致,有助于优化用户体验。
基于上述实施例,图2是本发明提供的笔迹显示方法的流程示意图之二,如图2所示,步骤130包括:
步骤131,基于书写轨迹对应文字的标准轨迹,对书写轨迹进行评价,得到书写轨迹的评价结果;
步骤132,对目标笔迹图像,以及书写轨迹的评价结果进行显示。
具体地,在得到书写轨迹之后,可以根据书写轨迹对应文字的标准轨迹,从笔顺、笔画、笔锋、结构等评价维度对书写轨迹进行评价,从而得到书写轨迹的评价结果,随即,在对目标笔迹图像进行显示的同时,还可以对书写轨迹的评价结果进行显示,此处的显示形式例如可以是文本、图像等,从而可以方便用户了解自身的书写情况,并且能够根据评价结果对自身的书写习惯进行调整。
进一步地,标准轨迹的确定方式具体可以是先采用OCR(Optical CharacterRecognition,光学字符识别)技术得到书写轨迹所表征的文字,然后根据该文字在数据库中进行搜索,得到该文字的标准轨迹。为了进一步方便用户查看自身的书写情况,提升用户体验,可以直接将书写轨迹的评价结果显示在目标笔迹图像上,例如,用户书写的文字为“八”,可以根据书写轨迹的评价结果,直接对目标笔迹图像中的“八”进行标注,例如标注笔画“丿”太长了、笔画“”的角度不对。
考虑到现有的书写轨迹缺乏真实笔迹中的笔锋信息,进而会影响以书写轨迹进行笔锋维度上的评价时的准确性,针对这一问题,在绘制书写轨迹的过程中,可以根据笔尖位置点的笔尖压力以及速度信息,确定书写轨迹中对应点处的轨迹粗细、轨迹深浅,从而使得书写轨迹可以体现真实笔迹中的笔锋信息,进而保证以书写轨迹进行笔锋维度上的评价时的准确性。此处,速度信息可以根据笔尖位置点的停留时长进行确定。
需要说明的是,考虑到目标笔迹图像是静态的,不包含笔迹上各个点的时间信息,无法从笔画顺序、书写速度等评价维度直接对目标笔迹图像中笔迹进行评价,而书写轨迹上各个笔尖位置点在采集时是可以记录时间戳信息的,因此,相比于以目标笔迹图像进行书写评价的方式,以书写轨迹进行书写评价能够具有更全面的评价维度,所得到的评价结果也会更加准确,并且,由于传递图像的数据量比传递轨迹的数据量更大,以书写轨迹进行书写评价的方式也会具有更高的实时性。
本发明实施例提供的方法,基于勾连得到的书写轨迹对用户书写的文字进行评价,从而保留了传统的书写轨迹线评价的准确性以及易于实现的特点,对目标笔迹图像,以及书写轨迹的评价结果进行同时显示,不仅让用户看到所书写文字的真实笔迹,还能方便用户根据评价结果对自身的书写习惯进行调整。
基于上述任一实施例,步骤131包括:
将书写轨迹与标准轨迹进行对比,并基于对比结果,以及评价指标,对书写轨迹进行评价,得到评价结果;
评价指标包括字面大小、间架结构和字形重心中的至少一种。
具体地,可以通过如下方式得到书写轨迹的评价结果:将步骤110中得到的书写轨迹与对应文字的标准轨迹进行对比,并基于对比结果,以及评价指标,对书写轨迹进行评价,从而得到书写轨迹的评价结果。考虑到字面大小、间架结构和字形重心与书写文字的美观性有较强的关联性,对此,本发明实施例中评价指标可以包括字面大小、间架结构和字形重心中的至少一种评价维度,其中,字面大小即文字整体的大小,间架结构即笔画搭配、排列、组合成字的形式和规律,字形重心即文字形态上的重心,书写轨迹对应文字的字面大小、间架结构和字形重心具体可以通过文字识别技术得到。
进一步地,评价指标还可以包括字面位置、笔画数量、笔画顺序、笔画长短、书写速度等评价维度,具体可以根据用户需求任意选取一个或多个评价维度进行评价,也可以根据书写轨迹的复杂度确定选取的评价维度的数量,例如,用户书写的文字为“八”,所对应书写轨迹的复杂度较低,则可以选取较少的评价维度对书写轨迹进行评价。
其中,书写速度可以根据书写轨迹的书写时间确定,在书写过程中可以记录所采集到的每个笔尖位置点的时间,由此确定书写轨迹中第一轨迹点的时间与最后一个轨迹点的时间,再根据两者之间的时间间隔得到书写时间。
评价结果的确定方式具体可以是针对用户选取的每一个评价维度,计算书写轨迹与标准轨迹的差值百分比,并换算成100分制,作为每个评价维度的得分,再对这些评价维度的得分计算平均值,作为书写轨迹的评价结果。
基于上述任一实施例,图3是本发明提供的笔迹图像的确定方法的流程示意图之一,如图3所示,笔迹图像是基于如下步骤确定的:
步骤310,获取书写时采集的多帧书写区域图像;
步骤320,对多帧书写区域图像进行拼接,得到拼接图像;
步骤330,基于拼接图像,确定笔迹图像。
具体地,考虑到笔头的遮挡等干扰,无法在一次采集的图像中获取完整的书写汉字的图像,针对这一问题,本发明实施例当用户在书写介质上的书写区域进行书写时,通过笔上设置的图像采集设备对书写区域进行多次图像采集,得到多帧书写区域图像,在此基础上,用于处理笔迹图像的处理单元即可获取多帧书写区域图像,并对多帧书写区域图像进行拼接,从而得到包含用户完整书写笔迹的图像即拼接图像,随即,即可根据拼接图像确定包含用户完整书写笔迹的笔迹图像。
此处,对多帧书写区域图像进行拼接的方式具体可以是按照采集的时间顺序对各帧书写区域图像进行两两拼接,直到完成所有书写区域图像的拼接,例如,两次连续采集获取的书写区域图像为P1和P2,可以先比较P1与P2,分离出P2中与P1不重合的部分,再将P2中与P1不重合的部分拼合到P1中,也可以先将P1和P2重合的部分进行配准,再对重合的部分进行融合,从而得到P1和P2拼接后的图像,依此方式连续进行拼接,最终即可得到包含完整笔迹的拼接图像。
笔迹图像的确定方式具体可以是直接将拼接图像作为笔迹图像,也可以是对拼接图像进行去噪、裁剪等处理,从而得到笔迹图像,本发明实施例对此不作具体限定。
基于上述任一实施例,图4是本发明提供的笔迹图像的确定方法的流程示意图之二,如图4所示,步骤330包括:
步骤331,对拼接图像进行文字识别,得到拼接图像的识别结果;
步骤332,基于拼接图像的识别结果,从拼接图像中截取笔迹图像。
具体地,在得到拼接图像之后,可以对拼接图像进行文字识别,得到拼接图像的识别结果,此处的识别结果可以包括拼接图像中文字的类型、位置以及该文字是否完整等信息;随即,根据拼接图像的识别结果,从拼接图像中截取文字部分的图像,即可得到笔迹图像,从而可以避免无关信息的显示,进一步提升用户体验。
进一步地,如果拼接图像的识别结果表征拼接图像中文字不完整,则可以控制图像采集设备继续采集书写区域图像,将获取到的新的书写区域图像与原有的拼接图像进行拼接,得到新的拼接图像,再对新的拼接图像进行文字识别,直至识别结果表征文字完整为止,即可停止书写区域图像的采集。
基于上述任一实施例,图5是本发明提供的书写轨迹的确定方法的流程示意图,如图5所示,步骤110包括:
步骤111,从笔尖位置点序列中剔除笔尖压力小于等于压力阈值的笔尖位置点,并基于剔除的笔尖位置点将笔尖位置点序列拆分成多个轨迹点序列;
步骤112,基于各个轨迹点序列,确定书写轨迹的各个笔画段。
具体地,考虑到用户在书写汉字的过程中,笔画和笔画之间可能存在类似抬起笔、笔放在纸上轻轻停留等操作,因此采集所得的笔尖位置点序列中,可能存在部分笔尖位置点并不在用户的真实书写轨迹上,而按照时间顺序,这些笔尖位置点很有可能是某一笔画上的笔尖位置点与下一笔画上的笔尖位置点之间的无效点。
对此,本发明实施例中应用笔尖位置点序列中各笔尖位置点的笔尖压力,对笔尖位置点序列中的笔尖位置点进行筛选过滤,从而滤除其中不属于真实书写轨迹的笔尖位置点。具体可以将笔尖位置点序列中各笔尖位置点的笔尖压力,与预先设定好的压力阈值进行比较,如果存在笔尖压力小于或等于压力阈值的笔尖位置点即无效点,则将此类无效点从笔尖位置点序列中剔除,从而得到能够反映真实书写轨迹的剔除后的笔尖位置点序列。
随即,可以根据剔除的无效点将该笔尖位置点序列进行拆分,从而得到多个轨迹点序列,可以理解的是,每个轨迹点序列中只包含笔尖压力大于压力阈值的笔尖位置点即轨迹点,且每个轨迹点序列能反映书写轨迹的每个笔画,在此基础上,对于每个轨迹点序列,可以将该轨迹点序列中的各轨迹点以平滑曲线进行连接,从而得到书写轨迹的各个笔画段,例如,用户书写的是汉字“林”,书写时采集到的笔尖位置点序列为{P1、P2、P3、P4、P5、P6......},其中,P2、P3、P4、P6为轨迹点,P1、P5为无效点,则可以将P1和P5进行剔除,并根据P1和P5将剔除后的笔尖位置点序列拆分成{P2、P3、P4}和{P6......},P2、P3、P4可以组成笔画“一”对应的一个轨迹点序列,P6则属于下个笔画“丨”对应的轨迹点序列。
此处,用于筛选笔尖位置点的压力阈值,可以是人为设定的阈值,也可以是根据用户在历史手写过程中产生并记录的笔尖压力分析得到的,本发明实施例对此不作具体限定。
基于上述任一实施例,压力阈值基于用户的历史笔尖位置点序列中各笔尖位置点对应的笔尖压力确定。
具体地,由于不同用户在应用书写用笔进行书写时的笔力大多不同,检测所得的笔尖压力也会存在区别,因此用于实现笔尖位置点筛选和轨迹点序列构建的压力阈值,也可以是根据不同用户的历史书写习惯个性化定制的。
进一步地,针对任一用户,可以获取该用户此前书写时采集到的历史笔尖位置点序列中各笔尖位置点的笔尖压力,在此基础上,基于历史笔尖位置点序列中各笔尖位置点的笔尖压力,可以通过聚类方法将笔尖压力按照有效书写和无效书写进行分类,从而得到针对该用户而言区分有效书写和无效书写的压力阈值。
本发明实施例提供的方法,针对用户历史书写习惯个性化定制压力阈值,进一步保证了书写轨迹的各个笔画段构建的真实性。
基于上述任一实施例,本发明实施例提供了一种书写评价显示和书写笔迹显示方法,该方法的具体流程如下:
S1、采集书写介质上书写区域的图像,识别笔尖位置点的坐标信息,记录笔尖位置点对应的笔尖压力,记录笔尖位置点对应的时间:
1)通过安装于笔头的摄像头类型的图像采集设备,持续采集书写区域的图像;
2)书写介质上预置有点阵编码,从采集到的图像中,能够识别出笔尖位置点的点阵编码,并解析为坐标信息,当笔尖抬起时,也可以从采集到的图像中识别笔尖位置点;
3)通过与笔尖弹性连接的压力传感设备,获取每个笔尖位置点对应的笔尖压力;
4)记录获取到每个笔尖位置点的时间。
S2、根据笔尖压力勾连轨迹点形成书写轨迹,并对书写轨迹进行评价:
首先,根据采集到的笔尖位置点中,将笔尖压力大于压力阈值的笔尖位置点作为轨迹点,并得到各个轨迹点序列,用平滑曲线连接各个轨迹点序列,形成书写轨迹的各个笔画。随即,将书写轨迹与对应文字的标准轨迹进行对比,并基于对比结果,以及字面大小、字面位置、笔画数量、笔画顺序、笔画长短、间架结构、字形重心、书写速度等维度的评价指标,对书写轨迹进行评价,从而得到书写轨迹的评价结果。
S3、拼接采集到的书写区域图像:
按照采集的时间顺序对各帧书写区域图像进行两两拼接,直到完成所有书写区域图像的拼接,从而得到拼接图像,并根据拼接图像确定笔迹图像。
S4、对笔迹图像进行缩放与旋转等操作,使其中的线条与S2中勾连出来的书写轨迹尽量重合,从而得到目标笔迹图像。
S5、将书写轨迹的评价结果显示于目标笔迹图像之上。
本发明实施例提供的方法,基于书写轨迹对书写的文字进行评价,保留了传统的书写轨迹线评价的准确性以及易于实现的特点,同时对目标笔迹图像进行显示,使得用户看到的是所书写笔迹的实际图像,而不是用曲线连接的离散点。实际图像能体现用户书写时的笔锋、轻重等,这种使用体验是单一书写轨迹无法表现的。
下面对本发明提供的笔迹显示装置进行描述,下文描述的笔迹显示装置与上文描述的笔迹显示方法可相互对应参照。
基于上述任一实施例,本发明提供一种笔迹显示装置。图6是本发明提供的笔迹显示装置的结构示意图,如图6所示,该装置包括:
轨迹确定单元610,用于基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹;
图像确定单元620,用于对所述书写轨迹以及书写时采集的笔迹图像中的笔迹进行对准,得到所述书写轨迹对应的目标笔迹图像;
笔迹显示单元630,用于对所述目标笔迹图像进行显示。
本发明实施例提供的装置,通过笔尖位置点序列中各笔尖位置点对应的笔尖压力确定书写轨迹,对书写轨迹以及采集到的笔迹图像中的笔迹进行对准,得到目标笔迹图像并对其进行展示,克服了传统方案中单一书写轨迹仅能展示出用户所书写内容的轨迹路线,无法展示真实笔迹特色的问题,目标笔迹图像能够反映真实的书写笔迹,并且保证用户看到的笔迹与自己所写笔迹的方向、大小等也都一致,有助于优化用户体验。
基于上述任一实施例,笔迹显示单元630用于:
基于所述书写轨迹对应文字的标准轨迹,对所述书写轨迹进行评价,得到所述书写轨迹的评价结果;
对所述目标笔迹图像,以及所述书写轨迹的评价结果进行显示。
基于上述任一实施例,所述基于所述书写轨迹对应文字的标准轨迹,对所述书写轨迹进行评价,得到所述书写轨迹的评价结果,包括:
将所述书写轨迹与所述标准轨迹进行对比,并基于对比结果,以及评价指标,对所述书写轨迹进行评价,得到所述评价结果;
所述评价指标包括字面大小、间架结构和字形重心中的至少一种。
基于上述任一实施例,所述笔迹图像是基于如下步骤确定的:
获取书写时采集的多帧书写区域图像;
对所述多帧书写区域图像进行拼接,得到拼接图像;
基于所述拼接图像,确定所述笔迹图像。
基于上述任一实施例,所述基于所述拼接图像,确定所述笔迹图像,包括:
对所述拼接图像进行文字识别,得到所述拼接图像的识别结果;
基于所述拼接图像的识别结果,从所述拼接图像中截取所述笔迹图像。
基于上述任一实施例,轨迹确定单元610用于:
从所述笔尖位置点序列中剔除笔尖压力小于等于压力阈值的笔尖位置点,并基于剔除的笔尖位置点将笔尖位置点序列拆分成多个轨迹点序列;
基于各个轨迹点序列,确定所述书写轨迹的各个笔画段。
基于上述任一实施例,所述压力阈值基于用户的历史笔尖位置点序列中各笔尖位置点对应的笔尖压力确定。
图7示例了一种电子设备的实体结构示意图,如图7所示,该电子设备可以包括:处理器(processor)710、通信接口(Communications Interface)720、存储器(memory)730和通信总线740,其中,处理器710,通信接口720,存储器730通过通信总线740完成相互间的通信。处理器710可以调用存储器730中的逻辑指令,以执行笔迹显示方法,该方法包括:基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹;对所述书写轨迹以及书写时采集的笔迹图像中的笔迹进行对准,得到所述书写轨迹对应的目标笔迹图像;对所述目标笔迹图像进行显示。
此外,上述的存储器730中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种计算机程序产品,所述计算机程序产品包括计算机程序,计算机程序可存储在非暂态计算机可读存储介质上,所述计算机程序被处理器执行时,计算机能够执行上述各方法所提供的笔迹显示方法,该方法包括:基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹;对所述书写轨迹以及书写时采集的笔迹图像中的笔迹进行对准,得到所述书写轨迹对应的目标笔迹图像;对所述目标笔迹图像进行显示。
又一方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各方法提供的笔迹显示方法,该方法包括:基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹;对所述书写轨迹以及书写时采集的笔迹图像中的笔迹进行对准,得到所述书写轨迹对应的目标笔迹图像;对所述目标笔迹图像进行显示。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种笔迹显示方法,其特征在于,包括:
基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹;
对所述书写轨迹以及书写时采集的笔迹图像中的笔迹进行对准,得到所述书写轨迹对应的目标笔迹图像;
对所述目标笔迹图像进行显示。
2.根据权利要求1所述的笔迹显示方法,其特征在于,所述对所述目标笔迹图像进行显示,包括:
基于所述书写轨迹对应文字的标准轨迹,对所述书写轨迹进行评价,得到所述书写轨迹的评价结果;
对所述目标笔迹图像,以及所述书写轨迹的评价结果进行显示。
3.根据权利要求2所述的笔迹显示方法,其特征在于,所述基于所述书写轨迹对应文字的标准轨迹,对所述书写轨迹进行评价,得到所述书写轨迹的评价结果,包括:
将所述书写轨迹与所述标准轨迹进行对比,并基于对比结果,以及评价指标,对所述书写轨迹进行评价,得到所述评价结果;
所述评价指标包括字面大小、间架结构和字形重心中的至少一种。
4.根据权利要求1所述的笔迹显示方法,其特征在于,所述笔迹图像是基于如下步骤确定的:
获取书写时采集的多帧书写区域图像;
对所述多帧书写区域图像进行拼接,得到拼接图像;
基于所述拼接图像,确定所述笔迹图像。
5.根据权利要求4所述的笔迹显示方法,其特征在于,所述基于所述拼接图像,确定所述笔迹图像,包括:
对所述拼接图像进行文字识别,得到所述拼接图像的识别结果;
基于所述拼接图像的识别结果,从所述拼接图像中截取所述笔迹图像。
6.根据权利要求1至5中任一项所述的笔迹显示方法,其特征在于,所述基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹,包括:
从所述笔尖位置点序列中剔除笔尖压力小于等于压力阈值的笔尖位置点,并基于剔除的笔尖位置点将笔尖位置点序列拆分成多个轨迹点序列;
基于各个轨迹点序列,确定所述书写轨迹的各个笔画段。
7.根据权利要求6所述的笔迹显示方法,其特征在于,所述压力阈值基于用户的历史笔尖位置点序列中各笔尖位置点对应的笔尖压力确定。
8.一种笔迹显示装置,其特征在于,包括:
轨迹确定单元,用于基于笔尖位置点序列中各笔尖位置点对应的笔尖压力,确定书写轨迹;
图像确定单元,用于对所述书写轨迹以及书写时采集的笔迹图像中的笔迹进行对准,得到所述书写轨迹对应的目标笔迹图像;
笔迹显示单元,用于对所述目标笔迹图像进行显示。
9.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至7任一项所述笔迹显示方法的步骤。
10.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述笔迹显示方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111552758.2A CN114253435A (zh) | 2021-12-17 | 2021-12-17 | 笔迹显示方法、装置、电子设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111552758.2A CN114253435A (zh) | 2021-12-17 | 2021-12-17 | 笔迹显示方法、装置、电子设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114253435A true CN114253435A (zh) | 2022-03-29 |
Family
ID=80795573
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111552758.2A Pending CN114253435A (zh) | 2021-12-17 | 2021-12-17 | 笔迹显示方法、装置、电子设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114253435A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115083230A (zh) * | 2022-07-15 | 2022-09-20 | 北京博学广阅教育科技有限公司 | 辅助学习的方法及装置 |
CN115291791A (zh) * | 2022-08-17 | 2022-11-04 | 维沃移动通信有限公司 | 文本识别方法、装置、电子设备及存储介质 |
CN115565188A (zh) * | 2022-04-30 | 2023-01-03 | 珠海凯芯微电子科技有限公司 | 一种点写笔及应用点写笔的书写轨迹记录方法及系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106406731A (zh) * | 2016-09-06 | 2017-02-15 | 东莞优闪电子科技有限公司 | 原笔迹书写同屏显示方法及系统 |
CN107240330A (zh) * | 2017-06-27 | 2017-10-10 | 北京新国人智慧科技股份有限公司 | 练字笔迹显示方法及系统、智能练字终端及智能练字系统 |
CN110978866A (zh) * | 2019-12-30 | 2020-04-10 | 长江师范学院 | 一种智能笔的书写评价方法 |
CN112686134A (zh) * | 2020-12-29 | 2021-04-20 | 科大讯飞股份有限公司 | 手写识别方法、装置、电子设备和存储介质 |
CN113408522A (zh) * | 2020-03-16 | 2021-09-17 | 北京字节跳动网络技术有限公司 | 文本处理方法、装置、终端及存储介质 |
-
2021
- 2021-12-17 CN CN202111552758.2A patent/CN114253435A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106406731A (zh) * | 2016-09-06 | 2017-02-15 | 东莞优闪电子科技有限公司 | 原笔迹书写同屏显示方法及系统 |
CN107240330A (zh) * | 2017-06-27 | 2017-10-10 | 北京新国人智慧科技股份有限公司 | 练字笔迹显示方法及系统、智能练字终端及智能练字系统 |
CN110978866A (zh) * | 2019-12-30 | 2020-04-10 | 长江师范学院 | 一种智能笔的书写评价方法 |
CN113408522A (zh) * | 2020-03-16 | 2021-09-17 | 北京字节跳动网络技术有限公司 | 文本处理方法、装置、终端及存储介质 |
CN112686134A (zh) * | 2020-12-29 | 2021-04-20 | 科大讯飞股份有限公司 | 手写识别方法、装置、电子设备和存储介质 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115565188A (zh) * | 2022-04-30 | 2023-01-03 | 珠海凯芯微电子科技有限公司 | 一种点写笔及应用点写笔的书写轨迹记录方法及系统 |
CN115565188B (zh) * | 2022-04-30 | 2024-03-12 | 珠海凯芯微电子科技有限公司 | 一种点写笔及应用点写笔的书写轨迹记录方法及系统 |
CN115083230A (zh) * | 2022-07-15 | 2022-09-20 | 北京博学广阅教育科技有限公司 | 辅助学习的方法及装置 |
CN115291791A (zh) * | 2022-08-17 | 2022-11-04 | 维沃移动通信有限公司 | 文本识别方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114253435A (zh) | 笔迹显示方法、装置、电子设备和存储介质 | |
US7885464B2 (en) | Apparatus, method, and program for handwriting recognition | |
US6600834B1 (en) | Handwriting information processing system with character segmentation user interface | |
CN102903136B (zh) | 一种手写笔迹电子化方法和系统 | |
US20150278167A1 (en) | Automatic measure of visual similarity between fonts | |
CN106874909A (zh) | 一种图像字符的识别方法及其装置 | |
CN108805076A (zh) | 环境影响评估报告书表格文字的提取方法及系统 | |
CN111523455A (zh) | 汉字书写的评价方法 | |
CN105046730A (zh) | 应用于毛笔的书写笔迹呈现方法和装置 | |
CN105787522A (zh) | 基于手写笔迹的书写态度评价方法及系统 | |
CN112836542B (zh) | 基于点阵码的练字方法、系统及计算机可读介质 | |
KR20080087793A (ko) | 스크립트 유형을 구별하는 장치 및 컴퓨터 판독가능 매체 | |
CN112686134A (zh) | 手写识别方法、装置、电子设备和存储介质 | |
CN100371945C (zh) | 一种计算机辅助书法作品真伪鉴别方法 | |
CN112668541A (zh) | 一种基于点阵笔的智能听写系统及其方法 | |
CN111753120A (zh) | 一种搜题的方法、装置、电子设备和存储介质 | |
CN114419636A (zh) | 文本识别方法、装置、设备以及存储介质 | |
CN104951811A (zh) | 应用于毛笔书写的行笔路线识别方法和装置 | |
CN108921006A (zh) | 手写签名图像真伪鉴别模型建立方法及真伪鉴别方法 | |
CN114120333A (zh) | 一种基于深度学习的自然场景古汉字识别方法及系统 | |
CN111414728B (zh) | 数值数据展示方法、装置、计算机设备和存储介质 | |
CN104978581A (zh) | 应用于毛笔的书写轨迹采样方法和装置 | |
Al Hamad et al. | Improved linear density technique for segmentation in Arabic handwritten text recognition | |
CN111310428A (zh) | 一种纸质表格笔迹自动录入传输系统及方法 | |
CN116703748A (zh) | 书法作品评价方法、装置、电子设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |