CN108804003B - 智能交互设备的手写识别方法、装置及智能交互设备 - Google Patents
智能交互设备的手写识别方法、装置及智能交互设备 Download PDFInfo
- Publication number
- CN108804003B CN108804003B CN201810385901.5A CN201810385901A CN108804003B CN 108804003 B CN108804003 B CN 108804003B CN 201810385901 A CN201810385901 A CN 201810385901A CN 108804003 B CN108804003 B CN 108804003B
- Authority
- CN
- China
- Prior art keywords
- handwriting
- writing
- displaying
- recognition
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 230000003993 interaction Effects 0.000 title claims abstract description 27
- 230000002093 peripheral effect Effects 0.000 claims description 22
- 230000002452 interceptive effect Effects 0.000 description 44
- 238000010586 diagram Methods 0.000 description 18
- 238000004364 calculation method Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000008034 disappearance Effects 0.000 description 3
- 238000003780 insertion Methods 0.000 description 3
- 230000037431 insertion Effects 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 238000005034 decoration Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000005674 electromagnetic induction Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000004907 flux Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012856 packing Methods 0.000 description 2
- 230000006698 induction Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种智能交互设备的手写识别方法、装置及智能交互设备。其中,该方法包括:在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为书写界面的任意位置;在相对于第一书写笔迹的预设位置显示识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字;在第一区域显示第一书写笔迹的候选字;在第二区域显示第一书写笔迹对应的正体字;在书写界面中插入正体字。本发明解决了现有技术中的手写识别方案将书写框或识别结果框显示于固定位置,用户不能进行随意书写的技术问题。
Description
技术领域
本发明涉及计算机领域,具体而言,涉及一种智能交互设备的手写识别方法、装置及智能交互设备。
背景技术
在现有的电子白板软件中,将手写框或识别框固定于白板中的预定位置,但实质上由于其书写自由度高,其书写范围的逻辑上是无限制的。因此将书写框固定或将识别框固定的方案对用户的书写造成了一定的限制。
针对现有技术中的手写识别方案将书写框或识别结果框显示于固定位置,用户不能进行随意书写的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种智能交互设备的手写识别方法、装置及智能交互设备,以至少解决现有技术中的手写识别方案将书写框或识别结果框显示于固定位置,用户不能进行随意书写的技术问题。
根据本发明实施例的一个方面,提供了一种智能交互设备的手写识别方法,包括:在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为书写界面的任意位置;在相对于第一书写笔迹的预设位置显示识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字;在第一区域显示第一书写笔迹的候选字;在第二区域显示第一书写笔迹对应的正体字;在书写界面中插入正体字。
进一步地,在第二区域显示正体字后经过第一预设时间,第一书写笔迹消失。
进一步地,检测在第二区域显示正体字后的第二预设时间内,是否接收到第二书写笔迹,其中,第二预设时间大于第一预设时间;如果未检测到第二书写笔迹,则进入在书写界面中插入正体字的步骤;如果检测到第二书写笔迹,则复用第一书写笔迹的识别框,显示第二书写笔迹的候选字。
进一步地,如果检测到第二书写笔迹,且第二书写笔迹满足预设条件,则复用第一书写笔迹的识别框,显示第二书写笔迹的候选字,其中,预设条件包括:第二书写笔迹的位置与第一书写笔迹的位置高度差在第一差值范围内,且第二书写笔迹的位置与第一书写笔迹的位置宽度差在第二差值范围内。
进一步地,如果第二书写笔迹在书写界面中的高度高于第一书写笔迹在书写界面的高度,则将识别框在的位置调整至相对于第二书写笔迹的预设位置。
进一步地,在显示候选字之后检测选择信号和第三书写笔迹;如果在第三预设时间之内检测到第三书写笔迹,或在第四预设时间之内未检测到选择信号,则确定第一区域中的第一个候选字为第一书写笔迹对应的正体字,并在第二区域的尾部显示正体字,其中,第四预设时间大于第三预设时间;如果检测到选择信号,则确定选择信号所指定的候选字为第一书写笔迹对应的正体字,并在第二区域的尾部显示正体字。
进一步地,获取第一书写笔迹的位置参数;根据第一书写笔迹的位置参数确定第一书写笔迹的识别框的位置;在识别框的位置显示第一书写笔迹的识别框。
进一步地,在书写界面中插入的正体字的大小与第一书写笔迹的大小呈正比例关系。
进一步地,获取第一书写笔迹的尺寸参数;根据尺寸参数确定正体字的字号;在书写界面中按照字号插入正体字。
进一步地,对满足如下条件的第一书写笔迹进行一次识别:连续的写笔迹;或不连续但书写笔迹之间的时间间隔小于第五预设时间的多个书写笔迹。
进一步地,在书写界面中的指定位置插入正体字,其中,指定位置为:第一书写笔迹所处的位置;或识别框中的第二区域所处的位置。
根据本发明实施例的另一方面,还提供了一种智能交互设备的手写识别方法,包括:根据在白板应用的书写界面中的任意位置接收的书写信号,生成第一书写笔迹;在相对于第一书写笔迹的预设位置设置识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字;对第一书写笔迹进行识别,得到第一书写笔迹的候选字;在候选字中确定第一书写笔迹对应的正体字;将正体字插入书写界面。
根据本发明实施例的另一方面,还提供了一种智能交互设备的手写识别装置,包括:第一显示模块,用于在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为书写界面的任意位置;第二显示模块,用于在相对于第一书写笔迹的预设位置显示识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字;第三显示模块,用于在第一区域显示第一书写笔迹的候选字;第四显示模块,用于在第二区域显示第一书写笔迹对应的正体字;插入模块,用于在书写界面中插入正体字。
根据本发明实施例的另一方面,还提供了一种智能交互设备的手写识别装置,包括:生成模块,用于根据在白板应用的书写界面中的任意位置接收的书写信号,生成第一书写笔迹;设置模块,用于在相对于第一书写笔迹的预设位置设置识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字;识别模块,用于对第一书写笔迹进行识别,得到第一书写笔迹的候选字;确定模块,用于在候选字中确定第一书写笔迹对应的正体字;插入模块,用于将正体字插入书写界面。
根据本发明实施例的另一方面,还提供了一种存储介质,其特征在于,存储介质包括存储的程序,其中,在程序运行时控制存储介质所在设备执行如下步骤:在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为书写界面的任意位置;在相对于第一书写笔迹的预设位置显示识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字;在第一区域显示第一书写笔迹的候选字;在第二区域显示第一书写笔迹对应的正体字;在书写界面中插入正体字。
根据本发明实施例的另一方面,还提供了一种处理器,其特征在于,处理器用于运行程序,其中,程序运行时执行如下步骤:在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为书写界面的任意位置;在相对于第一书写笔迹的预设位置显示识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字;在第一区域显示第一书写笔迹的候选字;在第二区域显示第一书写笔迹对应的正体字;在书写界面中插入正体字。
根据本发明实施例的另一方面,还提供了一种智能交互设备,包括上述的智能交互设备的手写识别装置。
在本发明实施例中,在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为书写界面的任意位置,在相对于第一书写笔迹的预设位置显示识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字,在第一区域显示对第一书写笔迹的候选字,在第二区域显示第一书写笔迹对应的正体字,在书写界面中插入正体字。上述方案为手写识别提供了自由度更高的书写界面以及对应的识别框,从而使用户能够随意书写,解决了现有技术中的手写识别方案将书写框或识别结果框显示于固定位置,用户不能进行随意书写的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种智能交互设备的手写识别方法的流程图;
图2是根据本发明实施例的一种可选的识别框的示意图;
图3是根据本发明实施例的一种书写笔迹消失的示意图;
图4是根据本发明实施例的一种识别框的示意图;
图5是根据本发明实施例的一种复用识别框的示意图;
图6为本发明实施例2提供的一种智能交互设备的手写识别方法的流程图;
图7是根据本发明实施例的一种智能交互设备的手写识别方法的示意图;
图8是根据本发明实施例的一种智能交互设备的手写识别装置的示意图;以及
图9是根据本发明实施例的一种智能交互设备的手写识别装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例1
根据本发明实施例,提供了一种智能交互设备的手写识别方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种智能交互设备的手写识别方法的流程图。
本实施例提供的智能交互设备的手写识别方法可以书写显示设备执行,该书写显示设备可以通过软件和/或硬件的方式实现,该书写显示设备可以是两个或多个物理实体构成,也可以是一个物理实体构成。该书写显示设备可以是电脑,手机,平板,投影仪或智能交互平板等。在下述实施例中,以智能交互平板为书写显示设备为例进行描述,其中,智能交互平板可以是通过触控技术对显示在显示平板上的内容进行操控和实现人机交互操作的一体化设备,集成了投影机、电子白板、幕布、音箱、电视机以及视频会议终端等一种或多种功能。
在下述实施例中,智能交互平板至少与一个外部装置建立数据连接。其中,外部装置包括但不限于:手机、笔记本电脑、USB闪存盘、平板电脑及台式电脑等。外部装置与智能交互平板的数据连接的通信方式实施例中不作限定,可以通过USB连接、互联网、局域网、蓝牙、Wi-fi或紫峰协议(Zigbee)等通信方式。
进一步的,智能交互平板具有触摸屏,触摸屏可以是能够实现单一触摸功能的触摸屏,例如:电容触摸屏、电磁触摸屏,也可以是能够同时实现电容感应、电磁感应和红外感应的触摸屏。当用户通过手指触摸智能交互平板的触摸屏时,触摸位置的电容参数发生变化,触摸框根据电容的变化,确定手指在触摸屏的触摸位置;或者,手指在接触触摸框时,阻挡了红外的接收端接收红外信号,触摸框根据被阻挡的红外信号确定手指的触摸位置;再或者,当用户使用电磁笔解除接触触摸屏时,电磁笔与触摸屏接触的位置发生电磁感应,从而产生磁通量的变化,触摸框的电磁屏根据磁通量的变化确定电磁笔接触触摸屏的位置。
可选的,智能交互平板中安装有白板应用软件,该白板应用软件可以预先安装在上述智能交互平板中,也可以是在智能交互平板启动时,从第三方设备或服务器进行下载并安装使用的书写类应用软件。其中,第三方设备在实施例中不作限定。具体的,白板应用软件用于获取用户的手指或电磁笔在书写界面中的操作,根据用户的操作获取多个控制点,并根据控制点生成用户的书写笔迹。其中,智能交互平板还将生成的书写笔迹显示在显示屏上,显示屏所显示的书写笔迹的颜色、粗细等参数可以是白板应用软件默认的,也可以是用户在书写前通过控制控件选择的。
如图1所示,该方法包括如下步骤:
步骤S11,在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为书写界面的任意位置。
具体的,上述方案可以应用于智能交互设备,智能交互设备具备白板应用,可以通过手指或电磁笔在白板应用上进行书写。白板应用的书写界面即为白板应用提供的窗口,该窗口可以平铺于智能交互设备的显示区域。
在一种可选的实施例中,用户启动智能交互设备中的白板应用,白板应用提供平铺于显示界面的书写界面,用户在书写界面的任意位置书写,智能交互设备根据用户书写时生成的触摸信号,生成对应的书写笔迹。
需要注意到是,接收第一书写笔迹的位置为书写界面的任意位置,即该方案在进行手写识别时,不限制固定的书写位置,从而为用户提供了高自由度的书写区域,使得用户可以在书写界面上随意书写。
步骤S13,在相对于第一书写笔迹的预设位置显示识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字。
具体的,相对于第一书写笔迹的预设位置可以为,以第一书写笔迹的位置坐标作为原点来确定的位置,其中,第一书写笔迹的位置可以通过第一书写笔迹的外围矩形框左上角的坐标来描述。
在一种可选的实施例中,预设位置的坐标为(x,y),第一书写笔迹的外围矩形框左上角在书写界面中的坐标为(x0,y0),则识别框在书写界面中的坐标为(x+x0,y+y0)。
值得注意的是,在书写笔迹的高低存在参差不齐的情况下,书写笔迹的外围矩形框左上角坐标的高度为书写笔迹的最高点,也即识别框会根据笔迹最高点确定其位置。
上述候选字为对书写笔迹进行识别得到的与书写笔迹较相似的字,例如,用户在白板上书写“我”,则候选字可以为“我、找、戒、戎”等,正体字为最终确定的第一书写笔迹对应的字,在上一个示例中,正体字即为“我”。
在上述方案中,识别框的大小、高度等参数可以是默认的,也可以是自适应的。以识别框大小自适应为例,第一书写笔迹的识别结果中包括候选字集合,识别框第一区域用于显示候选字,则候选字集合中的字越多,第一区域的宽度越大,识别框的第二区域用于显示正体字,则每次识别的字越多,第二区域的宽度越大。
还需要说明的是,识别框的第一区域和第二区域可以通过分割线分割,或通过不同颜色的底纹,不同的字体等方式进行区别,以使用户能够清楚的区别第一区域和第二区域。
在一种可选的实施例中,图2是根据本发明实施例的一种可选的识别框的示意图,结合图2所示,用户在白板上书写了“好”字,在该书写笔迹的上方显示识别框,识别框的左侧为用于显示正体字的第二区域,右侧为用于显示候选字的第一区域。
在识别的过程中,可以对满足如下条件的第一书写笔迹进行一次识别:连续的书写笔迹;或不连续但书写笔迹之间的时间间隔小于第五预设时间的多个书写笔迹。
在上述方案中,把所有点集打包进行一次识别的书写笔迹可以是一个书写笔迹,也可以是多个字的书写笔迹,下面对多种情况分别进行说明。
(1)连续的书写笔迹。
在上述方案中,将连续的书写笔迹打包发送至预识别队列进行识别。
(2)不连续但书写笔迹的时间间隔小于第五预设时间的书写轨迹。
具体的,书写笔迹的时间可以是,后一个书写笔迹的起始时间(down点的时间)和前一个书写标记的终止时间(up点的时间)。
以图2为例,笔迹“好”的“女”和“子”两部分不相连,这两个笔迹在时间上为前后相邻,“女”的抬笔时刻与“子”的落笔时刻为这两个笔迹的时间间隔。
满足上述条件(2)的不连续的笔迹可以分为多种情况,可以为一个字的多个部分,也可以为多个字,只要满足条件(2),触摸框就会将书写笔迹一起打包发送至预识别队列,一起进行识别。
步骤S13具体包括:获取第一书写笔迹的位置参数;根据第一书写笔迹的位置参数确定第一书写笔迹的识别框的位置;在识别框的位置显示第一书写笔迹的识别框。
具体的,上述第一书写笔迹的位置参数可以为书写笔迹左上角的坐标。在一种可选的实施例中,可以确定书写笔迹对应的最小的外围矩形框,并将外围矩形框的左上角坐标或右上角坐标作为书写笔迹的位置参数。
识别框设置于相对于第一书写笔迹的预设位置,因此可以根据第一书写笔迹的位置参数来确定识别框的位置。
步骤S15,在第一区域显示对第一书写笔迹的候选字。
在上述步骤中,对书写笔迹进行识别得到的候选字可以为候选字集合,仍在如图2所示的实施例中,右侧为显示候选字的第一区域,在第一区域显示了对“好”这个书写笔迹的识别结果,包括“女子、女、子、孑”。
步骤S17,在第二区域显示第一书写笔迹对应的正体字。
在上述步骤S17中,用户可以对第一区域的候选字进行选择,得到第一书写笔迹对应的正体字,白板应用在接收到选择信号后,将选择的正体字显示于第二区域。在图2的实施例中,用户可以选择候选字中的“好”,正体的“好”则显示在第二区域。
当将正体字显示于第二区域时,说明已经确定了该书写笔迹对应的正体字,因此在将正体字显示于第二区域之后,可以清除识别框的第一区域,如图3所示,已经确定该笔迹对应的正体字为“书能”,则可以不再显示第一区域。
具体的,步骤S17包括:在显示候选字之后检测选择信号和第三书写笔迹;如果在第三预设时间之内检测到第三书写笔迹,或在第四预设时间之内未检测到选择信号,则确定第一区域中的第一个候选字为第一书写笔迹对应的正体字,并在第二区域的尾部显示正体字,其中,第四预设时间大于第三预设时间;如果检测到选择信号,则确定选择信号所指定的候选字为第一书写笔迹对应的正体字,并在第二区域的尾部显示正体字。
具体的,选择信号用于在候选字中选择第一书写笔迹对应的正体字,上述第三预设时间可以为300ms,第四预设时间可以为500ms。
在上述步骤中,在第三预设时间之内检测到第三书写轨迹,即为在第三预设时间内用户重新书写;第四预设时间之内未检测到选择信号,即为第四预设时间之内用户未对第一区域的候选字进行选择,当满足上述任意一个条件时,将第一区域中的第一个候选字作为第一书写笔迹对应的正体字,显示于第二区域。
在一种可选的实施例中,以第三预设时间为300ms,第四预设时间为500ms为例,在生成识别框之后,用户在300ms之内重新落笔进行书写,此时系统默认第一区域的第一个候选字为第一书写笔迹对应的正体字。
在另一种可选的实施例中,仍以第三预设时间为300ms,第四预设时间可以为500ms为例,在生成识别框之后,用户在300ms之内未重新落笔书写,在500ms内也没有对候选字进行选择,则此时系统仍默认第一区域的第一个候选字为第一书写笔迹对应的正体字。
在又一种可选的实施例中,仍以第三预设时间为300ms,第四预设时间可以为500ms为例,在生成识别框之后,用户在300ms之内未重新落笔书写,但在500ms内对候选字进行了选择,则此时系统将用户选择的候选字作为第一书写笔迹对应的正体字。
步骤S19,在书写界面中插入正体字。
具体的,在识别框的第二区域显示的正体字为第一书写笔迹对应的正体字,将该正体字插入书写界面,可以为将正体字显示于书写界面的指定位置。
作为一种可选的实施例,在书写界面中插入的正体字的大小与第一书写笔迹的大小呈正比例关系,即第一书写笔迹越大,插入书写界面的第一书写笔迹对应的正体字越大,从而使得用户能够通过书写的大小,来控制插入书写界面的正体字的大小。
在一种可选的实施例中,插入的正体字的大小与第一书写笔迹的大小之比为1:1,也即插入的正体字的大小与第一书写笔迹的大小相同。
步骤S19具体包括:获取第一书写笔迹的尺寸参数;根据尺寸参数确定正体字的字号;在书写界面中按照字号插入正体字。
具体的,书写笔迹的尺寸参数可以通过书写笔迹的外围矩形的宽和高描述,根据尺寸参数确正体字的字号可以为,在正体字的多个字号中,查找字号的尺寸参数与书写笔迹的尺寸参数最接近的字号,将该字号作为正体字的字号。
在一种可选的实施例中,第一书写笔迹的尺寸参数为(a1,b1),其中,a1表示第一书写笔迹的宽,b1表示第一书写笔迹的高。正体字的三号字对应的尺寸参数为(a2,b3),二号字对应的尺寸参数为(a3,b3)。可以计算和并将其中计算结果较小的尺寸参数对应的字号作为正体字的字号。
需要说明是,上述二号字和三号字仅用于示例,实际使用中需要使用多种字号进行计算。
步骤S19还可以为在所述书写界面中的指定位置插入所述正体字,其中,所述指定位置为:第一书写笔迹所处的位置;或识别框中的第二区域所处的位置。
在一种可选的实施例中,在第一书写笔迹消失之后,正体字插入的位置为第一书写笔迹所处的位置,以图3为例,在该示例中“书能”为已经确定的正体字,“书”字逐渐消失,在“能”字也逐渐消失之后,正体字“书能”插入白板中笔迹“书能”所在的位置。笔迹“书能”所在的位置可以根据笔迹“书能”的外围矩形框的其中一个角的位置坐标来描述。
在另一种可选的实施例中,正体字插入的位置为识别框中的第二区域所处的位置。以图3为例,在该示例中“书能”为已经确定的正体字,“书”字逐渐消失,在“能”字也逐渐消失之后,正体字“书能”以当前所在的位置插入白板,用于表示正体字“书能”还处于书别框第二区域的矩形框消失。需要说明的是,当指定位置为识别框中的第二区域所处的位置时,用户看到的可能只是正体字外的识别框消失,但正体字已经从识别框层插入到白板的界面中。
由上可知,本申请上述实施例在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为书写界面的任意位置,在相对于第一书写笔迹的预设位置显示识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字,在第一区域显示对第一书写笔迹的候选字,在第二区域显示第一书写笔迹对应的正体字,在书写界面中插入正体字。上述方案为手写识别提供了自由度更高的书写界面以及对应的识别框,从而使用户能够随意书写,解决了现有技术中的手写识别方案将书写框或识别结果框显示于固定位置,用户不能进行随意书写的技术问题。
实施例2
图6为本发明实施例2提供的一种智能交互设备的手写识别方法的流程图。本实施例是在上述实施例1的基础上进行具体化,该方法包括:
步骤S61,在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为书写界面的任意位置。
步骤S63,在相对于第一书写笔迹的预设位置显示识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字。
步骤S65,在第一区域显示第一书写笔迹的候选字。
步骤S67,在第二区域显示第一书写笔迹对应的正体字。
步骤S69,在第二区域显示正体字后经过第一预设时间,第一书写笔迹消失。
具体的,上述第一预设时间可以为200ms,第一书写笔迹消失的方式可以为显示的透明度逐渐增加,直至完全消失。
图3是根据本发明实施例的一种书写笔迹消失的示意图,在一种可选的实施例中,结合图3所示,在确定了书写笔迹“书”对应的正体字之后经过200ms,“书”的书写笔迹逐渐透明,直至消失,“能”的正体字在确定后还未经过200ms,因此还未消失。
第二区域显示正体字的时刻即为从候选字中确定正体字的时刻,从这一时刻开始计时,当计时到达第一预设时间时,书写笔迹开始逐渐消失。
在上述方案中,在获取到第一书写笔迹对应的正体字后,使第一书写笔迹逐渐消失,从而达到了使用第一书写笔迹对应的正体字来替换第一书写笔迹的目的,正体字在书写界面中插入的位置可以为第一书写笔迹消失的位置,也可以为其他指定位置。
步骤S611,检测在第二区域显示正体字后的第二预设时间内,是否接收到第二书写笔迹,其中,第二预设时间大于第一预设时间;
具体的,上述第二预设时间可以为1s。
步骤S613,如果未检测到第二书写笔迹,则进入在书写界面中插入正体字的步骤。
在一种可选的实施例中,当用户某次确定识别结果后,即从候选字中确定了第一书写笔迹对应的正体字后,1s之内没有再次落笔,则将识别框第二区域的正体字插入白板的书写区域中,如果1s之后再次落笔时,白板会为再次落笔的书写笔迹生成新的识别框。
步骤S615,如果检测到第二书写笔迹,则复用第一书写笔迹的识别框,显示第二书写笔迹的候选字。
在一种可选的实施例中,当用户某次确定识别结果,在1s之内再次落笔,则会使再次落笔的第二书写笔迹复用第一书写笔迹的识别框。具体的,当确定了第一书写笔迹的识别结果后,第一书写笔迹的识别框的第一区域消失,第二区域具有第一书写笔迹对应的正体字,1s之内用户再次落笔生成第二书写笔迹,则在第一书写笔迹的识别框的第二区域后重新显示第一区域以显示第二书写笔迹的候选字,并且在从第二书写笔迹的候选字中确定了第二书写笔迹对应的正体字之后,将第二书写笔迹对应的正体字显示在识别框的第二区域的尾部,从而实现了对第一书写笔迹的识别框的复用。
在上述步骤S515中,如果检测到第二书写笔迹,且第二书写笔迹满足预设条件,则复用第一书写笔迹的识别框,显示第二书写笔迹的候选字,其中,预设条件包括:第二书写笔迹的位置与第一书写笔迹的位置高度差在第一差值范围内,且第二书写笔迹的位置与第一书写笔迹的位置宽度差在第二差值范围内。
上述方案对复用同一个识别框的书写笔迹进行了限定,也即,在第二区域显示正体字后的第二预设时间内,如果检测到第二书写笔迹,且第二书写笔迹位置与第一书写笔迹的位置高度差在第一差值范围内,第二书写笔迹的位置与第一书写笔迹的位置宽度差在第二差值范围内,才允许第二书写笔迹复用第一书写笔迹的识别框。
在一种可选的实施例中,如果第二书写笔迹的位置与第一书写笔迹的位置的高度差较大,则认为用户不想将第二书写笔迹对应的正体字和第一书写笔迹对应的正体字显示在一行,因此会重新为第二书写笔迹生成新的识别框;如果第二书写笔迹的位置与第一书写笔迹的位置的宽度差较大,则认为用户不想将第二书写笔迹对应的正体字和第一书写笔迹对应的正体字显示的较近,因此也会重新为第二书写笔迹生成新的识别框。
作为一种可选的实施例,复用所述第一书写笔迹的识别框,包括:如果所述第二书写笔迹在所述书写界面中的高度高于所述第一书写笔迹在所述书写界面的高度,则将所述识别框在的位置调整至相对于所述第二书写笔迹的所述预设位置。
图4是根据本发明实施例的一种识别框的示意图,图5是根据本发明实施例的一种复用识别框的示意图,结合图4所示,第一个较小的“书”字的识别框生成在该“书”字之上,再结合图5所示,第二个较大的“书”字的高度高于第一个较小的“书”字在书写界面中的位置,因此根据第二个较大的“书”字调整识别框的位置,将识别框的位置向上移动。
上述实施例用于对书写界面中的非首个书写笔迹的识别框进行判定,如果非首个书写笔迹与上一个书写笔迹确定正体字的时间之差超过第二预设时间,则为非首个书写笔迹生成新的识别框,如果非首个书写笔迹与上一个书写笔迹确定正体字的时间之差未超过第二预设时间,则使非首个书写笔迹复用上一个书写笔迹的识别框。
步骤S617,在书写界面中插入正体字。
实施例3
根据本发明实施例,提供了一种智能交互设备的手写识别方法实施例,图7是根据本发明实施例的一种智能交互设备的手写识别方法的示意图,该方法包括如下步骤:
步骤S71,根据在白板应用的书写界面中的任意位置接收的书写信号,生成第一书写笔迹。
具体的,上述方案可以应用于智能交互设备,智能交互设备具备白板应用,可以通过手指或电磁笔在白板应用上进行书写。白板应用的书写界面即为白板应用提供的窗口,该窗口可以平铺于智能交互平板的显示区域。
步骤S73,在相对于第一书写笔迹的预设位置设置识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字。
具体的,相对于第一书写笔迹的预设位置可以为,以第一书写笔迹的位置坐标作为原点来确定的位置,其中,第一书写笔迹的位置可以通过第一书写笔迹的外围矩形框左上角点的坐标来描述。
在一种可选的实施例中,智能交互设备获取第一书写轨迹的位置参数,并根据第一书写轨迹的位置参数,确定识别框的位置参数,并根据识别框的位置参数显示识别框。
步骤S75,对第一书写笔迹进行识别,得到第一书写笔迹的候选字。
具体的,第一书写笔迹的候选字为与第一书写笔迹较为接近的字,可以为多个,智能交互设备通过识别模块对第一书写笔迹进行识别,得到对应的候选字。
步骤S77,在候选字中确定第一书写笔迹对应的正体字。
在上述步骤S77中,在候选字中确定第一书写笔迹对应的正体字可以是用户从候选字中选择的,也可以是在用户未选择的情况下,默认确定的候选字中的第一个字。
步骤S79,将正体字插入书写界面。
经过上述步骤S79,完成了书写笔迹的识别。
实施例4
根据本发明实施例,提供了一种智能交互设备的手写识别装置实施例,图8是根据本发明实施例的一种智能交互设备的手写识别装置的示意图,该装置包括:
第一显示模块80,用于在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为书写界面的任意位置。
具体的,上述方案可以应用于智能交互设备,智能交互设备具备白板应用,可以通过手指或电磁笔在白板应用上进行书写。白板应用的书写界面即为白板应用提供的窗口,该窗口可以平铺于智能交互设备的显示区域。
在一种可选的实施例中,用户启动智能交互设备中的白板应用,白板应用提供平铺于显示界面的书写界面,用户在书写界面的任意位置书写,智能交互设备根据用户书写时生成的触摸信号,生成对应的书写笔迹。
需要注意到是,接收第一书写笔迹的位置为书写界面的任意位置,即该方案在进行手写识别时,不限制固定的书写位置,从而为用户提供了高自由度的书写区域,使得用户可以在书写界面上随意书写。
第二显示模块82,用于在相对于第一书写笔迹的预设位置显示识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字。
具体的,相对于第一书写笔迹的预设位置可以为,以第一书写笔迹的位置坐标作为原点来确定的位置,其中,第一书写笔迹的位置可以通过第一书写笔迹的外围矩形框左上角的坐标来描述。
在一种可选的实施例中,预设位置的坐标为(x,y),第一书写笔迹的外围矩形框左上角在书写界面中的坐标为(x0,y0),则识别框在书写界面中的坐标为(x+x0,y+y0)。
值得注意的是,在书写笔迹的高低存在参差不齐的情况下,书写笔迹的外围矩形框左上角坐标的高度为书写笔迹的最高点,也即识别框会根据笔迹最高点确定其位置。
上述候选字为对书写笔迹进行识别得到的与书写笔迹较相似的字,例如,用户在白板上书写“我”,则候选字可以为“我、找、戒、戎”等,正体字为最终确定的第一书写笔迹对应的字,在上一个示例中,正体字即为“我”。
在上述方案中,识别框的大小、高度等参数可以是默认的,也可以是自适应的。以识别框大小自适应为例,第一书写笔迹的识别结果中包括候选字集合,识别框第一区域用于显示候选字,则候选字集合中的字越多,第一区域的宽度越大,识别框的第二区域用于显示正体字,则每次识别的字越多,第二区域的宽度越大。
还需要说明的是,识别框的第一区域和第二区域可以通过分割线分割,或通过不同颜色的底纹,不同的字体等方式进行区别,以使用户能够清楚的区别第一区域和第二区域。
在一种可选的实施例中,图2是根据本发明实施例的一种可选的识别框的示意图,结合图2所示,用户在白板上书写了“好”字,在该书写笔迹的上方显示识别框,识别框的左侧为用于显示正体字的第二区域,右侧为用于显示候选字的第一区域。
第三显示模块84,用于在第一区域显示第一书写笔迹的候选字。
在上述方案中,对书写笔迹进行识别得到的候选字可以为候选字集合,仍在如图2所示的实施例中,右侧为显示候选字的第一区域,在第一区域显示了对“好”这个书写笔迹的识别结果,包括“女子、女、子、孑”。
第四显示模块86,用于在第二区域显示第一书写笔迹对应的正体字。
在上述方案中,用户可以对第一区域的候选字进行选择,得到第一书写笔迹对应的正体字,白板应用在接收到选择信号后,将选择的正体字显示于第二区域。在图2的实施例中,用户可以选择候选字中的“好”,正体的“好”则显示在第二区域。
当将正体字显示于第二区域时,说明已经确定了该书写笔迹对应的正体字,因此在将正体字显示于第二区域之后,可以清除识别框的第一区域,如图3所示,已经确定该笔迹对应的正体字为“书能”,则可以不再显示第一区域。
插入模块88,用于在书写界面中插入正体字。
具体的,在识别框的第二区域显示的正体字为第一书写笔迹对应的正体字,将该正体字插入书写界面,可以为将正体字显示于书写界面的指定位置。
作为一种可选的实施例,在书写界面中插入的正体字的大小与第一书写笔迹的大小呈正比例关系,即第一书写笔迹越大,插入书写界面的第一书写笔迹对应的正体字越大,从而使得用户能够通过书写的大小,来控制插入书写界面的正体字的大小。
在一种可选的实施例中,插入的正体字的大小与第一书写笔迹的大小之比为1:1,也即插入的正体字的大小与第一书写笔迹的大小相同。
作为一种可选的实施例,上述装置还包括:消失模块,用于在书写界面中插入正体字之前,在第二区域显示正体字后经过第一预设时间,第一书写笔迹消失。
具体的,上述第一预设时间可以为200ms,第一书写笔迹消失的方式可以为显示的透明度逐渐增加,直至完全消失。
图3是根据本发明实施例的一种书写笔迹消失的示意图,在一种可选的实施例中,结合图3所示,在确定了书写笔迹“书”对应的正体字之后经过200ms,“书”的书写笔迹逐渐透明,直至消失,“能”的正体字在确定后还未经过200ms,因此还未消失。
第二区域显示正体字的时刻即为从候选字中确定正体字的时刻,从这一时刻开始计时,当计时到达第一预设时间时,书写笔迹开始逐渐消失。
在上述方案中,在获取到第一书写笔迹对应的正体字后,使第一书写笔迹逐渐消失,从而达到了使用第一书写笔迹对应的正体字来替换第一书写笔迹的目的,正体字在书写界面中插入的位置可以为第一书写笔迹消失的位置,也可以为其他指定位置。
作为一种可选的实施例,在书写界面中插入正体字之前,上述装置还包括:
检测模块,用于检测在第二区域显示正体字后的第二预设时间内,是否接收到第二书写笔迹,其中,第二预设时间大于第一预设时间。
具体的,上述第二预设时间可以为1s。
进入模块,用于如果未检测到第二书写笔迹,则进入在书写界面中插入正体字的步骤。
在一种可选的实施例中,当用户某次确定识别结果后,即从候选字中确定了第一书写笔迹对应的正体字后,1s之内没有再次落笔,则将识别框第二区域的正体字插入白板的书写区域中,如果1s之后再次落笔时,白板会为再次落笔的书写笔迹生成新的识别框。
复用模块,用于如果检测到第二书写笔迹,则复用第一书写笔迹的识别框,显示第二书写笔迹的候选字。
在一种可选的实施例中,当用户某次确定识别结果,在1s之内再次落笔,则会使再次落笔的第二书写笔迹复用第一书写笔迹的识别框。具体的,当确定了第一书写笔迹的识别结果后,第一书写笔迹的识别框的第一区域消失,第二区域具有第一书写笔迹对应的正体字,1s之内用户再次落笔生成第二书写笔迹,则在第一书写笔迹的识别框的第二区域后重新显示第一区域以显示第二书写笔迹的候选字,并且在从第二书写笔迹的候选字中确定了第二书写笔迹对应的正体字之后,将第二书写笔迹对应的正体字显示在识别框的第二区域的尾部,从而实现了对第一书写笔迹的识别框的复用。
作为一种可选的实施例,如果检测到第二书写笔迹,且第二书写笔迹满足预设条件,则复用第一书写笔迹的识别框,显示第二书写笔迹的候选字,其中,预设条件包括:第二书写笔迹的位置与第一书写笔迹的位置高度差在第一差值范围内,且第二书写笔迹的位置与第一书写笔迹的位置宽度差在第二差值范围内。
上述方案对复用同一个识别框的书写笔迹进行了限定,也即,在第二区域显示正体字后的第二预设时间内,如果检测到第二书写笔迹,且第二书写笔迹位置与第一书写笔迹的位置高度差在第一差值范围内,第二书写笔迹的位置与第一书写笔迹的位置宽度差在第二差值范围内,才允许第二书写笔迹复用第一书写笔迹的识别框。
在一种可选的实施例中,如果第二书写笔迹的位置与第一书写笔迹的位置的高度差较大,则认为用户不想将第二书写笔迹对应的正体字和第一书写笔迹对应的正体字显示在一行,因此会重新为第二书写笔迹生成新的识别框;如果第二书写笔迹的位置与第一书写笔迹的位置的宽度差较大,则认为用户不想将第二书写笔迹对应的正体字和第一书写笔迹对应的正体字显示的较近,因此也会重新为第二书写笔迹生成新的识别框。
作为一种可选的实施例,复用模块包括:调整子模块,用于如果第二书写笔迹在书写界面中的高度高于第一书写笔迹在书写界面的高度,则将识别框所在的位置调整至相对于第二书写笔迹的预设位置。
图4是根据本发明实施例的一种识别框的示意图,图5是根据本发明实施例的一种复用识别框的示意图,结合图4所示,第一个较小的“书”字的识别框生成在该“书”字之上,再结合图5所示,第二个较大的“书”字的高度高于第一个较小的“书”字在书写界面中的位置,因此根据第二个较大的“书”字调整识别框的位置,将识别框的位置向上移动。
上述实施例用于对书写界面中的非首个书写笔迹的识别框进行判定,如果非首个书写笔迹与上一个书写笔迹确定正体字的时间之差超过第二预设时间,则为非首个书写笔迹生成新的识别框,如果非首个书写笔迹与上一个书写笔迹确定正体字的时间之差未超过第二预设时间,则使非首个书写笔迹复用上一个书写笔迹的识别框。
作为一种可选的实施例,第四显示模块包括:检测子模块,用于在显示候选字之后检测选择信号和第三书写笔迹;第一显示子模块,用于如果在第三预设时间之内检测到第三书写笔迹,或在第四预设时间之内未检测到选择信号,则确定第一区域中的第一个候选字为第一书写笔迹对应的正体字,并在第二区域的尾部显示正体字,其中,第四预设时间大于第三预设时间;第二显示子模块,用于如果检测到选择信号,则确定选择信号所指定的候选字为第一书写笔迹对应的正体字,并在第二区域的尾部显示正体字。
具体的,选择信号用于在候选字中选择第一书写笔迹对应的正体字,上述第三预设时间可以为300ms,第四预设时间可以为500ms。
在上述方案中,在第三预设时间之内检测到第三书写轨迹,即为在第三预设时间内用户重新书写;第四预设时间之内未检测到选择信号,即为第四预设时间之内用户未对第一区域的候选字进行选择,当满足上述任意一个条件时,将第一区域中的第一个候选字作为第一书写笔迹对应的正体字,显示于第二区域。
在一种可选的实施例中,以第三预设时间为300ms,第四预设时间为500ms为例,在生成识别框之后,用户在300ms之内重新落笔进行书写,此时系统默认第一区域的第一个候选字为第一书写笔迹对应的正体字。
在另一种可选的实施例中,仍以第三预设时间为300ms,第四预设时间可以为500ms为例,在生成识别框之后,用户在300ms之内未重新落笔书写,在500ms内也没有对候选字进行选择,则此时系统仍默认第一区域的第一个候选字为第一书写笔迹对应的正体字。
在又一种可选的实施例中,仍以第三预设时间为300ms,第四预设时间可以为500ms为例,在生成识别框之后,用户在300ms之内未重新落笔书写,但在500ms内对候选字进行了选择,则此时系统将用户选择的候选字作为第一书写笔迹对应的正体字。
作为一种可选的实施例,第二显示模块包括:第一获取子模块,用于获取第一书写笔迹的位置参数;第一确定子模块,用于根据第一书写笔迹的位置参数确定第一书写笔迹的识别框的位置;第三显示子模块,用于在识别框的位置显示第一书写笔迹的识别框。
具体的,上述第一书写笔迹的位置参数可以为书写笔迹左上角的坐标。在一种可选的实施例中,可以确定书写笔迹对应的最小的外围矩形框,并将外围矩形框的左上角坐标或右上角坐标作为书写笔迹的位置参数。
识别框设置于相对于第一书写笔迹的预设位置,因此可以根据第一书写笔迹的位置参数来确定识别框的位置。
作为一种可选的实施例,在书写界面中插入的正体字的大小与第一书写笔迹的大小呈正比例关系。
上述方案用于使得用户能够通过书写的大小,来控制插入书写界面的正体字的大小。
在一种可选的实施例中,插入的正体字的大小与第一书写笔迹的大小之比为1:1,也即插入的正体字的大小与第一书写笔迹的大小相同。
作为一种可选的实施例,插入模块包括:第二获取子模块,用于获取第一书写笔迹的尺寸参数;第二确定子模块,用于根据尺寸参数确定正体字的字号;插入子模块,用于在书写界面中按照字号插入正体字。
具体的,书写笔迹的尺寸参数可以通过书写笔迹的外围矩形的宽和高描述,根据尺寸参数确正体字的字号可以为,在正体字的多个字号中,查找字号的尺寸参数与书写笔迹的尺寸参数最接近的字号,将该字号作为正体字的字号。
在一种可选的实施例中,第一书写笔迹的尺寸参数为(a1,b1),其中,a1表示第一书写笔迹的宽,b1表示第一书写笔迹的高。正体字的三号字对应的尺寸参数为(a2,b3),二号字对应的尺寸参数为(a3,b3)。可以计算和并将其中计算结果较小的尺寸参数对应的字号作为正体字的字号。
需要说明是,上述二号字和三号字仅用于示例,实际使用中需要使用多种字号进行计算。
作为一种可选的实施例,对满足如下条件的第一书写笔迹进行一次识别:连续的写笔迹;或不连续但书写笔迹之间的时间间隔小于第五预设时间的多个书写笔迹。
在上述方案中,把所有点集打包进行一次识别的书写笔迹可以是一个书写笔迹,也可以是多个字的书写笔迹,下面对多种情况分别进行说明。
(1)连续的书写笔迹。
在上述方案中,将连续的书写笔迹打包发送至预识别队列进行识别。
(2)不连续但书写笔迹的时间间隔小于第五预设时间的书写轨迹。
具体的,书写笔迹的时间可以是,后一个书写笔迹的起始时间(down点的时间)和前一个书写标记的终止时间(up点的时间)。
以图2为例,笔迹“好”的“女”和“子”两部分不相连,这两个笔迹在时间上为前后相邻,“女”的抬笔时刻与“子”的落笔时刻为这两个笔迹的时间间隔。
满足上述条件(2)的不连续的笔迹可以分为多种情况,可以为一个字的多个部分,也可以为多个字,只要满足条件(2),触摸框就会将书写笔迹一起打包发送至预识别队列,一起进行识别。
作为一种可选的实施例,在书写界面中的指定位置插入正体字,其中,指定位置为:第一书写笔迹所处的位置;或识别框中的第二区域所处的位置。
在一种可选的实施例中,在第一书写笔迹消失之后,正体字插入的位置为第一书写笔迹所处的位置,以图3为例,在该示例中“书能”为已经确定的正体字,“书”字逐渐消失,在“能”字也逐渐消失之后,正体字“书能”插入白板中笔迹“书能”所在的位置。笔迹“书能”所在的位置可以根据笔迹“书能”的外围矩形框的其中一个角的位置坐标来描述。
在另一种可选的实施例中,正体字插入的位置为识别框中的第二区域所处的位置。以图3为例,在该示例中“书能”为已经确定的正体字,“书”字逐渐消失,在“能”字也逐渐消失之后,正体字“书能”以当前所在的位置插入白板,用于表示正体字“书能”还处于书别框第二区域的矩形框消失。需要说明的是,当指定位置为识别框中的第二区域所处的位置时,用户看到的可能只是正体字外的识别框消失,但正体字已经从识别框层插入到白板的界面中。
由上可知,本申请上述实施例在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为书写界面的任意位置,在相对于第一书写笔迹的预设位置显示识别框,其中,识别框包括两个区域,第一区域用于显示对第一书写笔迹进行识别得到的候选字,第二区域用于显示从候选字中确定的正体字,在第一区域显示对第一书写笔迹的候选字,在第二区域显示第一书写笔迹对应的正体字,在书写界面中插入正体字。上述方案为手写识别提供了自由度更高的书写界面以及对应的识别框,从而使用户能够随意书写,解决了现有技术中的手写识别方案将书写框或识别结果框显示于固定位置,用户不能进行随意书写的技术问题。
实施例5
根据本发明实施例,提供了一种智能交互设备的手写识别装置实施例,图9是根据本发明实施例的一种智能交互设备的手写识别装置的示意图,该装置包括:
生成模块90,用于根据在白板应用的书写界面中的任意位置接收的书写信号,生成第一书写笔迹。
具体的,上述方案可以应用于智能交互设备,智能交互设备具备白板应用,可以通过手指或电磁笔在白板应用上进行书写。白板应用的书写界面即为白板应用提供的窗口,该窗口可以平铺于智能交互平板的显示区域。
设置模块92,用于在相对于所述第一书写笔迹的预设位置设置所述识别框,其中,所述识别框包括两个区域,第一区域用于显示对所述第一书写笔迹进行识别得到的候选字,第二区域用于显示从所述候选字中确定的正体字。
具体的,相对于第一书写笔迹的预设位置可以为,以第一书写笔迹的位置坐标作为原点来确定的位置,其中,第一书写笔迹的位置可以通过第一书写笔迹的外围矩形框左上角点的坐标来描述。
在一种可选的实施例中,智能交互设备获取第一书写轨迹的位置参数,并根据第一书写轨迹的位置参数,确定识别框的位置参数,并根据识别框的位置参数显示识别框。
识别模块94,用于对所述第一书写笔迹进行识别,得到所述第一书写笔迹的候选字。
具体的,第一书写笔迹的候选字为与第一书写笔迹较为接近的字,可以为多个,智能交互设备通过识别模块对第一书写笔迹进行识别,得到对应的候选字。
确定模块96,用于在所述候选字中确定所述第一书写笔迹对应的正体字。
在上述方案中,在候选字中确定第一书写笔迹对应的正体字可以是用户从候选字中选择的,也可以是在用户未选择的情况下,默认确定的候选字中的第一个字。
插入模块98,用于将所述正体字插入所述书写界面。
通过上述插入模块执行的步骤,完成了书写笔迹的识别。
实施例6
根据本发明实施例,提供了一种存储介质,存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行如下步骤:在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为所述书写界面的任意位置;在相对于所述第一书写笔迹的预设位置显示识别框,其中,所述识别框包括两个区域,第一区域用于显示对所述第一书写笔迹进行识别得到的候选字,第二区域用于显示从所述候选字中确定的正体字;在第一区域显示所述第一书写笔迹的候选字;在第二区域显示所述第一书写笔迹对应的正体字;在所述书写界面中插入所述正体字。
实施例7
根据本发明实施例,提供了一种处理器,处理器用于运行程序,其中,所述程序运行时执行如下步骤:在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为所述书写界面的任意位置;在相对于所述第一书写笔迹的预设位置显示识别框,其中,所述识别框包括两个区域,第一区域用于显示对所述第一书写笔迹进行识别得到的候选字,第二区域用于显示从所述候选字中确定的正体字;在第一区域显示所述第一书写笔迹的候选字;在第二区域显示所述第一书写笔迹对应的正体字;在所述书写界面中插入所述正体字。
实施例8
根据本发明实施例,提供了一种智能交互设备,实施例3或实施例4中的智能交互设备的手写识别装置。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (16)
1.一种智能交互设备的手写识别方法,其特征在于,包括:
在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为所述书写界面的任意位置;
在相对于所述第一书写笔迹的预设位置显示识别框,其中,所述识别框包括两个区域,第一区域用于显示对所述第一书写笔迹进行识别得到的候选字,第二区域用于显示从所述候选字中确定的正体字;
在第一区域显示所述第一书写笔迹的候选字;
在第二区域显示所述第一书写笔迹对应的正体字;
在所述书写界面中插入所述正体字;
其中,在相对于所述第一书写笔迹的预设位置显示识别框,包括:获取所述第一书写笔迹的位置参数,其中,所述位置参数包括所述第一书写笔迹对应的外围框的左上角坐标或右上角坐标;根据所述第一书写笔迹的所述位置参数确定所述第一书写笔迹的识别框的位置;在所述识别框的位置显示所述第一书写笔迹的识别框。
2.根据权利要求1所述的方法,其特征在于,在所述书写界面中插入所述正体字之前,所述方法还包括:
在所述第二区域显示所述正体字后经过第一预设时间,所述第一书写笔迹消失。
3.根据权利要求2所述的方法,其特征在于,在所述书写界面中插入所述正体字之前,所述方法还包括:
检测在所述第二区域显示所述正体字后的第二预设时间内,是否接收到第二书写笔迹,其中,所述第二预设时间大于所述第一预设时间;
如果未检测到所述第二书写笔迹,则进入在所述书写界面中插入所述正体字的步骤;
如果检测到所述第二书写笔迹,则复用所述第一书写笔迹的识别框,显示所述第二书写笔迹的候选字。
4.根据权利要求3所述的方法,其特征在于,如果检测到所述第二书写笔迹,且所述第二书写笔迹满足预设条件,则复用所述第一书写笔迹的识别框,显示所述第二书写笔迹的候选字,其中,所述预设条件包括:
所述第二书写笔迹的位置与所述第一书写笔迹的位置高度差在第一差值范围内,且所述第二书写笔迹的位置与所述第一书写笔迹的位置宽度差在第二差值范围内。
5.根据权利要求3或4所述的方法,其特征在于,复用所述第一书写笔迹的识别框,包括:
如果所述第二书写笔迹在所述书写界面中的高度高于所述第一书写笔迹在所述书写界面的高度,则将所述识别框所在的位置调整至相对于所述第二书写笔迹的预设位置。
6.根据权利要求1所述的方法,其特征在于,在第二区域显示所述第一书写笔迹对应的正体字,包括:
在显示所述候选字之后检测选择信号和第三书写笔迹;
如果在第三预设时间之内检测到所述第三书写笔迹,或在第四预设时间之内未检测到所述选择信号,则确定所述第一区域中的第一个候选字为所述第一书写笔迹对应的正体字,并在所述第二区域的尾部显示所述正体字,其中,所述第四预设时间大于所述第三预设时间;
如果检测到所述选择信号,则确定所述选择信号所指定的候选字为所述第一书写笔迹对应的正体字,并在所述第二区域的尾部显示所述正体字。
7.根据权利要求1所述的方法,其特征在于,在所述书写界面中插入的正体字的大小与所述第一书写笔迹的大小呈正比例关系。
8.根据权利要求7所述的方法,其特征在于,在所述书写界面中插入所述正体字,包括:
获取所述第一书写笔迹的尺寸参数;
根据所述尺寸参数确定所述正体字的字号;
在所述书写界面中按照所述字号插入所述正体字。
9.根据权利要求1所述的方法,其特征在于,对满足如下条件的第一书写笔迹进行一次识别:
连续的写笔迹;或
不连续但书写笔迹之间的时间间隔小于第五预设时间的多个书写笔迹。
10.根据权利要求1所述的方法,其特征在于,在所述书写界面中的指定位置插入所述正体字,其中,所述指定位置为:
所述第一书写笔迹所处的位置;或
所述识别框中的所述第二区域所处的位置。
11.一种智能交互设备的手写识别方法,其特征在于,包括:
根据在白板应用的书写界面中的任意位置接收的书写信号,生成第一书写笔迹;
在相对于所述第一书写笔迹的预设位置设置识别框,其中,所述识别框包括两个区域,第一区域用于显示对所述第一书写笔迹进行识别得到的候选字,第二区域用于显示从所述候选字中确定的正体字;
对所述第一书写笔迹进行识别,得到所述第一书写笔迹的候选字;
在所述候选字中确定所述第一书写笔迹对应的正体字;
将所述正体字插入所述书写界面;
其中,在相对于所述第一书写笔迹的预设位置设置识别框,包括:获取所述第一书写笔迹的位置参数,其中,所述位置参数包括所述第一书写笔迹对应的外围框的左上角坐标或右上角坐标;根据所述第一书写笔迹的所述位置参数确定所述第一书写笔迹的识别框的位置;在所述识别框的位置显示所述第一书写笔迹的识别框。
12.一种智能交互设备的手写识别装置,其特征在于,包括:
第一显示模块,用于在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为所述书写界面的任意位置;
第二显示模块,用于在相对于所述第一书写笔迹的预设位置显示识别框,其中,所述识别框包括两个区域,第一区域用于显示对所述第一书写笔迹进行识别得到的候选字,第二区域用于显示从所述候选字中确定的正体字;
第三显示模块,用于在第一区域显示所述第一书写笔迹的候选字;
第四显示模块,用于在第二区域显示所述第一书写笔迹对应的正体字;
插入模块,用于在所述书写界面中插入所述正体字;
其中,所述第二显示模块用于通过以下步骤来在相对于所述第一书写笔迹的预设位置显示识别框:获取所述第一书写笔迹的位置参数,其中,所述位置参数包括所述第一书写笔迹对应的外围框的左上角坐标或右上角坐标;根据所述第一书写笔迹的所述位置参数确定所述第一书写笔迹的识别框的位置;在所述识别框的位置显示所述第一书写笔迹的识别框。
13.一种智能交互设备的手写识别装置,其特征在于,包括:
生成模块,用于根据在白板应用的书写界面中的任意位置接收的书写信号,生成第一书写笔迹;
设置模块,用于在相对于所述第一书写笔迹的预设位置设置识别框,其中,所述识别框包括两个区域,第一区域用于显示对所述第一书写笔迹进行识别得到的候选字,第二区域用于显示从所述候选字中确定的正体字;
识别模块,用于对所述第一书写笔迹进行识别,得到所述第一书写笔迹的候选字;
确定模块,用于在所述候选字中确定所述第一书写笔迹对应的正体字;
插入模块,用于将所述正体字插入所述书写界面;
其中,所述设置模块用于通过以下步骤来在相对于所述第一书写笔迹的预设位置设置识别框:获取所述第一书写笔迹的位置参数,其中,所述位置参数包括所述第一书写笔迹对应的外围框的左上角坐标或右上角坐标;根据所述第一书写笔迹的所述位置参数确定所述第一书写笔迹的识别框的位置;在所述识别框的位置显示所述第一书写笔迹的识别框。
14.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行如下步骤:在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为所述书写界面的任意位置;在相对于所述第一书写笔迹的预设位置显示识别框,其中,所述识别框包括两个区域,第一区域用于显示对所述第一书写笔迹进行识别得到的候选字,第二区域用于显示从所述候选字中确定的正体字;在第一区域显示所述第一书写笔迹的候选字;在第二区域显示所述第一书写笔迹对应的正体字;在所述书写界面中插入所述正体字;
其中,在相对于所述第一书写笔迹的预设位置显示识别框,包括:获取所述第一书写笔迹的位置参数,其中,所述位置参数包括所述第一书写笔迹对应的外围框的左上角坐标或右上角坐标;根据所述第一书写笔迹的所述位置参数确定所述第一书写笔迹的识别框的位置;在所述识别框的位置显示所述第一书写笔迹的识别框。
15.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行如下步骤:在白板应用的书写界面中,在接收到第一书写笔迹的位置显示第一书写笔迹,其中,接收第一书写笔迹的位置为所述书写界面的任意位置;在相对于所述第一书写笔迹的预设位置显示识别框,其中,所述识别框包括两个区域,第一区域用于显示对所述第一书写笔迹进行识别得到的候选字,第二区域用于显示从所述候选字中确定的正体字;在第一区域显示所述第一书写笔迹的候选字;在第二区域显示所述第一书写笔迹对应的正体字;在所述书写界面中插入所述正体字;
其中,在相对于所述第一书写笔迹的预设位置显示识别框,包括:获取所述第一书写笔迹的位置参数,其中,所述位置参数包括所述第一书写笔迹对应的外围框的左上角坐标或右上角坐标;根据所述第一书写笔迹的所述位置参数确定所述第一书写笔迹的识别框的位置;在所述识别框的位置显示所述第一书写笔迹的识别框。
16.一种智能交互设备,其特征在于,包括权利要求13或14所述的智能交互设备的手写识别装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810385901.5A CN108804003B (zh) | 2018-04-26 | 2018-04-26 | 智能交互设备的手写识别方法、装置及智能交互设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810385901.5A CN108804003B (zh) | 2018-04-26 | 2018-04-26 | 智能交互设备的手写识别方法、装置及智能交互设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108804003A CN108804003A (zh) | 2018-11-13 |
CN108804003B true CN108804003B (zh) | 2021-05-07 |
Family
ID=64093926
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810385901.5A Active CN108804003B (zh) | 2018-04-26 | 2018-04-26 | 智能交互设备的手写识别方法、装置及智能交互设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108804003B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110263519B (zh) * | 2019-05-31 | 2023-01-17 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102023785A (zh) * | 2009-09-22 | 2011-04-20 | 北京三星通信技术研究有限公司 | 根据手写模式信息自动设置系统参数的方法及其装置 |
CN102455865A (zh) * | 2011-09-29 | 2012-05-16 | 北京壹人壹本信息科技有限公司 | 一种手写输入显示方法及装置 |
CN104407732A (zh) * | 2014-10-29 | 2015-03-11 | 广州视睿电子科技有限公司 | 同步书写方法和系统 |
CN106371655A (zh) * | 2015-07-22 | 2017-02-01 | 歌乐株式会社 | 信息处理装置及信息处理装置的控制方法 |
CN107329524A (zh) * | 2017-06-29 | 2017-11-07 | 联想(北京)有限公司 | 一种信息处理方法和电子设备 |
CN107533646A (zh) * | 2015-04-24 | 2018-01-02 | 富士通株式会社 | 输入处理程序、输入处理装置、输入处理方法、字符确定程序、字符确定装置、以及字符确定方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102455870A (zh) * | 2011-09-29 | 2012-05-16 | 北京壹人壹本信息科技有限公司 | 一种手写输入方法及装置 |
CN103425424B (zh) * | 2012-05-22 | 2018-02-13 | 北京蒙恬科技有限公司 | 手写输入选字系统及方法 |
CN102866856B (zh) * | 2012-09-05 | 2015-01-07 | 鸿富锦精密工业(深圳)有限公司 | 手写输入笔迹的处理方法及装置 |
CN104007914A (zh) * | 2013-02-26 | 2014-08-27 | 北京三星通信技术研究有限公司 | 对输入字符进行操作的方法及装置 |
JP2015114976A (ja) * | 2013-12-13 | 2015-06-22 | 株式会社東芝 | 電子機器及び方法 |
CN105468271A (zh) * | 2014-09-03 | 2016-04-06 | 富泰华工业(深圳)有限公司 | 手写符号的识别方法、系统与装置 |
CN106445386B (zh) * | 2016-09-28 | 2019-10-25 | 广州视睿电子科技有限公司 | 一种笔迹显示方法及装置 |
-
2018
- 2018-04-26 CN CN201810385901.5A patent/CN108804003B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102023785A (zh) * | 2009-09-22 | 2011-04-20 | 北京三星通信技术研究有限公司 | 根据手写模式信息自动设置系统参数的方法及其装置 |
CN102455865A (zh) * | 2011-09-29 | 2012-05-16 | 北京壹人壹本信息科技有限公司 | 一种手写输入显示方法及装置 |
CN104407732A (zh) * | 2014-10-29 | 2015-03-11 | 广州视睿电子科技有限公司 | 同步书写方法和系统 |
CN107533646A (zh) * | 2015-04-24 | 2018-01-02 | 富士通株式会社 | 输入处理程序、输入处理装置、输入处理方法、字符确定程序、字符确定装置、以及字符确定方法 |
CN106371655A (zh) * | 2015-07-22 | 2017-02-01 | 歌乐株式会社 | 信息处理装置及信息处理装置的控制方法 |
CN107329524A (zh) * | 2017-06-29 | 2017-11-07 | 联想(北京)有限公司 | 一种信息处理方法和电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN108804003A (zh) | 2018-11-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11592980B2 (en) | Techniques for image-based search using touch controls | |
CN108829327B (zh) | 交互智能设备的书写方法和装置 | |
EP3224704B1 (en) | Method and device for amending handwritten characters | |
US10572779B2 (en) | Electronic information board apparatus, information processing method, and computer program product | |
CN110045840B (zh) | 一种书写轨迹关联的方法、装置、终端设备和存储介质 | |
CN107193542B (zh) | 信息显示方法和装置 | |
EP2770443B1 (en) | Method and apparatus for making contents through writing input on touch screen | |
CN109215098B (zh) | 笔迹擦除方法和装置 | |
EP2869174A1 (en) | Method and device for text input and display of intelligent terminal | |
CN104199552A (zh) | 多屏显示方法、设备及系统 | |
CN105183231B (zh) | 一种应用于触摸屏装置的信息处理方法及触摸屏装置 | |
KR20160033547A (ko) | 컨텐트를 스타일링하는 장치 및 방법 | |
TW201426513A (zh) | 手寫輸入識別系統及方法 | |
US10671795B2 (en) | Handwriting preview window | |
KR20160064925A (ko) | 필기 입력 장치 및 그 제어 방법 | |
KR102075424B1 (ko) | 필기 입력 장치 및 그 제어 방법 | |
US20150091841A1 (en) | Multi-part gesture for operating an electronic personal display | |
CN107450811A (zh) | 触摸区域放大显示方法及系统 | |
CN105808514A (zh) | 一种信息处理方法及电子设备 | |
KR20140027838A (ko) | 멀티 터치를 이용한 핸드 라이팅 기능을 가지는 모바일 장치 및 제어 방법 | |
CN108804003B (zh) | 智能交互设备的手写识别方法、装置及智能交互设备 | |
CN103383630A (zh) | 用于输入触摸的方法以及触摸显示装置 | |
KR20160055552A (ko) | 메모 표시 방법 및 이를 위한 디바이스 | |
TW201423563A (zh) | 手寫輸入識別系統及方法 | |
TW201642118A (zh) | 手寫輸入識別方法、系統與電子裝置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |