CN112540683B - 智能指环及手写文字的识别方法和电子设备 - Google Patents
智能指环及手写文字的识别方法和电子设备 Download PDFInfo
- Publication number
- CN112540683B CN112540683B CN202011422244.0A CN202011422244A CN112540683B CN 112540683 B CN112540683 B CN 112540683B CN 202011422244 A CN202011422244 A CN 202011422244A CN 112540683 B CN112540683 B CN 112540683B
- Authority
- CN
- China
- Prior art keywords
- handwriting
- user
- information
- ring
- intelligent ring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/30—Writer recognition; Reading and verifying signatures
- G06V40/37—Writer recognition; Reading and verifying signatures based only on signature signals such as velocity or pressure, e.g. dynamic signature recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
- Character Discrimination (AREA)
Abstract
本申请公开了一种智能指环及手写文字的识别方法和电子设备,属于可穿戴电子设备技术领域,用于现有的用于识别手写文字的可穿戴设备仍然存在体积大、携带不够方便以及应用场景不够灵活等缺陷。该智能指环包括指环本体、镶嵌在所述指环本体上的TOF传感器、运动传感器和控制器,其中:所述TOF传感器安装在所述指环本体的外侧,所述TOF传感器用于基于收发脉冲的时间序列获取所述智能指环距离手写平面的高度信息和抖动信息;所述运动传感器安装于所述指环本体,所述运动传感器用于获取手写过程中的运动信息;所述控制器分别与所述TOF传感器和所述运动传感器电连接,所述控制器用于识别穿戴所述智能指环的手指手写的文字。
Description
技术领域
本申请属于可穿戴电子设备技术领域,具体涉及一种智能指环及手写文字的识别方法和电子设备。
背景技术
随着智能终端技术的快速发展,电子设备逐渐趋于小型化,可穿戴设备的应用也越来越普遍。以可穿戴设备作为便携式文本手写输入设备为例,目前通常是以电容手写笔或电磁手写笔为手写媒介,以手写板或移动终端为书写平面,再以有线连接或无线连接的通信手段实现手写数据的传送,最后通过应用(Application processor,AP)端或控制端基于手写数据实现手写字体的识别。
在实现本申请过程中,发明人发现现有技术中至少存在如下问题:现有的用于识别手写文字的可穿戴设备仍然存在体积大、携带不够方便以及应用场景不够灵活等缺陷。
发明内容
本申请实施例提供一种智能指环及手写文字的识别方法和电子设备,以解决现有的穿戴手别的识别方法仍然存在识别准确率较低、体积大、携带不方便等问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本申请实施例提供了一种智能指环,所述智能指环包括指环本体、镶嵌在所述指环本体上的TOF传感器、运动传感器和控制器,其中:
所述TOF传感器安装在所述指环本体的外侧,在所述智能指环被穿戴的情况下,所述TOF传感器用于基于收发脉冲的时间序列获取所述智能指环距离手写平面的高度信息和抖动信息;
所述运动传感器安装于所述指环本体,在所述智能指环被穿戴的情况下,所述运动传感器用于获取手写过程中的运动信息;
所述控制器分别与所述TOF传感器和所述运动传感器电连接,所述控制器用于基于所述智能指环距离手写平面的高度信息、抖动信息和所述运动信息,识别穿戴所述智能指环的手指手写的文字。
第二方面,本申请实施例还提供一种手写文字的识别方法,所述方法应用于第一方面所述的智能指环,包括:
获取所述智能指环距离手写平面的高度信息和抖动信息;
获取用户手写过程中所述智能指环的运动信息;
基于所述智高度信息、所述抖动信息以及所述运动信息,识别用户手写的文字。
第三方面,本申请实施例提供了一种手写文字的识别装置,包括:
信息获取模块,用于获取所述智能指环距离手写平面的高度信息、抖动信息以及用户手写过程中的运动信息;
文字识别模块,用于基于所述高度信息、所述抖动信息以及所述运动信息,识别用户手写的文字。
第四方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第二方面所述的手写文字的识别方法的步骤。
第五方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第二方面所述的手写文字的识别方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第二方面所述的手写文字的识别方法。
在本申请实施例中,提供一种智能指环,该智能指环包括指环本体、镶嵌在指环本体上的TOF传感器、运动传感器和控制器,其中:TOF传感器安装在指环本体的外侧,在智能指环被穿戴的情况下,该TOF传感器用于基于收发脉冲的时间序列确定智能指环距离手写平面的高度信息和抖动信息;运动传感器安装于指环本体,在该智能指环被穿戴的情况下,该运动传感器用于获取手写过程中的运动信息;控制器分别与TOF传感器和运动传感器电连接,该控制器用于基于智能指环距离手写平面的高度信息、抖动信息和运动信息,识别穿戴智能指环的手指手写的文字。
由于能够在体积较小、且方便携带的智能指环上集成TOF传感器、运动传感器和控制器,在智能指环被用户穿戴进行手写时,基于收发脉冲的时间序列确定智能指环距离手写平面的高度信息和抖动信息,以及基于运动传感器获取手写过程中的运动信息,再基于这些数据对穿戴智能指环的手指手写的文字进行精准识别,使得文字识别的场景更加灵活和多样化。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种智能指环的结构示意图;
图2为本申请实施例提供的智能指环在被用户穿戴手写时其TOF传感器收发脉冲的示意图;
图3为本申请实施例提供的智能指环中的TOF传感器的发射孔和接收孔的示意图;
图4为本申请实施例提供的智能指环中的各个模块之间的逻辑结构示意图;
图5为本申请实施例提供的智能指环中的TOF传感器测得的能量和距离之间的关系示意图;
图6为本申请实施例提供的一种手写文字的识别方法的实现流程示意图;
图7为本申请实施例提供的手写文字的识别方法应用于实际场景中的流程示意图;
图8为本申请实施例提供的手写文字的识别装置的结构示意图;
图9为本申请实施例提供的一种电子设备的硬件结构示意图;
图10为本申请实施例提供的又一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。根据本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的智能指环进行详细地说明。
如图1所示,为本申请提供的一种智能指环结构示意图,包括指环本体104、镶嵌在指环本体上的飞行时间(Time of Flight,TOF)传感器101、运动传感器107和控制器108,其中:
TOF传感器101安装在指环本体104的外侧,在智能指环被穿戴的情况下,TOF传感器101用于基于收发脉冲的时间序列获取智能指环距离手写平面的高度信息和抖动信息;
运动传感器107安装于指环本体104,在智能指环被穿戴的情况下,运动传感器107用于获取手写过程中的运动信息;
控制器108分别与TOF传感器101和运动传感器107电连接,用于基于智能指环距离手写平面的高度信息、抖动信息和运动信息,识别穿戴智能指环的手指手写的文字。
可选地,控制器用于基于智能指环距离手写平面的高度信息、抖动信息和所述运动信息,建立用户手写时的虚拟平面;
控制器用于基于运动传感器采集的用户手写过程中的运动信息,获取映射到虚拟平面的手写轨迹坐标;以及
控制器用于基于映射到虚拟平面的手写轨迹坐标,识别穿戴智能指环的手指手写的文字。
其中,运动传感器107可包括加速度传感器和陀螺仪。
如图2所示,为TOF传感器101收发脉冲的示意图,在图2中,TOF传感器101在用户手写时,发送脉冲序列110至用户的手写平面,该发送脉冲序列110经由用户的手写平面反射即为TOF传感器101接收的脉冲序列。
可选地,为了便于收发脉冲,TOF传感器表面设置有发射孔102和接收孔103,其中:
TOF传感器101通过发射孔102发射脉冲至所述用户的手写平面;
TOF传感器101通过接收孔103接收发射孔发射的脉冲经由用户的手写平面反射的脉冲。
如图3所示,为本申请实施例提供的智能指环中的TOF传感器的发射孔102和接收孔103的示意图,在图3中还包括接收孔103的接收场视角112和发射孔102的发射场视角113,其中,接收孔103的接收场视角112的角度为θ1,发射孔102的发射场视角113的角度为θ2。
在实际应用中,当检测到用户穿戴智能指环时,智能指环中的控制器108将会启动间歇性(比如秒级)启动TOF传感器101进行实时检测。其中对用户穿戴智能指环的动作检测可通过运动传感器107对智能指环的角加速度进行实时检测,如果确定智能指环瞬间的角加速度大于或等于预设的角加速度阈值,则可确定智能指环被用户穿戴。
当用户穿戴智能指环靠近手写平面、且在TOF传感器101接收场视角112和TOF传感器发射场视角113内的手写平面造成的漫反射能量损失率满足TOF传感器的底噪的稳定性要求时,便可触发TOF传感器101对用户当前手写姿态中智能指环距离手写平面的高度信息与抖动信息进行初步的估计。同时,智能指环中的控制器108触发运动传感器107采集手写过程中的运动信息,并从运动消息中确定用户手写时的惯性姿态角度,该惯性姿态角度可包括横滚角、俯仰角以及偏航角等角度。再基于惯性姿态角度和运动数据特征中的其它相关数据确定用户手写平面的倾斜度与平整度。
最后,智能指环中的控制器108基于用户手写平面的倾斜度与TOF传感器101的底噪的稳定性来建立虚拟平面,该虚拟平面可包含用户手写的文字轨迹所在的软件虚拟平面二维坐标轴与坐标参考原点。如图4所示,为本申请实施例提供的TOF传感器的能量与智能指环距离手写平面的距离的关系示意图,图4所示的抛物线顶点为能量的最大点。
其中,控制器108通过内嵌在智能指环内侧中的柔性电路板(Flexible PrintedCircuit,FPC)106,分别与TOF传感器101和运动传感器107电连接。为了能够为智能指环的各个模块供电使能控制器108还包括电源模块。
可选地,在控制器建立用户进行手写时的虚拟平面之后,控制器基于运动传感器采集的用户在建立虚拟平面之后手写时的运动信息,获取映射到虚拟平面的手写轨迹坐标。
可选地,智能指环还包括无线收发模块109,该无线收发模块109与控制器108电连接,控制器108通过无线收发模块109将识别的穿戴智能指环的手指手写的文字发送至与智能指环无线连接的电子设备。
可选地,TOF传感器101、运动传感器107、控制器108和无线收发模块109可设置在智能指环侧边的中线位置处的指环纹路凹槽105附近。
如图5所示,为本申请实施例将智能指环中的各个模块抽象出来后相互之间的交互示意图。在图5中,该智能指环包括TOF传感器、运动传感器、指纹识别模组、控制器模块、无线收发模块和电源模块、以及与该智能指环相关联的电子设备。
其中,电源模块为其他各个模块供电使能,TOF传感器用于检测智能指环的底噪和距离信息,运动传感器用于检测用户的运动姿态信息,在检测到智能指环的底噪和距离手写平面的距离满足要求时,且运动姿态信息满足要求时,控制器模块建立虚拟平面并加速TOF传感器和运动传感器的采样频率。控制器模块基于TOF传感器采集的距离信息和运动传感器采集的运动信息,获取智能指环的运动轨迹坐标,控制器模块基于智能指环的运动轨迹坐标识别穿戴智能指环的手指手写的文字,并将识别的文字经由无线收发模块发送至电子设备。
在本申请实施例中,提供一种智能指环,该智能指环包括指环本体、镶嵌在指环本体上的TOF传感器、运动传感器和控制器,其中:TOF传感器安装在指环本体的外侧,在智能指环被穿戴的情况下,该TOF传感器用于基于收发脉冲的时间序列确定智能指环距离手写平面的高度信息和抖动信息;运动传感器安装于指环本体,在该智能指环被穿戴的情况下,该运动传感器用于获取手写过程中的运动信息;控制器分别与TOF传感器和运动传感器电连接,该控制器用于基于智能指环距离手写平面的高度信息、抖动信息和运动信息,识别穿戴智能指环的手指手写的文字。
由于能够在体积较小、且方便携带的智能指环上集成TOF传感器、运动传感器和控制器,在智能指环被用户穿戴进行手写时,基于收发脉冲的时间序列确定智能指环距离手写平面的高度信息和抖动信息,以及基于运动传感器获取手写过程中的运动信息,再基于这些数据对穿戴智能指环的手指手写的文字进行精准识别,使得文字识别的场景更加灵活和多样化。
为解决现有的穿戴手别的识别方法仍然存在识别准确率较低、体积大、携带不方便等问题,本申请实施例还提供一种手写文字的识别方法。如图6所示,为本申请提供的一种手写文字的识别方法的实现流程示意图,该方法应用于图1~图5所示的智能指环,包括:
S610,获取智能指环距离手写平面的高度信息和抖动信息;
应理解,用户穿戴智能指环的瞬间,智能指环的角加速度将会瞬间增大,基于此,本申请实施例可基于嵌套在智能指环中的运动传感器(比如陀螺仪),来检测智能指环是否被用户穿戴。而当用户穿戴智能指环进行手写操作时,智能指环距离用户的手写平面应该维持在一定的高度范围内,而且智能指环距离用户的手写平面的高度的抖动范围也应保持在一定的抖动范围内。本申请实施例基于这一点,可通过嵌套在智能指环中的TOF传感器对智能指环距离用户的手写平面的高度以及其抖动范围进行一个初步的估计,如果两者在一定时间段内处于一定的高度范围内,和设定的抖动范围,则可确定用户穿戴智能指环进行手写操作中。
S620,获取用户手写过程中智能指环的运动信息;
可选地,获取用户手写过程中所述智能指环的运动信息,包括:
在智能指环距离手写平面的高度信息满足预设高度条件,且智能指环的抖动信息满足预设抖动条件的情况下,获取用户手写过程中的运动信息。
应理解,若智能指环距离用户手写平面的高度信息满足预设高度条件,且抖动范围预设抖动条件,则可表明用户穿戴智能指环进行手写操作。其中,用户手写时的运动信息可包括用户手写时智能指环的移动速度和用户手写时的智能指环的角加速度。
S630,基于智高度信息、抖动信息以及运动信息,识别用户手写的文字。
可选地,为了便于获取用户穿戴智能指环进行手写时的轨迹信息,本申请实施例可提供一个虚拟平面,使得用户穿戴智能指环进行手写时的轨迹信息能够投影到该虚拟平面上,进而能够通过电子设备来基于轨迹信息确定用户穿戴智能指环手写的文字。具体地,基于高度信息、抖动信息以及所述运动信息,识别用户手写的文字,包括:
基于高度信息、抖动信息以及运动信息,建立用户手写时的虚拟平面;
基于用户手写过程中智能指环的运动信息,获取映射到虚拟平面的手写轨迹坐标;
基于映射到虚拟平面的手写轨迹坐标,识别用户手写的文字。
可选地,基于高度信息、抖动信息以及运动信息,建立用户手写时的虚拟平面,包括:
基于用户手写过程中的运动信息,获取用户手写过程中的惯性姿态角度;
在惯性姿态角度在预设角度阈值范围内的情况下,基于高度信息、抖动信息以及运动信息,建立用户手写时的虚拟平面。
应理解,建立虚拟平面需要先确定虚拟平面的高度和虚拟平面的角度,其中虚拟平面的高度可基于智能指环距离用户手写平面的高度来确定,虚拟平面的角度可基于用户手写时的惯性姿态角度来确定。
其中,基于用户手写时的运动信息,获取用户手写时的惯性姿态角度,具体可以基于用户手写时的运动信息中的智能指环的角加速度,确定用户手写时的惯性姿态角度。在实际应用中,确定用户手写时的惯性姿态角度可按照公式来确定,其中,θ为用户手写时的惯性姿态角度,Δw(t)为用户手写时的运动特征数据中的智能指环的角加速度,t为时间。
可选地,为了能够准确识别出用户穿戴智能指环手写的文字,本申请实施例中,智能指环的控制器可基于用户在建立虚拟平面之后手写时的运动特征数据和预设的时间积分算法,确定映射到虚拟平面的手写轨迹坐标。基于用户手写过程中的运动信息,获取映射到虚拟平面的手写轨迹坐标,包括:
基于用户在建立虚拟平面之后手过程中的运动信息,获取用户在建立虚拟平面之后的姿态角度;
基于姿态角度和预设的时间积分算法,获取映射到虚拟平面的手写轨迹坐标。
在建立虚拟平面之后,智能指环中的控制器将会加速TOF传感器的采样时间(比如可以是微秒级别),并实时刷新TOF传感器底噪与增量,并基于TOF传感器的底噪和增量确定智能指环距离手写平面的高度变化数据,同时,智能指环中的运动传感器也会实时检测到智能指环在对应的高度时的角加速度、移动速度等数据。
用户在建立虚拟平面之后手写时的运动信息中包括用户手写时智能指环的角加速度、移动速度、位移时间以及智能指环距离手写平面的高度变化数据等运动信息。
其中,基于用户在建立虚拟平面之后手写时的运动信息,获取用户在建立虚拟平面之后的姿态角度,具体可以基于用户在建立虚拟平面之后手写时的运动特征数据中的智能指环的角加速度,确定用户在建立虚拟平面之后的手写时的姿态角度。在实际应用中,确定用户在建立虚拟平面之后手写时的姿态角度可按照公式来确定,其中,θ为用户手写时的惯性姿态角度,Δw(t)为用户手写时的运动特征数据中的智能指环的角加速度,t为时间。
基于用户在建立虚拟平面之后手写时的运动特征数据,获取用户在建立虚拟平面之后的位移信息,具体可以基于用户在建立虚拟平面之后手写时的运动特征数据中的智能指环的移动速度,确定用户在建立虚拟平面之后手写时的位移信息。在实际应用中,确定用户在建立虚拟平面之后手写时的位移信息可按照公式来确定,其中,θ为用户手写时的惯性姿态角度,Δw(t)为用户手写时的运动特征数据中的智能指环的角加速度,t为时间。
可选地,在一种实施方式中,在基于用户在建立虚拟平面之后手写时的运动信息,获取映射到虚拟平面的手写轨迹坐标之后,还可以将手写轨迹坐标发送至与智能指环无线连接的电子设备,由电子设备基于手写轨迹坐标识别用户手写的文字。
下面以图7所示的本申请实施例提供的手写字体的识别方法应用于实际场景中的流程示意图为例,对本申请实施例提供的手写字体的识别方法进行详细介绍。如图7所示,包括:
步骤701:智能指环中的控制器在智能指环被用户穿戴后的预设时间段内,比如30s内轮询获取用户输入的密码,以解锁智能指环的手写文字识别功能。
比如,可在智能指环上设置指纹识别模块,在检测到智能指环被用户穿戴后的预设时间段内,启动指纹识别模块,以获取用户输入的手指指纹,并在确定用户输入的手指指纹与预先采集的用户的手指指纹相匹配时,解锁智能指环的手写文字识别功能。
或者,还可以设置一些解锁姿势,在检测到智能指环被用户穿戴后的预设时间段内,轮询获取用户的手部姿势,当用户的手部姿势与设置的解锁姿势相匹配时,解锁智能指环的手写文字识别功能。
步骤702:智能指环中的控制器确定用户输入的密码是否正确,如果用户输入的密码正确,则执行步骤704,否则执行步骤703。
步骤703:智能指环中的控制器确定智能指环中的TOF传感器所获取的红外底噪和收发脉冲时间差是否稳定;如果智能指环中的TOF传感器所获取的红外底噪和收发脉冲时间差稳定(即两者均处于各自的预设范围内),则执行步骤705,否则执行步骤704。
步骤704:智能指环中的控制器终止数据解析。
比如,如果智能指环中的TOF传感器所获取的红外底噪和收发脉冲时间差不稳定(即这两者至少存在一项处于各自的预设范围以外),则终止数据解析。
步骤705:智能指环中的控制器确定智能指环是否被授权解析数据,如果确定智能指环被授权解析数据,则执行步骤706,否则执行步骤704。
步骤706:智能指环中的控制器获取和记录TOF传感器底噪与脉冲发射前后相位差。
步骤707:智能指环中的控制器根据TOF传感器的底噪与收发脉冲的相位差,确定智能指环距离手写平面的距离和抖动范围。
步骤708:智能指环中的控制器确定智能指环距离手写平面的距离和抖动范围是否满足要求,如果智能指环中的控制器确定智能指环距离手写平面的距离和抖动范围满足要求,执行步骤709,否则执行步骤704。
步骤709:智能指环中的控制器启动智能指环多种的运动传感器进采集运动特征数据,并提取运动特征数据中的惯性姿态角度。
步骤710:智能指环中的控制器确定惯性姿态角度是否满足要求,如果智能指环中的控制器确定惯性姿态角度满足要求,则执行步骤711,否则执行步骤704。
步骤711:智能指环中的控制器建立虚拟平面,同时加速TOF传感器和运动传感器的采样时间。
步骤712:智能指环中的控制器通过运动传感器获取用户手写时的运动特征数据,提取用户手写时的姿态角度、位移信息。
步骤713:智能指环中的控制器根据姿态角度、位移信息与时间积分,获取投影在虚拟平面上的运动轨迹坐标。
步骤714:智能指环中的控制器判断是否进行云端解析,如果是则执行步骤715,否则执行步骤716。
步骤715:智能指环中的控制器通过无线收发模块中的蓝牙遍历周边预设距离范围内的部署节点,获取上传权限。
步骤716:智能指环中的控制器通过无线收发模块中的WIFI解析云端动态IP,获取上传权限。
步骤717:智能指环中的控制器将运动轨迹坐标发送至存在上传权限的电子设备。
步骤718:电子设备针对接收到的运动轨迹坐标还原用户手写的文字图像。
步骤719:电子设备构建特征相似度匹配和最大相似度概率函数。
步骤720:电子设备输出文字识别结果并记录。
步骤721:电子设备将文字识别结果发送至智能指环。
步骤722:判断识别完毕是否终止解析,如果是则执行结束,否则执行步骤712。
采用本申请提供的手写文字的识别方法,能够在检测到用户穿戴智能指环进行手写时,获取智能指环距离手写平面的高度信息和抖动信息;获取用户手写过程中智能指环的运动信息;基于智高度信息、抖动信息以及运动信息,识别用户手写的文字。由于智能指环被穿戴进行手写操作时,智能指环将与用户的手写平面保持一定的高度消息,且该高度消息在用户手写过程中的抖动消息也会在一定的波动范围内,因此,可基于该高度消息和其抖动消息可准确识别用户是否在进行手写操作,再获取用户手写过程中的运动信息,最后基于该高度信息、抖动信息和用户手写过程中的运动信息,便能准确识别用户在该虚拟平面上的手写文字。
需要说明的是,本申请实施例提供的手写文字的识别方法,执行主体可以为手写文字的识别装置,或者该手写文字的识别装置中的用于执行手写文字的识别的方法的控制模块。本申请实施例中以手写文字的识别的装置执行手写文字的识别的方法为例,说明本申请实施例提供的手写文字的识别装置。
如图8所示,为本申请实施例提供的手写文字的识别装置800的结构示意图,包括:
信息获取模块810,用于获取所述智能指环距离手写平面的高度信息、抖动信息以及用户手写过程中的运动信息;
文字识别模块820,用于基于所述高度信息、所述抖动信息以及所述运动信息,识别用户手写的文字。
可选地,在一种实施方式中,所述信息获取模块810,用于:
在所述智能指环距离手写平面的高度信息满足预设高度条件,且所述智能指环的抖动信息满足预设抖动条件的情况下,获取用户手写过程中的运动信息。
可选地,在一种实施方式中,所述文字识别模块820,用于:
基于所述高度信息、所述抖动信息以及所述运动信息,建立用户手写时的虚拟平面;
基于用户手写过程中所述智能指环的运动信息,获取映射到所述虚拟平面的手写轨迹坐标;
基于所述映射到所述虚拟平面的手写轨迹坐标,识别用户手写的文字。
可选地,在一种实施方式中,所述文字识别模块820,用于:
基于用户手写过程中的运动信息,获取用户手写过程中的惯性姿态角度;
在所述惯性姿态角度在预设角度阈值范围内的情况下,基于所述高度信息、所述抖动信息以及所述运动信息,建立用户手写时的虚拟平面。
可选地,在一种实施方式中,所述文字识别模块820,用于:
基于所述用户在建立所述虚拟平面之后手过程中的运动信息,获取所述用户在建立所述虚拟平面之后的姿态角度;
基于所述姿态角度和预设的时间积分算法,获取映射到所述虚拟平面的手写轨迹坐标。
采用本申请提供的手写文字的识别方法,能够在检测到用户穿戴智能指环进行手写时,获取智能指环距离手写平面的高度信息和抖动信息;获取用户手写过程中智能指环的运动信息;基于智高度信息、抖动信息以及运动信息,识别用户手写的文字。由于智能指环被穿戴进行手写操作时,智能指环将与用户的手写平面保持一定的高度消息,且该高度消息在用户手写过程中的抖动消息也会在一定的波动范围内,因此,可基于该高度消息和其抖动消息可准确识别用户是否在进行手写操作,再获取用户手写过程中的运动信息,最后基于该高度信息、抖动信息和用户手写过程中的运动信息,便能准确识别用户在该虚拟平面上的手写文字。
本申请实施例中的手写文字的识别的装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personal digital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(Network Attached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的手写文字的识别的装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的手写文字的识别的装置能够实现图6至图7的方法实施例实现的各个过程,为避免重复,这里不再赘述。
可选的,如图9所示,本申请实施例还提供一种电子设备M09,包括处理器M91,存储器M92,存储在存储器M92上并可在所述处理器M91上运行的程序或指令,该程序或指令被处理器M91执行时实现上述指环穿戴手别的识别方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图10为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备1000包括但不限于:射频单元1001、网络模块1002、音频输出单元1003、输入单元1004、传感器1005、显示单元1006、用户输入单元1007、接口单元1008、存储器1009、以及处理器1010等部件。
本领域技术人员可以理解,电子设备1000还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器1010逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图10中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器1010,获取所述智能指环距离手写平面的高度信息和抖动信息;获取用户手写过程中所述智能指环的运动信息;基于所述智高度信息、所述抖动信息以及所述运动信息,识别用户手写的文字。
采用本申请提供的手写文字的识别方法,能够在检测到用户穿戴智能指环进行手写时,获取智能指环距离手写平面的高度信息和抖动信息;获取用户手写过程中智能指环的运动信息;基于智高度信息、抖动信息以及运动信息,识别用户手写的文字。由于智能指环被穿戴进行手写操作时,智能指环将与用户的手写平面保持一定的高度消息,且该高度消息在用户手写过程中的抖动消息也会在一定的波动范围内,因此,可基于该高度消息和其抖动消息可准确识别用户是否在进行手写操作,再获取用户手写过程中的运动信息,最后基于该高度信息、抖动信息和用户手写过程中的运动信息,便能准确识别用户在该虚拟平面上的手写文字。
可选的,处理器1010,还用于基于所述高度信息、所述抖动信息以及所述运动信息,建立用户手写时的虚拟平面;
基于用户手写过程中所述智能指环的运动信息,获取映射到所述虚拟平面的手写轨迹坐标;
基于所述映射到所述虚拟平面的手写轨迹坐标,识别用户手写的文字。
可选的,处理器1010,还用于基于用户手写过程中的运动信息,获取用户手写过程中的惯性姿态角度;
在所述惯性姿态角度在预设角度阈值范围内的情况下,基于所述高度信息、所述抖动信息以及所述运动信息,建立用户手写时的虚拟平面。
可选的,处理器1010,还用于基于所述用户在建立所述虚拟平面之后手过程中的运动信息,获取所述用户在建立所述虚拟平面之后的姿态角度;
基于所述姿态角度和预设的时间积分算法,获取映射到所述虚拟平面的手写轨迹坐标。
可选的,处理器1010,还用于在所述智能指环距离手写平面的高度信息满足预设高度条件,且所述智能指环的抖动信息满足预设抖动条件的情况下,获取用户手写过程中的运动信息。
采用本申请提供的手写文字的识别方法,能够在检测到用户穿戴智能指环进行手写时,获取智能指环距离手写平面的高度信息和抖动信息;获取用户手写过程中智能指环的运动信息;基于智高度信息、抖动信息以及运动信息,识别用户手写的文字。由于智能指环被穿戴进行手写操作时,智能指环将与用户的手写平面保持一定的高度消息,且该高度消息在用户手写过程中的抖动消息也会在一定的波动范围内,因此,可基于该高度消息和其抖动消息可准确识别用户是否在进行手写操作,再获取用户手写过程中的运动信息,最后基于该高度信息、抖动信息和用户手写过程中的运动信息,便能准确识别用户在该虚拟平面上的手写文字。
应理解的是,本申请实施例中,输入单元1004可以包括图形处理器(GraphicsProcessing Unit,GPU)10041和麦克风10042,图形处理器10041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1006可包括显示面板10061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板0061。用户输入单元1007包括触控面板10071以及其他输入设备10072。触控面板10071,也称为触摸屏。触控面板10071可包括触摸检测装置和触摸控制器两个部分。其他输入设备10072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器1009可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器1010可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器1010中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述指环穿戴手别的识别方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述指环穿戴手别的识别方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (10)
1.一种智能指环,其特征在于,所述智能指环包括指环本体、TOF传感器、运动传感器和控制器,其中:
所述TOF传感器安装在所述指环本体的外侧,在所述智能指环被穿戴的情况下,所述TOF传感器用于基于收发脉冲的时间序列获取所述智能指环距离手写平面的高度信息和抖动信息;
所述运动传感器安装于所述指环本体,在所述智能指环被穿戴的情况下,所述运动传感器用于获取手写过程中的运动信息;
所述控制器分别与所述TOF传感器和所述运动传感器电连接,所述控制器用于基于所述智能指环距离手写平面的高度信息、抖动信息和所述运动信息,识别穿戴所述智能指环的手指手写的文字;
其中,所述控制器用于基于所述智能指环距离手写平面的高度信息、抖动信息和所述运动信息,建立用户手写时的虚拟平面;
所述控制器用于基于所述运动传感器采集的所述用户手写过程中的运动信息,获取映射到所述虚拟平面的手写轨迹坐标;以及
所述控制器用于基于所述映射到所述虚拟平面的手写轨迹坐标,识别穿戴所述智能指环的手指手写的文字。
2.如权利要求1所述的智能指环,其特征在于,所述智能指环还包括无线收发模块,所述无线收发模块与所述控制器电连接,所述控制器通过所述无线收发模块将识别的穿戴所述智能指环的手指手写的文字发送至与所述智能指环无线连接的电子设备。
3.如权利要求1所述的智能指环,其特征在于,所述TOF传感器表面设置有发射孔和接收孔,其中:
所述TOF传感器通过所述发射孔发射脉冲至用户的手写平面;
所述TOF传感器通过所述接收孔接收经由用户的手写平面反射的脉冲。
4.一种手写文字的识别方法,其特征在于,所述方法应用于权利要求1~3任一所述的智能指环,包括:
获取所述智能指环距离手写平面的高度信息和抖动信息;
获取用户手写过程中所述智能指环的运动信息;
基于所述高度信息、所述抖动信息以及所述运动信息,建立用户手写时的虚拟平面;
基于用户手写过程中所述智能指环的运动信息,获取映射到所述虚拟平面的手写轨迹坐标;
基于所述映射到所述虚拟平面的手写轨迹坐标,识别用户手写的文字。
5.如权利要求4所述的方法,其特征在于,基于所述高度信息、所述抖动信息以及所述运动信息,建立用户手写时的虚拟平面,包括:
基于用户手写过程中所述智能指环的运动信息,获取用户手写过程中的惯性姿态角度;
在所述惯性姿态角度在预设角度阈值范围内的情况下,基于所述高度信息、所述抖动信息以及所述运动信息,建立用户手写时的虚拟平面。
6.如权利要求4或5所述的方法,其特征在于,所述基于用户手写过程中所述智能指环的运动信息,获取映射到所述虚拟平面的手写轨迹坐标,包括:
基于所述用户在建立所述虚拟平面之后手过程中所述智能指环的运动信息,获取所述用户在建立所述虚拟平面之后的姿态角度;
基于所述姿态角度和预设的时间积分算法,获取映射到所述虚拟平面的手写轨迹坐标。
7.如权利要求4所述的方法,其特征在于,所述获取用户手写过程中所述智能指环的运动信息,包括:
在所述智能指环距离手写平面的高度信息满足预设高度条件,且所述智能指环的抖动信息满足预设抖动条件的情况下,获取用户手写过程中的运动信息。
8.一种手写文字的识别装置,其特征在于,应用于权利要求1~3任一所述的智能指环,包括:
信息获取模块,用于获取智能指环距离手写平面的高度信息、抖动信息以及用户手写过程中所述智能指环的运动信息;
文字识别模块,用于基于所述高度信息、所述抖动信息以及所述运动信息,建立用户手写时的虚拟平面,基于用户手写过程中所述智能指环的运动信息,获取映射到所述虚拟平面的手写轨迹坐标,并基于所述映射到所述虚拟平面的手写轨迹坐标,识别用户手写的文字。
9.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求4-7任一项所述的手写文字的识别方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求4-7任一项所述的手写文字的识别方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011422244.0A CN112540683B (zh) | 2020-12-08 | 2020-12-08 | 智能指环及手写文字的识别方法和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011422244.0A CN112540683B (zh) | 2020-12-08 | 2020-12-08 | 智能指环及手写文字的识别方法和电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112540683A CN112540683A (zh) | 2021-03-23 |
CN112540683B true CN112540683B (zh) | 2022-09-02 |
Family
ID=75018652
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011422244.0A Active CN112540683B (zh) | 2020-12-08 | 2020-12-08 | 智能指环及手写文字的识别方法和电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112540683B (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101029931A (zh) * | 2007-01-24 | 2007-09-05 | 广东威创日新电子有限公司 | 一种超声波定位装置及其定位方法 |
JP2019121008A (ja) * | 2017-12-28 | 2019-07-22 | 京セラドキュメントソリューションズ株式会社 | 入力システム、入力装置、および入力方法 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103105945B (zh) * | 2012-12-17 | 2016-03-30 | 中国科学院计算技术研究所 | 一种支持多点触摸手势的人机交互戒指 |
DE102013000072A1 (de) * | 2013-01-08 | 2014-07-10 | Audi Ag | Bedienschnittstelle für eine handschriftliche Zeicheneingabe in ein Gerät |
US9229583B2 (en) * | 2013-05-29 | 2016-01-05 | Otter Products, Llc | Object location determination including writing pressure information of a stylus |
US20150323998A1 (en) * | 2014-05-06 | 2015-11-12 | Qualcomm Incorporated | Enhanced user interface for a wearable electronic device |
CN105468173B (zh) * | 2014-09-12 | 2019-01-15 | 联想(北京)有限公司 | 实现离屏手写输入的自动翻页的电子设备及方法 |
CN104571521B (zh) * | 2015-01-21 | 2018-09-11 | 京东方科技集团股份有限公司 | 手写记录装置和手写记录方法 |
CN105068648A (zh) * | 2015-08-03 | 2015-11-18 | 众景视界(北京)科技有限公司 | 头戴式智能交互系统 |
WO2019005499A1 (en) * | 2017-06-28 | 2019-01-03 | Walmart Apollo, Llc | SYSTEMS, METHODS AND DEVICES FOR PROVIDING A VIRTUAL REALITY WHITEBOARD |
CN109240571A (zh) * | 2018-07-11 | 2019-01-18 | 维沃移动通信有限公司 | 一种控制装置、终端及控制方法 |
-
2020
- 2020-12-08 CN CN202011422244.0A patent/CN112540683B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101029931A (zh) * | 2007-01-24 | 2007-09-05 | 广东威创日新电子有限公司 | 一种超声波定位装置及其定位方法 |
JP2019121008A (ja) * | 2017-12-28 | 2019-07-22 | 京セラドキュメントソリューションズ株式会社 | 入力システム、入力装置、および入力方法 |
Also Published As
Publication number | Publication date |
---|---|
CN112540683A (zh) | 2021-03-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11320912B2 (en) | Techniques for gesture-based initiation of inter-device wireless connections | |
US9921659B2 (en) | Gesture recognition for device input | |
EP3754542B1 (en) | Method and apparatus for recognizing handwriting in air, and device and computer-readable storage medium | |
CN107438846B (zh) | 基于单一的有意用户手势来验证用户和启动应用 | |
US9235241B2 (en) | Anatomical gestures detection system using radio signals | |
US20150177842A1 (en) | 3D Gesture Based User Authorization and Device Control Methods | |
CN108139856B (zh) | 签名认证方法、终端、手写笔及系统 | |
US11366528B2 (en) | Gesture movement recognition method, apparatus, and device | |
US10460093B2 (en) | Terminal device, method, and program | |
US10296096B2 (en) | Operation recognition device and operation recognition method | |
CN107272892B (zh) | 一种虚拟触控系统、方法及装置 | |
US10725550B2 (en) | Methods and apparatus for recognition of a plurality of gestures using roll pitch yaw data | |
WO2018161893A1 (zh) | 用户身份识别方法及装置 | |
CN110730298A (zh) | 一种显示控制方法及电子设备 | |
EP3066544A1 (en) | Disambiguation of styli by correlating acceleration on touch inputs | |
CN113569635A (zh) | 一种手势识别方法及系统 | |
CN112540683B (zh) | 智能指环及手写文字的识别方法和电子设备 | |
CN109359460B (zh) | 一种面部识别方法及终端设备 | |
CN111857354A (zh) | 解锁方法、装置、电子设备以及存储介质 | |
WO2022022365A1 (zh) | 一种应用于指纹识别的图像匹配方法及相关装置 | |
CN113360031A (zh) | 显示方法、装置、电子设备和存储介质 | |
CN112540686A (zh) | 智能指环及指环工作模式的确定方法和电子设备 | |
Yatani et al. | Information transfer techniques for mobile devices by" toss" and" swing" actions | |
CN113031793B (zh) | 轮廓采集方法、装置以及智能笔 | |
Sathya et al. | Systematic Review on on-Air Hand Doodle System for the Purpose of Authentication |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |