CN113900515A - 一种基于动作感知的信息输入方法、系统和智能终端 - Google Patents

一种基于动作感知的信息输入方法、系统和智能终端 Download PDF

Info

Publication number
CN113900515A
CN113900515A CN202111128821.XA CN202111128821A CN113900515A CN 113900515 A CN113900515 A CN 113900515A CN 202111128821 A CN202111128821 A CN 202111128821A CN 113900515 A CN113900515 A CN 113900515A
Authority
CN
China
Prior art keywords
track
writing
character information
vector
vector graphics
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111128821.XA
Other languages
English (en)
Inventor
程如中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
North China Institute of Science and Technology
Original Assignee
North China Institute of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by North China Institute of Science and Technology filed Critical North China Institute of Science and Technology
Priority to CN202111128821.XA priority Critical patent/CN113900515A/zh
Publication of CN113900515A publication Critical patent/CN113900515A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种基于动作感知的信息输入方法、系统和智能终端，所述方法包括：获取书写所产生的运动轨迹，并基于所述运动轨迹得到相邻元素轨迹的间隔时间；其中，所述元素轨迹为从感应书写开始至结束期间所感应到的书写轨迹，所述元素轨迹的间隔时间为前一个元素轨迹结束至后一个元素轨迹开始之间的时间间隔；将所述元素轨迹转换为矢量图形，并根据元素轨迹的间隔时间将矢量图形组合为字符信息单元；将得到的存储矢量图形和/或字符信息单元进行存储。解决了现有技术中输入设备和方法需要注视屏幕而导致的使用范围受限的技术问题。

Description

一种基于动作感知的信息输入方法、系统和智能终端
技术领域
本发明实施例涉及信息输入技术领域，具体涉及一种基于动作感知的信息输入方法、系统和智能终端。
背景技术
在现有技术中，一般采用传统的输入设备如键盘进行输入，使用过程中，使用者需要随时盯住屏幕进行输入，无法使眼睛从屏幕上解放。即使采用触摸屏进行输入，由于现有手持设备的手写输入方式基于接触识别原理，即通过内置的触控笔或直接智能笔在屏幕上书写，屏幕通过压力变化或磁力变化等感知接触点的位置，然后通过设备内部的手写识别智能笔把手写的各种字体转换为可识别的标准字体，而后将其显示在屏幕上。也就是说，采用触摸屏输入方式时，需要在每输入一个字时进行判断，选择对应具体字库里的具体字符文字。
因此，由于受使用场景和条件的限制，现有的信息输入方法无法随时随地进行文字或信息记录，在无法及时盯住屏幕或输入界面进行输入的工作场景中，极大的限制了用户的使用。
发明内容
为此，本发明实施例提供一种基于动作感知的信息输入方法、系统和智能终端，以至少部分解决现有技术中输入设备和方法需要注视屏幕而导致的使用范围受限的技术问题。
为了实现上述目的，本发明实施例提供如下技术方案：
一种基于动作感知的信息输入方法，所述方法包括：
获取书写所产生的运动轨迹，并基于所述运动轨迹得到相邻元素轨迹的间隔时间；其中，所述元素轨迹为从感应书写开始至结束期间所感应到的书写轨迹，所述元素轨迹的间隔时间为前一个元素轨迹结束至后一个元素轨迹开始之间的时间间隔；
将所述元素轨迹转换为矢量图形，并根据元素轨迹的间隔时间将矢量图形组合为字符信息单元；
将得到的存储矢量图形和/或字符信息单元进行存储。
进一步地，所述将所述元素轨迹转换为矢量图形，并根据元素轨迹的间隔时间将矢量图形组合为字符信息单元，具体包括：
将所述元素轨迹转换为矢量图形；
判定相邻两个元素轨迹的间隔时间均大于或等于预设阈值，则将位于这两个元素轨迹的间隔时间区间内的所有矢量图形所对应的矢量组合为一个独立的字符信息单元；
将字符信息单元转换为文本信息。
进一步地，在将得到的存储矢量图形和/或字符信息单元进行存储之后，所述方法还包括：
将矢量图形和/或字符信息单元传送至终端设备。
进一步地，将所述元素轨迹转换为矢量图形，之后还包括：
分析所述矢量图形；
根据分析结果对矢量图形进行合并、拆分、或叠加处理。
本发明还提供一种基于动作感知的信息输入系统，用于实施如上所述的方法，所述系统包括：
书写感应设备，用于感应使用者书写所产生的运动轨迹，得到元素轨迹和元素轨迹间隔时间，所述元素轨迹为书写感应设备从感应书写开始至结束期间所感应到的书写轨迹，所述元素轨迹间隔时间为前一个元素轨迹结束至后一个元素轨迹开始之间的时间间隔；
处理器，用于将元素轨迹转换为矢量图形，并根据元素轨迹间隔时间将矢量图形组合为字符信息单元；
存储模块，用于存储矢量图形和/或字符信息单元。
进一步地，所述处理器包括：
转换模块，用于将元素轨迹转换为矢量图形；
组合模块，与所述转换模块相连，用于将在相邻两个均大于等于预设阈值的元素轨迹时间间隔的期间内的所有图形矢量组合为一个独立的字符信息单元。
进一步地，还包括：
传输模块，所述传输模块用于将矢量图形和/或字符信息单元传送到指定设备。
进一步地，还包括：
识别模块，用于将字符信息单元转换为文本信息；
和/或分析处理模块，用于对矢量图形进行分析，根据分析结果对矢量图形进行合并、拆分、或叠加处理。
本发明还提供一种智能终端，所述智能终端包括：处理器和存储器；
所述存储器用于存储一个或多个程序指令；
所述处理器，用于运行一个或多个程序指令，用以执行如上所述的方法。
本发明还提供一种计算机存储介质，所述计算机存储介质中包含一个或多个程序指令，所述一个或多个程序指令用于执行如上所述的方法。
本发明所提供的基于动作感知的信息输入方法和系统，通过获取书写所产生的运动轨迹，并基于所述运动轨迹得到相邻元素轨迹的间隔时间；其中，所述元素轨迹为从感应书写开始至结束期间所感应到的书写轨迹，所述元素轨迹的间隔时间为前一个元素轨迹结束至后一个元素轨迹开始之间的时间间隔；将所述元素轨迹转换为矢量图形，并根据元素轨迹的间隔时间将矢量图形组合为字符信息单元；将得到的存储矢量图形和/或字符信息单元进行存储。从而通过感应信息输入的轨迹，在不便于用眼的场合下实现盲屏信息输入，在一定范围内上取代其它文字信息输入方式，使手持设备或计算机的使用更具人性化，带动了人机交互模式的创新，解决了现有技术中输入设备和方法需要注视屏幕而导致的使用范围受限的技术问题。
附图说明
为了更清楚地说明本发明的实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是示例性的，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图引伸获得其它的实施附图。
本说明书所绘示的结构、比例、大小等，均仅用以配合说明书所揭示的内容，以供熟悉此技术的人士了解与阅读，并非用以限定本发明可实施的限定条件，故不具技术上的实质意义，任何结构的修饰、比例关系的改变或大小的调整，在不影响本发明所能产生的功效及所能达成的目的下，均应仍落在本发明所揭示的技术内容得能涵盖的范围内。
图1为本发明所提供的信息输入方法一种具体实施方式的流程图；
图2为本发明所提供的信息输入方法在一种具体使用场景中的流程图；
图3为图2所示方法中映射为文字信息的流程图；
图4为本发明所提供的信息输入系统一种具体实施方式的结构框图；
图5为图4所示系统中组合模块示意图；
图6为图1所示方法或图4所示系统应用于书写笔画构成文字时的基本矢量图形的示意图；
图7是本申请一种实施方式应用于实行命令控制的几种基本矢量图形；
图8是本申请一种实施方式实现基于手势动作汉字输入书写转换过程的流程示意图；
图9是本发明所提供的信息输入系统另一种具体实施方式的结构框图；
图10是本发明所提供的信息输入系统又一种具体实施方式的结构框图；
图11是本申请一种实施方式的智能终端的应用例示意图。
具体实施方式
以下由特定的具体实施例说明本发明的实施方式，熟悉此技术的人士可由本说明书所揭露的内容轻易地了解本发明的其他优点及功效，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
总的来讲，本发明所提供的基于动作感知的信息输入方法、系统和智能终端，在工作过程中不要求在每个文字输入完毕之后就直接进行文字识别，书写者不需盯着屏幕进行输入，而是采用手势动作感知输入或任意物理界面输入(即不看屏幕输入)，侧重的是捕捉随时灵感信息，书写记录的是一连串反应书写者思路与语义的由图形矢量信息组成的文字信息，类似真正的笔记本功能；这样，当在终端再现该文字信息时，如果文字信息是书写者自己个性化定义的文字符号如速记符号，书写者可以看懂自己手写的个性化图形信息，如果文字信息采用通用的文字符号如汉字或字母进行记录，也可以通过终端中带有的识别算法进行文字识别。
在一种具体实施方式中，如图1所示，本发明所提供的基于动作感知的信息输入方法包括以下步骤：
S101：获取书写所产生的运动轨迹，并基于所述运动轨迹得到相邻元素轨迹的间隔时间；其中，所述元素轨迹为从感应书写开始至结束期间所感应到的书写轨迹，所述元素轨迹的间隔时间为前一个元素轨迹结束至后一个元素轨迹开始之间的时间间隔；
S102：将所述元素轨迹转换为矢量图形，并根据元素轨迹的间隔时间将矢量图形组合为字符信息单元。具体地，获取字符信息单元时，首先将所述元素轨迹转换为矢量图形；而后判定相邻两个元素轨迹的间隔时间均大于或等于预设阈值，则将位于这两个元素轨迹的间隔时间区间内的所有矢量图形所对应的矢量组合为一个独立的字符信息单元；进一步地，还可以将字符信息单元转换为文本信息。
S103：将得到的存储矢量图形和/或字符信息单元进行存储。
S104：将矢量图形和/或字符信息单元传送至终端设备。
进一步地，在上述步骤S102中，将所述元素轨迹转换为矢量图形，之后还包括：
分析所述矢量图形；
根据分析结果对矢量图形进行合并、拆分、或叠加处理。
为了更进一步地说明这种输入方法，图2和图3示出了一个更为详尽的使用场景示例，其中，图2为一种具体使用场景中信息输入方法的流程图，图3示出了图2所示方法中映射为文字信息的流程图。
该使用场景以通过移动终端的手势输入文字信息为例，同时处理器和识别模块不位于同一设备上，即处理器所在设备和识别模块所在设备之间通过通信方式进行发送与接收，如图2所示，该方法包括如下步骤：
步骤S201，初始化，即该步骤建立初始化坐标系，用于确定后续运动轨迹的坐标位置，初始化是为了重新开始写字并记录，需要把前一字符符号的矢量轨迹从内存中清除，开始另一单位字符的记录。否则或出现记录和识别的混淆，例如把上一文字的轨迹叠加到第二个文字上。
步骤S202，感知智能笔的轨迹；
步骤S203，将运动轨迹转换为元素图形矢量信息；
步骤S204，累计存储元素图形矢量信息；
步骤S205，判断智能笔智能笔提笔的时间是否大于预设时间阈值，若是则转步骤S206，若否则转步骤S202继续感应运动轨迹；
步骤S206，将累计存储的元素图形矢量信息构成矢量组作为一个信息单元；
步骤S207，字符存储信息单元，可直接输出该字符信息单元至移动终端或通过通信方式传送至其他设备中；
步骤S208，对文字图形矢量组构成的字符信息单元进行文本转换；
步骤S209，存储转换成文本文字的图形矢量组；
步骤S210，判断是否结束信息输入，若是则直接结束，若否，则表明还要继续输入，转至步骤S201重新开始新的输入。
图3是接收端接收信号并映射为文字的流程，包括如下步骤：
步骤S301，接收智能笔的运动轨迹输入信号，可以通过硬件或软件触发来确定当前需要输入信息；
步骤S302，设备端激活文本输入状态；也就是说，步骤S301和S302相当于一个初始化过程，唤醒接收端准备接收数据；
步骤S303，读取智能笔轨迹的矢量信息；
步骤S304，将矢量图形转换成可复制的文字信息。一种实施例中，矢量图形记录了文字或图形抬笔、落笔、笔迹上各像素的空间位置，可能还记录着各笔段之间的时间关系等信息，并对这些信息加以处理，以一定的规则提取特征，由识别模块加以识别，识别模块将所提取的特征与识别特征库的特征相比较，从而识别出文字信息。
至此，文字信息输入完成。
应当理解的是，根据图2和图3的上述步骤，在不脱离本申请的精神和原则下，本领域技术人员可以进行简单的更换、增加或删减步骤。例如，可以将分析与识别信号的步骤都放到感知书写动作的外设上，在外设中将文字识别出来，然后再发送给其他设备端进行存储等其他操作。
在上述具体实施方式中，本发明所提供的基于动作感知的信息输入方法，通过获取书写所产生的运动轨迹，并基于所述运动轨迹得到相邻元素轨迹的间隔时间；其中，所述元素轨迹为从感应书写开始至结束期间所感应到的书写轨迹，所述元素轨迹的间隔时间为前一个元素轨迹结束至后一个元素轨迹开始之间的时间间隔；将所述元素轨迹转换为矢量图形，并根据元素轨迹的间隔时间将矢量图形组合为字符信息单元；将得到的存储矢量图形和/或字符信息单元进行存储。从而通过感应信息输入的轨迹，在不便于用眼的场合下实现盲屏信息输入，在一定范围内上取代其它文字信息输入方式，使手持设备或计算机的使用更具人性化，带动了人机交互模式的创新，解决了现有技术中输入设备和方法需要注视屏幕而导致的使用范围受限的技术问题。
除了上述方法，本发明还提供一种基于动作感知的信息输入系统，用于实施如上所述的方法，在一种具体实施方式中，如图4所示，所述系统包括：
书写感应设备10，用于感应使用者书写所产生的运动轨迹，得到元素轨迹和元素轨迹间隔时间，所述元素轨迹为书写感应设备从感应书写开始至结束期间所感应到的书写轨迹，所述元素轨迹间隔时间为前一个元素轨迹结束至后一个元素轨迹开始之间的时间间隔；
处理器20，用于将元素轨迹转换为矢量图形，并根据元素轨迹间隔时间将矢量图形组合为字符信息单元。具体地，所述处理器包括转换模块和组合模块，其中，转换模块用于将元素轨迹转换为矢量图形，组合模块与所述转换模块相连，用于将在相邻两个均大于等于预设阈值的元素轨迹时间间隔的期间内的所有图形矢量组合为一个独立的字符信息单元。
存储模块30，用于存储矢量图形和/或字符信息单元。
传输模块，所述传输模块用于将矢量图形和/或字符信息单元传送到指定设备，该指令设备例如可以为平板电脑等职能终端。
更为具体地是，书写感应设备10用于感应使用者书写所产生的运动轨迹，该轨迹反应的实际就是包括所有数字、符号、文字、图形等各种信息。书写感应设备可以是触摸屏或手写板，使用者可以通过手写笔或智能笔在其上书写。书写感应设备通过感应书写得到元素轨迹和元素轨迹间隔时间。元素轨迹是指书写感应设备从感应书写开始至结束期间所感应到的书写轨迹，即手写笔或智能笔从智能笔落笔屏幕或手写板到智能笔提笔屏幕或手写板期间所生成的每个独立的轨迹。元素轨迹间隔时间是指前一个元素轨迹结束至后一个元素轨迹开始之间的时间间隔，即书写者每书写完一个元素轨迹后，手写笔或智能笔智能笔提笔屏幕或手写板和下次书写再次智能笔落笔屏幕或手写板期间的时间间隔。
书写感应设备为用户提供一个输入信息的平台，而处理器则是将得到的各个元素轨迹分别转换为矢量图形，并结合元素轨迹间隔时间进行组合处理。具体地，仍参考图4，处理器20包括转换模块21和组合模块22。转换模块21用于将元素轨迹转换为矢量图形，具体转换方法可参考常用的相关技术，在此不作详述。
组合模块22与转换模块21相连，用于将在相邻两个均大于等于预设阈值的元素轨迹时间间隔的期间内的所有图形矢量组合为一个独立的字符信息单元，其中，一个独立的字符信息单元是指由一系列矢量图形组成的一个代表某字符或图形的有序集合，预设阈值可为经验值。为易于理解组合模块的作用，例如，如图5所示，矢量图形A和矢量图形B之间的元素轨迹间隔时间为t1，矢量图形B和矢量图形C之间的元素轨迹间隔时间为t2，矢量图形C和矢量图形D之间的元素轨迹间隔时间为t3，若t1和t3均大于等于预设阈值，而t2小于预设阈值，则由矢量图形B和矢量图形C可构成一个独立的字符信息单元。应理解，当仅得到一个元素轨迹时，智能笔可有设置用于判断使用者是否已完成书写的功能，从而，若仅得到一个元素轨迹时，则将该元素轨迹视为一个独立的字符信息单元。
在实际使用场景中，书写者书写的内容可包括所有数字、符号、文字、图形等各种信息。图6示出了一种实例中在书写笔画构成文字时的基本矢量图形的示意图，特别是针对如汉字、韩文、日文等笔画构成文字，图中从左到右、从上到下分别对应汉字的“横、竖、撇、捺、左弯钩、右弯钩、折、提”几个基本笔画。这些基本笔画构成了基本的矢量图形。可见，组成每一个汉字的字符信息单元包括一系列的矢量图形，书写者在进行书写时可不看屏幕进行手势动作感知，通过这样的方式也可以得到书写的以系列矢量图形存在的内容。
图7示出了利用该系统进行操作控制的一种实例。其中，701所示的矢量图形—“逆横”表示可在输入过程实现删除功能，即如果前一个字符信息单元书写错误，可用701所示的笔画进行删除，可以理解，此时701所示笔画是由一个矢量图形构成了一个字符信息单元；702所示矢量图形—“逆竖”表示可实现切换到下一文档的功能；703所示矢量图形可实现回到第一篇存储文档的功能，相当于回到起始文档，便于在“手势动作感知输入”情况下，不用看屏幕也能确定所在文档的位置；在集成有手势动作感知信息输入智能笔的终端中，在手势动作感知输入程序随终端启动的情况下，704可作为激活“手势动作感知输入”的功能开始进行手势动作感知输入，如果手势动作感知输入程序没有随智能笔启动，即没有在终端的智能笔进程中，要启动手势动作感知输入可以通过进入智能笔界面，正常开启程序激活手势动作感知输入状态；705所示矢量图形(此时即字符信息单元)可做为结束手势动作感知输入并存档的命令。应理解，手势动作感知信息输入智能笔中的各种操控命令并不限于图7所示的手势命令，可自定义相关手势笔画。
手势动作感知信息输入的开始与结束可以利用操作界面来定义开始结束；也可以定义特殊的轨迹动作，例如一个对号是开始，一个叉号是结束；还可以利用例如终端中设有的加速度传感器来定义开始或结束，例如连续晃动两下是开始，晃动一下是关闭等等。
另一种实例中，采用特定的符号或者符号组合作为控制符号，例如采用螺旋线表示后面输入的内容是中文，处理器可以据此对一系列元素图形矢量信息进行更为准确的分析；控制信息可以代表操作命令，例如可以使用两个嵌套的三角形作为打开音乐播放器的命令，智能笔接收到这样的矢量图形后，执行相应的控制操作。
这里以实现汉字“人”的输入过程这一实例为例，进一步说明本实施例，如图8所示，智能笔落笔到智能笔提笔，完成一个元素轨迹“丿”的书写，该元素轨迹被处理器的转换模块转换为相应的矢量图形；智能笔再次智能笔落笔，从智能笔书写完上一个矢量图形“丿”离开屏幕到智能笔再次智能笔落笔，其时间间隔小于预设阈值，所以，可以判断下一笔得到的矢量图形和前一笔的“丿”属于同一字符信息单元；智能笔智能笔落笔到智能笔提笔所书写得到的第二个矢量图形—“ㄟ”，智能笔智能笔提笔后再也没有触摸屏幕，或再次触摸屏幕时其时间间隔大于预设阈值，智能笔即认为这两个矢量图形“丿”(撇)和“ㄟ”(捺)构成一个字符信息单元，其矢量图形跟智能笔在触摸屏上的轨迹完全相似；如将该字符信息单元进一步进行识别，则可把该字符信息单元所代表的系列矢量图形转换成可复制传递的数字化文字。以上为一个汉字的输入过程，多位汉字或其它字符文字的输入过程同理，在此不再重述。
上例中，判断使用者书写完毕智能笔智能笔提笔和再次书写智能笔落笔的时间间隔是否大于预设阈值进行判断，预设阈值为经验值，若是，则将所存储的矢量图形划分为独立的字符信息单元；否则继续感知运动轨迹。也就是说，以书写完毕一次元素轨迹后智能笔智能笔提笔屏幕到再次书写接触屏幕的时间间隔区分字符信息单元，即只要两次智能笔的提笔和落笔时间间隔小于预设时间阈值，则认为所有智能笔书写轨迹为一个字符信息单元，这样，可以方便后续对输入的信息的记录与识别。
与传统的信息输入系统相比，采用本发明所提供的手势动作感知信息输入系统以及利用该系统的智能笔可实现凌空和多种物理界面输入，即可以不借助眼睛实现信息的记录与存储，从而，在不便于用眼的任何场合下实现凌空和多种物理界面文字信息输入，带动了人机交互新模式的创新，不仅能够在一定范围内上取代其它信息输入方式，而且使手机或电脑等设备的使用更具人性化。
进一步地，如图9所示，该系统还包括识别模块40，识别模块40用于将字符信息单元转换为文本信息。
本领域技术人员可以采用常用的模式识别算法来识别文字，例如可以通过SVM特征的训练集进行匹配识别，也可以使用神经网络的方法，本申请对此不做限制。
应理解，处理器20和识别模块40之间、或者存储模块30与识别模块40之间隐含着发送与接收的动作，即，将处理器20和/或存储模块40中的字符信息单元发送到识别模块40中进行分析处理以得到相应的文字、图形等可视信息或控制信息，而识别模块40则有接收发送来的字符信息单元这个动作，换句话说，即处理器20和识别模块40之间、或者存储模块30与识别模块40之间可以通过有线或无线的方式进行传输，其中，有线通信方式可以光通信，也可以是USB通信或者其他接口协议的总线方式通信，而无线通信方式可以是WIFI通信，或者蓝牙通信或者红外通信等，当然也可以是3G通信；本申请对此不做限制。也就是说，处理器、存储模块及识别模块可以合并为一个器件，也可以分处于两个或者三个不同的器件上。
当分处于不同的器件时，本实施例实质上还包括传输模块，用于将矢量图形和/或字符信息单元传送到指定设备。具体传输方式可以是如前述的有线或无线方式，一种较佳方式是采用无线通讯传输，其可以是WIFI通信，或者蓝牙通信，或者红外线通信、或者3G通信等，本申请对此不作限制。
本实施例的手势动作感知信息输入系统以及具有该系统的智能笔并不是每输入一个文字就进行识别，而是在书写输入过程中仅通过转换模块和组合模块进行处理然后记录，至于是否需要进一步识别，可根据用户实际需要设定，也就是说信息的识别与信息的输入实质上是分开进行的，增加了信息输入的灵活性。
更进一步地，该系统还包括分析处理模块50，分析处理模块50用于对矢量图形进行分析，根据分析结果对矢量图形进行合并、拆分、或叠加处理。
如图10所示，通过分析处理模块50对矢量图形进行分析，并根据分析结果对矢量图形进行合并、拆分、叠加等处理，以便消除书写过程中由于停顿、落笔轻重等造成的字符信息单元划分错误，使之更加符合书写者的原意，具体的分析处理算法可采用常用的相关算法实现，本申请对此不作限制。例如采用螺旋线表示后面输入的内容是中文，处理器可以据此对一系列元素图形矢量信息进行更为准确的分析；存储模块此时可存储原始得到的矢量图形，也可存储经分析处理后的矢量图形。
在上述具体实施方式中，本发明所提供的基于动作感知的信息输入系统，通过获取书写所产生的运动轨迹，并基于所述运动轨迹得到相邻元素轨迹的间隔时间；其中，所述元素轨迹为从感应书写开始至结束期间所感应到的书写轨迹，所述元素轨迹的间隔时间为前一个元素轨迹结束至后一个元素轨迹开始之间的时间间隔；将所述元素轨迹转换为矢量图形，并根据元素轨迹的间隔时间将矢量图形组合为字符信息单元；将得到的存储矢量图形和/或字符信息单元进行存储。从而通过感应信息输入的轨迹，在不便于用眼的场合下实现盲屏信息输入，在一定范围内上取代其它文字信息输入方式，使手持设备或计算机的使用更具人性化，带动了人机交互模式的创新，解决了现有技术中输入设备和方法需要注视屏幕而导致的使用范围受限的技术问题。本发明还提供一种智能终端，所述智能终端包括：处理器和存储器；
所述存储器用于存储一个或多个程序指令；
所述处理器，用于运行一个或多个程序指令，用以执行如上所述的方法。
具体地，该智能终端为具有上述信息输入系统的智能笔，包括书写感应设备、处理器、分析处理模块、存储模块和识别模块，本实施例还可包括传输模块，各模块的描述可参考前述实施例中对应的模块的描述，在此不再重述，当然一种较佳的方案中，处理器的组合模块是对经分析处理模块分析处理后的矢量图形进行组合。
进一步地，本实施例提供的智能终端包括信息输入智能笔，该智能笔所应用的设备可以是手机、平板电脑、袖珍音乐或视频播放器等一切带有触摸屏的便携移动设备。
如图11所示为一应用例，目前移动终端如手机已是随处可见的通信设备，且具有较大的存储容量，因此这里采用具有触摸屏的移动终端替代书写感应设备和存储模块，通过移动终端的触摸屏感知使用者的智能笔的笔画动作或者图形文字动作，得到相应的元素轨迹，然后采用处理器将元素轨迹转换为矢量图形，将矢量图形存储在移动终端上或者通过通信方式传送至指定的设备如平板电脑、笔记本或台式计算机等电子设备进行存储。同时存储的矢量图形，通过文字识别算法在处理器中进行处理，把原始矢量信息转换成可复制及传递文本信息。由于通过移动终端触摸屏进行信息输入时，触摸屏不仅可以显示代表书写信息的运动轨迹，也可以不需要眼睛注视而不显示书写轨迹，从而实现默写输入。
本发明还提供一种计算机存储介质，所述计算机存储介质中包含一个或多个程序指令，所述一个或多个程序指令用于执行如上所述的方法。
在本发明实施例中，处理器可以是一种集成电路芯片，具有信号的处理能力。处理器可以是通用处理器、数字信号处理器(Digital Signal Processor，简称DSP)、专用集成电路(Application Specific工ntegrated Circuit，简称ASIC)、现场可编程门阵列(FieldProgrammable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。处理器读取存储介质中的信息，结合其硬件完成上述方法的步骤。
存储介质可以是存储器，例如可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。
其中，非易失性存储器可以是只读存储器(Read-Only Memory，简称ROM)、可编程只读存储器(Programmable ROM，简称PROM)、可擦除可编程只读存储器(Erasable PROM，简称EPROM)、电可擦除可编程只读存储器(Electrically EPROM，简称EEPROM)或闪存。
易失性存储器可以是随机存取存储器(Random Access Memory，简称RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(Static RAM，简称SRAM)、动态随机存取存储器(Dynamic RAM，简称DRAM)、同步动态随机存取存储器(Synchronous DRAM，简称SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM，简称DDRSDRAM)、增强型同步动态随机存取存储器(EnhancedSDRAM，简称ESDRAM)、同步连接动态随机存取存储器(Synchlink DRAM，简称SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM，简称DRRAM)。
本发明实施例描述的存储介质旨在包括但不限于这些和任意其它适合类型的存储器。
本领域技术人员应该可以意识到，在上述一个或多个示例中，本发明所描述的功能可以用硬件与软件组合来实现。当应用软件时，可以将相应功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质，其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。
以上的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的技术方案的基础之上，所做的任何修改、等同替换、改进等，均应包括在本发明的保护范围之内。

Claims (10)

1.一种基于动作感知的信息输入方法，其特征在于，所述方法包括：
获取书写所产生的运动轨迹，并基于所述运动轨迹得到相邻元素轨迹的间隔时间；其中，所述元素轨迹为从感应书写开始至结束期间所感应到的书写轨迹，所述元素轨迹的间隔时间为前一个元素轨迹结束至后一个元素轨迹开始之间的时间间隔；
将所述元素轨迹转换为矢量图形，并根据元素轨迹的间隔时间将矢量图形组合为字符信息单元；
将得到的存储矢量图形和/或字符信息单元进行存储。
2.根据权利要求1所述的信息输入方法，其特征在于，所述将所述元素轨迹转换为矢量图形，并根据元素轨迹的间隔时间将矢量图形组合为字符信息单元，具体包括：
将所述元素轨迹转换为矢量图形；
判定相邻两个元素轨迹的间隔时间均大于或等于预设阈值，则将位于这两个元素轨迹的间隔时间区间内的所有矢量图形所对应的矢量组合为一个独立的字符信息单元；
将字符信息单元转换为文本信息。
3.如权利要求2所述的信息输入方法，其特征在于，在将得到的存储矢量图形和/或字符信息单元进行存储之后，所述方法还包括：
将矢量图形和/或字符信息单元传送至终端设备。
4.如权利要求3所述的信息输入方法，其特征在于，将所述元素轨迹转换为矢量图形，之后还包括：
分析所述矢量图形；
根据分析结果对矢量图形进行合并、拆分、或叠加处理。
5.一种基于动作感知的信息输入系统，用于实施如权利要求1-4任一项所述的方法，其特征在于，所述包括：
书写感应设备，用于感应使用者书写所产生的运动轨迹，得到元素轨迹和元素轨迹间隔时间，所述元素轨迹为书写感应设备从感应书写开始至结束期间所感应到的书写轨迹，所述元素轨迹间隔时间为前一个元素轨迹结束至后一个元素轨迹开始之间的时间间隔；
处理器，用于将元素轨迹转换为矢量图形，并根据元素轨迹间隔时间将矢量图形组合为字符信息单元；
存储模块，用于存储矢量图形和/或字符信息单元。
6.根据权利要求5所述的信息输入系统，其特征在于，所述处理器包括：
转换模块，用于将元素轨迹转换为矢量图形；
组合模块，与所述转换模块相连，用于将在相邻两个均大于等于预设阈值的元素轨迹时间间隔的期间内的所有图形矢量组合为一个独立的字符信息单元。
7.根据权利要求6所述的信息输入系统，其特征在于，还包括：
传输模块，所述传输模块用于将矢量图形和/或字符信息单元传送到指定设备。
8.权利要求6所述的信息输入系统，其特征在于，还包括：
识别模块，用于将字符信息单元转换为文本信息；
和/或分析处理模块，用于对矢量图形进行分析，根据分析结果对矢量图形进行合并、拆分、或叠加处理。
9.一种智能终端，其特征在于，所述智能终端包括：处理器和存储器；
所述存储器用于存储一个或多个程序指令；
所述处理器，用于运行一个或多个程序指令，用以执行如权利要求1-4任一项所述的方法。
10.一种计算机存储介质，其特征在于，所述计算机存储介质中包含一个或多个程序指令，所述一个或多个程序指令用于执行如权利要求1-4任一项所述的方法。
CN202111128821.XA 2021-09-26 2021-09-26 一种基于动作感知的信息输入方法、系统和智能终端 Pending CN113900515A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111128821.XA CN113900515A (zh) 2021-09-26 2021-09-26 一种基于动作感知的信息输入方法、系统和智能终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111128821.XA CN113900515A (zh) 2021-09-26 2021-09-26 一种基于动作感知的信息输入方法、系统和智能终端

Publications (1)

Publication Number Publication Date
CN113900515A true CN113900515A (zh) 2022-01-07

Family

ID=79029215

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111128821.XA Pending CN113900515A (zh) 2021-09-26 2021-09-26 一种基于动作感知的信息输入方法、系统和智能终端

Country Status (1)

Country Link
CN (1) CN113900515A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117633276A (zh) * 2024-01-25 2024-03-01 江苏欧帝电子科技有限公司 一种书写轨迹录播方法、系统及终端

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102722240A (zh) * 2011-05-18 2012-10-10 北京大学深圳研究生院 一种文字信息输入系统、手写输入设备及方法
CN102929534A (zh) * 2011-09-30 2013-02-13 北京大学深圳研究生院 一种盲写信息输入系统和方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102722240A (zh) * 2011-05-18 2012-10-10 北京大学深圳研究生院 一种文字信息输入系统、手写输入设备及方法
CN102929534A (zh) * 2011-09-30 2013-02-13 北京大学深圳研究生院 一种盲写信息输入系统和方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117633276A (zh) * 2024-01-25 2024-03-01 江苏欧帝电子科技有限公司 一种书写轨迹录播方法、系统及终端
CN117633276B (zh) * 2024-01-25 2024-06-07 江苏欧帝电子科技有限公司 一种书写轨迹录播方法、系统及终端

Similar Documents

Publication Publication Date Title
JP5423525B2 (ja) 手書き入力装置、手書き入力方法及び手書き入力プログラム
WO2015081606A1 (zh) 删除显示在触摸屏上的文字的方法及电子设备
US20130314337A1 (en) Electronic device and handwritten document creation method
US20130300675A1 (en) Electronic device and handwritten document processing method
US10684772B2 (en) Document viewing apparatus and program
WO2004097722A1 (ja) 手書き文字入力装置および手書き文字入力処理方法
US20130300676A1 (en) Electronic device, and handwritten document display method
US20140365878A1 (en) Shape writing ink trace prediction
EP4030749B1 (en) Image photographing method and apparatus
US20160210276A1 (en) Information processing device, information processing method, and program
US9304679B2 (en) Electronic device and handwritten document display method
US20140079317A1 (en) Electronic apparatus and handwritten document processing method
CN113900515A (zh) 一种基于动作感知的信息输入方法、系统和智能终端
US9940536B2 (en) Electronic apparatus and method
US20160334941A1 (en) Method and Device for Optical Handwriting Recognition
CN106845190B (zh) 显示控制系统及方法
CN112639696A (zh) 手写板、手写板装置及书写控制方法
CN110007748B (zh) 终端的控制方法、处理装置、存储介质及终端
US20170085784A1 (en) Method for image capturing and an electronic device using the method
JP5565886B2 (ja) 入力装置、入力方法、及びプログラム
JP6464055B2 (ja) 文字処理システム及び文字処理プログラム
CN102929534A (zh) 一种盲写信息输入系统和方法
JP4148867B2 (ja) 筆跡処理装置
KR101348763B1 (ko) 손동작에 의한 인터페이스 조작 장치 및 방법, 그리고 컴퓨터로 읽을 수 있는 기록매체
JP2016173710A (ja) 情報入力装置、およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination