CN1167030C - 使用多分辨率模型的手写字符记录的方法 - Google Patents

使用多分辨率模型的手写字符记录的方法 Download PDF

Info

Publication number
CN1167030C
CN1167030C CNB991027167A CN99102716A CN1167030C CN 1167030 C CN1167030 C CN 1167030C CN B991027167 A CNB991027167 A CN B991027167A CN 99102716 A CN99102716 A CN 99102716A CN 1167030 C CN1167030 C CN 1167030C
Authority
CN
China
Prior art keywords
stroke
character
model
models
memory block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB991027167A
Other languages
English (en)
Other versions
CN1239260A (zh
Inventor
���ϡ�˹����
卡南·帕塞萨拉斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Motorola Mobility LLC
Google Technology Holdings LLC
Original Assignee
Motorola Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Motorola Inc filed Critical Motorola Inc
Publication of CN1239260A publication Critical patent/CN1239260A/zh
Application granted granted Critical
Publication of CN1167030C publication Critical patent/CN1167030C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/24Character recognition characterised by the processing or recognition method
    • G06V30/248Character recognition characterised by the processing or recognition method involving plural approaches, e.g. verification by template match; Resolving confusion among similar patterns, e.g. "O" versus "Q"
    • G06V30/2504Coarse or fine approaches, e.g. resolution of ambiguities or multiscale approaches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Character Discrimination (AREA)

Abstract

字符模型被导出以用于若干字符。该字符模型被分为几组。从该组内每个字符模型中提取出笔画。根据从该组内字符模型中提取出的笔画,创建用于该组的笔画模型。对该组内每个字符模型中的每一画,都存储了与该笔画最接近的笔画模型的索引。

Description

使用多分辨率模型的手写字符记录的方法
技术领域
本发明一般涉及使用多分辨率模型的手写字符识别。
背景技术
诸如中文和日文等亚洲语言具有几千种字符。在中国,所使用的字符集为简化汉字,国标(GB)编码标准定义了大约6800种字符。GB编码标准为当今的计算机系统中所支持的所有简化汉字定义了两字节码。台湾和香港等所使用的字符集是传统中文的地方,Big 5编码标准定义了将近13000种汉字。Big 5编码标准为当今计算机系统中所支持的所有传统中文字符定义了两字节码。日本工业标准208(JIS 208)编码标准定义了将近6300种日文汉字字符。当字符的数目太大时,字符的键盘输入变得很麻烦。在这种情况下,基于手写识别的输入方法是一种有吸引力的可选择方案。
可通过比较手写输入和词汇表中感兴趣的所有字符的模型集合来实现手写识别系统,计算输入和所存模型中每一个的距离尺寸,并从与手写输入具有最小距离的模型中选出一个或多个备选字符。对于可应用于中文及日文汉字字符识别的手写识别,可存在几种检索结果。在第一种方法中,分级表示被用于模型字符。在这种方案中,字符被表示为许多被称为字根的以特定顺序写入的小单元的集合。这些字根本身被作成笔顺序列的模型。识别通常包括将手写输入分割为几个字根,之后将它们与所存根的模型相比。虽然这种方案有效地存储了字符模型,但在识别前的分割处理限制了识别器的精确性。
在第二种方法中,模型作为整个字符存储。因为这种方法并不依赖于在识别前将输入分割成若干字根,所以通常能够得到更精确的识别器。但是,用于存储这些字符模型所需的存储器数量,以及计算量要求相对较大,并在一些应用中受到重大限制。
另外,用于中文及日文汉字字符的手写识别系统可以解决笔画顺序变化问题,也可解决笔画数目变化问题,这些笔画都是用来写同一个字符的。通常用于以笔画顺序处理变化的一种方法是,依据一些启发而重新排列这些笔画。通过这样作,避免使所写笔画必须具有精确的先后顺序。使用这样一种方案的缺点是:重新排列笔画很困难,且通常是识别系统中的错误源。
另一种方法是为每一个字符保留单独的模型,并在识别系统运行期间产生几种笔画顺序的变化。然而,这种方法,会需要额外的计算资源来从基本字符模型中产生笔画顺序的变化。
其它方法包括为每个字符保留单独的模型以及在运行期间产生新模型,产生新模型是通过连接一个或多个笔画,或者是,使用更多的依据随机编程的有效的匹配算法,以便甚至是在笔画数目不同的情况下,也能将手写输入与所存字符模型相比。然而,这两种技术在识别系统的运行期间内都需要额外的计算能力。
当今市场上的小手持设备不断增长。这些装置执行的功能从保存地址和相关信息一直到诸如寻呼及蜂窝式电话等更高级的功能。在许多这样的手持设备中,其有效处理能力与在传统个人计算机中的相比非常小。这样,在个人计算机上的手写识别所使用的算法就不能很好地用在大多数这种手持设备上。
发明内容
这样,对于手写识别器存在一种需求,即在一笔一笔地写入字符或用有限的笔画连贯性写入字符时,该手写识别器要有非常高的处理速度、合适的存储器需求以及高精确度,同时也能解决写同一个字符所用的笔画顺序的变化问题,以及写同一个字符所用的笔画数目的变化问题。
本发明提供一种使用多分辨率模型的手写字符识别的方法,该方法包括:将字符模型存储在存储器块中,其特征在于一个存储器块包括具有特定笔画数的字符模型;确定手写输入的笔画数;存储对应于手写输入的预定数目的笔画模型,确定一个字符所需的该笔画模型的数目与创建该字符所需的笔画的数目成反比;根据手写输入的笔画数,选择一个合适的存储器块;对合适的存储器块内的字符模型计算距离度量,以创建一个距离数组;对该距离数组分类,以创建一个分类表;从该分类表中选出至少一个备选者;以及报出该分类表中至少一个备选者。
附图说明
以下,将通过仅参照了附图所举的例子来说明本发明的最佳实施例,其中:
图1说明了笔画数目的变化;
图2说明了摘录出来用于表示本发明最佳实施例中的笔画的14种特征;
图3说明了一对中文字符的表示方法;
图4说明了字符模型中笔画数目变化的例子;
图5说明了字符模型中笔画顺序变化的例子;
图6说明了依据本发明最佳实施例所描画的笔画模型;
图7说明了一个依据本发明最佳实施例描绘了笔画模型的特征的表;
图8说明了依据本发明最佳实施例,如何将字符模型中的笔画用与之最相近的笔画模型来表示;
图9说明了相对于传统中文字符笔画的标准数目而描绘的大量的字符图;
图10说明了相对于简化中文字符笔画的标准数目而描绘的大量的字符图;
图11说明了依据本发明最佳实施例的具有多分辨率字符模型的识别系统的流程图;
图12说明了依据本发明最佳实施例的,用于字符模型的存储器装置的方框图;
图13说明了依据本发明最佳实施例的识别设备的方框图;以及
图14说明了依据本发明最佳实施例的图13中的识别设备的流程图。
具体实施方式
下面,将说明使用多分辨率模型的用于手写字符识别的方法。本发明提供了一种新颖的用于识别手写字符(例如中文或日文汉字字符)的技术,它能在一笔一笔地写入字符或用有限的笔画连贯性写入字符时,具有很高的处理速度、合适的存储器需求及高精确度。本发明也解决用来写同一个字符的笔画顺序的变化问题以及笔画数目的变化问题。本发明说明了如何导出一个字符模型集合以及笔画模型集合,并使用该字符模型集合以及该笔画模型集合,以方便手写识别。
在最佳实施例中,用于字符的模型以可变分辨率的方式存储。字符被作成一个若干笔画的组合(即集合或序列)。将一个字符想象为,但又不仅限于此的,可表示成单个笔画或一个笔画序列的书写语言的一个单个元素,这是很方便的。一画是在铁笔接触书写面(例如一个数字板)到铁笔被抬离书写面时墨水的片段。使用一个聚合过程(或其它装置),就可得到小量的笔画模型。将笔画模型想象成,但并不仅仅限于,一个连续墨水的模板,这是很方便的。依次使用这些笔画模型,以便能以压缩形式存储字符模型。将字符模型想象成,但并不仅仅限于,被表示为笔画模型序列的字符,这是很方便的。通过改变笔画模型的数目,以及改变得到该笔画模型所使用的数据,就可得到几种笔画模型的集合。当笔画模型的数目增加时,用于表示笔画的分辨率也增加了。这样,可根据需要在不同的分辨率处存储特征模型。以下所说明的例子针对中文及日文汉字字符。然而,本发明也能应用于以任意语言写入的手写字符及/或输入。
中文和日文汉字字符的最基本的单元是笔画。对于每个字符,其笔画的标准数目是确定的。与英文中的草书相似,在书写中文及日文汉字字符时,连续的字符也经常是连在一起的。例如,图1显示了以不同的笔画数表示的中文字符的两个模型10和12。第一个模型10显示了用四画写出的中文字符,该四画是这个字符的标准笔画数目。第二个模型12显示了一种通用书写字体,即仅使用三画就写出该中文字符。
当用来写一个字符的笔画数符合该字符的标准笔画数,则该书写字体被称作书写的“印刷”或“一笔一画”的字体。当两个或更多个连续的笔画被连在一起时,该书写字体被称作书写的“草”或“连笔”字体。中文字符的第一个模型10显示了印刷体字,而中文字符的第二个模型12则显示了书写同一个字符的草体字。在这个特定的例子中,将第一模型10中标记为2和3的笔画合并,就可得到第二模型12中标记为2的单个笔画。
笔画由特征集合来表示。以下说明代表了两种特征类型的组合,一种是基于笔画的大小,另一种是基于笔画的形状。由数字板上收集到的手写输入在被提取出笔画特征之前,先要经过预处理。数字板一般收集墨水,并将这些墨水反映为点的集合。对于每个点,能反映出铁笔尖的x和y坐标,以及相关的铁笔的上/下状态。预处理包括以下步骤:大小的标准化、平滑、重复采样以及方框滤波。
预处理的第一步是大小的标准化。将输入的墨水标刻,以便该输入墨水能符合标准大小的方框。在执行标准化的同时,输入的纵横比被保留下来。标准化所用的方框的大小为16383,所以用14比特足以表示一个坐标值。使用的方框大小为16383,所以对于预处理的平滑阶段(步骤2)有充足的分辨率。除了能够适应14比特(14比特的最大无符号数为16383)外,对于方框的大小为16383没有什么特别的意义。一般来说,从数字板上收集的墨水坐标位于0到500的范围内。选择大小为16383的方框,以便该方框能比典型的坐标值大许多。这使得平滑步骤更有效。
预处理的第二步是平滑。平滑是这样实现的,即通过顺序将当前点、紧挨着当前点的前面两个点和紧随当前点的后两个点加权平均,来及时替代当前点。数学上,可将上述操作表示为:
X i , new = Σ j = i - 2 i + 2 w j × x j Σ j = i - 2 i + 2 w j (等式1)
其中wj是用来计算加权平均的加权术语。所使用的加权矢量为:
(等式2)
注意这样选择的加权,使得在计算机中使用移动就可实现等式1中的乘法和除法。等式1中的分母增加到8,它是通过右移3位而实现的。
预处理的第三步是重复采样。重复采样是在每一对连续点之间线性内插三个点而实现。
预处理的第四步是方框滤波。方框滤波是这样实现的,即开始于第一点,并用包围该第一点的固定尺寸定义一个方框。任何落入该方框内的后续点被简单地除去。落在该方框外的第一点被保留,且该方框也被移动,以使该方框成为围绕新点的中心。在看过原始墨水中的所有点之前,一直重复进行这种方框滤波处理。方框滤波对于消除墨水中的抖动是很有用的。方框滤波还具有额外的益处,即能产生在空间上或多或少是等间距的连续的墨水点。
在预处理之后,14个特征被提取出来,以用于输入的每个笔画。必须注意的是所提取出的特征数并不仅限于14个,而可以是任意数目。图2说明了提取出的用来表示本发明最佳实施例中一个笔画的14个笔画特征。在图2中,dx14和dy16是笔画的大小特征,同时也是x和y面积的扩展。余下的12个特征都是依据笔画的形状。该笔画被按照大致相等的弧长分为12段。由于方框滤波器在预处理时产生了在空间上大致相等的连续的墨水点,所以将每个笔画分为12段是经济合算的。12个形状特征是直线与12条线段中每一个的末端点用直线连接所形成的夹角,在图2中它们被显示为[θ1、θ2、**、θ12]。大小特征和形状特征都在0到255的范围内被刻度,这样每个特征值都能用1字节进行存储。这样,使用14个特征的笔画就可用14字节进行存储。必须注意,由于不存在依赖于字符内笔画的绝对位置的特征,所以笔画的特征是平移不变的。
可使用各种公制单位来测量两个笔画间的相似处。两个笔画之间特征矢量的Euclidean或Manhattan距离是可以使用的公制单位的实例。在这一实施例中,本发明使用了Manhattan米来测量笔画间的相似性。如果两个笔画分别具有特征矢量[dxdyθ1、θ2、......、θ12]以及[ dx  dy  θ1、 θ2、......、 θ12],则其Manhattan距离是
d = | dx - dx ‾ | + | dy - dy ‾ | + Σ i = 1 12 | θi - θi ‾ | (等式3)
必须注意也可使用加权的Manhattan距离。例如,不会希望对外形特征和大小特征进行不同的加权。
字符是由一个或多个笔画以特定顺序书写而成的。数量上,可使用特征矢量来表示一个字符,所述特征矢量是构成该字符每个笔画的连续的特征矢量。
在中文和日文汉字字符中,有几组字符看起来非常相象。例如,图3中说明了一对看起来非常象的中文字符18和20。由于用来代表一个笔画的特征并未含有该笔画在字符内的位置信息,所以图3所示的两个字符18和20的特征矢量是完全相同的。如图所示,本发明增加了一些特征,以便能区分这些看起来相似的字符,这是通过将每个笔画的末端点与下一个笔画的起始点用直线连接起来作为一个附加的、假想的笔画而实现的。这样,在图3所示的例子中,四条附加的直线笔画22、24、26、28以及30、32、34、36被分别包括在对该字符的表示中,并用虚线圈出。
插在笔画4和5之间的直线笔画28或36为图3所示的两个字符提供了一种区别。当手写字符有n个笔画时,在每对连续笔画之间需要插入n-1条直线笔画。因为对于每个笔画有14个特征,所以用来表示具有n个笔画的一个字符的特征数目为14(2n-1)。注意,手写字符的特征矢量依赖于书写笔画的顺序。使用同一个笔画集合但使用不同的笔画顺序所写的字符会产生不同的特征矢量。
对于具有相同数目笔画的两个手写字符,可通过计算这两个字符中相应笔画之间的笔画距离总和而在数量上比较它们。当计算两个字符之间的距离度量时,对插入每对连续笔画之间的直线笔画的处理与对所写的真实笔画的处理相同。
通过对收集到的来自不同书写者的手写采样的统计分析,可得到每个字符的字符模型。本发明模仿手写中文和日文汉字字符的两个主要的变化:用来写该字符的笔画数目的变化,以及写这些笔画的顺序的变化。
从技术上说,任何字符都可用一个单独的笔画写出,而不管为该字符所指定的笔画的标准数目。然而,实际上笔画并不是随意连接的,而且还可以发现笔画连贯性的特定图案。再参见图1,图1显示了使用不同笔画数目书写一个中文字符的例子。正如先前所说明的那样,第一模型10是使用标准数目的笔画,该数目为4,所写的中文字符,而第二模型12显示了通常所用的手写体,这种手写体只用3画书写该中文字符。通过分析收集到的来自不同书写者的手写采样,可得到每个字符最常用笔画的数目,而且可用该信息创建字符模型。
用相同的笔画数目所写的同一个字符的两个手写采样也可能会由于所写笔画顺序不同而不同。另一个变化来自连笔书写,在这种书写中,两个或更多个笔画集合连在一起,并被写为一个单独的笔画。在这种情况下,通过笔画连接的位置可引入附加变化。为创建字符模型,以便能计算笔画顺序以及笔画连续图案的变化,需要再次分析来自不同书写者的手写采样以提取出一些通用的书写体。执行上述操作使用了众所周知的聚合分析技术。例如,一个分配器算法是一种聚合过程。在分配器算法中,将每个采样一开始就随意地分配给K束中的一个,束的数目K是预先确定的。聚合集的好坏程度F是由以下等式表示的:
F = Σ k = 1 K 1 S k - 1 Σ p , q ∈ C k d ( p , q ) (等式4)
在等式4中,Sk是第k束中的采样数目,Ck指第k束,p和q第k束中的两个普通采样,d(p,q)是采样p和q之间的距离。在聚合的一个周期中或其一个时间段开始时,每个采样被从其当前束移到能引起等式4所示“良好”程度F最大程度地减小的束处。如果将采样移动到其它任意的束并不能使值F减小,则该采样不能被简单地移动到另一个新束处。在一个时间段结束时,检测移动的采样数。如果移动的采样数大于零,则聚合的另一个时间段就开始了。如果一个时间段结束时的移动的数目为零,则聚合过程就停止了。在聚合结束时,所有相似的采样都被收集在同一束内,这里相似性被定义为用采样间的距离d(p,q)表示。这样,来自每一束的典型采样被选作一个字符模型。这样,就创建了K个字符模型,这里K是聚合算法中所用束的数目。
对每个字符的模型数的选择是致关重要的一环。具有很多模型将允许许多不同的手写体能够被识别出。然而,具有许多模型,通常意味着大的存储器及大的计算需求。本发明使用两种试探法来限制为每个字符所创模型的数目。使用第一种试探法,K的几个值试图从1开始,并且每次增加K。当经适当标准化的分数F在一个集合门限之下时,聚合处理停止,使用K的当前值。使用第二种试探法时,对K的最大限制受每个字符的制约。甚至是在经适当标准化的分数F大于集合门限时,也不允许聚合数目超过最大限制。通过分析来自不同书写者的手写采样,创建了简化手写模型及传统字符模型。除了笔画的标准数目外,只要需要,就可将具有最多为一画连接的各种变型也制成模型。
图4说明了字符模型中笔画数目变化的例子。在图4中的第一模型38显示了使用8画所写中文字符,这8画是书写该字符的标准笔画数。第二模型40和图4的第三模型42都显示了用7画所写的同一个中文字符。虽然第二模型40和第三模型42都具有相同数目的笔画,但它们笔画的连接位置是不同的。在第二模型40中,在第一模型38中标记为1和2的笔画连在一起,并被写成一个单独的笔画44。在第三模型42中,在第一模型38中标记为6和7的笔画连在一起,并被写成一个单独的笔画46。
图5说明了一个按字符模型中的笔画顺序变化的例子。图5显示了用6画书写的一个中文字符的两个模型48和50。这两个模型48和50的区别在于所写的标记为3和4的笔画顺序不同。
在手写识别系统中,存储字符模型,以用于单词表中所需的所有字符。为存储一个字符模型,需要存储该模型中所有笔画的特征。为解决这个问题,本发明创建了小量的笔画模型,所以能依据笔画模型表示字符模型。这样,在接收到手写输入之后,笔画就被从手写输入中提取出来了。计算一组特征,以用于手写输入中的每个笔画。存储字符模型,以用于若干字符。至少有一个字符模型是由一些笔画组成的,而这些笔画又是从至少一组笔画模型中选出的。最后,计算从手写输入中提取出的笔画之间,以及至少一个字符模型的笔画之间的距离度量。
如上所述,通过对收集到的来自字符模型的笔画进行聚合分析,从而得到笔画模型。使用K均值聚合算法来创建笔画模型。然而,也可使用其它聚合算法来得到相似的结果。为使模型的笔画更加完善,本发明使用一种增加的聚合方案,该方案推导出了预定数目的笔画模型。对于每个笔画,计算该笔画和最近的一个笔画间的距离度量,并根据这一距离度量,按增加的顺序对这些笔画进行分类。这样,将具有最大数目模型误差的固定百分比的笔画分开。通过聚合,可将具有最大数目模型误差的固定百分比的笔画用来推导出附加的笔画模型。例如,可使用在分类表末尾的百分之五十的数据来推导出附加笔画模型。可使用聚合,从而分离具有最大数目模型误差的固定百分比的笔画,并能使用固定百分比的笔画以推导出附加笔画模型,这种聚合可重复进行。
在一个实施例中,使用标准数目的笔画以及使用一笔画连接来创建用于简化的及传统的中文字符。首先,创建38个笔画模型,之后,笔画模型的数目逐渐增加到85个、125个,最后达到141个。以两种不同方式显示了这个例子的结果。图6显示了141个笔画模型的绘图版。所有的笔画模型都被绘制成相同的比例,而小弧线表示该笔画的开始。图7中显示了141个笔画的真实特征。头两个特征是该笔画的x和y维,剩余的12个特征是标度的角度,以便其范围能从0至255。必须注意也可使用人工插在笔锋向下的笔画间的直线笔画来创建模型。在笔锋向下和笔锋向上的直线笔画之间没有区别,这样,就允许笔锋向下和笔锋向上的直线笔画共享该模型。
对于具有大量笔画的手写字符的机器识别通常要比对具有小量笔画的字符的识别容易。对具有大量笔画的手写字符的机器识别通常较容易的原因是:笔画数目越多,该字符越不会与其它字符混淆。一般来说,由于具有大量笔画的字符与具有小量笔画的字符相比,更易识别,所以,最好希望将表示字符模型所需的分辨率制成依赖于该字符的笔画数目。将用于具有大数目笔画字符的模型以低分辨率存储,这样节省了用来识别该字符的存储器和处理时间。
创建多分辨率模型的第一实施例具有几组笔画模型,这些笔画模型是以被制作成模型的字符内的笔画数目为基础的。在导出用于若干字符的模型后,将字符模型分组。例如,可将字符模型分类为三组,其中每组内字符模型的笔画数目都在一个指定范围内。具有1到5画之间的小数目笔画的字符模型落入第一组。具有6到10画之间的中等数目笔画的字符模型落入第二组。最后,具有大于10画的所有字符模型落入第三组。创建三组分离的笔画模型使用了如上所述的聚合技术,这种创建是以从三组字符模型中的每一个提取出的笔画数据为基础的。因为第一组中任意一个字符模型的笔画数目都比第二组中任何一个字符模型的笔画数目要小,所以在第一集合中的笔画模型数目要比第二集合中的笔画模型的数目要大。在同一个方面,由于第二组内任何一个字符模型的笔画数目比第三组内任何一个字符模型的笔画数目要小,所以第二集合内的笔画模型数目大于第三集合内的笔画模型的数目。这样,依据该字符笔画的用来表示字符模型的分辨率直接与笔画模型的数目相关。笔画模型的数目越多,分辨率也越高。
为每一组字符模型创建的笔画模型的数目与该组内字符模型中的笔画数目相反。对每个字符模型,则选择用于那组字符的笔画模型的集合。对于一组之中每个字符模型的每一画,存储了最好地近似了该笔画的笔画模型的索引。
在上述例子中,由于第一组具有最少的笔画数,所以可以通过创建一个更大数目的笔画模型,从而用更高的分辨率来表示该字符模型。第三组具有最多数目的笔画,这样,少量的笔画模型足以表示这一组内的字符模型。在上述例子中,字符模型被分为三组,这刚好说明了多分辨率模型的思想。从上述的说明中,对本技术领域人员来说,可以很显然地看出可使用多于三个组来创建多分辨率模型。在极端的情况下,对于有可能的笔画数目,可创建分离的笔画模型集合。
创建多分辨率模型的第二实施例是直接存储笔画特征,而不论笔画和最近的笔画模型之间的距离度量是否超过了门限值。用任何一个笔画模型都不能模拟得很好时,这种方法对于模拟该外形笔画是尤其有用的。
在本发明的最佳实施例中,对于那些笔画数目小于三的字符模型,根本不会使用笔画模型。代替这些笔画模型的是,直接存储用于每个字符模型内的每画的14个特征。对于那些具有三个或更多笔画的字符模型,使用图6所示的141个笔画模型来表示这些笔画。
图8显示了一个例子,该例子显示了依据本发明最佳实施例,一个字符模型中的笔画是如何被与它们最接近的笔画模型所表示的。在图8中所示的字符模型52具有四个笔锋向下的笔画,它总共给出7画,包括插在连续的笔锋向下的笔画之间的直线笔画。集合54中分别显示了模型52中的7画中的每个。与图6中所示的141个笔画模型中的每个笔画最接近的笔画模型显示在集合65中。由于笔画模型的数目小于256,因此使用一个单个的字节对该笔画模型进行索引。因此,使用了7个字节来表示图8所示的字符模型。如果是直接存储笔画模型,则需要大约98个字节来存储该字符模型。
如上所述,用于中文和日文汉字字符的手写识别系统必须访问以下两个结果:按笔画顺序的用来写同一字符的变量,以及按笔画数的用来写同一字符的变量。为访问这个结果,本发明为每个字符模型存储了许多字符模型以便能计算出书写体中的变化,所以通用的笔画连接都被考虑在内了。通过对来自不同书写者的大量的手写采样进行统计分析,本发明已经确定了通用笔画的连接方法。
所存储的模型是用于用标准数目的笔画所写的字符,或用于使用少于标准数目笔画所写的字符。识别出一个字符的处理时间依赖于手写输入中的笔画数。当笔画数既不太少也不太多时,处理时间相对较少。这与简化的和传统的中文字符中笔画的分配有关。图9显示了与传统中文字符的标准笔画数相对的字符数目的一张图。
对于传统的中文,标准笔画数在1至36个之间变化。如图9所示,字符数目的峰值在12画处。当手写输入的笔画数目小于12或大于12,则与此相比对照的字符模型的数目相应地变小。直观地说,处理时间应该依赖于被比较的笔画的总数,它是字符模型数和每个模型中笔画数的乘积。对于图9所示的分配方案,对于笔画数为15的字符,其笔画的总数是最大的。这样,对于具有大约为15画的手写输入的处理时间应该是最多的。
图10中显示了相似的用于简化中文字符的标准笔画数的一个方案。图10中显示了相对于简化中文字符的字符数目的一张图。对于简化的中文,笔画数的变化为1至30,而字符数目的峰值出现在9画处。对于处理时间,最糟的情况出现在字符输入为11画时。在所存储的字符模型内搜索那些笔画,其中的存储是按照小数目的笔画模型对这些字符模型作索引而进行的。如下所述,这充分地减少了识别手写输入的处理时间。对于输入的每一画,计算并存储它与所有笔画模型的距离度量。如果在输入中有m画,并有n个笔画模型,则计算并在距离阵列中存储了m×n个距离。对于手写输入和一个字符模型之间的距离度量是这样计算的,即将输入的和模型中的相应笔画间的距离度量加在一起。字符模型中的每一画都被依据该n个笔画模型作索引,并且来自输入中相应笔画的其距离度量也被从预计算的距离阵列中读出。这样,在输入和所存储的字符模型之间的距离度量就被以非常快的方式计算出来。由于计算出的如上所述的距离阵列仅用于一组笔画模型,所以多分辨率字符模型的使用并不影响处理速度。
在本发明的最佳实施例中,当手写输入仅有一画或二画时,就不用计算距离阵列。取而代之的是,根据它们的特征直接将输入的笔画和字符模型相比。由于具有一画或二画的字符模型的数目非常少,所以这种做法是可行的。仅在手写输入的笔画数多于二时,才使用预计算的距离阵列。图11说明了依据本发明最佳实施例的具有多分辨率字符模型的识别系统的流程图。
虽然该最佳实施例在其执行过程中具有单独的一组141个模型,但也可以使用多组笔画模型。依据在步骤58处手写输入的笔画数,就可在步骤62处用来自存储器60的一组合适的笔画模型计算该距离阵列。依据手写输入的笔画数目,从字符模块存储器63中选出了合适的存储器块(以下,将参照图12进行更详细的讨论)。计算所选存储器模块内的对所有字符模型的距离度量,以便能在步骤64处创建一个距离阵列。这个计算步骤可以进一步包括在预计算的个别笔画距离的距离阵列时,执行搜寻的过程。一旦对与输入字符具有相同笔画数的字符模型的距离度量被计算出来,则在步骤66处对该阵列的距离分类,以便在步骤68处创建一个分类表。至少能从该分类表中选出一个备选者,而且在该分类表中至少有一个备选者可由该识别系统报出。在步骤58处,如果笔画数目少于或等于门限值(例如两画),则与使用距离阵列相反,在步骤70处,使用笔画特征计算来自所有字符模型的距离度量。
图12说明了依据本发明第一实施例的用于字符模型的一个存储器装置(存储器)的方框图。若干字符模型被存储在若干存储器块中,其中一个存储器块包括具有指定数目笔画的字符模型。最好是没有两个存储器块能包含相同笔画数的字符模块。然而,本发明适用于这种情况,即多于一个存储器块包含具有相同笔画数的字符模块。然而,可将用于同一字符的模型存储在多于一个的存储器块内。例如,用两种不同笔画数所写的同一字符的模型被分别存储在两个分离的存储器块中。
这样,参见图13和图14,图中显示了在其中存储了一组指令的一个存储器媒体72,当将该指令调入微处理器74时,会使微处理器74执行以下功能:在步骤76处,从若干字符中提取笔画;在步骤78处,根据从若干字符提取出的笔画模型,得出预定数目的笔画模型;并在步骤80处,将若干字符表示为笔画模型序列。
虽然对本发明所作的说明是参照特定实施例进行的,但是对本技术领域人员来说可很容易理解其附加的优点,也能容易地进行多种修改。例如,可通过使用不同数目的特征,或通过改变特征本身来创建多分辨率模型。与在高分辨率时所用的特征数相比,处于低分辨率时所使用的特征数较小。本发明的另一个扩充是能以7种分辨率存储同一字符模型。可使用低分辨率模型作几种快速匹配,以便能对输入限制为一组可能的匹配,而最高的分辨率模型来作最后的逐条的匹配。因此,对于稍宽一点的方面来说,本发明并不仅限于特定的细节、图示或所说明的典型的装置及例证性的例子。根据前面所作的说明,各种更正、修改和变化对本技术领域人员来说都是显而易见的。

Claims (4)

1.一种使用多分辨率模型的手写字符识别的方法,该方法包括:
将字符模型存储在存储器块中,其特征在于一个存储器块包括具有特定笔画数的字符模型;
确定手写输入的笔画数;
存储对应于手写输入的预定数目的笔画模型,确定一个字符所需的该笔画模型的数目与创建该字符所需的笔画的数目成反比;
根据手写输入的笔画数,选择一个合适的存储器块;
对合适的存储器块内的字符模型计算距离度量,以创建一个距离数组;
对该距离数组分类,以创建一个分类表;
从该分类表中选出至少一个备选者;以及
报出该分类表中至少一个备选者。
2.依据权利要求1的所述方法,其特征在于根据从至少一组预定义笔画模型中选出的笔画来表示字符模型,其中每组预定义笔画模型都是由有限数目的笔画模型构成的。
3.依据权利要求1的所述方法,其特征在于计算对合适的存储器块(63)内的字符模型的距离度量,以创建一个距离数组的步骤,包括在预计算出的对个别笔画距离的距离数组中执行搜寻处理。
4.依据权利要求1的所述方法,进一步包括只要笔画和最近的笔画模型之间的距离度量超过了门限就直接存储笔画特征。
CNB991027167A 1998-02-09 1999-02-09 使用多分辨率模型的手写字符记录的方法 Expired - Fee Related CN1167030C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US020838 1996-06-28
US09/020,838 US6226403B1 (en) 1998-02-09 1998-02-09 Handwritten character recognition using multi-resolution models

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CNA031365035A Division CN1516061A (zh) 1998-02-09 1999-02-09 创建用于识别的字符表示法的方法和装置

Publications (2)

Publication Number Publication Date
CN1239260A CN1239260A (zh) 1999-12-22
CN1167030C true CN1167030C (zh) 2004-09-15

Family

ID=21800874

Family Applications (2)

Application Number Title Priority Date Filing Date
CNA031365035A Pending CN1516061A (zh) 1998-02-09 1999-02-09 创建用于识别的字符表示法的方法和装置
CNB991027167A Expired - Fee Related CN1167030C (zh) 1998-02-09 1999-02-09 使用多分辨率模型的手写字符记录的方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CNA031365035A Pending CN1516061A (zh) 1998-02-09 1999-02-09 创建用于识别的字符表示法的方法和装置

Country Status (2)

Country Link
US (1) US6226403B1 (zh)
CN (2) CN1516061A (zh)

Families Citing this family (136)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
KR100449805B1 (ko) * 2001-12-26 2004-09-22 한국전자통신연구원 붙은 필기체 숫자열의 분할인식방법
SE0202446D0 (sv) * 2002-08-16 2002-08-16 Decuma Ab Ideon Res Park Presenting recognised handwritten symbols
JP2004280334A (ja) * 2003-03-14 2004-10-07 Pfu Ltd 画像読み取り装置
JP2004334843A (ja) * 2003-04-15 2004-11-25 Seiko Epson Corp 複数の画像から画像を合成する方法
TWI229844B (en) * 2003-05-08 2005-03-21 Acer Inc Recognition method to integrate speech input and handwritten input, and system thereof
US7756337B2 (en) * 2004-01-14 2010-07-13 International Business Machines Corporation Method and apparatus for reducing reference character dictionary comparisons during handwriting recognition
US7298904B2 (en) * 2004-01-14 2007-11-20 International Business Machines Corporation Method and apparatus for scaling handwritten character input for handwriting recognition
US20050152600A1 (en) * 2004-01-14 2005-07-14 International Business Machines Corporation Method and apparatus for performing handwriting recognition by analysis of stroke start and end points
US7490033B2 (en) * 2005-01-13 2009-02-10 International Business Machines Corporation System for compiling word usage frequencies
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
CN101256624B (zh) * 2007-02-28 2012-10-10 微软公司 建立适用于识别手写东亚字符的hmm拓扑结构的方法及系统
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US7974472B2 (en) 2007-06-29 2011-07-05 Microsoft Corporation Feature design for HMM based Eastern Asian character recognition
EP2191397B1 (en) * 2007-08-20 2019-01-23 Qualcomm Incorporated Enhanced rejection of out-of-vocabulary words
US9261979B2 (en) * 2007-08-20 2016-02-16 Qualcomm Incorporated Gesture-based mobile interaction
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
JP2009199102A (ja) * 2008-02-19 2009-09-03 Fujitsu Ltd 文字認識プログラム、文字認識装置及び文字認識方法
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US9959870B2 (en) 2008-12-11 2018-05-01 Apple Inc. Speech recognition involving a mobile device
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US20120309363A1 (en) 2011-06-03 2012-12-06 Apple Inc. Triggering notifications associated with tasks items that represent tasks to perform
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
DE202011111062U1 (de) 2010-01-25 2019-02-19 Newvaluexchange Ltd. Vorrichtung und System für eine Digitalkonversationsmanagementplattform
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US20110280484A1 (en) * 2010-05-12 2011-11-17 Microsoft Corporation Feature design for hmm-based handwriting recognition
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US8977059B2 (en) * 2011-06-03 2015-03-10 Apple Inc. Integrating feature extraction via local sequential embedding for automatic handwriting recognition
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
DE112014000709B4 (de) 2013-02-07 2021-12-30 Apple Inc. Verfahren und vorrichtung zum betrieb eines sprachtriggers für einen digitalen assistenten
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
US9922642B2 (en) 2013-03-15 2018-03-20 Apple Inc. Training an at least partial voice command system
JP5735126B2 (ja) * 2013-04-26 2015-06-17 株式会社東芝 システムおよび筆跡検索方法
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
EP3008641A1 (en) 2013-06-09 2016-04-20 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
WO2014200731A1 (en) 2013-06-13 2014-12-18 Apple Inc. System and method for emergency calls initiated by voice command
KR101749009B1 (ko) 2013-08-06 2017-06-19 애플 인크. 원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화
WO2015141260A1 (ja) * 2014-03-17 2015-09-24 株式会社河合楽器製作所 手書き音楽記号認識装置およびプログラム
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
AU2015266863B2 (en) 2014-05-30 2018-03-15 Apple Inc. Multi-command single utterance input method
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
JP6575116B2 (ja) * 2015-04-03 2019-09-18 富士ゼロックス株式会社 文字認識装置、文字認識処理システム、およびプログラム
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US9904847B2 (en) * 2015-07-10 2018-02-27 Myscript System for recognizing multiple object input and method and product for same
CN106339726A (zh) * 2015-07-17 2017-01-18 佳能株式会社 用于手写识别的方法及装置
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4758979A (en) * 1985-06-03 1988-07-19 Chiao Yueh Lin Method and means for automatically coding and inputting Chinese characters in digital computers
GB2227867A (en) 1989-02-04 1990-08-08 Plessey Co Plc Manuscript recognition
JP3155577B2 (ja) 1991-10-16 2001-04-09 キヤノン株式会社 文字認識方法及び装置
JP3105967B2 (ja) * 1991-11-14 2000-11-06 キヤノン株式会社 文字認識方法及び装置
US5544265A (en) * 1992-05-27 1996-08-06 Apple Computer, Inc. Shape recognizer for graphical computer systems
US5583543A (en) * 1992-11-05 1996-12-10 Sharp Kabushiki Kaisha Pen input processing apparatus
CN1039666C (zh) * 1993-11-06 1998-09-02 黄飞梦 基于两笔形与两笔符的汉字输入方法及键盘
DE29521538U1 (de) * 1994-09-09 1997-06-26 Motorola, Inc., Schaumburg, Ill. Vorrichtung zum Erkennen der Grenze zwischen Zeichen in einem handgeschriebenen Text

Also Published As

Publication number Publication date
CN1516061A (zh) 2004-07-28
CN1239260A (zh) 1999-12-22
US6226403B1 (en) 2001-05-01

Similar Documents

Publication Publication Date Title
CN1167030C (zh) 使用多分辨率模型的手写字符记录的方法
CN110084239B (zh) 降低离线手写数学公式识别时网络训练过拟合的方法
US8412710B2 (en) Searching for handwritten annotations appearing a given distance from document content
US5687254A (en) Searching and Matching unrecognized handwriting
US7729538B2 (en) Spatial recognition and grouping of text and graphics
Harouni et al. Online Persian/Arabic script classification without contextual information
US6275611B1 (en) Handwriting recognition device, method and alphabet, with strokes grouped into stroke sub-structures
US4685142A (en) Method and device for handwritten letter recognition
US6011865A (en) Hybrid on-line handwriting recognition and optical character recognition system
WO1996039677A1 (en) Method and apparatus for character recognition of hand-written input
Jain et al. Indexing and Retrieval of On-line Handwritten Documents.
CN1149508C (zh) 在线字符识别系统
Wang et al. A coarse-to-fine word spotting approach for historical handwritten documents based on graph embedding and graph edit distance
US6035063A (en) Online character recognition system with improved standard strokes processing efficiency
Ghosh et al. Language-invariant novel feature descriptors for handwritten numeral recognition
Bogacz et al. Cuneiform character similarity using graph representations
Santosh Document image analysis: Current trends and challenges in graphics recognition
Pengcheng et al. Fast Chinese calligraphic character recognition with large-scale data
Zhang et al. Dynamic time warping for chinese calligraphic character matching and recognizing
Tang et al. Online chemical symbol recognition for handwritten chemical expression recognition
Fan et al. Online handwritten Chinese character recognition system
Bresler et al. Simultaneous segmentation and recognition of graphical symbols using a composite descriptor
Kapoor et al. Representation, Extraction of Nodal Features of DevNagri Letters.
JPH09319828A (ja) オンライン文字認識装置
CN1232927C (zh) 手写字符识别装置及其方法

Legal Events

Date Code Title Description
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C06 Publication
PB01 Publication
C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: WD

Ref document number: 1023633

Country of ref document: HK

ASS Succession or assignment of patent right

Owner name: MOTOROLA MOBILE CO., LTD.

Free format text: FORMER OWNER: MOTOROLA INC.

Effective date: 20101230

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20101230

Address after: Illinois Instrunment

Patentee after: MOTOROLA MOBILITY, Inc.

Address before: Illinois Instrunment

Patentee before: Motorola, Inc.

C41 Transfer of patent application or patent right or utility model
C56 Change in the name or address of the patentee
CP01 Change in the name or title of a patent holder

Address after: Illinois State

Patentee after: MOTOROLA MOBILITY LLC

Address before: Illinois State

Patentee before: MOTOROLA MOBILITY, Inc.

CP02 Change in the address of a patent holder

Address after: Illinois State

Patentee after: MOTOROLA MOBILITY, Inc.

Address before: Illinois Instrunment

Patentee before: MOTOROLA MOBILITY, Inc.

TR01 Transfer of patent right

Effective date of registration: 20160616

Address after: California, USA

Patentee after: Google Technology Holdings LLC

Address before: Illinois State

Patentee before: MOTOROLA MOBILITY LLC

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20040915

Termination date: 20180209