JP2984170B2 - オンライン手書き文字認識装置 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、手書き文字を構成する
ストロークの入力中にリアルタイムにて文字認識を行う
オンライン手書き文字認識装置に関する。

【０００２】

【従来の技術】従来、コンピュータ等に文字データを入
力する場合は、主としてキーボードが用いられてきた。
しかしながら、キーボードを使用するためには、使用者
にある程度の習得や慣れを強いることとなり、それ故、
より簡便な入力装置の実現が望まれていた。

【０００３】近時のコンピュータの高性能化、高速化
は、上記した要望に応え、キーボードに変わるより簡便
な入力装置としてリアルタイムにて手書き文字を認識し
て、文字データに変換するオンライン手書き文字認識装
置を実現することを可能とした。

【０００４】実現されているオンライン手書き文字認識
装置は、基本的には、文字を構成する座標列を入力する
ためのタブレットと、タブレットに重ねられ入力された
文字をそのまま表示するための表示手段と、ＣＰＵとプ
ログラムにて実現され入力された手書き文字を認識して
文字データに変換する文字認識部とで構成されている。

【０００５】ペンを用いてタブレット上に書かれたスト
ロークはそのまま、タブレットに重ねられた表示手段に
筆跡として表示されるとともに、文字認識部に送られ、
文字を表すデータに変換される。

【０００６】オンライン手書き文字認識装置では、複数
の文字が連続して入力されたとき、認識のため入力され
た複数の文字から１文字づつ切り出す必要がある。

【０００７】従来、認識装置にて１文字の切り出しの処
理を不要とするために入力枠が設定され、利用者はその
中へ文字を１文字づつ書くことが要求されていた。

【０００８】利用者のより自由な文字入力を可能とする
ため入力枠なしでの入力も実現されているが、この場合
は、認識装置は１文字の切り出しを入力座標およびペン
が離れている時間から判断していた。

【０００９】また、入力された後に文字認識された結果
を表示しその結果が誤っている場合は、候補を表示し、
候補から選び直すか、それでも誤っている場合は、文字
を書き直すようになっていた。

【００１０】

【発明が解決しようとする課題】入力枠があると利用者
に筆記時の制約を与えることとなり大きな負担となる。

【００１１】また枠なしでの入力では、特に漢字が入力
される場合、偏と旁なのか互いに独立な文字なのかが判
然としない入力をされた場合は、入力座標およびペンが
離れている時間だけで入力された文字が、一文字なの
か、複数の文字なのかを判断することは困難であり、文
字切り出し部分で誤ることがある。例えば、図４に「動
く」という手書き入力を行った場合を示す。この例では
偏と旁が幾分離れており、「動く」と入力されたのか
「重力く」と入力されたのかが判然とせず、従来の方法
では正しく認識することができなかった。このような誤
認識は漢字だけでなく、ひらがな、カタカナでも起こり
得る。

【００１２】また誤認識の修正に関しても、候補からの
選択や入力のやり直しは、使用者にとって煩雑な操作で
あり、より簡単な修正が望まれている。

【００１３】本発明は、誤認識の少ない文字認識を可能
とし、かつ認識誤りがあった場合でも、誤りを簡単な指
示により修正できるオンライン手書き文字認識装置を提
供することを目的とする。

【００１４】

【課題を解決するための手段】本発明のオンライン手書
き文字認識装置は、タブレットより送られてきたペンの
位置情報によって文字を照合するオンライン手書き文字
認識装置であって、ペンがタブレットから離れていると
きに移動する距離とペンがタブレットから離れている時
間とに基づいて１文字を切り出す手段と、文字を切り出
した後に認識を行ないその結果と入力されたデータとを
対応付けて表示する手段と、切り出し間違いがあった場
合に指定された範囲のペンの位置情報によって再度認識
を行い、修正を行なう手段を具備することを特徴とす
る。

【００１５】

【作用】本発明のオンライン手書き文字認識装置は、ペ
ンがタブレットから離れているときに移動する距離と、
ペンがタブレットから離れている時間とに基づいて、１
文字を切り出す。文字を切り出した後に認識を行ない、
その結果と入力されたデータとを対応付けて表示する。
切り出し間違いがあった場合には、ペンにより指示する
ことにより再度認識を行い、修正を行なう。

【００１６】

【実施例】以下、本発明の一実施例を図面を参照して説
明する。

【００１７】図１は本実施例による基本構成図を示して
いる。図１のオンライン手書き文字認識装置は、文字を
入力するタブレット１、タブレット１から送られてくる
データより１文字を切り出す文字切り出し部２、入力デ
ータを格納しておくデータバッファ３、入力データと文
字認識結果の対応表示を行う表示部４、入力データに対
して文字認識を行う文字認識部５、利用者からの誤認識
を指示するジェスチャを解析するジェスチャ認識部６、
および、利用者の指示を解析する指示解析部７から構成
されている。文字切り出し部２、文字認識部５、ジェス
チャ認識部６、および、指示解析部７は図示していない
ＣＰＵにより実現されている。

【００１８】文字切り出し部２により、タブレット１よ
り送られてきたデータの１文字が切り出され文字認識部
５へと送られる。このとき同時にデータバッファ３にス
トローク毎のデータとして蓄えられる。

【００１９】一方、文字切り出し部では図２に示すフロ
ーチャートに従って文字の切り出しが行われる。文字の
切り出しは、ペンがタブレットから離れているときに移
動する距離とペンがタブレットから離れている時間とに
基づき行われる。例えば、図３のような「コンピュー
タ」という入力を行った場合、”コ”の終点である点Ａ
から”ン”の書き出しの点である点Ｂへペンが移動する
際には、ある時間だけペンがタブレットより離れてお
り、また文字から文字へペンが移動する場合にはある程
度の空白が存在する。このことを利用して、本実施例で
は文字の切り出しを行っている。

【００２０】以下、図２に示す文字の切り出し処理のフ
ローチャートを詳細に説明する。尚、本実施例において
は文字は右から左に書かれるものとする。

【００２１】１文字めの文字内でのストローク間のペン
の移動時間の値を初期値としてｔｍａｘに入力してお
く。

【００２２】ステップＳ２１において、ストロークデー
タが入力される。

【００２３】ステップＳ２２、Ｓ２３において、ｉ−１
番目ストロークの終点からｉ番目の始点までのペンが移
動する際にかかった時間をＴi とし、その横方向の距離
をＳi とする。右方向の移動を正の値、左方向の移動を
負の値とする。

【００２４】ステップＳ２４において、ストローク間移
動距離Ｓi が負の値である時は、ｉ番目と（ｉ＋１）番
目のストロークは同一の文字のストロークであるので、
Ｓ２１に戻る。ストローク間移動距離Ｓｉが負の値でな
いときは、ステップＳ２５に進む。

【００２５】ステップＳ２５では、ストローク間移動距
離Ｓi が、例えば現在ｎ番目の文字の切り出しを行なっ
ている場合に、ｎ−１番目の文字の全ストロークの幅の
２倍よりも大きい時のように、正の値であり十分大きい
ものであると、ｉ番目と（ｉ＋１）番目のストロークは
別の文字のストロークであると判断してステップＳ２７
に進む。ストローク間移動距離Ｓi が、正の値であるが
十分大きくないとき、ステップＳ２６に進む。

【００２６】ステップＳ２６では、ｎ番目の文字の切り
出しを行なっている場合にｎ−１番目までの文字のスト
ローク間の移動時間の最大値ｔｍａｘを参考にし、０．
５秒程度のマージンｄをとり、ストローク間移動時間Ｔ
i がｔｍａｘ＋ｄよりも大きい場合はｉ番目とｉ＋１番
目のストロークは別の文字ストロークであると判断し、
ステップ２７に進む。大きくない場合はステップＳ２１
に戻る。

【００２７】ステップＳ２７では、次の文字の切りだし
用に今切り出された文字のストローク間のペンの移動時
間によってｔｍａｘを変更しておく。

【００２８】ステップＳ２８において、１文字を出力す
る。１文字の文字切り出しの処理が終了し、ステップＳ
２１に戻る。

【００２９】すべての文字のデータが入力されると、文
字認識部５の結果が表示部４へ送られ画面へ結果が表示
される。

【００３０】表示部４では入力データ（手書き文字その
もの）と認識結果とを対応づけて表示する。図５にその
表示例を示す。本例では手書き入力「しました」に対
し、「しま」、「し」、「た」をそれぞれ一文字と判断
して切り出し、認識結果として「ほ」、「し」、「た」
との結果を表示している。認識結果は、一文字として切
り出されたストロークまたはストローク群の下に表示さ
れる。

【００３１】認識結果に誤りがあった場合、特に一文字
の切り出しに誤りがあった場合は、利用者はタブレット
１を介し所定のジェスチャ入力を行うことにより文字の
切り出し位置の修正を行い、正しい認識結果を得ること
ができる。

【００３２】利用者から誤認識を指示するジェスチャが
入力されると、タブレット１よりジェスチャ認識部６へ
データが送られて、ジェスチャ認識部６では入力された
ジェスチャを認識し、その意味するところを、指示解析
部７に受け渡す。指示解析部７では、ジェスチャ認識部
６の認識結果を入力されているストローク群との関連に
おいて解析し、一文字の切り出しをやり直す。

【００３３】修正のフローチャートを図８に示す。

【００３４】まず、ステップＳ８１において、ジェスチ
ャ入力の指示位置の抽出を行う。抽出された位置から修
正の対象となる文字または文字列が特定される。

【００３５】次に、ステップＳ８２において、特定され
た文字において、ジェスチャの意味するところ及びその
位置から新たに１文字とすべきストローク群が特定さ
れ、それらが１文字として切り出される。

【００３６】ここまでが、指示解析部７にて行われる。

【００３７】次に、制御を文字認識部５に移し、まず、
ステップＳ８３において、切り出し結果に基づきデータ
バッファ３から該当画のデータを取り出し認識する。

【００３８】その後、ステップＳ８４にて新たな認識結
果を前の認識結果と入れ換える。

【００３９】ステップＳ８５において、残りのストロー
クが残っているか判定する。残っている場合には、ステ
ップＳ８２に進む。残っていない場合には、ステップＳ
８６に進む。

【００４０】ステップＳ８６では、再表示を行う。

【００４１】ここで、図５のような過剰に結合した誤り
を起こしていた場合は、図６に示すような”し”と”
ま”を分離するジェスチャをすることによりジェスチャ
認識部で、分離されるものだと判断し、ジェスチャの位
置とジェスチャ認識部の結果により指示解析部で、１画
目と、２画目から４画目までとそれぞれ独立した１文字
であると判断し、図８に示すフローチャートのような処
理を行なう。

【００４２】まず、指示位置の抽出により、１文字目が
分離し、１画目が１文字であると判断され、１文字とし
て切り出される。それを１文字として認識部でデータバ
ッファから該当画のデータを取り出し認識され、前の認
識結果と入れ換えられる。そして、２画目から４画目の
データが認識されずに残っているために、また１文字の
切り出しから同様の処理を行い、全てのデータが認識さ
れ直されたら、再表示を行うことになる。

【００４３】また、図７に示すように入力データ”い”
が認識結果”１１”として認識され、過剰分離の誤りを
起こしていた場合には、図に示す”１”と”１”を結ぶ
統合ジェスチャにより、ジェスチャ認識部で統合させる
ものだと判断し、ジェスチャの位置と認識結果より、１
文字目と２文字目が統合され、１画目と２画目が１文字
であると判断し、過剰統合の時と同じく図８に示す処理
を行なう。まず、１画目と２画目が１文字として切り出
され、認識部で該当画のデータをデーアバッファ３から
取り出し認識され、前の認識結果と入れ換えられる。そ
こで、残りのデータがないためそのまま再表示を行な
う。

【００４４】

【発明の効果】以上説明したように本発明のオンライン
手書き文字認識装置は、ペンがタブレットから離れてい
るときに移動する距離と、ペンがタブレットから離れて
いる時間とに基づいて１文字を切り出す手段と、文字を
切り出した後に認識を行ないその結果と入力されたデー
タとを対応付けて表示する手段と、切り出し間違いがあ
った場合に指定された範囲のペンの位置情報によって再
度認識を行い、修正を行なう手段を具備しているので、
誤認識の少ない文字認識を可能とし、かつ認識誤りがあ
った場合でも、誤りを簡単な指示により修正できる。

【図面の簡単な説明】

【図１】本発明の一実施例によるブロック図である。

【図２】文字切り出しのフローチャートである。。

【図３】文字切り出しの例である。

【図４】切り出し誤りの例である。

【図５】認識結果の表示の例である。

【図６】切り出しの過剰統合の例である。。

【図７】切り出しの過剰分離の例である。

【図８】修正のフローチャートである。

【符号の説明】

１ タブレット ２ 文字切りだし部 ３ データバッファ ４ 表示部 ５ 文字認識部 ６ ジェスチャ認識部 ７ 指示解析部

Claims (1)

(57)【特許請求の範囲】
1. 【請求項１】 タブレットより送られてきたペンの位置
   情報によって文字を照合するオンライン手書き文字認識
   装置であって、ペンがタブレットから離れているときに
   移動する距離とペンがタブレットから離れている時間と
   に基づいて１文字を切り出す手段と、文字を切り出した
   後に認識を行ないその結果と入力されたデータとを対応
   付けて表示する手段と、切り出し間違いがあった場合に
   指定された範囲のペンの位置情報によって再度認識を行
   い、修正を行なう手段を具備することを特徴とするオン
   ライン手書き文字認識装置。