JPH06150066A - 手書き文字認識装置 - Google Patents

Abstract

(57)【要約】 【目的】 複数の文字を一括して認識できるオンライン
手書き文字認識装置を提供する。 【構成】 使用者がタブレット上にペンで文字を手書き
したとき、上記手書き文字を構成する個々の座標データ
と、上記タブレットに上記ペンが接触しているかどうか
を表すオン,オフ信号とを含む筆記情報を発生する入力
部１を備える。上記オン,オフ信号に基づいて上記文字
を構成するストロークの開始および終了を検出して、上
記座標データを上記ストローク毎に分割して出力するス
トローク検出部２を備える。上記ストロークの認識用の
特徴を抽出し、抽出した情報を出力する特徴抽出部３を
備える。特徴抽出部３が出力した情報を複数文字分につ
いて記憶することができる特徴記憶部４を備える。特徴
記憶部４が記憶している情報を受けて上記手書き文字の
認識を行う文字認識部５を備える。文字認識部５が認識
した文字をテキスト文字で表示する表示部６を備える。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】この発明は手書き文字認識装置に
関する。より詳しくは、入力された手書き文字を液晶パ
ネルなどの表示手段で表示するとともに、上記手書き文
字の認識を行って所定の書体の文字(以下、「テキスト文
字」という。)に変換して表示するオンライン手書き文字
認識装置に関する。

【０００２】

【従来の技術および発明が解決しようとする課題】従
来、この種のオンライン手書き文字認識装置は、使用者
がタブレット(または他の入力手段)上にペンで筆記した
文字を文字毎に逐次認識し、テキスト文字に変換して表
示している。このため、使用者は認識結果が正しいかど
うかを文字毎に確認しなければならず、急いでメモを取
りたくてもスムーズに入力できなかったり、また、思考
が中断されたりするという問題があった。

【０００３】そこで、この発明の目的は、複数の手書き
文字を一括して認識でき、したがって、使用者の思考を
中断させることなく、ペンで紙にメモするのと同様にス
ムーズに入力できる手書き文字認識装置を提供すること
にある。

【０００４】

【課題を解決するための手段】上記目的を達成するた
め、この発明の手書き文字認識装置は、使用者がタブレ
ット上にペンで文字を手書きしたとき、上記手書き文字
を構成する個々の座標データと、上記タブレットに上記
ペンが接触しているかどうかを表すオン,オフ信号とを
含む筆記情報を発生する入力部と、上記筆記情報を受け
て、上記オン,オフ信号に基づいて上記文字を構成する
ストロークの開始および終了を検出して、上記座標デー
タを上記ストローク毎に分割して出力するストローク検
出部と、上記ストローク毎の座標データを受けて、上記
ストロークの認識用の特徴を抽出し、抽出した情報を出
力する特徴抽出部と、上記特徴抽出部が出力した情報を
複数文字分について記憶することができる特徴記憶部
と、上記特徴記憶部が記憶している情報を受けて、受け
た情報に基づいて上記手書き文字の認識を行う文字認識
部と、上記文字認識部が認識した文字をテキスト文字で
表示する表示部を備える。

【０００５】また、使用者の指示に応じて上記特徴記憶
部を作動または停止させて、文字認識を複数の文字につ
いて一括して行う一括認識処理モードと、文字毎に認識
処理を行う逐次認識処理モードとを切り替えるモード切
り替え手段を備えるのが望ましい。

【０００６】

【作用】この発明の手書き文字認識装置は次のように動
作する。

【０００７】まず、使用者がタブレット上にペンで複数
の文字を連続して手書きする(その間、文字認識は行わ
ない。)。このとき、入力部が、上記手書き文字を構成
する個々の座標データと、上記タブレットに上記ペンが
接触しているかどうかを表すオン,オフ信号とを含む筆
記情報を発生する。次に、ストローク検出部が、上記筆
記情報を受けて、上記オン,オフ信号に基づいて上記文
字を構成するストロークの開始および終了を検出して、
上記座標データを上記ストローク毎に分割して出力す
る。次に、特徴抽出部が、上記ストローク毎の座標デー
タを受けて、上記ストロークの認識用の特徴、例えば座
標点間の方向列,始点,終点,外接枠の最大・最小,長さな
どを抽出する。そして、抽出した情報を出力する。次
に、特徴記憶部が、上記特徴抽出部が出力した情報を複
数文字分について記憶する。ここで、使用者が既に手書
きした複数の文字について認識を行うべき旨を指示す
る。すると、文字認識部が、上記特徴記憶部が記憶して
いる複数文字分の情報を受けて、受けた情報に基づいて
上記複数の手書き文字の認識を一括して行う。次に、表
示部は、上記文字認識部が認識した文字をテキスト文字
で表示する。

【０００８】このように、この手書き文字認識装置は、
特徴抽出部が抽出した情報を複数文字分について記憶で
きる特徴記憶部を有しているので、使用者が上記複数文
字分について認識する旨を指示したとき、文字認識部に
よって上記複数の文字の認識が一括して行なわれる。し
たがって、使用者は途中で思考を中断されることなく、
ペンで紙にメモするのと同様にスムーズに入力を行うこ
とが可能となる。

【０００９】また、使用者の指示に応じて上記特徴記憶
部を作動または停止させて、文字認識を複数の文字につ
いて一括して行う一括認識処理モードと、文字毎に認識
処理を行う逐次認識処理モードとを切り替えるモード切
り替え手段を備えた場合、上記両モードが使用者の好み
に応じて選択され得る。

【００１０】

【実施例】以下、この発明の手書き文字認識装置を実施
例により詳細に説明する。

【００１１】図１に示すように、この手書き文字認識装
置は、入力部を構成するタブレット１と、ストローク検
出部２と、特徴抽出部３と、特徴記憶部４と、文字認識
部５と、表示部６を備えている。上記文字認識部５は、
ストローク認識部５１と、基本ストローク辞書部５２
と、文字照合部５３と、文字辞書部５４を含んでいる。
上記基本ストローク辞書部５２は、図４に示す２１種類
の基本ストローク(それぞれ０１,０２,…,２１のコード
が付されている)を記憶している。また、文字辞書部５
４は、多数の文字を筆順に沿って上記基本ストロークコ
ードの並びとして記憶している。例えば、「左」という文
字の場合、０１,０３,０１,０４,０１として記憶してい
る。

【００１２】(１)まず、図２に示すフローにしたがって
１つの文字を認識する手順について説明する(逐次認識
モード)。なお、このとき、モード切り替え手段によっ
て上記特徴記憶部４の動作は停止されている。

【００１３】使用者がタブレット１上の入力枠１a内
にペンで、例えば図３に示すように、「左」という文字を
手書きしたとする。このとき、タブレット１が、上記手
書き文字「左」を構成する個々の座標データと、上記入力
枠１a内に上記ペンが接触しているかどうかを表すオン,
オフ信号とを含む筆記情報を発生する。この筆記情報は
表示部６とストローク検出部２へ送られる。表示部６
は、この筆記情報に基づいて、上記ペンの軌跡(手書き
文字)を表示する。

【００１４】ストローク検出部２は、上記筆記情報に
含まれるオン信号を受けたとき、上記文字「左」を構成す
るストローク(最初は第１ストローク)の開始を検出す
る。そして、上記ストロークの座標データを読み込んで
上記ストロークが終了するまで保持する(ステップＳ
１)。上記オフ信号を受けたとき、上記ストロークの終
了を検出する。上記ストロークの終了を検出すると、保
持していた座標データを特徴抽出部３へ出力する(ステ
ップＳ２)。

【００１５】特徴抽出部３は、上記座標データを受け
て、上記ストロークの認識用および表示用の特徴、例え
ば座標点間の方向列,始点,終点,外接枠の最大・最小,長
さなどを抽出する。そして、抽出した情報を文字認識部
５のストローク認識部５１へ出力する(ステップＳ３)。

【００１６】次に、上記ストローク認識部５１は、受
けた情報と基本ストローク辞書部５２に記憶されている
基本ストロークとの突き合わせを行って、認識した基本
ストロークコードを文字照合部５３へ出力する(ステッ
プＳ４)。ここで、１つの文字を構成する全ストローク
が終了していないときは、ステップＳ１〜Ｓ４の操作を
繰り返す。

【００１７】１つの文字を構成する全ストロークが終
了したときは(ステップＳ５)、文字照合部５３は、受け
た基本ストロークコードの並びと文字辞書部５４とを照
合して、認識候補の文字を選択する(ステップＳ６)。な
お、１つの文字の全ストロークが終了したかどうかは、
タブレット１からペンが離れている状態が一定時間続い
たこと、使用者による指示、または、タブレット１上の
１つの入力枠１aから別の入力枠にペンが移動したこと
などによって検出される。

【００１８】表示部６は、文字認識部５の出力を受け
て、手書き文字を消去し、代わりに文字認識部５が認識
(選択)した文字をテキスト文字で表示する。

【００１９】(２)次に、連続して入力された複数の文字
を一括して認識する手順について説明する(一括認識モ
ード)。このとき、モード切り替え手段によって上記特
徴記憶部４は作動されている。

【００２０】図５(a)に示すように、使用者がタブレ
ット１上の入力枠１a,…,１d内にペンで文字を手書きし
て、「手書き入力の使い勝手…」という文章を連続して入
力したとする。このとき、タブレット１は、上記文章を
構成する個々の文字の座標データと、上記入力枠１a,
…,１dのいずれかに上記ペンが接触しているかどうかを
表すオン,オフ信号とを含む筆記情報を発生する。この
筆記情報は表示部６とストローク検出部２へ送られる。
表示部６は、この筆記情報に基づいて、文字毎に順次カ
ーソル１０を移動させて上記文章(手書き文字)を表示す
る。

【００２１】ストローク検出部２は、上記文章を構成
する個々の文字について、筆記情報に含まれるオン信号
を受けたとき、個々の文字を構成するストローク(最初
は第１ストローク)の開始を検出する。そして、上記ス
トロークの座標データを読み込んで上記ストロークが終
了するまで保持する(ステップＳ１)。上記オフ信号を受
けたとき、上記ストロークの終了を検出する。上記スト
ロークの終了を検出すると、保持していた座標データを
特徴抽出部３へ出力する(ステップＳ２)。

【００２２】特徴抽出部３は、上記座標データを受け
て、入力位置(カーソル位置)と、上記ストロークの認識
用および表示用の特徴、例えば座標点間の方向列,始点,
終点,外接枠の最大・最小,長さなどを抽出する。そし
て、抽出した情報を特徴記憶部４へ出力する(ステップ
Ｓ３)。

【００２３】上記特徴記憶部４は、特徴抽出部３が出
力した情報を複数文字分、この例では上記文章について
記憶する。個々の文字、例えばn個のストロークで構成
される文字については、 ・カーソル位置 ・第１ストロークの認識に必要な特徴,文字表示に必要
な特徴 ・第２ストロークの認識に必要な特徴,文字表示に必要
な特徴 ・… ・第nストロークの認識に必要な特徴,文字表示に必要な
特徴 を記憶する。

【００２４】ここで、使用者が既に手書きした文章に
ついて認識を行うべき旨を指示する。すると、文字認識
部５は、特徴記憶部４が記憶している上記文章の情報を
受けて、受けた情報に基づいて上記文章を構成する複数
の文字の認識を一括して行う。詳しくは、文字認識部５
は、特徴記憶部４が記憶しているデータを最初から順に
受ける。そして、(１)で述べた１文字の認識手順によっ
て、最初の入力文字「手」の認識結果を得て、得た認識結
果を表示部６へ送る。これとともに、次の入力文字「書」
の認識を行う。このようにして、認識結果を１文字毎に
表示部６へ出力しつつ、上記文章を構成する複数の文字
の認識を連続して行う。

【００２５】表示部６は、文字認識部５の出力を受け
て、図５(b)に示すように、手書き文字を消去し、代わ
りに文章認識部５が認識した文字をテキスト文字で表示
する。このテキスト文字の表示は、文字認識部５の出力
を受ける度に、すなわち、上記文章を構成する１文字毎
に連続して行う。

【００２６】このように、この手書き文字認識装置は、
特徴抽出部３が抽出した情報を複数文字分について記憶
できる特徴記憶部４を有しているので、使用者が上記複
数文字分について認識する旨を指示したとき、文字認識
部５によって上記複数の文字の認識を一括して行うこと
ができる。したがって、使用者は途中で思考を中断され
ることなく、ペンで紙にメモするのと同様にスムーズに
入力を行うことができる。

【００２７】なお、図５(b)では、２行目の「ン」の認
識を誤った結果、「こ」を表示している。このような場
合、誤っている「こ」をペンでタッチすると、図６(a)に
示すように、入力枠１aと候補枠１e内にそれぞれ入力さ
れた文字「ン」,候補の文字「こ」,「ン」,「二」,「＝」が表示さ
れる(カーソル１０はタッチした箇所に移動する。)。使
用者は、候補内に正しい結果が存在するときは、その正
しい結果(この例では「ン」)をペンでタッチする。これに
より、上記誤っている「こ」に代えて、正しい文字「ン」を
入力することができる。一方、候補内に正しい結果が存
在しないときは、「取消」をタッチする。そして、同図
(b)に示すように、入力枠１a内に再度、丁寧に文字「ン」
を筆記して入力する。これにより、正しい文字「ン」を入
力することができる。

【００２８】

【発明の効果】以上より明らかなように、この発明の手
書き文字認識装置は、特徴抽出部が抽出した情報を複数
文字分について記憶できる特徴記憶部を有しているの
で、使用者が上記複数文字分について認識する旨を指示
したとき、文字認識部によって上記複数の文字の認識を
一括して行うことができる。したがって、使用者は途中
で思考を中断されることなく、ペンで紙にメモするのと
同様にスムーズに入力を行うことができる。誤認識が生
じた場合は、入力文字を再表示して確認しながら認識候
補を選択したり、再入力を行ったりすることで、入力さ
れた文章を容易に修正することができる。

【００２９】また、使用者の指示に応じて上記特徴記憶
部を作動または停止させて、文字認識を複数の文字につ
いて一括して行う一括認識処理モードと、文字毎に認識
処理を行う逐次認識処理モードとを切り替えるモード切
り替え手段を備えた場合、使用者は上記両モードを好み
に応じて選択することができる。

【図面の簡単な説明】

【図１】 この発明の一実施例の手書き文字認識装置の
構成を示すブロック図である。

【図２】 上記手書き文字認識装置の文字認識の動作フ
ローを説明する図である。

【図３】 上記手書き文字認識装置に「左」という文字を
入力した状態を示す図である。

【図４】 基本ストロークの例を示す図である。

【図５】 上記手書き文字認識装置に文章を入力した状
態および認識後の状態を示す図である。

【図６】 上記手書き文字認識装置において文章を修正
する仕方を説明する図である。

【符号の説明】

１ タブレット １a,…,１d
入力枠 １e 候補枠 ２ タブレッ
ト ３ 特徴抽出部 ４ 特徴記憶
部 ５ 文字認識部 ６ 表示部

Claims (2)

【特許請求の範囲】
1. 【請求項１】 使用者がタブレット上にペンで文字を手
   書きしたとき、上記手書き文字を構成する個々の座標デ
   ータと、上記タブレットに上記ペンが接触しているかど
   うかを表すオン,オフ信号とを含む筆記情報を発生する
   入力部と、 上記筆記情報を受けて、上記オン,オフ信号に基づいて
   上記文字を構成するストロークの開始および終了を検出
   して、上記座標データを上記ストローク毎に分割して出
   力するストローク検出部と、 上記ストローク毎の座標データを受けて、上記ストロー
   クの認識用の特徴を抽出し、抽出した情報を出力する特
   徴抽出部と、 上記特徴抽出部が出力した情報を複数文字分について記
   憶することができる特徴記憶部と、 上記特徴記憶部が記憶している情報を受けて、受けた情
   報に基づいて上記手書き文字の認識を行う文字認識部
   と、 上記文字認識部が認識した文字をテキスト文字で表示す
   る表示部を備えたことを特徴とする手書き文字認識装
   置。
2. 【請求項２】 使用者の指示に応じて上記特徴記憶部を
   作動または停止させて、文字認識を複数の文字について
   一括して行う一括認識処理モードと、文字毎に認識処理
   を行う逐次認識処理モードとを切り替えるモード切り替
   え手段を備えたことを特徴とする請求項１に記載の手書
   き文字認識装置。