JPS5935277A - 手書文字図形のリアルタイム認識による制御方法 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 この発明は、手書の文字１図形、記号を認識することに
よりコマンド入力、ファンクション選択。

メニュー選択等を行う手書文字図形のリアルタイム認識
による制御方法に関するものである。

入力装置において、コマンド入力、ファンクション選択
、メニュー選択等（以下、コマンド入力等と記す）によ
り制御を行５場合、従来は通常キーボードが使用されて
いる。入力のための案内が表示装置等の表示によって行
われるが、表示とキーボードを交互に見る必要があり、
操作性が悪い。

ＣＲＴ等の表示装ｆｌ　Ｋコマンド、ファンクション等
を対応づけた小領域を表示し、ライトペンをそれらの領
域の１つを選択して入力する場合は、視線の動きは表示
装置とキーボードを交互に見る場合より少ない利点はあ
るが、表示装置上に一時に表示できるコマンドやファン
クション等の表示の数には限界がある。さらに、表示さ
れた内容をすべて読まないと入力できない欠点があり、
入力に時間がか〜る上、目が疲労し易い。

この場合の入力時間は、主として入力をしたいという意
思をオペレータが持った瞬間から実際に入力を開始する
までの時間であり、絶対値としては必ずしも大きくはな
いが、意思が生じた瞬間の後、直ちに入力操作を開始で
きないと、意思が中断される結果となり、実際以上に遅
く感じられたり、もどかしい印象となる。これは間（ま
）が合わないというふ５に表現してもよい。

この発明は、手書の文字２図形、記号等（以下、手書の
文字等と記す）を表示装置上に重ねられた透明ディジタ
イザ上に記入し、記入された手書の文字等をりフルタイ
ムで認識することにより、コマンド入力やファンクショ
ン選択を行い、入力したい意思が発生したとき、直ちに
入力操作に入れるようにすることを目的とする。

手書の文字等を認識する場合、従来の方法では文字等を
記入する領域が指定されている。第１図は従来の手書の
文字等認識装置における記入領域の例を示す。

、　１は文字を記入するための、ディジタイザ上のスペ
ースである。スペース１は文字等を１個書くための２〜
５などの小さな記入領域に分割されている。例えば記入
領域２〜５に「手」、「書」。

「文」、「字」を記入する。記入領域２に１手」を書き
終え、次の記入領域ＢＫｒ書」を省き始めると、記入領
域２への記入が終了した信号が発せられ、辞書との比較
のための演算が開始される。

辞書に相関が良い文字が発見されると、その文字が認識
結果として表示される。正しく認識されていれば、その
表示は「手」となる。次の記入領域への記入開始によっ
て記入終了を識別する方法によらない場合は、１字記入
するごとに記入終了キーの押下が必要となり、操作性が
著しく悪い。したがって、文字の記入領域を１字分ごと
に分割し、１記入領域に１字を記入する方法は不可欠で
あり、従来の手書文字認識法においては優れた方法であ
る。

しかし、表示装置の上に重ねた透明ディジタイザ上に文
字を記入し、この文字を認識してコマンドやファンクシ
ョン等に対応させ、コマンド入力等を行う場合、定めら
れた領域にのみ記入が可能なときは、制御機能が限定さ
れるうえ操作性が悪い。また、入力終了信号を発生させ
るために分割された他の領域に記入する必要がある場合
も操作性が悪い。

この発明は、記入する文字等を１画のものに限定するこ
とにより、ディジタイザ上の任意の場所への記入を可能
とし、かつ記入終了信号を発生させるための記入領域分
割を不要とし、記入を容易にした手書画像のリアルタイ
ム認識による制御方法を利用してコマンド等の入力を行
い、入力意思発生直後に、間（ま）をあけることなく、
直ちに入力を行うことを可能とする制御方法を提供する
ものである。以下、図面によりこの発明の詳細な説明す
る。

第２図はこの発明を適用するための表示装置付ディジタ
イザの例である。この図で、６は表示装置、Ｔはその表
示面であり、文字や絵の表示物８が表示されている。９
はディジタイザの透明な入力面であり、ペン１０により
入力面９に記入すると、座標信号発生回路１１から記入
した点の座標に対応した信号が発生し、演算制御回路１
２を通って画像メモリ１３に記憶される。画像メモリ１
３の記憶内容に基づいて記入した文字１図形等が、表示
装置６の表示面Ｔに表示される。１４はメモリであり、
基準となる文字が収納されている辞書やコマンド、ファ
ンクション等の信号ソの他力記憶されている。記入され
た文字等の認識は、画像メモリ１３に記憶された記入文
字等の形状と、メモ！Ｊ１４に記憶されている辞書との
相関を演算制御回路１２により計算し、相関が良い文字
を辞書から選択することＫより行う。透明ディジタイザ
としては、例えば超音波の伝達時間を測定する方式が発
表されている。

第３図はこの発明の実施例の動作を示すフＥ＋　−チャ
ートである。第２図における表示物８を変更するコマン
ドを入力する場合について説明する。

１画文字記入の受は入れ態勢が確立された後、１画文字
を記入開始する（ステップ■）。肥大した文字を構成す
る線はディジタイズされ、点の集合に分解されて、画像
メモリ１３に記憶される（ステップ■）。記入を終了す
る（ステップ■）と、ペン１０をディジタイザから離脱
するが（ステップ■）、ペン１０が離れたときの状態変
化を検出し、記入終了信号とする（ステップ■）。ベン
１０が離れたときの状態変化は、ペン１０内部に設けた
練圧検出スイッチにより検出できる。

次に、画像メモリ１３に記憶された文字のパターンを辞
書の規準パターンと比較するが、文字は任意の位置に記
入されるため、比較に先だち、記入文字パターンを標準
位置に移動した方が比較が容易である。

移動は、記入文字の重心を求め（ステップ■）、重心と
標準点の比較を行い（ステップ■）、標準点からのずれ
の分だけ平行移動させる（ステップ■、■）。すなわち
、記入した文字は、その重心が標準点に移動する。この
移動により、文字を任意の位置に記入してもほぼ一定の
領域に記入したのと等価となる。重心を標準点１４ｈ比
較する代りに記入文字の記入開始点または記入終了点を
比較する方法など他の方法を使用してもよい。また、比
較時に一点一点移動させる方法もよい。移動後、辞１の
標準パターンと比較しくステップ［相］）、相関が大き
い文字を検出できれば認識できたことになる（ステップ
０．０）。

認識が正しく行われたか否かの確認を目視により行うた
め、検出した文字を表示する（ステップ［相］）。正し
く認識されていれば（ステップ０）、認識された文字に
対応した信号をメモリ１４から読み出しくステップ［相
］）、その信号を演算制御回路１２に送出する（ステッ
プ０）。例えば記入した文字が、「α」のとき、「α」
と認識されれば「α」に対応する信号である一画面変更
信号がメモリ１４から読み出される。相関が大きい文字
の検出ができなかったときは認識失敗であり、再入力催
促信号の指示（ステップＯ）に従い再入力する。また、
正しり認識できなかったときは、取消信号を入力しくス
テップ０）、再入力の受は入れ態勢を確立して再入力す
る。正しく認識されたときに確認信号を入力し、確認信
号の入力があったときに対応する信号をメモリ１４から
読み出すようにしてもよい。

第４図はこの発明の他の実施例を示すフローチャートで
ある。第３図の実施例の場合は、１画１文字１個の入力
で１制御を行うのに対し、この実施例は複数の１画１文
字で１制御を行う。ステップ■〜＠までは第３図と同じ
である。

１制御に使用する文字数が一定でないときは、入力が終
了したか否かの認識を行うため、入力終了の意味を持た
せた文字等を最後につける必要がある。入力した文字等
の認識を行った後、その文字等が入力終了の意味を持っ
ていないうちは（ステップ＠）、次の文字等の受は入れ
を行い（ステップ０．［相］）、ステップ■に戻る。認
識した文字等が入力終了を意味するものであったとぎは
、次の段階に進む。

正しく認識されたか否かの確認を行い（ステップ０．０
＞、正しく認識されたときは、入力された複数の文字等
の列に対応した信号をメモリ１４から読み出しくステッ
プ＠）、演算制御回路１２に送出する（ステップ＠）。

例えば入力した文字等が「αβγ○」であったとし、「
αβγＪが曲線を直線に変換するコマンドであり、○が
記入終了記号であるとする。ステップ［相］における表
示は［αβγ」となる。「αβγ」に対応した信号、す
なわち曲線を直線に変換するコマンドがメモリ１４から
読み出され、演算制御回路１２に送出される。

この結果、表示画面に書かれた曲線が直線に変換される
。

記入終了文字等は、特に認識が容易な文字等を選ぶべき
であり１例えば上記のよ５に「○」などがよい。ステッ
プ［相］の表示により正しく認識されたことが分かった
とき、確認信号の入力により次の段階に進むようにして
もよいことは第３図の場合と同じである。

１制御に使用する文字等の数が、２個あるいは３個のよ
プにすべて一定となっているときは、入力終了文字等の
入力は不要である。入力された文字を計数し、所定の数
に達したらステップ［相］に進めばよい。

なお、ステップ［相］はステップ０において相関の大き
い文字を検出できなかった場合の再入力催促信号の表示
であり、ステップ◎はステップＯで正しく認識されなか
ったときの取消信号入力を行うことを示している。

この発明の制御方法は、上記のように画面の変更などの
コマンド入力やメニュー選択等に利用できるほか、作表
や手書図形の浄書等にも利用できる。例えば作表のとき
は、直線の始点と終点を指定し、直線を引くコマンドを
記入すればよい。どの点の間に直線を引（かについては
、コマンドを記入した部分の位置情報（例えば重心）を
利用すればよい。すなわち、直線を引きたい点の近傍に
コマンドを記入すればよい。複数の直線を引く場合で、
結ぶ点を区別する必要があるときは１番号等の付与によ
り目的とする点の間だけに直線を引くことができる。

手書図形の浄書は、上記のように曲線を直線属変換した
り、１本の線を道路のように２本で表わしたり、鉄道の
記号のように変換したりすることにより行うことができ
る。この場合も、コマンド記入位置の情報を利用するこ
とにより、浄書したい線の指定が可能である。

この発明において使用できる１画の文字等の例を第５図
に示す。図における連結文字のａｌ）等は一筆で書（こ
とにより、本来複数の文字であるが、１個の１画文字と
みなす。これらから明らかなように１画文字等は多数存
在し、１画文字のみを使用するこの発明によって多種類
の制御が可能である。

以上詳細に説明したように、この発明の制御方法では、
１画の文字２図形のみを使用し、ペンが透明ディジタイ
ザから離脱したことを検知して１画の文字１図形の入力
の終了と判断するため、文字を記入するととに記入終了
信号を意識的に入力する必要がなく、操作が容易である
。かつ、記入領域を分割し、他の記入領域に記入を開始
すると、前の字の記入終了信号が発生するような方法の
採用も不要となる。このため、ディジタイザは全面を１
領域として使用することが可能となり、任意の位置に記
入することが可能となる。この結果、視線の動きが少な
くなって操作性が向上するとともに、記入位置の情報を
利用することができるようになり、手書文字９図形の浄
書等広い範囲の応用が可能となる。

また、表示の案内によって入力する場合と比較すると、
入力を行う意思が発生したとき、間（ま）をあけること
なく直ちに入力することが可能であり、まどろこしさを
感することなく入力できる利点がある。キーボードから
入力する場合と比較すると１表示画面から視線を大幅に
動がすことなく入力できる利点がある。

【図面の簡単な説明】

第１図は従来の手書文字等認識装置における記入領域の
例を示す図、第２図はこの発明を適用するための表示装
置の例を示す図、第３図および第４図はこの発明の実施
例を示す７μｍチャート、第５図はこの発明で使用する
１画文字等の例を示す図である。 図中、１はスペース、２〜５は１文字分の記入領域、６
は表示装置、Ｔは表示面、８は表示物、９はディジタイ
ザの入力面、１０はペン、１１は座標信号発生回路、１
２は演算制御回路、１３は画像メモリ、１４はメモリで
ある。 第１図 第２図 １ 、”ＩＩ すに′　　”０ ／／／′ り７ つづ 　　７９ Ｓ種信号 発生回路　　１１ 演′５１２

Claims (1)

【特許請求の範囲】
1. 表示装置の上に重ねて構成された透明ディジタイザ上に
   、前記表示装置の表示の内容に従って、コマンド、ファ
   ンクション、メニュー等ニ対応ツけられ、かつ画数が１
   画の１個の文字１図形または２個以上の文字１図形群を
   ペンにより記入し、前記ペンの前記透明ディジタイザか
   らの離脱を検知し１画の文字１図形の入力の終了と判断
   し、その入力を認識してコマンド入力、ファンクション
   選択、メニュー選択等の入力を行うことを特徴とする手
   書文字図形のリアルタイム認識による制御方法。