JPH08212299A - 手書き入力制御方法及びその装置 - Google Patents

Abstract

(57)【要約】 【目的】 手書き入力制御方法及びその装置において、
ユーザからの指示操作なしに入力情報のカテゴリ種別を
自動的に識別して、入力操作を単純化し、自然な手書き
入力作業を可能とする。 【構成】 ストローク情報計測部３により、入力部１ａ
から手書き入力されたストローク情報の長さ・ｘ軸投影
長・ｙ軸投影長のいくつかを特徴量として計測する。次
に、比較部５により、その計測値とあらかじめ定めた閾
値とを比較する。次に、制御部６により、閾値の方が大
きければ入力されたストローク情報は文字であるとし、
閾値の方が小さければジェスチャであると判断する。こ
れにより、手書き入力されたストローク情報のカテゴリ
を自動的に識別し、文字処理部８またはジェスチャ認識
部７により判断の結果に従って認識し処理する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、手書きで入力されたス
トローク情報を閾値を利用することにより、文字として
入力されたか、ジェスチャとして入力されたかといった
カテゴリ種別の識別を可能とする入力制御方法及びその
装置に関するものである。

【０００２】

【従来の技術】従来より、ライトペン等により手書きで
文字を入力したり、文章の編集を指示するジェスチャを
入力したりする方法が知られているが、従来の手書き入
力制御方法及びその装置では、ジェスチャを入力する場
合、あらかじめジェスチャを入力することを指示しなく
てはならなかった。

【０００３】

【発明が解決しようとする課題】このため、上記従来の
手書き入力制御方法及びその装置では、ジェスチャを入
力する動作以外に、これらを区別するための入力動作を
必要として、思考を中断するなどの問題点があった。

【０００４】本発明は、上記の問題点を鑑みなされたも
のであり、その目的は、上記のように思考が中断される
という欠点を補うために、ユーザ側からの指示操作なし
に入力された情報のカテゴリ種別を自動的に識別して、
入力操作を単純化する手書き入力制御方法及びその装置
を提供することにある。

【０００５】

【課題を解決するための手段】上記の目的を達成するた
めに、本発明の第１の発明では、まず、手書きで入力さ
れたストローク情報の形状から得られる特徴量として、
ストロークの長さ、ストロークのｘ軸投影長、ストロー
クのｙ軸投影長の中から一つ以上を計測し、次に、前記
計測した計測値とあらかじめ設定された閾値とを比較
し、次に、前記比較の結果により、前記入力されたスト
ローク情報のカテゴリ種別を判断する手書き入力制御方
法を手段とする。

【０００６】また、本発明の第２の発明では、上記の入
力制御方法において、比較の結果により、入力されたス
トローク情報のカテゴリ種別を判断する過程において、
特徴量として計測された計測値が閾値より大きい場合は
ジェスチャ入力または図形入力と判断し、小さい場合は
文字入力と判断する手書き入力制御方法を手段とする。

【０００７】さらに、本発明の第３の発明では、ペン状
指示手段を用いて指示された座標の検出を行う入力部を
表示部に重ねて構成した手書き入力部と、前記手書き入
力部から入力されたストローク情報のストロークの長さ
・ｘ軸投影長・ｙ軸投影長の中の一つ以上を計測するス
トローク情報計測部と、閾値を格納する閾値格納部と、
前記ストローク情報計測部で得られた計測値と前記閾値
格納部に格納された閾値を利用し前記手書き入力装置か
ら入力されたストローク情報のカテゴリ種別を判断する
制御部と、から構成される手書き入力装置を手段とす
る。

【０００８】

【作用】手書きで入力されたストローク情報のストロー
クの長さ・ｘ軸投影長・ｙ軸投影長のある種の値は、例
えば、文字の場合では小さく、ジェスチャや図形の場合
には大きいというように、カテゴリ種別によって特徴が
ある。そこで、本発明の手書き入力制御方法及びその装
置では、それらの大きさの間にあらかじめ閾値を定め
て、入力されたストローク情報の長さ・ｘ軸投影長・ｙ
軸投影長の中の一つ以上の特徴的な計測値と上記のあら
かじめ設定した閾値とを比較し、例えば、閾値の方が大
きければ入力されたストローク情報は文字であるとし、
閾値の方が小さければジェスチャや図形であるとするよ
うに、その比較の結果を利用することにより、手書き入
力されたストローク情報のカテゴリ種別を自動的に識別
する。これにより、入力のカテゴリ種別を指示するため
のユーザの指示操作を不要として入力操作を単純化し、
ユーザが思考を中断することのないようにする。

【０００９】

【実施例】以下、本発明の実施例を、図面を参照して詳
細に説明する。

【００１０】図１は、本発明の一実施例を示す手書き入
力編集装置の構成例を説明する図である。

【００１１】１ａは、手書きの座標を検出するための入
力部である。１ｂは、文字・図形等を表示するための表
示部である。１は、これらの入力部１ａと表示部１ｂと
を重ね合わせることによって一体化構造とした入力一体
化表示部である。例えば、入力部１ａとしては電磁誘導
タブレット等が用いられ、表示部１ｂとしては液晶表示
装置等が用いられる。

【００１２】２は、ユーザが入力部１ａに対して手書き
入力を行うためのスタイラスペンである。

【００１３】３は、入力部１ａにスタイラスペン２を用
いて手書き入力されたストローク情報の形状から得られ
る特徴量としてストロークの長さ、ｘ軸投影長、ｙ軸投
影長の中の一つ以上を計測するストローク情報計測部で
ある。

【００１４】４は、計測されたストロークの長さ・ｘ軸
投影長・ｙ軸投影長に基づいて入力されたストローク情
報のカテゴリ種別が文字かジェスチャかを判断するため
にあらかじめ定めた閾値を格納する閾値格納部である。

【００１５】５は、ストローク情報計測部３によって計
測されたストロークの長さ・ｘ軸投影長・ｙ軸投影長の
計測値と、閾値格納部４に格納されている閾値とを比較
する比較部である。

【００１６】６は、ストローク情報の表示や比較部５に
より比較された結果によりストローク情報のカテゴリ種
別を判断したりするために、入力一体化表示部１・比較
部５および次に説明するジェスチャ認識部７・文字処理
部８に接続されて、それらの各部を順序立て統括的に制
御する制御部である。

【００１７】７は、制御部６によりストローク情報がジ
ェスチャであると判断された場合、ジェスチャの認識を
行うジェスチャ認識部である。

【００１８】８は、制御部６によりストローク情報が文
字であると判断された場合、文字のセグメンテーション
や認識を行う文字処理部である。

【００１９】次に、ストローク情報計測部３におけるス
トロークの長さ・ｘ軸投影長・ｙ軸投影長を計測する例
を説明する。

【００２０】図２はストロークの長さを計測する例を説
明する図である。ストローク情報は、図１のスタイラス
ペン２が入力部１ｂにペンダウンされた点からスタイラ
スペン２の移動に伴ってサンプリングされた点列Ｐ
［０］，Ｐ［１］…Ｐ［ｎ］からなる。ストロークの長
さは、Ｐ［０］からＰ［１］に対してＰ［１］−Ｐ
［０］と同様にＰ［２］−Ｐ［１］、…、Ｐ［ｎ］−Ｐ
［ｎ−１］の各距離を求め、全てを加算することで求め
られる。また、該距離計算の代わりに、ｘ軸方向の移動
距離をΔＸ＝｜Ｘ［１］−Ｘ［０］｜、ｙ軸方向の移動
距離をΔＹ＝｜Ｙ［１］−Ｙ［０］｜とし、同様な繰返
しをＰ［１］…Ｐ［ｎ］に対して行い、全てのΔＸとΔ
Ｙを加算したシティブロック距離をストローク情報の長
さとすることも可能である。

【００２１】図３は、ストロークのｘ軸投影長を計測す
る例を説明する図である。この例では、ストローク情報
における外接矩形の横方向の長さを計測することによ
り、ｘ軸投影長を求める。ストローク情報は、スタイラ
スペン２が入力部１ｂに、ペンダウンされた点Ｐからス
タイラスペンの移動に伴ってサンプリングされた点列Ｐ
［０］，Ｐ［１］…Ｐ［ｎ］からなる。これらの点の中
からｘ軸方向の最大値Ｘ_maxと最小値Ｘ_minを求め、ｘ軸
投影長＝Ｘ_max−Ｘ_minとすることで求めることができ
る。

【００２２】図４は、ストロークのｙ軸投影長を計測す
る例を説明する図である。この例では、ストローク情報
における外接矩形の縦方向の長さを計測することによ
り、ｙ軸の投影長を求める。ｘ軸投影長を求めたときと
同様に、ｙ軸方向の最大値Ｙ_{ma x}と最小値Ｙ_minを求め、
ｙ軸投影長＝Ｙ_max−ｙ_minとすることで求めることがで
きる。

【００２３】以上のように構成された実施例における動
作および作用について説明する。図５は、それを説明す
るためのカテゴリ種別を識別する際の手順を示すフロー
チャートを表した図である。以下、図１を参照しながら
説明する。図５において、Ｓ１〜Ｓ８はステップを表す
符号である。

【００２４】まず、文字が入力された場合について説明
する。

【００２５】文字は一つ以上のストロークを組み合わせ
て構成されているので、ストローク情報は一本ずつ順に
入力部１ａに入力される（ステップＳ１）。

【００２６】入力部１ａに一本のストローク情報が入力
される度に、該ストローク情報は、ストローク情報計測
部３に送られる。ストローク情報計測部３は、送られた
ストローク情報のストロークの長さ・ｘ軸投影長・ｙ軸
投影長の中の指定されたものあるいは全てを算出する
（ステップＳ２）。算出された計測値は比較部５に送ら
れる。

【００２７】閾値格納部４は、閾値を比較部５に送る。

【００２８】比較部５は、ストローク情報計測部３から
受け取ったストローク情報の中から全てまたはいくつか
の計測値と、閾値格納部４から受け取った閾値を比較す
る（ステップＳ３）。その際、どの計測値と比較するか
は、文章が横書きなのか縦書きなのか、また罫線内に書
かれたのか、罫線やます目などのない白紙のところに書
かれたのかなどの状況に応じて、あらかじめ設定してお
く。例えば、全ての計測値の中から最大のものと比較す
る。また、横書きならｘ軸投影長と比較し、縦書きなら
ｙ軸投影長と比較するなどが考えられる。閾値と計測値
との比較結果は制御部６に送られる。

【００２９】制御部６は、比較部５から受け取った結果
が、閾値の方が大きければ、入力部１ａに入力されたス
トローク情報を文字あるいは文字を構成するストローク
の一部であると判断する（ステップＳ４）。文字あるい
は文字の一部であると判断された場合、ストローク情報
を文字処理部８へ送る。

【００３０】文字処理部８は、受け取ったストローク情
報に対して、認識の必要がない場合、ストローク情報を
そのまま表示部１ｂに表示する。認識の必要がある場
合、それ以前に入力され、例えばメモリのバッファなど
に保存されているストロークがなければ、該ストローク
情報のみで文字として成り立っているかどうか判断す
る。また、保存されているストロークが存在すれば、そ
のストロークと組み合わせて一つの文字として成り立っ
ているかどうかを判断する。文字として成り立っている
と判断すれば、文字としてのセグメンテーションを行
い、次に認識処理を行い（ステップＳ５）、認識結果を
１ｂに表示する（ステップＳ６）。また、メモリのバッ
ファに保存されていたストローク情報を消去する。文字
として成り立っていないと判断すれば、ストローク情報
をメモリのバッファに保存しておき、次のストローク情
報の入力待ち情報になる。

【００３１】このような動作を繰り返すことによって、
ユーザはあらかじめ文字の入力を行おうとしていること
を指示する必要なく、文字の入力を行うことが可能とな
る。文字が入力された例を図６に示す。この例では、例
えば「力」の文字入力において、第２画目のストロークの
長さ・ｘ軸投影長・ｙ軸投影長の計測値が閾値より小さ
く、かつ、バッファに保存してある第１画目のストロー
クと合わせて「力」の文字として成り立つので、「力」
の文字が認識される。

【００３２】次に、ジェスチャが入力された場合につい
て説明する。

【００３３】入力部１ａに入力されたジェスチャのスト
ローク情報は、ストローク情報計測部３に送られる（ス
テップＳ１）。ストローク情報計測部３は、送られたス
トローク情報のストロークの長さ・ｘ軸投影長・ｙ軸投
影長の中の指定されたものあるいは全てを算出する（ス
テップＳ２）。算出された計測値は比較部５に送られ
る。

【００３４】閾値格納部４は、閾値を比較部５に送る。

【００３５】比較部５は、ストローク情報計測部３から
受け取ったストローク情報の計測値の中から全てまたは
いくつかの計測値と、閾値格納部４から受け取った閾値
を比較する（ステップＳ３）。その際、どの計測値と比
較するかは、文字が横書きなのか縦書きなのか、また罫
線内に書かれたのか、罫線やます目などのない白紙のと
ころに書かれたのかなどの状況に応じて、あらかじめ設
定しておく。例えば、全ての計測値の中から最大のもの
と比較する。また、横書きの文章に対しての編集ならｘ
軸投影長と比較し、縦書きの文章に対しての編集ならｙ
軸投影長と比較するなどが考えられる。閾値と計測値と
の比較結果は制御部６に送られる。

【００３６】制御部６は、比較部５から受け取った結果
が、ストローク情報の計測値の方が大きければ、入力部
１ａに入力されたストローク情報を、文字列に対して行
われた編集行為であるジェスチャであると判断する（ス
テップＳ４）。ジェスチャであると判断された場合は、
ストローク情報はジェスチャ認識部７へ送られる。

【００３７】ジェスチャ認識部７へ送られたストローク
情報は、ジェスチャ認識部７において認識処理が行われ
（ステップＳ７）、認識結果に対応する編集行為を実行
し（ステップＳ８）、表示部１ｂに表示する。

【００３８】このような動作を繰り返すことによって、
あらかじめジェスチャの入力を行おうとしていることを
指示する必要なく文章の編集を行うことが可能となる。
ジェスチャが入力された例を図７に示す。この例では、
「あしたの天気は？」という文章に対して、横方向に歯
状に引いたストローク情報で「あしたの」の部分に削除
のジェスチャを行っている。

【００３９】上記に説明した、文字の入力とジェスチャ
の入力における動作を並列して行うことにより、ユーザ
は、あらかじめ文字を入力しようとしているのか、文章
の編集を行おうとしているのかの指示を行う必要がなく
なり、思考が中断されるようなことなく、自然な入力・
編集を行うことが可能となる。

【００４０】なお、本発明では文字とジェスチャの識別
を行ったが、同様な方法でもって入力されたストローク
情報が閾値より小さい場合は文字あるいは文字を構成す
るストロークの一部であるとし、閾値より大きい場合は
図形であるとするような、文字と図形の識別を行うこと
が可能である。

【００４１】

【発明の効果】以上説明したように、本発明の手書き入
力制御方法及びその装置によれば、手書きで入力された
情報のカテゴリ種別を、その入力された情報のストロー
ク情報により識別できるようにしたので、ユーザは入力
操作を行う際に、文字を入力するのかジェスチャや図形
を入力するのかといったカテゴリ種別の指示操作が不要
になり、入力操作を単純化することができ、ユーザの思
考が中断されることがなくなる。

【００４２】特に、文字の入力か、ジェスチャや図形の
入力かを自動的に識別できるようにした場合には、実際
のペンと紙を用いた入力・編集作業と極めて近いかたち
で入力・編集作業を行うことができる。

【図面の簡単な説明】

【図１】本発明に関わる一実施例を示す手書き入力編集
装置の構成例を説明する図である。

【図２】上記実施例におけるカテゴリ種別を識別する際
の手順を示すフローチャートである。

【図３】上記実施例におけるストローク情報の長さを計
測する例を説明する図である。

【図４】上記実施例におけるストローク情報のｘ軸投影
長さを計測する例を説明する図である。

【図５】上記実施例におけるストローク情報のｙ軸投影
長さを計測する例を説明する図である。

【図６】上記実施例において文字の入力をしている例を
説明する図である。

【図７】上記実施例においてジェスチャの情報を入力し
ている例を説明する図である。

【符号の説明】

１ａ…入力部 １ｂ…表示部 １…入力一体化表示部 ２…スタイラスペン ３…ストローク情報計測部 ４…閾値格納部 ５…比較部 ６…制御部 ７…ジェスチャ認識部

Claims (3)

【特許請求の範囲】
1. 【請求項１】 まず、手書きで入力されたストローク情
   報の形状から得られる特徴量として、ストロークの長
   さ、ストロークのｘ軸投影長、ストロークのｙ軸投影長
   の中から一つ以上を計測し、 次に、前記計測した計測値とあらかじめ設定された閾値
   とを比較し、 次に、前記比較の結果により、前記入力されたストロー
   ク情報のカテゴリ種別を判断することを特徴とする手書
   き入力制御方法。
2. 【請求項２】 比較の結果により、入力されたストロー
   ク情報のカテゴリ種別を判断する過程において、 特徴量として計測された計測値が閾値より大きい場合は
   ジェスチャ入力または図形入力と判断し、小さい場合は
   文字入力と判断することを特徴とする請求項１記載の手
   書き入力制御方法。
3. 【請求項３】 ペン状指示手段を用いて指示された座標
   の検出を行う入力部を表示部に重ねて構成した手書き入
   力部と、 前記手書き入力部から入力されたストローク情報のスト
   ロークの長さ・ｘ軸投影長・ｙ軸投影長の中の一つ以上
   を計測するストローク情報計測部と、 閾値を格納する閾値格納部と、 前記ストローク情報計測部で得られた計測値と前記閾値
   格納部に格納された閾値を利用し前記手書き入力装置か
   ら入力されたストローク情報のカテゴリ種別を判断する
   制御部と、 から構成されることを特徴とする手書き入力装置。