JP2001155115A - 手書きデータ入力装置および手書きデータ入力方法、ならびに該方法を記録した記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 手書きストロークが文字ストロークかメモ描
画データストロークかを容易に判定でき、文字ストロー
クの場合は、文字認識してテキストに変換したり文字毎
の切り出しや編集、メールでの送信を可能にし、描画メ
モストロークの場合は図形や絵などを自由に描けるよう
にすること。 【解決手段】 入力部１０１から入力されたデータの位
置に基づいて手書き文字か描画メモかを判定する入力デ
ータ判定部１０３と、手書き文字の場合に１文字毎に切
出しして手書き文字ストロークとして保存したり、文字
認識してテキストに変換して保存する文字データ管理手
段１０４と、描画メモの場合に、入力データを切出しせ
ずに保存する描画メモデータ管理部１０５を備える。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、手書きデータ入力
装置に係り、特に、手書きで文字データ（テキスト、手
書き文字ストローク）や描画メモデータ（描画メモスト
ローク）が混在した書面が作成でき、しかも、手書き文
字ストロークは、後から容易に文字認識でテキストに変
換し、メールで送信したり、検索して再利用したりする
ことが可能な手書きデータ入力装置に関する。

【０００２】

【従来の技術】手書きデータ入力の方式として、手書き
ストロークをそのまま保存する方式（１）、および、一
続きで入力した手書きストロークを行間に合わせて縮小
して保存するインクワープロ入力方式（２）がある。

【０００３】（１）の手書きストロークをそのまま保存
する方式は、アプリケーションにおいて、文字・図形・
絵など特別に意識せずに、ユーザが自由にストロークを
手書き入力できるという特徴がある。また、（２）のイ
ンクワープロ入力方式は、一続きで入力した手書きスト
ロークを行間に合わせて縮小して保存する方式である。
一般に、ペンでタブレット上に手書き入力する場合、文
字を小さく書くのは困難で、どうしても大きくなってし
まう。大きい文字をそのまま保存すると、画面を占領し
てしまうという問題があるが、本インクワープロ入力方
式は縮小して保存するため上記の如き画面を占有してし
まうという問題は解決される。また、行間に合わせて表
示されるので、美しく見える効果もある。

【０００４】

【発明が解決しようとする課題】上述したように、従来
の（１）の手書きストロークをそのまま保存する方式で
は、文字・図形・絵などのデータを自由に入力すること
ができるが、これらのデータが混在した場合に、文字だ
けを抜き出して認識するのは困難である。従って、一般
のメールで文字の部分だけ送信するといった利用や、テ
キストにして後から検索して利用するといった再利用が
困難である。

【０００５】また、（２）のインクワープロ入力方式で
は、手書きストロークを行間に埋めることができるが、
文字として、各文字の切出し等を行って保存していない
ため、例えば、１文字分の筆跡を消去することができな
いという問題があるだけではなく、後からそれらの手書
きストロークを文字認識することも困難である。

【０００６】本発明の目的は、上記問題点を解消し、手
書きストロークが、文字のストローク入力である文字ス
トロークであるか、あるいは、描画メモのストローク入
力であるメモ描画データストロークであるかを容易に判
定でき、文字ストロークである場合は、後から容易に文
字認識してテキストに変換したり、文字毎の切り出しや
編集、メールでの送信を可能にし、また描画メモストロ
ークの場合は、図形や絵などを自由に描けるようにした
手書きデータ入力装置および手書きデータ入力方法、な
らびに該方法を記録した記録媒体を提供することであ
る。

【０００７】

【課題を解決するための手段】本発明は、上記目的を達
成するために、手書きデータ（文字や描画メモ等のスロ
トークデータ）を入力する入力手段（入力部１０１）
と、入力したデータを表示する表示手段（表示部１０
２）と、入力されたデータの位置に基づいて入力された
データが手書き文字であるか描画メモであるかを判定す
る入力データ判定手段（入力データ判定部１０３）と、
入力されたデータが文字であると判定された場合に、そ
の入力データを１文字毎に切出しして手書き文字ストロ
ークとして保存し、文字認識する要求があった場合に
は、１文字ずつ切出された手書きデータを文字認識手段
（文字認識部１０６）に渡して手書き文字ストロークを
テキストに変換して保存する文字データ管理手段（文字
データ管理部１０４）と、入力されたデータが描画メモ
であると判定された場合には、入力データを切出しせず
に保存する描画メモデータ管理手段（描画メモデータ管
理部１０５）を設けたものである。

【０００８】また、本発明の手書きデータ入力方法にお
いては、入力部から手書きデータ（文字や描画メモ等の
スロトークデータ）が入力されると、入力データ判定部
が、入力されたデータの位置に基づいて入力されたデー
タが手書き文字であるか描画メモであるかを判定する。
入力されたデータが文字であると判定された場合には、
その入力データを文字データ管理部に転送する。文字デ
ータ管理部は、入力データを１文字毎に切出して手書き
文字ストロークとして保存し、もし、文字認識する要求
があったら、１文字毎に切出してある手書き文字ストロ
ークを、文字認識手段を利用してテキストに変換して保
存する。もし、入力されたデータが描画メモであると判
定した場合には、入力データを切出しせずに直接描画メ
モストロークとして保存する。これらのデータ（テキス
ト・手書き文字ストローク・描画メモストローク）を表
示部で表示することにより実現できる。

【０００９】さらに、本発明の記録媒体は、上記手書き
データ入力方法の各処理をコンピュータで実行可能なプ
ログラムにコード化してＣＤ−ＲＯＭ、ＤＶＤ、ＦＤな
どの記録媒体に記録したものである。

【００１０】

【発明の実施の形態】（概要）本発明は、手書きデータ
を入力する際に、予め決められている特定の位置からス
トローク入力を開始した場合、そのストローク入力を
“文字の入力”と見なし、文字の切出しを行いながらそ
の手書き文字ストロークを保存し、一方、上記特定の位
置以外からストローク入力を開始した場合には、そのス
トローク入力を描画メモ（図形・絵など）と見なすよう
にし、文字切出しにとらわれず自由に手書き入力可能と
する。

【００１１】手書き文字ストロークは、１文字毎に切出
して保存することにより、後から、容易に文字認識でテ
キストに変換したり、文字毎の編集をすることが可能と
なる。一方、図形・絵などの描画メモは、文字切出しに
とらわれずに、自由に書くことが可能になる。

【００１２】手書き文字ストロークは、文字認識でテキ
ストに変換することにより、一般のメールで文字の部分
だけ送信するといった利用や、テキストにして後から検
索して利用するといった再利用が可能となる。また、手
書き文字ストロークを、行や原稿用紙の桝目に合わせ
て、きれいに表示することが可能となる。

【００１３】また、手書き文字ストロークと描画メモの
ストロークを分けて保存するため、後で、ストロークの
圧縮をする場合には、それぞれのデータに適した圧縮方
式（例：文字→文字認識の近似、描画メモ→図形認識の
近似）を適用し、手書き文字データは、後で認識する時
に、認識率を低下させないように圧縮し、描画メモデー
タは、図形の形状を保って圧縮することも可能である。

【００１４】（第１実施例）以下、図面を用いて、本発
明の第１実施例である手書きデータ入力装置について説
明する。図１は、本発明の第１実施例である手書きデー
タ入力装置の機能ブロックを示す図である。本手書きデ
ータ入力装置は、同図に示すように、手書きの筆跡（文
字や描画メモ等のストローク）を入力する入力部（１０
１）、入力されたデータの位置に基づいて入力されたデ
ータが手書き文字であるか描画メモであるかを判定する
入力データ判定部（１０３）、入力データ判定部（１０
３）により、入力されたデータが文字であると判定され
た場合に、その入力データを１文字毎に切出しして手書
き文字ストローク（１０４２）として保存し、文字認識
する要求があった場合に、１文字ずつ切出された手書き
データを文字認識部（１０６）に渡して手書き文字スト
ロークをテキストに変換してテキスト（１０４１）とし
て保存する文字データ管理部（１０４）、入力データ判
定部（１０３）により、入力されたデータが描画メモで
あると判定された場合に、入力データを切出しせずに描
画メモストロークとして直接そのまま描画メモストロー
ク（１０５１）として保存する描画メモデータ管理部
（１０５）、および、これらの保存データ（テキスト
（１０４１）、手書き文字ストローク（１０４２）、描
画メモストローク（１０５１））を読み出して表示する
表示部（１０２）により構成される。

【００１５】なお、テキスト（１０４１）、手書き文字
ストローク（１０４２）、描画メモストローク（１０５
１）などは半導体メモリやハードディスクなどの記憶装
置（個別の記憶装置であっても、単一の記憶装置の異な
る領域でもよい）に格納される。

【００１６】次に、図１の本発明の第１実施例である手
書きデータ入力装置の動作を説明する。入力部（１０
１）により手書きの筆跡（文字や描画メモ）等が入力さ
れると、入力データ判定部（１０３）が、入力されたデ
ータの位置に基づいて入力されたデータが手書き文字で
あるか描画メモであるかを判定する。

【００１７】入力データ判定部（１０３）により、入力
されたデータが文字であると判定された場合には、その
入力データを文字データ管理部（１０４）に転送する。
文字データ管理部（１０４）は、入力データを１文字毎
に切出して手書き文字ストロークとして保存し、もし、
文字認識する要求があったら、１文字毎に切出してある
手書き文字ストロークを、文字認識部（１０６）を利用
してテキストに変換して保存する。

【００１８】もし、入力データ判定部（１０３）によ
り、入力されたデータが描画メモであると判定された場
合には、描画メモデータ管理部（１０５）は、入力デー
タを切出しせずに描画メモストロークとして記憶装置に
保存する。これらのデータ（テキスト・手書き文字スト
ローク・描画メモストローク）を表示部（１０２）で表
示する。

【００１９】図１２は、本発明の第１実施例である手書
きデータ入力装置の構成例を示す図である。手書きデー
タ入力装置は、入力装置（１２０１）、出力装置（表示
装置）（１２０２）、ＣＰＵ（１２０３）、記憶装置
（１２０４）から構成される。本発明の処理は、例え
ば、記憶装置（１２０４）に記憶されているプログラム
をＣＰＵ（１２０３）が読み出し、入力装置（１２０
１）から入力された手書きデータが、文字データである
か、描画メモデータであるかを判定する。

【００２０】判定の結果、文字データの場合には、プロ
グラムに従って、文字の切出しを行って手書きストロー
クとして保存したり、文字認識を行ってテキストに変換
したりする。描画メモデータの場合は、ストロークをそ
のまま描画メモストロークとして直接保存する。そし
て、これらのデータ（テキスト、手書き文字ストロー
ク、描画メモストローク）を、表示装置（１２０２）に
表示する、といった各処理を行う。

【００２１】図１と図１２の対応関係としては、図１の
入力部（１０１）および表示部（１０２）が、図１２の
入力装置（１２０１）および出力装置（１２０２）に相
当している。図１の入力データ判定部（１０３），文字
データ管理部（１０４），描画メモデータ管理部（１０
５），文字認識部（１０６）は、図１２のＣＰＵ（１２
０３）が記憶装置（１２０４）に格納されたプログラム
を読み出して実行することにより機能が達成される。な
お、処理の詳細については、図３の処理フローなどを用
いて、後に詳細に説明する。

【００２２】図２は、本発明の第１実施例である手書き
データ入力装置による「手書きメモ帳アプリケーショ
ン」の画面（２０１）の例を示す図である。図２の例で
は、罫線（２０６）の間で、カーソル（２０７）のある
位置に、手書き文字ストローク、および、テキストを表
示するようになっている。カーソル（２０７）の位置
に、文字入力開始枠（２０３）を表示し、ユーザが文字
入力開始枠（２０３）より手書きストローク入力を開始
した場合、入力データ判定部（１０３）では、そのスト
ロークを文字入力ストロークであると判定し、該ストロ
ークを取り囲むような文字切出し枠（２０４）を表示す
る。

【００２３】ユーザがその枠内に手書きのストロークを
追加すると、入力データ判定部（１０３）では、そのス
トロークも同じ文字を構成すると判定し、同じ文字とし
て切出して、手書き文字ストロークのバッファリングを
行う。文字入力開始枠（２０３）からストローク入力を
始めた場合、ストロークを終えてから一定時間が経過す
るまでに書かれたストロークは、文字入力開始枠以外に
書かれても、入力データ判定部（１０３）で文字データ
であると判定し、同様に、文字の切出しを行いながら手
書き文字ストロークをバッファリングする。図２の例
は、「明日１２時にブックセンターまえに集合」という
手書き文字ストロークが、各々、文字切出し枠（２０
４）で切出ししながら入力された例である。

【００２４】文字入力開始枠（２０３）からストローク
入力を始め、ストローク入力を終えてから一定時間が経
過する（タイムアウトになる）と、最後に書いた手書き
文字ストロークの後ろに、カーソル（２０７）と文字入
力開始枠（２０３）を移動する。このように、カーソル
の位置に文字入力開始枠を表示すれば、前に入力した手
書き文字ストロークがユーザの手の下に隠れることな
く、容易に、次の手書き文字ストロークを入力できるよ
うになる。

【００２５】もし、文字入力開始枠（２０３）以外から
手書き入力を開始した場合、そのストロークは、入力デ
ータ判定部（１０３）により描画メモであると判定さ
れ、切出しは行わずに、ストロークをそのまま描画メモ
ストロークとして記憶装置に保存する。図２の例では、
下部に書かれた手書きの地図（および付随する文字）
は、切出しせずに、描画メモストロークとして保存され
る。

【００２６】この状態で、もし、ユーザが「文字認識」
ボタン（２０５）を押下（マウスクリック）すると、１
文字毎に切出して保存した手書き文字ストロークを文字
認識部（１０６）で文字認識し、「明日１２時にブック
センターまえに集合」というテキスト文字列に変換す
る。以上が、本発明の一実施例である手書きデータ入力
装置のアプリケーション画面の説明である。

【００２７】図３は、本発明の第１実施例である手書き
データ入力装置の処理の流れを説明するための処理フロ
ー図である。なお、本処理フロー図において、長方形の
四角形は一般的な処理を表し、右側に２つの角がついた
五角形は処理の分岐を表すものとする。

【００２８】図３において、まず、入力部（１０１）
が、ユーザの手書き入力を取得する（ステップ３０
１）。すると、入力データ判定部（１０３）が、入力部
（１０１）により入力されたデータが、文字データであ
るか、描画メモデータであるか、文字認識のメニュー指
定であるかを判定する（ステップ３０２）。すなわち、
入力データが、文字入力開始枠（２０３）から入力が開
始されていれば、ストローク入力が終了して一定時間が
経過する（タイムアウトになる）までは、文字データで
あると判定する。それ以外の位置から入力される場合
は、（「文字認識」ボタン（２０５）が押された場合以
外ならば）ストローク入力を描画メモストロークデータ
であると判定する。

【００２９】もし、入力データ判定部（１０３）が、入
力データが文字データであると判定した場合（ステップ
３０３：Ｙ）、手書き文字データ管理部（１０４）が入
力データを１文字毎に切出し、手書き文字ストロークと
してバッファリングする（ステップ３０３−１）。入力
データの切出しは、ストロークを囲むように文字切出し
枠（２０４）を表示し、その中より描き始めたストロー
クならば、同じ文字であると判定する。（あるいは、最
初から、文字入力枠を表示しておき、その中に書かれた
ストロークは１つの文字であると判定したり、あるい
は、ストローク同士が一定値以上離れて書かれたら、別
の文字であると判定する方法などもある。また、切出し
た手書き文字ストロークは、罫線（２０６）の幅に合う
大きさに拡大・縮小して、保存してもよい。）

【００３０】もし、入力データ判定部（１０３）が、入
力ストロークデータが描画メモデータであると判定した
なら（ステップ３０４：Ｙ）、描画メモデータ管理部
（１０５）が入力ストロークデータを描画メモストロー
クとしてバッファリングする（ステップ３０４−１）。
すなわち、文字の切出しなどはせずに、ストロークをそ
のまま直接バッファリングする。

【００３１】もし、入力データ判定部（１０３）が、
「文字認識」ボタン（２０５）が選択されたと判定した
ならば（ステップ３０５：Ｙ）、文字データ管理部（１
０４）がバッファリングしている手書き文字ストローク
を文字認識部（１０６）でテキストデータに変換して、
バッファリングする（ステップ３０５−１）。この際、
手書き文字ストロークは、一文字毎に文字の切出しをし
てあるので、容易に文字認識することができる。文字デ
ータ管理部（１０４）は、文字認識した手書き文字スト
ロークデータに、テキスト変換済みのフラグを立てる。

【００３２】そして、表示部（１０２）は、テキスト、
テキスト変換済みフラグが立っていない手書き文字スト
ローク、および、描画メモストロークを画面に表示する
（ステップ３０６）。以上が、本発明の第１実施例の手
書きデータ入力装置の処理概要である。以上により、本
発明の第１実施例の手書きデータ入力装置を実現するこ
とができる。

【００３３】（第２実施例）次に、本発明の第２実施例
である、ストロークの圧縮手段や画像データの管理手段
等を含む手書きデータ入力装置について説明する。

【００３４】図４は、本発明の第２実施例である手書き
データ入力装置の機能ブロックを示す図である。本発明
の第２実施例である「手書きデータ入力装置」は、図４
に示すように、手書きストロークデータ（文字や描画メ
モ等のストロークデータ）を入力する入力部（４０
１）、入力されたデータの位置に基づいて入力されたデ
ータが手書き文字であるか描画メモであるか、あるい
は、メニューやボタン等の選択であるかを判定する入力
データ判定部（４０３）、入力されたデータが文字であ
ると判定された場合に、その入力データを１文字毎に切
出して手書き文字ストロークとして記憶装置に保存し、
文字認識する要求があった場合には、１文字ずつ切出さ
れた手書きデータを文字認識部（４０６）に渡して手書
き文字ストロークをテキストに変換して保存する文字デ
ータ管理部（４０４）、入力されたデータが描画メモで
あると判定された場合には、入力データを切出しせずに
描画メモストロークとして記憶装置に直接保存する描画
メモデータ管理部（４０５）、手書き文字ストロークや
描画メモストロークのサイズを拡大・縮小するストロー
ク拡大・縮小部（４０７）、手書き文字ストロークや描
画メモストロークのデータ量を保存のために圧縮し、表
示のためにデータを伸長するストローク圧縮・伸長部
（４０８）、画像データの取得・編集・保存を行う画像
データ管理部（４０９）、テキスト，手書き文字ストロ
ーク，および画像を、レイヤー管理部（４１０）のレイ
ヤー情報に合わせて合成する表示合成部（４１１）、合
成されたデータを表示する表示部（４０２）、および、
データをファイルに入出力する要求があった場合に、全
てのデータ（テキスト４１２１，手書き文字ストローク
４１２２，描画メモストローク４１２３，画像４１２
４）、または、テキスト４１２５，ストローク４１２
６，画像４１２７の個別のデータをファイルに入出力す
るファイル入出力部（４１２）から構成される。なお、
第２実施例である手書きデータ入力装置の動作について
は、後に、図６〜図１１を用いて、詳しく説明する。

【００３５】図５は、本発明の第２実施例である手書き
データ入力装置による「手書きメモ帳アプリケーショ
ン」の画面（５０１）の例を示す図である。図５の例で
は、ユーザが手書き文字入力枠（５０３）に手書きの文
字（ストローク）を入力する。すると、同じ文字入力枠
内に書かれたストロークは、１文字であると判定し、文
字の切出しを行う。さらに、入力したストロークを罫線
（５１０）内に収まる大きさに縮小（または拡大）し、
罫線（５１０）の間で、カーソル（５０４）のある位置
に、手書き文字ストロークを表示する。図の例では、
「ＯＫ！」という手書きストロークは、この後、カーソ
ル（５０４）の位置に、罫線（５１０）の幅に合わせ
て、各文字毎（「Ｏ」「Ｋ」「！」毎）に縮小され、表
示される。

【００３６】もし、文字入力枠（５０３）以外から手書
き入力を開始すると、それは、描画メモであると判定
し、文字の切出しは行わずに、そのままのストロークを
直接記憶装置に保存する。図５の例では、手書きの地図
（およびそれに付随する文字）は、切出しせずに、描画
メモストロークとして保存される。

【００３７】また、図５の例では、各種メニューを利用
して画像も取り込めるようにしてある。画像を取り込む
には、メニュー「画像選択」ボタン（５０６−１）を選
択した後、デスクトップ画面や、別アプリケーションの
画像を選択（範囲指定）し、手書きメモ帳アプリケーシ
ョンにドラッグ＆ドロップすると、その位置に選択画像
が張り付く。図５の例では、デスクトップ画面の時計の
画像をメモ帳に貼り付けた例を示している。本アプリケ
ーションには、他に、「全文字認識」ボタン（５０６−
２），「部分文字認識」ボタン（５０６−３），「倍
角」ボタン（５０６−４），「ストローク圧縮」ボタン
（５０６−５），「全データファイル」ボタン（５０６
−６），「個別データファイル」ボタン（５０６−
７），「ファイルオープン」ボタン（５０６−８）、お
よび、「テキスト入力」ボタンとして「改行」ボタン
（５０５−１），「スペース」ボタン（５０５−２），
「バックスペース」ボタン（５０５−３），「行間変
更」バー（５０７）を設けている。

【００３８】次に、「画像選択」ボタン（５０６−１）
以外のメニューボタンについて説明する。「全文字認
識」ボタン（５０６−２）を選択すると、全ての手書き
文字ストロークを文字認識し、テキストに変換する。
「部分文字認識」ボタン（５０６−３）を選択すると、
文字認識したい範囲をユーザが指定するモードとなり、
ユーザが指定した範囲の手書き文字ストロークのみを文
字認識し、テキストに変換する。

【００３９】「倍角」ボタン（５０６−４）を指定する
と、倍角にしたい範囲をユーザが指定するモードとな
り、指定した範囲のテキストと手書き文字ストロークが
倍角のサイズに拡大される。

【００４０】「ストローク圧縮」ボタン（５０６−５）
を選択すると、ストロークのデータ量を圧縮する。すな
わち、表示したときの形状が崩れないように、ストロー
クの特徴点のデータのみを抽出する処理を行う。特徴点
の抽出は、例えば、手書き文字ストロークには、文字認
識の近似処理を利用し、描画メモストロークには、図形
認識の近似処理を用いることができる。手書き文字スト
ロークに、文字認識の近似処理を利用して圧縮すると、
後で、文字認識する際に、認識率の低下を防ぐことがで
きる。また、描画メモストロークに、図形認識の近似処
理を用いると、描画メモの図形をきれいに残した圧縮が
可能となる。ストロークを圧縮した場合、表示用のデー
タは、特徴点に対して、例えば、スプライン曲線を生成
する関数を適用することにより生成すればよい。

【００４１】「全データファイル」ボタン（５０６−
６）を選択すると、手書き文字ストローク４１２２，テ
キスト４１２１，描画メモストローク４１２３，および
画像４１２４の全てのデータを、同一ファイルに出力す
る（それぞれのデータを別ファイルとして、それらの関
係を示すファイルも出力してもよい）。

【００４２】「個別データファイル」ボタン（５０６−
７）を指定すると、テキスト４１２５，ストローク（手
書き文字ストローク＋描画メモストローク）４１２６，
および画像４１２７を、それぞれ個別のファイルに出力
する（この際、画像ファイルは、メモ帳全体の画面（テ
キストやストロークも含む）を、画像データとして出力
してもよい）。

【００４３】次に、テキスト入力ボタン（「改行」ボタ
ン（５０５−１），「スペース」ボタン（５０５−
２），「バックスペース」ボタン（５０５−３））につ
いて説明する。これらのテキストボタンは、文字データ
（テキストと手書き文字ストローク）に対して有効で、
「改行」ボタン（５０５−１）、「スペース」ボタン
（５０５−２）、「バックスペース」ボタン（５０５−
３）を通常のテキストのように入力することができる。
例えば、画面の例では、「てがるにめもが」と「入力で
きます」の間に、「改行」ボタン（５０５−１）で改行
を入力してある。さらに、図５の例では、「行間変更」
バー（５０７）を設けてあり、行間を広くしたり、狭く
したりすることができる。

【００４４】次に、図６〜図１１の処理フロー図を用い
て、第２実施例における手書きデータ入力装置の処理に
ついて説明する。なお、これらの処理フロー図におい
て、長方形の四角形は一般的な処理を表し、右側に２つ
の角がついた五角形は処理の分岐を表し、長方形の両端
に線が引かれた四角形は、別の図に詳細な処理が記述し
てあることを示すものとする。

【００４５】まず、図６を用いて、全体的な処理の流れ
を説明する。入力部（４０１）により、ユーザの手書き
入力を取得する（ステップ６０１）。入力データ判定部
（４０３）により、入力部（４０１）から入力されたデ
ータが、文字データであるか、描画メモデータである
か、テキスト入力ボタンの指定であるか、メニューの指
定であるか、行間の変更であるかを判定する（ステップ
６０２）。

【００４６】具体的には、入力データが、文字入力枠
（２０３）に入力されていれば、文字データであると判
定する。それ以外の位置から入力されている場合（さら
にはテキスト入力ボタン、メニューボタン、「行間の変
更」バー以外の位置ならば）は、入力ストロークデータ
を描画メモデータであると判定する。また、テキスト入
力ボタンの位置ならば、テキスト入力ボタンの選択であ
ると判定し、メニューボタンの位置ならば、メニューの
選択であると判定し、「行間の変更」バーの位置なら
ば、行間の変更指定であると判定する。

【００４７】入力データ判定部（４０３）により、入力
データが文字データであると判定された場合は（ステッ
プ６０３：Ｙ）、手書き文字データ管理部（４０４）
が、手書き文字ストロークのバッファリング処理を行う
（ステップ６０３−１）。なお、手書き文字データ管理
部（４０４）の手書き文字ストロークのバッファリング
処理（ステップ６０３−１）については、後に、図７を
用いて詳細に説明する。

【００４８】また、入力データ判定部（４０３）によ
り、入力ストロークデータが描画メモデータであると判
定された場合は（ステップ６０４：Ｙ）、入力データを
描画メモストロークとしてバッファリングする（ステッ
プ６０４−１）。すなわち、文字の切出しなどはせず
に、ストロークをそのまま直接バッファリングする。

【００４９】また、入力データ判定部（４０３）によ
り、テキスト入力ボタンが選択されたと判定された場合
は（ステップ６０５：Ｙ）、各、テキスト入力ボタンに
応じた処理を行う（ステップ６０５−１）。なお、テキ
スト入力ボタンの処理（ステップ６０５−１）について
は、後に、図８を用いて詳細に説明する。

【００５０】また、入力データ判定部（４０３）によ
り、メニューが選択されたと判定された場合は（ステッ
プ６０６：Ｙ）、各メニューに応じた処理を行う（ステ
ップ６０６−１）。なお、メニューの処理については、
後に、図９、図１０を用いて詳細に説明する。

【００５１】また、入力データ判定部（４０３）によ
り、行間の変更が指定されたと判定された場合は（ステ
ップ６０７：Ｙ）、行間の変更処理を行う（ステップ６
０７−１）。（行間変更処理（ステップ６０７−１）に
ついては、後に、図１１を用いて説明する。）

【００５２】そして、表示合成部（４１１）は、レイヤ
ー管理部（４１０）のレイヤー情報に合わせて、テキス
ト，手書き文字ストローク，描画メモストローク，およ
び画像を合成し、表示用のデータを生成する（ステップ
６０８）。すなわち、テキスト，手書き文字ストロー
ク，描画メモストローク，および画像をレイヤー管理部
（４１０）が管理している所定の順番に重ねた画像を合
成する。

【００５３】そして、表示部（４０２）が、表示合成部
（４１１）で生成した表示用のデータを画面に表示する
（ステップ６０９）。以上が、本発明の第２実施例であ
る手書きデータ入力装置の全体の処理フローの説明であ
る。

【００５４】図７は、文字データ管理部（４０４）の手
書き文字ストロークのバッファリング処理（ステップ６
０３−１）を説明するための図である。文字データ管理
部（４０４）が、入力データ（ストローク）を１文字毎
に切出し、手書き文字ストロークデータとする（ステッ
プ６０３−１−１）。文字の切出しは、文字入力枠内に
書いたストロークは同じ文字であると判定し、各文字毎
のデータとする。他にも、ストロークを取り囲む枠（切
出し枠）を表示して、その枠内に書かれれば、同じ文字
であると判定して切出ししたり、一定以上離して描いた
ストロークは、別の文字であると判定する方法などもあ
る。

【００５５】次に、１文字毎に切出した手書き文字スト
ロークを、ストローク拡大・縮小部（４０７）で、行間
に合わせたサイズに拡大・縮小する（ステップ６０３−
１−２）。カーソルの位置に、手書き文字ストロークを
表示し、手書き文字ストロークデータをバッファリング
する（ステップ６０３−１−３）。以上が、文字データ
管理部（４０４）の手書き文字ストロークのバッファリ
ング処理（ステップ６０３−１）の説明である。

【００５６】図８は、テキスト入力ボタンの処理（ステ
ップ６０５−１）を説明するための図である。「改行」
ボタン（５０５−１）の指定がされていた場合は（ステ
ップ６０５−１−１：Ｙ）、テキストデータのカーソル
位置に改行コードを挿入する（ステップ６０５−１−１
−１）。さらに、手書き文字ストロークデータのカーソ
ル位置以降を次の行に位置変更する（ステップ６０５−
１−１−２）。そして、カーソル表示位置を次の行に移
動する（ステップ６０５−１−１−３）。

【００５７】「スペース」ボタン（５０５−２）の指定
がされていた場合は（ステップ６０５−１−２：Ｙ）、
テキストデータのカーソル位置にスペースを挿入する
（ステップ６０５−１−２−１）。さらに、手書き文字
ストロークデータのカーソル位置以降を１文字分後ろの
位置に変更する（ステップ６０５−１−２−２）。そし
て、カーソル表示位置を１文字分後方に移動する（ステ
ップ６０５−１−２−３）。

【００５８】「バックスペース」ボタン（５０５−３）
の指定がされていた場合は（ステップ６０５−１−３：
Ｙ）、テキストデータのカーソル位置の前の文字を削除
する（ステップ６０５−１−３−１）。さらに、手書き
文字ストロークデータのカーソル位置の前の手書きスト
ロークを削除し（ステップ６０５−１−３−２）、カー
ソル位置以降の手書き文字ストロークデータを１文字分
前の位置に変更する（ステップ６０５−１−３−３）。
そして、カーソル表示位置を１文字分前に移動する（ス
テップ６０５−１−３−４）。以上が、テキスト入力ボ
タンの処理（ステップ６０５−１）の説明である。

【００５９】次に、図９、図１０を用いて、メニュー処
理（ステップ６０６−１）について詳細に説明する。な
お、図９と図１０の２枚の図を用いたのは、１枚の図に
全ての処理が描ききれなかったためで、図９と図１０の
○印（９００）の部分を繋いだ処理が、メニュー処理の
全体となる。

【００６０】まず、図９に沿って説明する。「画像選
択」ボタン（５０６−１）のメニュー指定ならば（ステ
ップ６０６−１−１：Ｙ）、画像データ管理部（４０
９）がユーザの画像選択範囲を取得し（ステップ６０６
−１−１−１）、その選択範囲の画像を取得する（ステ
ップ６０６−１−１−２）。さらに、画像データ管理部
（４０９）がユーザの画像貼り付け希望位置を取得し
（ステップ６０６−１−１−３）、その位置に画像を貼
り付け、データをバッファリングする（ステップ６０６
−１−１−４）。

【００６１】「全文字認識」ボタン（５０６−２）のメ
ニュー指定ならば（ステップ６０６−１−２：Ｙ）、文
字データ管理部（４０４）が保存してある手書き文字ス
トロークを文字認識部（４０６）でテキストに変換し、
バッファリングする（ステップ６０６−１−２−１）。
そして、文字データ管理部（４０４）が、全ての手書き
文字ストロークに、テキスト変換済みのフラグを立てる
（ステップ６０６−１−２−２）。

【００６２】「部分文字認識」ボタン（５０６−３）の
メニュー指定ならば（ステップ６０６−１−３：Ｙ）、
文字データ管理部（４０４）が文字認識対象範囲を取得
し（ステップ６０６−１−３−１）、文字データ管理部
（４０４）が文字認識対象範囲の手書き文字ストローク
を文字認識部（４０６）でテキストに変換し、バッファ
リングする（ステップ６０６−１−３−２）。そして、
文字データ管理部（４０４）が、文字認識対象となった
手書き文字ストロークに、テキスト変換済みのフラグを
立てる（ステップ６０６−１−３−３）。

【００６３】「倍角」ボタン（５０６−４）のメニュー
指定ならば（ステップ６０６−１−４：Ｙ）、文字デー
タ管理部（４０４）が倍角指定対象範囲の手書きストロ
ークとテキストを取得し（ステップ６０６−１−４−
１）、倍角指定対象範囲の手書きストロークとテキスト
と、それ以降の手書きストロークとテキストの位置を下
の行に移動する（ステップ６０６−１−４−２）。そし
て、ストローク拡大・縮小部（４０７）で、対象手書き
文字ストロークを倍角に拡大する。さらに、文字データ
管理部（４０４）は、倍角指定対象範囲のテキストのフ
ォントサイズを倍角に変更する。

【００６４】以下のメニュー処理は、図１０を用いて説
明する。「ストローク圧縮」ボタン（５０６−５）のメ
ニュー指定ならば（ステップ６０６−１−５：Ｙ）、文
字データ管理部（４０４）が、ストローク圧縮・伸長部
（４０８）で、バッファリングしてある手書き文字スト
ロークを圧縮する（ステップ６０６−１−５−１）。ス
トロークの圧縮は、例えば、文字認識ソフトのストロー
クの近似処理や、図形認識ソフトのストロークの近似処
理を利用して、ストローク上の特徴のある座標のみ抽出
することにより、圧縮することができる。そして、文字
データ管理部（４０４）が、手書き文字ストロークに、
圧縮済みのフラグを立てる（ステップ６０６−１−５−
２）。

【００６５】なお、ストロークの圧縮の際に、手書き文
字ストロークに対しては、文字認識ソフトのストローク
の近似処理を適用し、描画メモストロークに対しては、
図形認識ソフトのストロークの近似処理を適用するとい
うように、分けて用いることもできる。そうすると、手
書き文字ストロークを後から文字認識する際に、認識率
を低下させないで済む。また、描画メモのストローク
は、地図などの形状を保持した圧縮が可能となる。

【００６６】「全データファイル」ボタン（５０６−
６）（保存）のメニュー指定ならば（ステップ６０６−
１−６：Ｙ）、ファイル入出力部（４１２）が、テキス
ト，手書き文字ストローク，描画メモストローク，およ
び画像データを参照し（ステップ６０６−１−６−
１）、もし、ストロークが圧縮されているならば（ステ
ップ６０６−１−６−２：Ｙ）、テキスト、圧縮されて
いる手書き文字ストロークと描画メモストローク、およ
び画像を一括してファイルに保存する（ステップ６０６
−１−６−２−１）。もし、ストロークが圧縮されてい
ないならば（ステップ６０６−１−６−２）、テキス
ト、圧縮されていない手書き文字ストロークと描画メモ
ストローク、画像を一括してファイルに保存する（ステ
ップ６０６−１−６−２−２）。（なお、一括して保存
する以外にも、ファイルは個別のデータファイルとし、
それらの関連を示す情報もファイルする方法もある。）

【００６７】「個別データファイル」ボタン（５０６−
７）（保存）のメニュー指定ならば（ステップ６０６−
１−７：Ｙ）、ファイル入出力部（４１２）が、テキス
ト，手書き文字ストローク，描画メモストローク，およ
び画像データを参照し（ステップ６０６−１−７−
１）、もし、ストロークが圧縮されているならば（ステ
ップ６０６−１−７−２：Ｙ）、テキスト，圧縮されて
いるストローク（手書き文字ストロークと描画メモスト
ローク），および画像を、それぞれ個別のファイルに保
存する（ステップ６０６−１−７−２−１）。もし、ス
トロークが圧縮されていないならば（ステップ６０６−
１−７−２：Ｎ）、テキスト，圧縮されていないストロ
ーク（手書き文字ストロークと描画メモストローク），
および画像を、それぞれ個別のファイルに保存する（ス
テップ６０６−１−７−２−２）。なお、このとき、画
像ファイルは、テキスト，ストローク（手書き文字スト
ローク、描画メモストローク），および画像を合成した
画像をファイルに保存してもよい。

【００６８】「ファイルオープン」ボタン（５０６−
８）のメニュー指定ならば（ステップ６０６−１−８：
Ｙ）、ファイル入出力部（４１２）が、ユーザが指定し
たファイルを読み込む（ステップ６０６−１−８−
１）。その際に、もし、ストロークが圧縮されているな
らば（ステップ６０６−１−８−２：Ｙ）、圧縮ストロ
ークを伸長する（ステップ６０６−１−８−２−１）。
圧縮ストロークの伸長は、例えば、圧縮されているスト
ロークの特徴点の座標に対して、スプライン曲線を生成
する関数を適用して伸長することができる。以上が、メ
ニュー処理（ステップ６０６−１）の処理フローの説明
である。

【００６９】次に、図１１を用いて、行間変更処理（ス
テップ６０７−１）について説明する。まず、ユーザの
指定した新しい行間に合った罫線を表示する（ステップ
６０７−１−１）。そして、文字データ管理部（４０
４）が、新しい行間に合った文字（テキスト、手書き文
字ストローク）の変更位置を算出する（ステップ６０７
−１−２）。そして、文字データ管理部（４０４）が、
新しい行間に合ったサイズのフォントで、テキストを置
きかえる（ステップ６０７−１−３）。さらに、文字デ
ータ管理部（４０４）が、ストローク拡大・縮小部（４
０７）で、新しい行間に合ったサイズに手書き文字スト
ロークを変更し、さらに、文字データ（テキスト、手書
き文字ストローク）の表示位置も、新しい行間に合った
ところに変更する（ステップ６０７−１−４）。以上
が、各メニュー処理の処理フローの説明である。以上に
より、本発明の第２実施例である手書きデータ入力装置
を実現することができる。

【００７０】また、上述した処理フローを、コンピュー
タを動作させるプログラムにコード化してＣＤ−ＲＯ
Ｍ，ＤＶＤ，あるいはＦＤなどのコンピュータ読み取り
可能な記録媒体に記録して市場に流通させることによ
り、本発明の手書きデータ入力方法を広く普及させるこ
とができる。

【００７１】以上詳細に説明したように、上述した実施
例によれば、特定の位置から入力を開始した場合、それ
を文字データと見なして、１文字毎に文字の切出しを行
いながら手書きストロークを保存し、それ以外の位置か
ら入力を開始した場合、それを描画メモデータ（図形や
絵など）と見なして、自由に手書きしたストロークデー
タを保存する手書きデータ入力装置を実現できる。本手
書きデータ入力装置によれば、手書き文字のストローク
を、後から容易に文字認識してテキストに変換したり、
文字毎の編集をすることが可能で、また、図形や絵など
の描画メモも自由に書くことができる。手書き文字スト
ロークは、文字認識でテキストに変換することにより、
一般のメールで文字の部分だけ送信するといった利用
や、テキストにして後から検索して利用するといった再
利用も可能で、また、手書き文字ストロークは行や原稿
用紙の桝目に合わせて、きれいに表示することも可能と
なる。

【００７２】

【発明の効果】本発明によれば、手書き文字のストロー
クは、入力する際に１文字毎に文字を切り出してあるた
め、後から容易に文字認識してテキストに変換したり、
文字毎の編集をすることが可能である。また、図形や絵
などの描画メモも自由に書くことができる。手書き文字
ストロークは、文字認識でテキストに変換することによ
り、一般のメールで文字の部分だけ送信するといった利
用や、テキストにして後から検索して利用するといった
再利用も可能で、また、手書き文字ストロークは行や原
稿用紙の桝目に合わせて、きれいに表示することも可能
となる。

【図面の簡単な説明】

【図１】本発明の第１実施例である手書きデータ入力装
置の機能ブロック図である。

【図２】本発明の第１実施例である手書きデータ入力装
置の画面概要図である。

【図３】本発明の第１実施例である手書きデータ入力装
置の処理フロー図である。

【図４】本発明の第２実施例である手書きデータ入力装
置の機能ブロック図である。

【図５】本発明の第２実施例である手書きデータ入力装
置の画面概要図である。

【図６】本発明の第２実施例である手書きデータ入力装
置の処理フロー図である。

【図７】本発明の第２実施例である手書きデータ入力装
置の処理フロー図である。

【図８】本発明の第２実施例である手書きデータ入力装
置の処理フロー図である。

【図９】本発明の第２実施例である手書きデータ入力装
置の処理フロー図である。

【図１０】本発明の第２実施例である手書きデータ入力
装置の処理フロー図である。

【図１１】本発明の第２実施例である手書きデータ入力
装置の処理フロー図である。

【図１２】本発明の第１実施例である手書きデータ入力
装置の構成図である。

【符号の説明】

１０１：入力部 １０２：表示部 １０３：入力データ判定部 １０４：文字データ管理部 １０５：描画メモデータ管理部 １０６：文字認識部 ２０１：手書きデータ入力アプリケーション画面 ２０２：スタイラスペン ２０３：文字入力開始枠 ２０４：文字切出し枠 ２０５：文字認識ボタン（メニュー） ２０６：罫線 ２０７：カーソル ４０１：入力部 ４０２：表示部 ４０３：入力データ判定部 ４０４：文字データ管理部 ４０５：描画メモデータ管理部 ４０６：文字認識部 ４０７：ストローク拡大・縮小部 ４０８：ストローク圧縮・伸長部 ４０９：画像データ管理部 ４１０：レイヤー管理部 ４１１：表示合成部 ４１２：ファイル入出力部 ５０１：手書きデータ入力アプリケーション画面 ５０２：スタイラスペン ５０３：文字入力枠 ５０４：カーソル ５０５：テキスト入力ボタン（メニュー） ５０６：メニューボタン ５０７：行間変更ボタン ５０８：デスクトップ画面 ５０９：デスクトップ画面の画像 ５１０：罫線 １０４１：テキスト １０４２：手書き文字ストローク １０５１：描画メモ １２０１：入力装置 １２０２：出力装置（表示装置） １２０３：ＣＰＵ １２０４：記憶装置

───────────────────────────────────────────────────── フロントページの続き (72)発明者 村尾 龍之介 東京都渋谷区道玄坂一丁目16番５号 株式 会社日立情報システムズ内 Ｆターム(参考） 5B029 AA01 BB09 CC21 CC29 EE18 5B064 AB04 AB09 BA06 CA08 CA14 EA27 5B075 NR02 PQ02

Claims (12)

【特許請求の範囲】
1. 【請求項１】 手書きデータを入力する入力手段と、入
   力されたデータを表示する表示手段を有する手書きデー
   タ入力装置において、 前記入力されたデータの位置に基づいて入力されたデー
   タが手書き文字であるか描画メモであるかを判定する入
   力データ判定手段と、 入力されたデータが文字であると判定された場合に、そ
   の入力データを１文字毎に切出して手書き文字ストロー
   クとして保存し、文字認識する要求があった場合に、１
   文字毎に切出してある手書き文字ストロークを、文字認
   識手段を利用してテキストに変換して保存する文字デー
   タ管理手段と、 入力されたデータが描画メモであると判定された場合
   に、入力データを切出しせずに保存する描画メモデータ
   管理手段とを備えたことを特徴とする手書きデータ入力
   装置。
2. 【請求項２】 請求項１記載の手書きデータ入力装置に
   おいて、 前記入力されたデータが手書き文字であるか描画メモで
   あるかの判定は、入力されたデータの位置が、テキスト
   データの入力開始位置を示すカーソルの位置であるか否
   かによって行うことを特徴とする手書きデータ入力装
   置。
3. 【請求項３】 請求項１記載の手書きデータ入力装置に
   おいて、 さらに複数のストローク圧縮手段を設け、入力されたデ
   ータの種類に応じて、異なるストローク圧縮手段を用い
   ることを特徴とする手書きデータ入力装置。
4. 【請求項４】 請求項３記載の手書きデータ入力装置に
   おいて、 前記入力されたデータが手書き文字データの場合に、前
   記ストローク圧縮手段として文字認識の近似手法を用い
   ることを特徴とする手書きデータ入力装置。
5. 【請求項５】 手書きデータを入力して表示する手書き
   データ入力方法において、 入力されたデータの位置に基づいて入力されたデータが
   手書き文字であるか描画メモであるかを判定し、 前記入力されたデータが手書き文字であると判定された
   場合に、その入力データを１文字毎に切出しして手書き
   文字ストロークとして保存し、１文字毎に切出してある
   手書き文字ストロークを、文字認識手法を利用してテキ
   ストに変換して保存し、 入力されたデータが描画メモであると判定された場合
   に、入力データを切出しせずに保存することを特徴とす
   る手書きデータ入力方法。
6. 【請求項６】 請求項５記載の手書きデータ入力方法に
   おいて、 前記入力されたデータが手書き文字であるか描画メモで
   あるかの判定は、入力されたデータの位置が、テキスト
   データの入力開始位置を示すカーソルの位置であるか否
   かによって行うことを特徴とする手書きデータ入力方
   法。
7. 【請求項７】 請求項５記載の手書きデータ入力方法に
   おいて、 入力されたデータの種類に応じて、異なるストローク圧
   縮方法を用いて入力データを圧縮することを特徴とする
   手書きデータ入力方法。
8. 【請求項８】 請求項７記載の手書きデータ入力方法に
   おいて、 入力されたデータが手書き文字データの場合に、ストロ
   ークの圧縮に文字認識の近似手法を用いることを特徴と
   する手書きデータ入力方法。
9. 【請求項９】 手書き入力されたデータを表示する手書
   きデータ入力方法を記録した媒体において、 手書き入力されたデータの位置に基づいて入力されたデ
   ータが手書き文字であるか描画メモであるかを判定する
   処理と、入力されたデータが文字であると判定された場
   合に、その入力データを１文字毎に切出しして手書き文
   字ストロークとして保存する処理と、１文字毎に切出し
   てある手書き文字ストロークを、文字認識手法を利用し
   てテキストに変換して保存する処理と、入力されたデー
   タが描画メモであると判定された場合に、入力データを
   切出しせずに保存する処理とをプログラムコード化して
   記録したことを特徴とするコンピュータ読み取り可能な
   記録媒体。
10. 【請求項１０】 請求項９記載の記録媒体において、 前記入力されたデータが手書き文字であるか描画メモで
    あるかの判定は、入力されたデータの位置が、テキスト
    データの入力開始位置を示すカーソルの位置であるか否
    かによって行うことを特徴とするコンピュータ読み取り
    可能な記録媒体。
11. 【請求項１１】 請求項９記載の記録媒体において、 入力されたデータの種類に応じて、異なるストローク圧
    縮方法を用いて入力データを圧縮することを特徴とする
    コンピュータ読み取り可能な記録媒体。
12. 【請求項１２】 請求項１１記載の記録媒体において、 前記入力されたデータが手書き文字データの場合に、ス
    トロークの圧縮に文字認識の近似手法を用いることを特
    徴とするコンピュータ読み取り可能な記録媒体。