JP3638176B2 - 手書きデータ編集装置及び手書きデータ編集方法 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、ペン、タブレット等の入力デバイスを用いて入力された手書きデータを編集する手書きデータ編集装置及びその方法に関する。
【０００２】
【従来の技術】
近年、通信機能を有する携帯型端末装置が普及するにつれ、ペン、タブレット等の入力デバイスを用いて手書き入力された文字や図形等の手書きデータを扱う技術が広く利用されるようになってきている。手書きデータは、オンライン文字図形認識技術等を用いてコード化して利用されることも多いが、手書きデータをインクデータあるいはイメージデータとしてそのまま利用することも増えてきている。ここで、インクデータとは、筆跡データを構成する画素から一定間隔又は可変の間隔で座標点列を抽出した情報であり、所定の画面上に存在する全ての画素を保持して取り扱う必要があるイメージデータに比べて、編集等の作業におけるＣＰＵへの負荷が少なくて済むという長所を有している。
【０００３】
図２８に従来の手書きデータ編集装置の構成を示す。同図に示される従来の手書きデータ編集装置は、筆跡データ抽出部２８１、筆跡グループ分類部２８２、筆跡データ保持部２８３、筆跡データ編集部２８５、筆跡データ入力部２９１、指示入力部２９２、表示部２９３を備える。
筆跡データ抽出部２８１は、筆跡データ入力部２９１として備えられているペン、タブレット等の入力デバイスから手書きで入力された軌跡から筆跡データを抽出する。筆跡データは、ペンダウンからペンアップまでの描画軌跡（以下「ストローク」と呼ぶ）を単位とし、個々のストロークにおいて、ペンとタブレットとの接触位置を表す座標を、一定の間隔または可変の間隔で抽出した一連の座標点列を含む。抽出された筆跡データは、ストロークごとに筆跡データ保持部２８３に保持される。
【０００４】
筆跡グループ分類部２８２は、筆跡データ保持部２８３に保持されている筆跡データを、入力位置、入力順序等から、文字単位や、行単位や、ブロック単位である筆跡グループに分類する。
筆跡データ保持部２８３は、筆跡データ抽出部２８１が抽出した筆跡データと、筆跡グループ分類部２８２により分類された筆跡グループとを保持する。
【０００５】
筆跡データ編集部２８５は、指示入力部２９２を通じて操作者から入力された編集指示に従って、筆跡データ保持部２８３に保持されている筆跡データ及び筆跡グループを更新すると共に、筆跡データを表示部２９３に表示する。筆跡データ編集部２８５に対しては、「加茂、櫻井、櫻井、四反田、杉田：”パーソナルペン入力技術”、Human Interface News and Report, Vol.10, pp.59-64 (1995)」に開示されているように、削除、移動、複写、文字サイズの調整、文字間隔調整、文字基準線調整等を指示することが可能であった。
【０００６】
【発明が解決しようとする課題】
しかしながら、上記のような従来の手書きデータ編集装置では、例えばフロ−チャ−ト等のように文字と図形とが混在し、しかも両者が一体となって意味を持つような場合には、図形を先に編集してからそれに合わせて文字を編集する、あるいは逆に文字を先に編集してからそれに合わせて図形を編集するといった方法をとる必要がある。
【０００７】
その場合、例えば図形の部分を拡大等してからそれに合わせて文字の編集を行うとすると、文字の位置やサイズ等を図形に合わせるための微調整が非常に繁雑となり、編集に手間がかかるという問題点を有していた。
本発明は上記の問題点に鑑み、文字と図形とが混在し、しかも両者が一体となって意味を持つような性格を有する手書きデータの編集において、余計な手間をかけることなく編集を行うことのできる手書きデータ編集装置及びその方法を提供することを目的とする。
【０００８】
【課題を解決するための手段】
上記の問題点を解決する目的で、本発明に係る手書きデータ編集装置は、手書きの描画軌跡から筆跡データを抽出し、抽出された筆跡データを編集する手書きデータ編集装置であって、筆跡データを、文字を構成する筆跡データを示す文字グループと、図形を構成する筆跡データを示す図形グループとに分類する分類手段と、文字グループと図形グループとの位置関係が所定の条件を満たす場合に、両者を対応付けることにより組にする対応付け手段と、前記組に含まれる文字グループと図形グループのうち、操作者によって指定されたグループについて、操作者の指示に基づき視覚的な変更を加える第１の変更手段と、前記第１の変更手段により前記何れかのグループに変更が加えられた場合に、当該組に含まれる文字グループと図形グループとの少なくとも一つについて、所定の規則に基づいて位置と大きさとの少なくとも一方を変更する第２の変更手段とを備える。
【０００９】
また、前記対応付け手段は、文字グループの外接矩形と図形グループの外接矩形とが重なる領域の面積と、当該文字グループの外接矩形の面積との比が、第１の所定の割合を超える場合に両者を対応付けることにより組にすることが可能である。
また、前記対応付け手段は、図形グループの幅と高さの何れか一方が、第１の所定のしきい値より短いか否かを判定する図形形状判定部と、前記図形形状判定部により、短いと判定された場合に、図形グループの外接矩形と文字グループの外接矩形との間隔が、第２の所定のしきい値以下であるか否かを判定する間隔判定部と、前記間隔判定部により、第２のしきい値以下であると判定された場合に、当該図形グループの幅と高さの長い方の座標軸への射影と、当該文字グループにおいて対応する幅又は高さの座標軸への射影とが重なる範囲の長さを算出する重複範囲長算出部とを有し、前記重複範囲長算出部により算出された長さと、前記文字グループにおいて対応する幅又は高さの座標軸への射影の長さとの比が、第２の所定の割合を超える場合に両者を対応付けることにより組にすることもできる。
【００１０】
また、前記対応付け手段はさらに、操作者の指示に基づき、対応付けられていない文字グループと図形グループとを対応付けることにより組にし、及び既に対応付けられている文字グループと図形グループとの対応付けを解除することもできる。
また、前記第２の変更手段は、前記第１の変更手段による変更の後に、図形グループから文字グループのはみ出しが発生しているか否かを判定するはみ出し判定部を有し、前記はみ出し判定部によりはみ出しが発生したと判定された場合に、当該はみ出しを解消すべく、当該組に含まれる文字グループと図形グループとの少なくとも一つについて位置と大きさの少なくとも一方を変更することが可能である。
【００１１】
また、前記第２の変更手段は、前記第１の変更手段により変更された図形グループ又は文字グループの拡大率又は縮小率を算出する変形率算出部を有し、算出された拡大率又は縮小率と同一の拡大率又は縮小率を用いて、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方を拡大又は縮小するとともに、当該拡大率又は縮小率に基づいて前記第１の変更手段により変更されなかった方の位置を変更することもできる。
【００１２】
また、前記第２の変更手段は、変更後における図形グループに対する文字グループの位置を、左寄せとするか、右寄せとするか、センタリングするかを指示する横書き文字位置指示部を有し、前記第１の変更手段により、前記組に含まれる図形グループと文字グループとの何れか一方が変更され、かつ、前記組に含まれる文字グループが横書きである場合に、前記横書き文字位置指示部の指示する位置関係を実現すべく、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方に変更を加えることもできる。
【００１３】
また、前記第２の変更手段は、変更後における図形グループに対する文字グループの位置を、上寄せとするか、下寄せとするか、センタリングするかを指示する縦書き文字位置指示部を有し、前記第１の変更手段により、前記組に含まれる図形グループと文字グループとの何れか一方が変更され、かつ、前記組に含まれる文字グループが縦書きである場合に、前記縦書き文字位置指示部の指示する位置関係を実現すべく、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方に変更を加えることもできる。
【００１４】
また、前記第２の変更手段はさらに、前記第１の変更手段又は前記第２の変更手段により図形グループが変更された場合に、当該図形グループと、当該図形グループに隣接する図形グループとの間の交差関係の変化を検知する交差関係検知手段を備え、前記交差関係検知手段により交差関係の変化が検知された場合に、当該交差関係を変化する前の交差関係に戻すように前記隣接する図形グループを変更することもできる。
【００１５】
また、前記第２の変更手段はさらに、前記第１の変更手段による変更がなされた場合に、第２の変更手段による変更を行うか否かを指示する変更指示手段を備え、前記変更指示手段により、第２の変更手段による変更を行わない旨の指示がなされた場合には、第１の変更手段による変更が行われた場合でも第２の変更手段による変更を行わないことも可能である。
【００１６】
また、前記手書きデータ編集装置はさらに、前記第２の変更手段による変更が行われる場合に、当該変更により変更が加えられる文字グループ又は図形グループについて、当該変更が行われる前の状態を保持する変更前データ保持手段と、操作者からの、前記第２の変更手段による変更を無効にする旨の指示を受け付ける変更取消受付手段とを備え、前記第２の変更手段は、前記変更取消受付手段が、前記第２の変更手段による変更を無効にする旨の指示を受け付けた場合に、当該変更により変更された文字グループ又は図形グループを、前記変更前データ保持手段が保持する状態に復帰させることもできる。
【００１７】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照しながら説明する。
図１は、本実施の形態の手書きデータ編集装置の構成を示すブロック図である。同図に示される手書きデータ編集装置は、筆跡データ抽出部１、筆跡グループ分類部２、筆跡データ保持部３、筆跡グループ対応部４、筆跡データ編集部５、対応筆跡グループ更新部６、編集モード保持部７、更新前データ保持部８、更新前図形データ保持部９、筆跡データ入力部１１、指示入力部１２、表示部１３を備える。
【００１８】
なお、本実施の形態の手書きデータ編集装置は、携帯型端末装置等のＣＰＵにおいて所定のプログラムが実行されることにより実現されるものであり、必要な情報の保持にはディスク装置、メモリ等の記憶装置が用いられる。
筆跡データ抽出部１は、筆跡データ入力部１１として備えられているペン、タブレット等の入力デバイスから手書きで入力された軌跡から筆跡データを抽出する。筆跡データは、ストロークを単位として、個々のストロークにおいて、ペンダウンからペンアップまでのペンとタブレットとの接触位置を表す座標を、一定の間隔または可変の間隔で抽出した一連の座標点列を含む。即ち、本実施の形態の手書きデータ編集装置では、手書きデータをインクデータとして扱う。筆跡データは、ストロークごとに筆跡データ保持部３に保持される。
【００１９】
なお、筆跡データ入力部１１としては、本実施の形態ではペンとタブレットとの組み合わせを用いたが、上記ストロークを構成する点列を抽出することができる入力デバイスであれば、ペンとタブレットに限定されるものではない。
筆跡グループ分類部２は、筆跡データ保持部３に保持されている筆跡データを文字のストロークと図形のストロークとに分類し、文字のストロークについては、文字、行、複数の行からなる文字ブロック等の文字グループに分類し、図形のストロークについては、図形、複数の図形からなる図形ブロック等の図形グループに分類する。
【００２０】
ここで、文字グループについては、縦あるいは横の同一方向に並んだ文字の集合を行、位置的に近くにまとまっている複数の行の集合を文字ブロックとして扱う。行や文字ブロックの方向の決定には、ストロークの記述順序を利用する。
図形グループについても、位置的に近くにまとまっている複数の図形の集合を図形ブロックとする。どの文字グループ又は図形グループに、どのストロークが属するかを示す情報は、筆跡データ保持部３に保持される。
【００２１】
筆跡データを文字のストロークと図形のストロークとに分類する方法としては「待井、福島、中川：”オンライン手書き図における文字と図形の分離”、情報処理学会第４５回全国大会 4G-3,2,pp.293-294 (1992)」に開示されている方法が使用できる。以下に、分類方法について簡単に説明する。
（１）まず、ストロークの長さと、当該ストロークに外接する矩形の長辺の長さとが、両方とも所定のしきい値より大きいものを図形のストロークとし、それ以外のストロークを文字のストロークと識別する。文字データにおける１ストロークは、それほど大きくはならないであろうという仮定に基づく。
（２）次に、図形のストロークであると判定されたストロークと、文字のストロークであると判定されたストロークとの交差判定を行い、交差していれば、文字のストロークであると判定されていたストロークを、図形のストロークであると修正する。長い直線に短い線を交差させて記した線路を表す地図記号における短い線のようなストロークを想定している。
（３）最後に、入力の順序を調べ、文字のストロークであると判定されたストロークの前後に入力されたストロークが、両方とも図形のストロークであった場合に、当該文字のストロークであると判定されていたストロークを図形のストロークであると修正する。一点鎖線における点の部分のようなストロークを想定している。
【００２２】
以上のようにストロークの分類を行った後、文字のストロークについては、文字の切り分け、行の切り分け等の処理を行い、文字、行、文字ブロックからなる文字グループに分類し、図形のストロークについては、図形、図形ブロックからなる図形グループに分類する。
筆跡データ保持部３は、筆跡データ抽出部１により抽出された筆跡データ及び筆跡グループ分類部２により分類された文字グループ及び図形グループを保持する。
【００２３】
筆跡グループ対応部４は、筆跡データ保持部３に保持されている筆跡データと、文字グループ及び図形グループとを参照して、文字グループと図形グループとの位置関係を解析し、所定の規則に従って、文字グループと図形グループとの対応付けを行う。
筆跡データ編集部５は、操作者の指示に応じて、削除、移動、複写、文字サイズの調整、文字間隔調整、文字基準線調整等の様々な処理を行い、筆跡データ保持部３の内容を更新するとともに、表示部１３に筆跡データを表示する。
【００２４】
対応筆跡グループ更新部６は、筆跡グループ対応部４により対応付けられた文字グループと図形グループとの組のうち、何れか一方の内容が筆跡データ編集部５を通じて更新された場合に、必要に応じてもう一方の図形グループ若しくは文字グループ（あるいは、筆跡データ編集部５により編集された図形グループ又は文字グループ）又は当該図形グループに隣接する図形グループに対して、移動、複写、文字サイズの調整、文字間隔調整等の様々な処理を行い、対応付けられた文字グループと図形グループとの間に適切な対応関係を維持させる。
【００２５】
編集モード保持部７は、対応筆跡グループ更新部６による編集の方法を示す更新対応モードの設定を保持する。更新対応モードの設定は、例えば、図２に示すような画面を表示部１３に表示し、操作者が指示入力部１２を通じて入力することにより行う。操作者による設定が行われていない場合は、デフォルト値として設定されている更新対応モードが適用される。本実施の形態では、デフォルト値として、図２において枠線が太くなっている部分のモードが設定されているものとするが、デフォルト値は任意の設定が可能である。それぞれの更新対応モードの意味する内容の詳細については後述する。
【００２６】
更新前データ保持部８は、対応筆跡グループ更新部６が文字グループ若しくは図形グループの更新を行う場合に、当該文字グループ若しくは図形グループが対応筆跡グループ更新部６により更新される前の時点での内容を保持する。
更新前図形データ保持部９は、筆跡データ編集部５により図形グループが更新された場合に、当該図形グループが筆跡データ編集部５により更新される前の時点での内容を保持する。
【００２７】
図３は、本実施の形態の手書きデータ編集装置において、手書きデータの入力がなされてから、文字グループと図形グループとの対応付けが終了するまでの処理内容を示すフロ−チャ−トである。
同図に示されるように、本実施の形態の手書きデータ編集装置は、まず、筆跡データ抽出部１の処理を行う（Ｓ１０１）。筆跡データ抽出部１の処理とは、前述のとおり、手書き入力されたストロークから筆跡データを抽出する処理である。図４は、筆跡データのデータ構造を示す。同図に示されるように、筆跡データはストロークごとに、一連の座標点列の形で筆跡データ保持部３に保持される。筆跡データには、用途や目的に応じて、各座標点に抽出時刻等の情報を付加することも可能である。
【００２８】
次に、手書きデータ編集装置は、筆跡データの分類処理及び文字と図形との対応付け処理を行うべきタイミングであるか否かを判定する（Ｓ１０２）。ここで、筆跡データの分類処理とは、筆跡グループ分類部２の処理を意味し、文字と図形との対応付け処理とは、筆跡グループ対応部４の処理を意味する。これらの処理を行うタイミングの制御の方法としては、一定時間手書きデータの入力がなかった場合を検知する方法の他、タイマを用いて定期的に処理を行う方法、ユーザの指示を待って行う方法など様々な方法が考えられるが、ここではタイマを用いて制御を行うものとする。
【００２９】
タイマにより、分類及び対応付けを行うタイミングであることが示された場合、手書きデータ編集装置は、まず、筆跡グループ分類部２の処理を行う（Ｓ１０３）。図５は、筆跡グループ分類部２の詳細な処理内容を示すフロ−チャ−トである。
筆跡グループ分類部２は、まず、先に説明したストロークの分類方法を用いて筆跡データを文字のストロークと図形のストロークとに分類する（Ｓ１３１）。分類の結果は、ストロークごとに筆跡データ保持部３に一時的に保持される。
【００３０】
次に、筆跡グループ分類部２は、文字のストロークに対して、文字の切り分け処理や行の切り分け処理を行って、文字、行、文字ブロックからなる文字グループに分類する（Ｓ１３２）。切り分け処理については公知の技術であるので、ここでの詳細な説明は省略する。
分類の結果、文字グループの情報が筆跡データ保持部３に保持される。図６は、筆跡データ保持部３に保持される文字グループのデータ構造である。同図に示されるように、文字グループは、筆跡、文字、行、複数の行の集合である文字ブロック等の単位で階層的に管理される。以下、同図に示されるデータ構造について説明する。
【００３１】
文字グループとは、文字と図形とを対応させる単位となるものである。文字グループは、複数の行の集合である文字ブロックである場合と、文字の集合である行である場合と、一文字である場合とがある。
文字グループが文字ブロックである場合には、当該文字グループ２１には、外接矩形情報２１１、行数２１２、行データへのポインタ２１３、前文字グループへのポインタ２１４、次文字グループへのポインタ２１５、対応図形グループへのポインタ２１６が含まれる。
【００３２】
外接矩形情報２１１は、文字グループの外接矩形の上辺と左辺との交点（以下「原点」と呼ぶ）の絶対座標と、外接矩形の幅、高さ等の情報を含む。
行数２１２は、文字ブロックを構成する行数を保持する。
行データへのポインタ２１３は、文字ブロックを構成する行の一つについて、行データの先頭のアドレスを保持する。行データへのポインタ２１３に保持されるアドレスを有する行としては、例えば、複数の行の中で最も文字グループの外接矩形の原点に近い行とする。
【００３３】
前文字グループへのポインタ２１４、次文字グループへのポインタ２１５は、文字グループ同士を結び付けるためのポインタである。
対応図形グループのポインタ２１６には、当該文字グループに対応付けられている図形グループの先頭のアドレスを保持する。なお、図中において点線の矢印は、ポインタが指し示す対象の記載が省略されていることを意味する。
【００３４】
文字グループが行である場合には、当該文字グループ２２には、外接矩形情報２２１、行数２２２、行データへのポインタ２２３、前文字グループへのポインタ２２４、次文字グループへのポインタ２２５、対応図形グループへのポインタ２２６が含まれる。
外接矩形情報２２１、前文字グループへのポインタ２２４、次文字グループへのポインタ２２５、対応図形グループへのポインタ２２６については、文字グループが文字ブロックである場合と同一の内容であるので、ここでの説明は省略する。
【００３５】
行数２２２は、文字グループを構成する行数、即ち「１」を保持する。
行データへのポインタ２２３は、当該文字グループを構成する行の行データのアドレスを保持する。
文字グループが一文字である場合の文字グループのデータ構造については、文字グループが行である場合のデータ構造と同一であるので、詳細な説明は省略する。
【００３６】
次に行データのデータ構造について説明する。行データは、図中に示されるように文字グループが文字ブロックである場合に、当該文字ブロックを構成する行についての情報を保持する。以下行データ３１を例として説明する、
行データ３１は、外接矩形情報３１１、文字数３１２、文字データへのポインタ３１３、前行データへのポインタ３１４、次行データへのポインタ３１５を含む。
【００３７】
外接矩形情報３１１は、当該行を含む文字グループの外接矩形の原点を基準とした、当該行の外接矩形の原点の相対座標と、当該行の外接矩形の幅及び高さ等を保持する。
文字数３１２は、当該行を構成する文字数を保持する。
文字データへのポインタ３１３は、行を構成する文字の一つについて、文字データの先頭のアドレスを保持する。文字データへのポインタ３１３に保持されるアドレスを有する文字は、例えば、行を構成する文字の中で行の原点に最も近い文字とすることが考えられる。
【００３８】
前行データへのポインタ３１４、次行データへのポインタ３１５は、当該行を含む文字グループに含まれる行同士を結び付けるためのポインタである。
なお、文字ブロックが一文字で構成されている文字グループ２３に対応する行データ３４においては、文字数３４２としては「１」が保持される。
次に文字データのデータ構造について説明する。文字データは、図中に示されるように文字グループが文字ブロックである場合に、当該文字ブロックを構成する行ごとに、行を構成する文字についての情報を保持する他、文字グループが行である場合にも、当該行を構成する文字についての情報を保持する。以下文字データ４１を例として説明する、
文字データ４１は、外接矩形情報４１１、ストローク数４１２、筆跡データへのポインタ４１３、前文字データへのポインタ４１４、次文字データへのポインタ４１５を含む。
【００３９】
外接矩形情報４１１は、当該文字を含む文字グループ又は行データの外接矩形の原点を基準とした、当該文字の外接矩形の原点の相対座標と、当該文字の外接矩形の幅及び高さ等を保持する。
ストローク数４１２は、当該文字を構成するストロークの数を保持する。
筆跡データへのポインタ４１３は、文字を構成するストロークの中で最初に抽出されたストロークを表す筆跡データの先頭のアドレスを保持する。
【００４０】
前文字データへのポインタ４１４、次文字データへのポインタ４１５は、当該文字を含む文字グループ又は行データに含まれる文字同士を結び付けるためのポインタである。
最後に、筆跡データのデータ構造について説明する。筆跡データは、図中に示されるように、文字データのそれぞれについて、当該文字を構成するストロークについての情報を保持する。文字グループが一文字からなる場合には、当該文字を構成するストロークについての情報が保持されることになる。以下筆跡データ５１を例として説明する。
【００４１】
筆跡データ５１は、座標点数５１１、次筆跡データへのポインタ５１２、座標データ５１３を含む。なお、本実施の形態では、筆跡データについては、外接矩形情報を保持していないが、用途、目的によっては、保持させることも可能である。この場合には、筆跡データを指すポインタを有する文字グループ若しくは文字データの原点の座標からの外接矩形の相対座標及び外接矩形の幅と高さとを保持すればよい。
【００４２】
座標点数５１１は、当該ストロークから抽出された座標点列における座標点の数を保持する。
次筆跡データへのポインタ５１２は、当該筆跡データの次に抽出された筆跡データの先頭のアドレスを保持する。
座標データ５１３は、当該筆跡データを構成する座標点の座標を保持する。従って座標データの個数は、座標点数５１１に保持されている座標点の数と一致する。
【００４３】
以上に説明したように、本実施の形態の手書きデータ編集装置においては、ストローク、文字、行等についての情報を重複保持することなく、ポインタを用いて結び付けることにより階層的に管理している。
文字グループの分類を終了すると、筆跡グループ分類部２は図形のストロークと判定されたストロークを図形グループに分類する（Ｓ１３３）。図７は、筆跡データ保持部３に保持される図形グループのデータ構造を示す図である。同図のデータ構造について、以下に説明する。
【００４４】
図形グループは、文字グループとの対応付けの単位となるものである。図形グループは複数の図形から構成される場合と、一つの図形から構成される場合とがある。なお、図形グループの管理には「行」という概念は使用しない。
図形グループが複数の図形から構成される場合には、当該図形グループ６１は、外接矩形情報６１１、図形数６１２、図形データへのポインタ６１３、前図形グループへのポインタ６１４、次図形グループへのポインタ６１５、対応文字グループへのポインタ６１６を含む。
【００４５】
外接矩形情報６１１は、当該図形グループの外接矩形の原点の絶対座標、外接矩形の幅、高さ等の情報を保持する。
図形数６１２は、当該図形グループを構成する図形の数を保持する。
図形データへのポインタ６１３は、図形グループを構成する図形の一つについて、図形データの先頭のアドレスを保持する。図形データへのポインタ６１３に保持されるアドレスを有する図形としては、例えば、複数の図形の中で最も図形グループの外接矩形の原点に近い図形とする。
【００４６】
前図形グループへのポインタ６１４、次図形グループへのポインタ６１５は、図形グループ同士を結び付けるためのポインタである。
対応文字グループのポインタ６１６には、当該図形グループに対応付けられている文字グループの先頭のアドレスを保持する。なお、図中において点線の矢印は、ポインタが指し示す対象の記載が省略されていることを意味する。
【００４７】
図形グループが一つの図形から構成されている場合には、当該図形グループ６２には、外接矩形情報６２１、図形数６２２、図形データへのポインタ６２３、前図形グループへのポインタ６２４、次図形グループへのポインタ６２５、対応文字グループへのポインタ６２６が含まれる。
外接矩形情報６２１、前図形グループへのポインタ６２４、次図形グループへのポインタ６２５、対応文字グループへのポインタ６２６については、図形グループが複数の図形から構成されている場合と同一の内容であるので、ここでの詳細な説明は省略する。図形数２３２は、図形グループを構成する図形の数であるので、この場合には「１」が保持される。
【００４８】
筆跡データのデータ構造は、文字を構成するストロークの筆跡データと同一である。図形を構成する筆跡データは、図中に示されるように、図形データのそれぞれについて、当該図形を構成するストロークについての情報を保持する。図形グループが一つの図形から構成される場合には、当該図形を構成するストロークについての情報が保持されることになる。以下筆跡データ８１を例として説明する。
【００４９】
筆跡データ８１は、座標点数８１１、次筆跡データへのポインタ８１２、座標データ８１３を含む。なお、本実施の形態では、筆跡データについては、外接矩形情報を保持していないが、用途、目的によっては、保持させることも可能である。この場合には、文字を構成するストロークの筆跡データと同様に、筆跡データを指すポインタを有する図形グループ若しくは図形データの原点の座標からの外接矩形の相対座標及び外接矩形の幅と高さとを保持すればよい。
【００５０】
座標点数８１１、次筆跡データへのポインタ８１２の内容は、文字を構成するストロークの筆跡データと同一の内容であるので、ここでの詳細な説明は省略する。
筆跡グループ分類部２は、図形のストロークと判定されたストロークについて、その位置関係や入力順序を参照して、図形グループの分類を行う。図形グループの管理も文字グループの管理と同様に階層的に行っている。
【００５１】
筆跡グループ分類部２の処理が終了すると、手書きデータ編集装置は、図３のフロ−チャ−トに戻って、筆跡グループ対応部４の処理を行う（Ｓ１０４）。
図８は筆跡グループ対応部４の詳細な処理内容を示すフロ−チャ−トである。筆跡グループ対応部４は、筆跡データ保持部３に保持されている全ての図形グループについてループＡの処理を行う（Ｓ１４１）。筆跡グループ対応部４は、まず、筆跡データ保持部３から、図形グループを一つ取り出す（Ｓ１４２）。
【００５２】
次に、筆跡データ保持部３に保持されている図形グループの外接矩形情報を参照して、取り出された図形グループがライン型の図形グループであるか否かを判定する（Ｓ１４３）。ここで、ライン型の図形グループとは、外接矩形の幅と高さの短い方が所定のしきい値より短い図形グループのことである。
取り出された図形グループがライン型でない場合（Ｓ１４３：Ｎｏ）は、まだ図形グループと対応付けられていない全ての文字グループについて、ループＢの処理を行う（Ｓ１４４）。ループＢの処理とは、ライン型でない図形グループと文字グループとが対応付け可能であるか否かを判定する一連の処理である。
【００５３】
以下、取り出された図形グループがライン型でない場合の判定方法について、図９をも参照しながら具体的に説明する。
筆跡グループ対応部４は、筆跡データ保持部３を参照して、まだ対応付けられていない文字グループを一つ取り出す（Ｓ１４５）。そして、図形グループの外接矩形と、文字グループの外接矩形とが重なり合う領域の面積を算出する（Ｓ１４６）。例えば、図９の例において、取り出された図形グループＡの外接矩形領域をａ、取り出された文字グループＢの外接矩形領域をｂとすると、ａとｂとが重なり合う領域ｃ（図９の網掛け部、図９（ａ）の例ではｂ＝ｃである）の面積を算出する。
【００５４】
さらに、筆跡グループ対応部４は、領域Ｃの面積ｓｃと、領域Ｂの面積ｓｂとの比の値を算出し（Ｓ１４７）、算出された比の値が、以下の式（１）の条件が満たすか否かを判定する（Ｓ１４８）。
ｓｃ／ｓｂ≧Ｋｓ， ０＜Ｋｓ≦１ （１）
ここで、Ｋｓは予め定められたしきい値である。本実施の形態では、若干の文字グループのはみ出し等を考慮してＫｓとして０．９程度の値を設定するが、Ｋｓの値は用途、目的に応じて任意の設定が可能である。
【００５５】
式（１）の条件が満たされた場合（Ｓ１４８：Ｙｅｓ）には、筆跡グループ対応部４は、取り出された図形グループＡと文字グループＢとが対応付け可能であると判定する（Ｓ１４９）。即ち図９（ａ）に示す例のように、前記比の値が所定のしきい値Ｋｓ以上であるような関係であれば、両者は対応付け可能と判定されるが、図９（ｂ）に示されるように、前記比の値が所定のしきい値Ｋｓを下回るような場合であれば、対応付け可能とは判定されない。
【００５６】
以上のような処理を、まだ対応付けのなされていない全ての文字グループについて行った後（Ｓ１５０）に、筆跡グループ対応部４は、対応付け可能と判定された文字グループが存在するか否かを判定する（Ｓ１５１）。対応付け可能な文字グループが存在した場合には、筆跡データ保持部３に保持されている図形グループ及び文字グループにおいて、対応文字グループへのポインタ及び対応図形グループへのポインタの内容の更新を行うことにより、両者の対応関係を保存する（Ｓ１５２）。
【００５７】
ここで、対応付け可能な文字グループが複数存在した場合には、複数の文字グループを一つに統合する。例えば、複数の行が対応付け可能と判定されれば、当該複数の行を文字ブロックに統合して一つの文字グループとする等の処理を行う。この処理もポインタの内容を更新することにより行うことができる。ステップＳ５１５において、対応付け可能な文字グループが存在しないと判定された場合には、次の図形グループについて対応付け処理を行うべくステップＳ１４１に戻る（Ｓ１５３）。
【００５８】
一方、ステップＳ１４３において、取り出された図形グループの外接矩形の幅と高さの短い方が、所定のしきい値より短いと判定された場合、即ち取り出された図形グループがライン型のものである場合には、まだ対応付けられていない全ての文字グループについて、ループＣの処理を行う（Ｓ１５４）。以下、取り出された図形グループがライン型の図形グループであった場合の処理の内容について、図１０の例を用いて具体的に説明する。
【００５９】
筆跡グループ対応部４は、筆跡データ保持部３を参照して、まだ対応付けられていない文字グループを一つ取り出す（Ｓ１５５）。ライン型の図形グループの場合は、文字グループとの対応付けが可能か否かの判定は、外接矩形領域の面積の比ではなく、文字グループと図形グループとの間の間隔と、文字グループ及び図形グループの座標軸への射影の長さを用いて判定する。筆跡グループ対応部４は、まず、図形グループと文字グループとの間の間隔が所定のしきい値以下であるか否かを判定する（Ｓ１５６）。判定には以下に示す式（２）を用いる。
【００６０】
｜Ｙａｕ−Ｙｂｄ｜≦Ｋｇ 又は ｜Ｙａｄ−Ｙｂｕ｜≦Ｋｇ 又は
｜Ｘａｕ−Ｘｂｄ｜≦Ｋｇ 又は ｜Ｘａｄ−Ｘｂｕ｜≦Ｋｇ （２）
ここで、Ｙａｕは外接矩形ａの上端のＹ座標、Ｙｂｄは外接矩形ｂの下端のＹ座標、Ｙａｄは外接矩形ａの下端のＹ座標、Ｙｂｕは外接矩形ｂの上端のＹ座標、Ｘａｕは外接矩形ａの右端のＸ座標、Ｘｂｄは外接矩形ｂの左端のＸ座標、Ｘａｄは外接矩形ａの左端のＸ座標、Ｘｂｕは外接矩形ｂの右端のＸ座標である。即ち、式（２）の式の何れかを満たせば、外接矩形ａと外接矩形ｂとのＸ軸方向又はＹ軸方向の間隔が所定のしきい値以下であることを意味する。なお、しきい値Ｋｇの値は、デバイスの解像度に応じて決定する必要がある。
【００６１】
両者の間隔が所定値を上回る場合は、ステップＳ１６１に進み、次の文字グループを取り出すことになる。一方、両者の間隔が所定値以下であった場合（Ｓ１５６：Ｙｅｓ）には、筆跡グループ対応部４は、図形グループの幅又は高さの長い方のＸ軸又はＹ軸への射影と、文字グループの幅又は高さ（図形グループの幅又は高さに対応する方）のＸ軸又はＹ軸への射影とが重なり合う部分の長さを算出する（Ｓ１５７）。例えば、図１０（ａ）に示される図形グループＡのように、外接矩形の高さが所定のしきい値より短い横長のライン型図形であれば、図形グループＡの外接矩形ａの幅のＸ軸への射影と、文字グループＢの外接矩形ｂの幅のＸ軸への射影とが重なり合う部分の長さＬを算出する。
【００６２】
次に、筆跡グループ対応部４は、算出された長さＬと、文字グループＢの外接矩形ｂの幅のＸ軸への射影の長さ（即ちｂの幅）Ｌｂ（図１０（ａ）の例では、Ｌ＝Ｌｂである）との比の値を算出する（Ｓ１５８）。そして、筆跡グループ対応部４は、算出された比の値が、以下の式（３）の条件を満たすか否かを判定する（Ｓ１５９）。
【００６３】
Ｌ／Ｌｂ≧Ｋｌ， ０＜Ｋｌ≦１ （３）
ここで、Ｋｌは予め定められたしきい値である。Ｋｌの値としては、本実施の形態では、若干の文字グループのはみ出し等を考慮して０．９程度の値を設定するが、目的、用途により任意の変更が可能である。式（３）の条件を満たせば筆跡グループ対応部４は、取り出された図形グループと文字グループとが対応付け可能と判定する（Ｓ１６０）。
【００６４】
従って、図１０（ａ）に示すような関係（Ｌ＝Ｌｂ、即ちＫｌ＝１である）であれば、図形グループＡと文字グループＢとは対応付け可能と判定されるが、図１０（ｂ）に示すように射影が重なる範囲の長さＬと、文字グループの外接矩形ｂと幅Ｌｂとの比の値がしきい値Ｋｌより小さい場合には、両者は対応付け可能とは判断されない。
【００６５】
以上、座標軸への射影を用いて対応付け可能か否かを判定する方法について、横長のライン型図形を例として説明したが、縦長のライン型図形の場合も同様に考えることができる。即ち、図形グループの外接矩形のＹ軸への射影に、文字グループの外接矩形のＹ軸への射影が重なっている範囲の長さをＬとし、文字グループの外接矩形のＹ軸への射影の長さ（即ち外接矩形の高さ）をＬｂとした場合の両者の比の値が、上記の式（３）に従う場合に、当該図形グループと当該文字グループとが対応付け可能であると判定すればよい。
【００６６】
以上の処理を、対応付けの済んでいない全ての文字グループについて行った後（Ｓ１６１）に、筆跡グループ対応部４は、対応付け可能な文字グループが存在するか否かを判定する（Ｓ１６２）。対応付け可能な文字グループが存在しない場合には、次の図形グループについて処理を行うべく、そのままステップＳ１５３へと進む。
【００６７】
対応付け可能な文字グループが存在した場合（Ｓ１６２：Ｙｅｓ）には、筆跡データ保持部３に保持されている図形グループ及び文字グループの対応文字グループへのポインタ及び対応図形グループへのポインタを更新することにより、対応関係を保存する（Ｓ１６３）。ここで、対応付け可能な文字グループが複数存在した場合に、文字グループが一つになるように統合するのは、図形グループがライン型でない場合の処理と同様であるが、ライン型の図形グループの場合、例えば、当該ライン型図形を挟んで両側に対応付け可能な文字グループが複数存在する場合には、図形グループの外接矩形と、文字グループの外接矩形との間隔が小さい方の側の文字グループのみを統合の対象とし、双方を統合することは行わない。
【００６８】
以上の処理を全ての図形グループについて行い（Ｓ１５３）、筆跡グループ対応部４の処理を終了する。
なお、本実施の形態では、前記の各条件に従って図形グループと文字グループとの対応付けを自動的に行ったが、対応付けの作業はユーザの指示に従って行うようにしてもよい。その場合には、対応付けのモードを指定してから図形グループと文字グループとをそれぞれ指定するか、あるいはペンの動きで制御内容と制御対象とを指定するジェスチャによって対応付けを指定する等の方法をとることができる。また、自動的に行った対応付けの結果を、ユーザの指定によって対応付けの解除、変更、追加等を行うことにより修正することも可能である。
【００６９】
次に、以上のような方法で対応付けられた文字グループ又は図形グループに対して、ユーザが指示入力部１２を通じて編集を行う場合の手書きデータ編集装置の処理内容について説明する。
図１１は、指示入力部１２を通じて、操作者から編集指示を受けた場合の手書きデータ編集装置の処理内容を示すフロ−チャ−トである。
【００７０】
まず、筆跡データ編集部５は、指示入力部１２を通じて操作者からなされた編集指示の入力を受け付け、指示内容に応じて所定の編集処理を行う（Ｓ２０１）。図１２は、筆跡データ編集部５の詳細な処理内容を示すフロ−チャ−トである。筆跡データ編集部５は、まず編集対象が図形グループであるか否かを判定し（Ｓ２１１）、編集対象が図形グループであれば、更新前図形データ保持部９に更新前の内容を保存する（Ｓ２１２）。更新前図形データ保持部９に保持されたデータは、後に対応筆跡グループ更新部６により参照される。その後、筆跡データ編集部５は、操作者からの編集指示に応じて筆跡データ保持部３の内容の更新処理を行う（Ｓ２１３）。
【００７１】
筆跡データ保持部３の更新処理の内容は既に公知の技術であるので、ここでの詳細な説明は省略する。
筆跡データ編集部５による処理の終了後、図１１のフロ−チャ−トに戻って対応筆跡グループ更新部６の処理が行われる（Ｓ２０２）。図１３は、対応筆跡グループ更新部６の詳細な処理内容を示すフロ−チャ−トである。
【００７２】
まず、対応筆跡グループ更新部６は、編集モード保持部７を参照して、「更新モード」が「更新」に設定されているか否かを判定する（Ｓ３０１）。「更新モード」が「非更新」であるということは、筆跡データ編集部５による更新が行われた場合でも、対応付けられた文字グループ若しくは図形グループに対する更新を行う必要がないことを意味するので、対応筆跡グループ更新部６はそのまま処理を終了する（Ｓ３０１：Ｎｏ）。なお、「更新モード」の「非更新」の設定は、周囲の図形グループ又は文字グループとの関係で、直接編集指示を行った図形グループ又は文字グループ以外を更新しない方がよい場合等に有用である。
【００７３】
「更新モード」が「更新」である場合には、対応筆跡グループ更新部６は、筆跡データ保持部３を参照して、筆跡データ編集部５による編集の対象が、図形グループであるか否かを判定する（Ｓ３０２）。
筆跡データ編集部５による編集の対象が図形グループである場合は、対応筆跡グループ更新部６は、筆跡データ保持部３を参照し、当該図形グループに対応付けられた文字グループが存在するか否かを判定する（Ｓ３０３）。対応付けられた文字グループが存在しない場合は、対応筆跡グループ更新部６はそのまま処理を終了する。対応付けられた文字グループが存在する場合は対応文字グループ更新処理を行う（Ｓ３０４）。図１４は、対応文字グループ更新処理の内容を示すフロ−チャ−トである。
【００７４】
対応文字グループ更新処理において、対応筆跡グループ更新部６は、まず、対応付けられている文字グループについての更新前の内容を更新前データ保持部８に保持する（Ｓ３１１）。さらに、筆跡データ編集部５による更新が行われた後の図形グループと、対応筆跡グループ更新部６による更新が行われる前の文字グループとから、当該図形グループからの文字グループのはみ出しが発生するか否かを判定する（Ｓ３１２）。前述の如く、筆跡データ保持部３には、文字グループ及び図形グループのそれぞれの外接矩形領域の原点の絶対座標及び外接矩形の幅と高さとが外接矩形情報として保持されているので、外接矩形間の位置関係からはみ出しが発生するか否かを判定する。
【００７５】
図形グループがライン型でない場合であれば、より確実なはみ出しの判定のために、文字グループの外接矩形領域の周囲に若干余裕を持たせる（例えば、文字グループの外接矩形の周囲に、幅と高さのそれぞれ５％の値を付加して、図形グループの外接矩形との重なりを判定する）ことも可能である。
また、ライン型の図形グループの場合には、筆跡グループ対応部４で行った対応付け処理と同様の考え方に基づいて、座標軸への射影を用いてはみ出しを判定する。即ち、図形グループの射影から、文字グループの射影がはみ出した場合にはみ出しが発生したと判定する。
【００７６】
なお、本実施の形態では、処理速度を優先して外接矩形同士の位置関係を調べる方法をとったが、より厳密なはみ出しの判定を行う必要がある場合には、筆跡データの外接矩形を用いて判定する方法や、ストロークを構成する点列のデータを用いて判定する方法を用いることも可能である。但し、はみ出し判定を厳密に行うと、それだけ判定に要する処理量は増大する。
【００７７】
対応筆跡グループ更新部６は、文字のはみ出しが発生する場合には、はみ出し処理Ａを行い（Ｓ３１３）、はみ出しが発生しない場合には、文字列形状決定処理Ａを行う（Ｓ３１４）。以下、はみ出し処理Ａと、文字列形状決定処理Ａとの詳細な処理内容について、それぞれ説明する。
図１５は、はみ出し処理Ａの詳細な処理内容を示すフロ−チャ−トである。
【００７８】
はみ出し処理Ａにおいて、対応筆跡グループ更新部６は、まず、編集モード保持部７を参照して、「はみ出しモード」が「反映」に設定されているか否かを判定する（Ｓ３２１）。
ここで、「はみ出しモード」が「反映」であるということは、はみ出しが発生した場合に、筆跡データ編集部５による編集対象である図形グループ若しくは文字グループに、対応付けられた文字グループ若しくは図形グループの方を縮小若しくは拡大することにより、はみ出しがなくなるようにすることを意味する。一方、「はみ出しモード」が「適応」である場合には、筆跡データ編集部５による編集対象である図形グループ若しくは文字グループの方を、再度拡大若しくは縮小することにより、はみ出しがなくなるようにする。
【００７９】
即ち、この例において「はみ出しモード」が「適応」である場合（Ｓ３２１：Ｎｏ）には、操作者の指示に基づき筆跡データ編集部５により編集された図形グループを再度拡大することによりはみ出しをなくすことになる（Ｓ３２２）。
「はみ出しモード」が「反映」である場合には、対応筆跡グループ更新部６は、筆跡データ編集部５による編集対象の図形グループがライン型であるか否かを判定する（Ｓ３２３）。
【００８０】
筆跡データ編集部５による編集対象の図形グループがライン型である場合には、図形の縮小比と同じ縮小比で、対応付けられた文字グループも縮小する（Ｓ３２４）。ここで、図形の縮小比と同じ縮小比で縮小する（以下、このように筆跡データ編集部５による編集対象の拡大・縮小比と同じ拡大・縮小比で、対応付けられた文字グループ若しくは図形グループを拡大・縮小する編集を「相対位置型編集」と称する）方法について具体例を用いて説明する。
【００８１】
例えば、図１６（ａ）のように、横長のライン型の図形グループＡと、文字グループＢとが対応付けられているものとし、図形グループＡの外接矩形ａの幅をＸ、文字グループＢの外接矩形ｂの幅をＰとする。
ここで、操作者から、図形グループＡの縮小指示がなされ、図１６（ｂ）に示す如く外接矩形ｂの幅がｘとなったとすると、図形グループＡの縮小比はｘ／Ｘとなる。
【００８２】
このような場合に、相対位置型編集においては、編集後の文字グループＢの幅ｐが以下に示す式（４）の関係を満たすように、文字グループＢを縮小する（図１６（ｃ））。拡大の場合も同様に考えることができる。
ｐ＝Ｐ＊ｘ／Ｘ （４）
一方、ステップＳ３２３において、編集対象の図形グループがライン型の図形グループではないと判定された場合には、対応筆跡グループ更新部６は、編集モード保持部７を参照して「文字列対応モード」が「保存」に設定されているか否かを判定する（Ｓ３２５）。「文字列対応モード」が「保存」に設定されている場合には、文字グループの縦横比を保って文字グループの縮小を行うことによりはみ出しを解消する（Ｓ３２６）。ここで、縦横比とは、外接矩形の幅と高さとの比を意味する。即ち、対応筆跡グループ更新部６は、文字グループの外接矩形の幅と高さの比を保ったまま、はみ出しが無くなるまで文字グループを縮小する（以下、このように文字グループ若しくは図形グループの縦横比を保って拡大・縮小する編集を、「保存型編集」と称する）。
【００８３】
ステップＳ３２５において、「文字列対応モード」が「保存」に設定されていない場合には、対応筆跡グループ更新部６は、「文字列対応モード」が「相対位置」に設定されているか否かを判定する（Ｓ３２７）。「文字列対応モード」が「相対位置」に設定されている場合には、編集対象がライン型の図形グループであった場合と同様に、相対位置型編集を行う（Ｓ３２８）。但しこの場合は、ライン型の図形グループの場合のように、外接矩形の幅（図形グループが縦長の場合には高さ）だけではなく、幅と高さとの両方について縮小比を算出する。以下、図形グループがライン型でない場合の相対位置型編集と、前述の保存型編集について、具体例を用いて説明する。
【００８４】
例えば、図１７（ａ）に示すように図形グループＡと文字グループＢとが対応付けられているものとし、図形グループＡの外接矩形をａ、文字グループＢの外接矩形をｂとする。外接矩形ａの幅をＸ、高さをＹとし、外接矩形ｂの幅をＰ、高さをＱとする。
ここで、図１７（ｂ）に示すように、図形グループＡの編集がなされ、外接矩形ａの幅がｘ、高さがｙになるように縮小されたとすると、相対位置型編集の場合は図１７（ｃ）に示すように、幅と高さのそれぞれについて、図形グループＡの縮小比と同じ縮小比を用いて、対応付けられている文字グループＢが縮小されることになる。即ち、縮小後の外接矩形ｂの幅をｐ、高さをｑとすると、以下に示す式（５）を満たすように文字グループＢの編集がなされる。
【００８５】
ｐ＝Ｐ＊ｘ／Ｘ かつ ｑ＝Ｑ＊ｙ／Ｙ （５）
一方、保存型編集においては図１７（ｃ’）に示すように、文字グループの縦横比が保存される。即ち、更新前の外接矩形ｂの縦横比Ｐ／Ｑと更新後の外接矩形ｂの縦横比ｐ’／ｑ’が等しくなるように文字グループの縮小が行われる。なお、本実施の形態では、はみ出しが起きているか否かの判定を、外接矩形のはみ出しで判定しているため、外接矩形ｂの底辺と、外接矩形ａの底辺とが重なり合う所まで、文字グループの縮小が行われている。
【００８６】
ステップＳ３２７において、「文字列対応モード」が「相対位置」に設定されていない場合、即ち、「左上」、「センター」、「右下」の何れかに設定されていた場合には、以下のような処理を行う。即ち、原則として、相対位置型編集を行うが、幅の縮小率と高さの縮小率とが著しく異なる場合には、横書き若しくは縦書きとしての文字列の形状の保持を優先するため、幅の縮小率と高さの縮小率のうち、小さい方の縮小率を用いて縮小する（Ｓ３２９）。ここで、幅と高さの縮小率が著しく異なる場合とは、例えば図１８に示すように、幅と高さの一方を極端に縮小した場合等である。図１８の例であれば、図１８（ａ）から、図１８（ｂ）への縮小においては、幅は同一（縮小率＝１倍）であるが、高さが０．５倍に縮小されている。このような場合に、相対位置型編集を行うと、文字が平べったいものとなり、見づらくなってしまうため、文字グループの幅と高さの縮小率を、図形グループの幅と高さの縮小率の小さい方、即ち図１８の例では０．５倍に合わせ、文字グループの幅と高さを共に０．５倍に縮小するようにしたものである（図１８（ｃ））。なお、図１８（ｃ）の例では、文字グループＢが図形グループＡから完全にはみ出してしまっているが、文字グループと図形グループとの位置関係については、後に位置再計算処理Ａ（Ｓ３１５）において調整されることになる。
【００８７】
なお、本実施の形態では、幅と高さの縮小率が著しく異なる場合として、幅の縮小率と、高さの縮小率の比が１．５倍以上の場合に設定した（図１８の例では１／０．５＝２倍となる）が、このしきい値は任意の設定が可能である。
次に、図１４のフロ−チャ−トに戻って、文字列形状決定処理Ａ（Ｓ３１４）の詳細な処理内容について説明する。
【００８８】
図１９は、文字列形状決定処理Ａの詳細な処理内容を示すフロ−チャ−トである。文字列形状決定処理Ａにおいては、対応筆跡グループ更新部６はまず、筆跡データ編集部５による編集対象の図形グループがライン型であるか否かを判定する（Ｓ３４０）。筆跡データ編集部５による編集対象がライン型の図形グループである場合は、前述の相対位置型編集を行う（Ｓ３４１）。はみ出し処理Ａにおいて行った場合とは異なり、縮小だけではなく拡大の場合もあり得るが、拡大比率の算出方法等は、縮小の場合と同様に考えることができる。
【００８９】
筆跡データ編集部５による編集対象がライン型の図形グループでない場合には、対応筆跡グループ更新部６は、編集モード保持部７を参照し、「文字列対応モード」が「保存」であるか否かを判定する（Ｓ３４２）。「文字列対応モード」が「保存」の場合には、文字グループの大きさを変更せず、そのまま文字列形状決定処理Ａの処理を終了する。
【００９０】
「文字列対応モード」が「保存」でない場合は、対応筆跡グループ更新部６は、「文字列対応モード」が「相対位置」であるか否かを判定する（Ｓ３４３）。「文字列対応モード」が「相対位置」であれば、前述の相対位置型編集を行う（Ｓ３４４）。この場合の相対位置型編集は、はみ出し処理Ａで行った場合と異なり、縮小だけでなく拡大の場合も有り得るが、拡大倍率の計算方法等は縮小の場合と同様に考えることができる。なお、ステップＳ３４３において、「文字列対応モード」が「相対位置」でない場合、即ち、「文字列対応モード」が「左上」、「センター」、「右下」の場合は、以下のような処理を行う。即ち、原則として相対位置型編集を行うが、幅の変形率と高さの変形率とが著しく異なる場合には、横書き若しくは縦書きとしての文字列の形状の保持を優先するため、幅の変形率と高さの変形率のうち、小さい方の変形率を用いて拡大又は縮小する（Ｓ３４５）。ここで、変形率とは、拡大の場合は拡大率を表し、縮小の場合は縮小率を表す。即ち、縮小の場合の処理内容は、はみ出し処理ＡのステップＳ３２９と同じ処理となる。拡大の場合も考え方は同一である。即ち、幅が同一（拡大率＝１倍）で高さのみ２倍に拡大されたような場合であれば、小さい方の拡大率が用いられるため、対応付けられた文字グループの拡大は行われないことになる。
【００９１】
なお、本実施の形態では、幅と高さの変形率が著しく異なる場合として、幅の変形率と、高さの変形率の比が１．５倍以上である場合に設定したが、このしきい値は任意の設定が可能である。
はみ出し処理Ａ又は文字列形状決定処理Ａの終了後、対応筆跡グループ更新部６は、図１４のフロ−チャ−トに戻って、位置再計算処理Ａ（Ｓ３１５）を行う。図２０は位置再計算処理Ａの詳細な処理内容を示すフロ−チャ−トである。
【００９２】
位置再計算処理Ａにおいては、対応筆跡グループ更新部６は、まず、「領域対応モード」が「反映」か否かを判定する（Ｓ３５０）。「領域対応モード」が「反映」でない場合には、図形グループと文字グループとのそれぞれの外接矩形の原点間の相対位置を、筆跡データ編集部５による編集対象である図形グループの幅と高さの変形率で再計算する（Ｓ３５１）。
【００９３】
具体的な例として、図１７に示した例で、はみ出し処理Ａを終了して、図２１（ａ）（図１７（ｃ）に示したものと同一である）に示すような状態となっている図形グループＡと文字グループＢを用いて説明する。図２１（ａ）の状態では、外接矩形ａの原点Ｊと、外接矩形ｂの原点Ｋとの間の相対的な位置関係は、はみ出し処理Ａを行う前、即ち図１７（ａ）に示す状態と何ら変化していない。
【００９４】
そこで、図形グループＡの幅と高さの変形率に基づいて、外接矩形ａの原点Ｊに対する外接矩形ｂの原点Ｑの相対位置を再計算する。即ち、位置再計算処理前の原点Ｊの座標を(X1,Y1)、原点Ｋの座標を(X2,Y2)とし、位置再計算処理後の原点Ｋ'の座標を(X3,Y3)とすると、以下の式（６）を満たすように座標(X3,Y3)を決定する。なお、ｘ／Ｘ及びｙ／Ｙについては、図１７で使用したものと同様の意味を持つものとする。
【００９５】
x/X=(X3−X1)/(X2−X1) かつ y/Y=(Y3−Y1)/(Y2−Y1) （６）
一方、ステップＳ３５０で、「領域反映モード」が「反映」に設定されている場合、対応筆跡グループ更新部６は、筆跡データ編集部５による編集対象の図形グループがライン型であるか否かを判定する（Ｓ３５２）。
筆跡データ編集部５による編集対象が、ライン型の図形グループであれば、対応筆跡グループ更新部６は編集モード保持部７を参照し、「文字列対応モード」の設定に応じて、横長の図形グループであればＸ軸への射影を用い、縦長の図形グループであればＹ軸への射影を用いて文字グループの位置を決定する（Ｓ３５３）。例えば、図１６（ｃ）に示したようなライン型の図形グループＡと文字グループＢが対応付けられている場合であれば、「文字列対応モード」の設定に応じて、文字グループＢの外接矩形ｂの左端のＸ座標を決定する。
【００９６】
具体的には、例えば筆跡データ編集部５による更新の前の図形グループＡの左端のＸ座標をＸ１、右端のＸ座標をＸ２、文字グループＢの左端のＸ座標をＸ３、右端のＸ座標をＸ４とし、筆跡データ編集部５による更新後の図形グループＡの左端のＸ座標をＸ５、右端のＸ座標をＸ６、対応筆跡グループ更新部６による更新後の文字グループＢの左端のＸ座標をＸ７、右端のＸ座標をＸ８とすれば、まず、「文字列対応モード」が「保存」又は「相対位置」に設定されている場合には、以下の式（７）を満たすように座標Ｘ７を決定する。
【００９７】
（Ｘ７−Ｘ５）／（Ｘ３−Ｘ１）＝ｘ／Ｘ （７）
「文字列対応モード」が「左上」に設定されている場合であれば、以下に示す式（８）を満たすように座標Ｘ７を決定する。ここで「文字列対応モード」が「左上」に設定されているとは、文字グループが横書きの文字グループである場合は図形グループに対して左寄せで配置し、文字グループが縦書きの文字グループである場合には、図形グループに対して上寄せで配置するように、位置を再計算することを意味する。
【００９８】
Ｘ７＝Ｘ５＋ｘ／１０ （８）
上記式（８）に示されるように、本実施の形態では、左寄せの場合に、文字グループの外接矩形の左端が、図形グループの外接矩形の左端から、幅の１／１０右側に来るように設定しているが、この１／１０の値も任意の設定が可能であり、文字グループの外接矩形の左端と、図形グループの左端とを重ねるようにすることも可能である。また、文字グループの配置位置のＹ座標については、先に説明した、「領域対応モード」が「非対応」である場合（Ｓ３５１）に準じて決定する。
【００９９】
また、「文字列対応モード」が「センター」であれば、センタリングを行うため、以下に示す式（９）を満たすように座標Ｘ７を決定する。
（Ｘ５＋Ｘ６）／２＝（Ｘ７＋Ｘ８）／２ （９）
この場合も文字グループの配置位置のＹ座標については、「領域対応モード」が「非対応」である場合に準じて決定する。
【０１００】
ステップＳ３５８において、「文字列対応モード」が「センター」に設定されていないと判定された場合には、「文字列対応モード」が「右下」に設定されていることを意味する。この場合には以下に示す式（１０）を満たすように座標Ｘ８を決定する。ここで「文字列対応モード」が「右下」に設定されているとは、文字グループが横書きの文字グループである場合は図形グループに対して右寄せで配置し、文字グループが縦書きの文字グループである場合には、図形グループに対して下寄せで配置するように、位置を再計算することを意味する。
【０１０１】
Ｘ８＝Ｘ６−ｘ／１０ （１０）
上記式（１０）に示されるように、本実施の形態では、右寄せの場合に、文字グループの外接矩形の右端が、図形グループの外接矩形の右端から、幅の１／１０左側に来るように設定しているが、この１／１０の値も任意の設定が可能であり、文字グループの外接矩形の右端と、図形グループの右端とを重ねるようにすることも可能である。また、この場合も、文字グループの配置位置のＹ座標については、先に説明した、「領域対応モード」が「非対応」である場合（Ｓ３５１）に準じて決定する。
【０１０２】
以上、筆跡データ編集部５による編集対象が、横長のライン型図形である場合について、対応付けられた文字グループの配置位置の計算方法を説明したが、縦長のライン型図形である場合も、Ｘ座標をＹ座標と置き換え、Ｘ軸をＹ軸と置き換えて考えることにより同様に位置の決定を行うことが可能である。筆跡データ編集部５による編集対象が縦長のライン型図形である場合の詳細な処理内容についての説明は省略する。
【０１０３】
一方、筆跡データ編集部５による編集対象がライン型の図形グループでなければ、次に「文字列対応モード」が「保存」又は「相対位置」に設定されているか否かを判定する（Ｓ３５４）。
「文字列対応モード」が「保存」又は「相対位置」に設定されている場合は、「領域対応モード」が「非対応」である場合（Ｓ３５１）と同様の処理を行う（Ｓ３５５）。
【０１０４】
「文字列対応モード」が「保存」にも「相対位置」にも設定されていない場合は、対応筆跡グループ更新部６は、次に「文字列対応モード」が「左上」に設定されているか否かを判定する（Ｓ３５６）。
文字列対応モードが「左上」に設定されていれば、文字グループが横書きなら左寄せで、縦書きなら上寄せで位置を計算する（Ｓ３５７）。具体的には、文字グループが横書きなら、文字グループの外接矩形を左右に移動させ、図形グループの外接矩形の左辺から、図形グループの幅の１／１０だけ右側に文字グループの外接矩形の左辺が位置するように配置する。また、文字グループが縦書きなら、文字グループの外接矩形を上下に移動させ、図形グループの外接矩形の上辺から、図形グループの幅の１／１０だけ下側に文字グループの外接矩形の上辺が位置するように配置する。なお、ここで、必ずしも１／１０だけ右側又は下側に位置させる必要がないのは、筆跡データ編集部５による編集対象がライン型図形である場合と同様である。また、文字グループが横書きである場合の文字グループの配置位置のＹ座標の決定、及び文字グループが縦書きである場合の文字グループの配置位置のＸ座標の決定は、「領域対応モード」が「非対応」である場合（Ｓ３５１）に準じて行う。
【０１０５】
「文字列対応モード」が「左上」に設定されていなければ、対応筆跡グループ更新部６は、次に「文字列対応モード」が「センター」に設定されているか否かを判定する（Ｓ３５８）。「文字列対応モード」が「センター」に設定されていれば、センタリングを行うべく、図形グループ及び文字グループのそれぞれの外接矩形を用いてセンタリング位置を計算する（Ｓ３５９）。具体的には、文字グループの外接矩形が図形グループの外接矩形の中央に位置するように、文字グループの配置位置を算出する。
【０１０６】
ステップＳ３５８において、「文字列対応モード」が「センター」に設定されていなければ、「文字列対応モード」が「右下」に設定されている事を意味するので、文字グループが横書きなら右寄せで、縦書きなら下寄せで位置を計算する（Ｓ３６０）。計算方法については、「文字列対応モード」が「左上」である場合と同様に考えることができるので、ここでの詳細な説明は省略する。
【０１０７】
以上で、対応文字グループ更新処理を終了し、図１３のフロ−チャ−トに戻って、隣接図形処理（Ｓ３０５）へと進む。
図２２は、隣接図形処理の詳細な処理内容を示すフロ−チャ−トである。隣接図形処理とは、筆跡データ編集部５又は対応筆跡グループ更新部６により、図形グループが更新された結果、当該図形グループと、当該図形グループに隣接する図形グループとの交差関係が変化した場合に、当該二つの図形グループの間の交差関係を元に戻すべく、隣接する図形グループの更新を行う処理である。ここで、交差関係とは、二つの図形グループが交差しているか、接触しているか、若しくは分離しているかという位置関係を表すものとする。例えば、図２３に示す例では、図２３（ａ）に示される当初の図形グループＡと図形グループＣとの交差関係は「接触」である。しかし、図形グループＡを拡大することにより、図２３（ｂ）に示す如く両者の交差関係が「交差」に変化している。隣接図形処理とは、このように図形グループ間の交差関係が変化した場合に、再び図形グループＡと図形グループＣとの間の交差関係を「接触」に戻すべく図形グループＣを更新して、図２３（ｃ）に示すような状態にする処理である。
【０１０８】
隣接図形処理において、対応筆跡グループ更新部６は、まず、これまでに更新された図形グループ（筆跡データ編集部５により更新されたものと、対応筆跡グループ更新部６により更新されたものとを含む）と、当該図形グループに隣接する図形グループとの交差関係が変化するか否かを判定する（Ｓ３７０）。図２３の例を用いて具体的に説明すると、更新前図形データ保持部９に保持されている筆跡データ編集部５による更新の前の図形グループＡの外接矩形ａの座標と、筆跡データ編集部５による更新の後の図形グループＡの外接矩形ａの座標と、対応筆跡グループ更新部６による更新の前の図形グループＣの外接矩形ｃの座標とから、両者の交差関係が変化したか否かを判定する。
【０１０９】
交差関係については、両者の外接矩形を用いて判定する。即ち、図形グループＡの外接矩形の下辺と、図形グループＣの外接矩形の上辺の座標等の比較を順次行うことにより、両者の交差関係が「交差」、「接触」、「分離」の何れであるかを、更新前後において判定し、交差関係の変化を検知する。なお、更新の前後に渡って、位置的に離れている図形グループについては交差関係の判定を行わないようにすることで処理量の軽減を図っている。
【０１１０】
両者の交差関係が変化しない場合は、隣接図形処理をそのまま終了する（Ｓ３７０：Ｎｏ）。変化する場合は、対応筆跡グループ更新部６は、編集モード保持部７を参照して「隣接図形モード」が「反映」に設定されているか否かを判定する（Ｓ３７１）。
「隣接図形モード」が「非対応」に設定されている場合は、隣接する図形グループに対する更新処理を行う必要がないことを意味しているので、隣接図形処理をそのまま終了する（Ｓ３７１：Ｎｏ）。「隣接図形モード」が「反映」に設定されている場合は、対応筆跡グループ更新部６は、隣接する図形グループを更新前データ保持部８に格納する（Ｓ３７２）。次に対応筆跡グループ更新部６は、筆跡データ編集部５による編集前の両者の交差関係が「接触」であったか否かを判定する（Ｓ３７３）。筆跡データ編集部５による編集前の交差関係が「接触」であった場合には、両者の交差関係が「接触」に戻るまで隣接する図形グループを拡大・縮小する（Ｓ３７４）。
【０１１１】
筆跡データ編集部５による編集前の交差関係が「接触」でない場合は、編集前の両者の交差関係が「交差」であったか否かを判定する（Ｓ３７５）。編集前の交差関係が「交差」であった場合は、交差関係が「交差」に戻るまで隣接する図形グループを拡大する（Ｓ３７６）。
ステップＳ３７５において編集前の交差関係が「交差」でないと判定された場合は、編集前の交差関係が「分離」であったことを意味するので、交差関係が「分離」に戻るまで隣接する図形グループを縮小する（Ｓ３７７）。
【０１１２】
以上に説明したような隣接図形処理を行った後、ステップＳ３７８で、上記処理を行った隣接図形グループ以外に交差関係の変化した隣接図形グループが存在するか否かを検索する。交差関係が変化した隣接図形グループで、未処理のものが存在しなければ隣接図形処理を終了し（Ｓ３７８：Ｎｏ）、存在すればステップＳ３７２へと戻る。隣接図形処理の終了をもって、対応筆跡グループ更新部６の処理は終了する。
【０１１３】
以上、筆跡データ編集部５による編集の対象が図形グループである場合について説明したが、次にステップＳ３０２において、筆跡データ編集部５による編集の対象が文字グループであると判定された場合の対応筆跡グループ更新部６の処理内容について説明する。
筆跡データ編集部５による編集対象が文字グループである場合には、対応筆跡グループ更新部６は、筆跡データ編集部５による編集対象である文字グループに対応付けられた図形グループが存在するか否かを判定する（Ｓ３０６）。対応付けられた図形グループが存在しない場合は、対応筆跡グループ更新部６はそのまま処理を終了する（Ｓ３０６：Ｎｏ）。対応付けられた図形グループが存在する場合は、対応筆跡グループ更新部６は、対応図形グループ更新処理を行う（Ｓ３０７）。以下、対応図形グループ更新処理の詳細な処理内容について説明するが、対応図形グループ更新処理は、対応文字グループ更新処理と似通った部分を多く含んでいるので、以下、異なる部分を中心にして説明を行う。図２４は、対応図形グループ更新処理の詳細な処理内容を示すフロ−チャ−トである。
【０１１４】
対応図形グループ更新処理においては、まず、対応筆跡グループ更新部６が、更新前の図形グループを更新前データ保持部８に保持し（Ｓ４１１）、筆跡データ編集部５による更新後の文字グループと、対応筆跡グループ更新部６による更新前の図形グループとから、文字のはみ出しが発生するか否かを判定する（Ｓ４１２）。文字のはみ出しが発生する場合にははみ出し処理Ｂを行い（Ｓ４１３）、はみ出しが発生しない場合には文字列形状決定処理Ｂを行う（Ｓ４１４）。はみ出しの有無の判定方法は、対応文字グループ更新処理と同様である。以下、はみ出し処理Ｂと、文字列形状決定処理Ｂとの詳細な処理内容について、それぞれ説明する。
【０１１５】
図２５は、はみ出し処理Ｂの詳細な処理内容を示すフロ−チャ−トである。
はみ出し処理Ｂにおいて、対応筆跡グループ更新部６は、まず、編集モード保持部７を参照して、「はみ出しモード」が「反映」に設定されているか否かを判定する（Ｓ４２１）。
「はみ出しモード」が「適応」である場合（Ｓ４２１：Ｎｏ）には、筆跡データ編集部５により更新された文字グループを再度縮小することによりはみ出しを解消する（Ｓ４２２）。
【０１１６】
「はみ出しモード」が「反映」である場合には、対応筆跡グループ更新部６は、筆跡データ編集部５による編集対象である文字グループに対応付けられた図形グループがライン型であるか否かを判定する（Ｓ４２３）。
対応付けられた図形グループがライン型である場合には、文字の拡大比と同じ拡大比で、対応付けられた図形グループも拡大する（Ｓ４２４）。即ち、相対位置型編集を行う。
【０１１７】
一方、ステップＳ４２３において、対応付けられた図形グループがライン型の図形グループではない場合には、対応筆跡グループ更新部６は、編集モード保持部７を参照して「文字列対応モード」が「保存」に設定されているか否かを判定する（Ｓ４２５）。「文字列対応モード」が「保存」に設定されていた場合には、図形グループの縦横比を保って図形グループの拡大を行う（Ｓ４２６）。即ち保存型編集を行う。
【０１１８】
ステップＳ４２５において、「文字列対応モード」が「保存」に設定されていない場合には、対応筆跡グループ更新部６は相対位置型編集を行う（Ｓ４２１）。この場合には、はみ出し処理Ａと異なり、文字列の形状の保持を考慮する必要がないため、幅の縮小率と高さの縮小率とが著しく異なる場合の処理は行わない。
【０１１９】
次に文字列形状決定処理Ｂの詳細な処理内容について説明する。
図２７は、文字列形状決定処理Ｂの詳細な処理内容を示すフロ−チャ−トである。文字列形状決定処理Ｂにおいては、対応筆跡グループ更新部６はまず、筆跡データ編集部５による編集対象である文字グループに対応付けられた図形グループがライン型であるか否かを判定する（Ｓ４３０）。対応付けられた図形グループがライン型である場合は、相対位置型編集を行う（Ｓ４３１）。
【０１２０】
筆跡データ編集部５による編集対象がライン型の図形グループでない場合には、対応筆跡グループ更新部６は、編集モード保持部７を参照し、「文字列対応モード」が「保存」に設定されているか否かを判定する（Ｓ４３２）。「文字列対応モード」が「保存」の場合には、図形グループの縦横比を保って図形グループの拡大を行う（Ｓ４３３）。即ち保存型編集を行う。
【０１２１】
「文字列対応モード」が「保存」でない場合は、対応筆跡グループ更新部６は相対位置型編集を行う（Ｓ４３１）。文字列の形状の保持を考慮する必要がないため、幅の縮小率と高さの縮小率とが著しく異なる場合の処理を行わないのは、はみ出し処理Ｂと同様である。
はみ出し処理Ｂ又は文字列形状決定処理Ｂの終了後、対応筆跡グループ更新部６は、位置再計算処理Ｂを行う。図２７は位置再計算処理Ｂの詳細な処理内容を示すフロ−チャ−トである。
【０１２２】
位置再計算処理Ｂにおいては、対応筆跡グループ更新部６は、まず、編集モード保持部７を参照して「領域対応モード」が「反映」に設定されているか否かを判定する（Ｓ４４０）。「領域対応モード」が「反映」でない場合には、図形グループと、文字グループのそれぞれの外接矩形の原点間の相対位置を、文字グループの幅と高さの変形率で再計算する（Ｓ４４１）。
【０１２３】
ステップＳ４４０で、「領域反映モード」が「反映」であった場合、対応筆跡グループ更新部６は、筆跡データ編集部５による編集対象である文字グループに対応付けられている図形グループがライン型であるか否かを判定する（Ｓ４４２）。
ライン型の図形グループであれば、編集モード保持部７を参照し、「文字列対応モード」の設定に応じて、横長の図形グループであればＸ軸への射影を用い、縦長の図形グループであればＹ軸への射影を用いて図形グループの配置位置を決定する（Ｓ４４３）。配置位置の決定方法については、対応文字グループ更新処理と同様であるので、ここでの詳細な説明は省略する。
【０１２４】
一方、対応付けられた図形グループがライン型でなければ、対応筆跡グループ更新部６は、編集モード保持部７を参照して、「文字列対応モード」が「保存」又は「相対位置」に設定されているか否かを判定する（Ｓ４４４）。
「文字列対応モード」が「保存」又は「相対位置」に設定されていれば、「領域対応モード」が「非対応」である場合（Ｓ４４１）と同様の処理を行う（Ｓ４４５）。
【０１２５】
「文字列対応モード」が「保存」にも「相対位置」にも設定されていない場合は、対応筆跡グループ更新部６は、次に、「文字列対応モード」が「左上」に設定されているか否かを判定する（Ｓ４４６）。
「文字列対応モード」が「左上」に設定されていれば、文字グループが横書きなら左寄せで、縦書きなら上寄せになるように図形グループの位置を計算する（Ｓ４４７）。具体的な処理方法は、位置再計算処理Ａにおいて用いた方法と同一であるので、ここでの詳細な説明は省略する。
【０１２６】
ステップＳ４４６において、「文字列対応モード」が「左上」に設定されていなければ、対応筆跡グループ更新部６は、次に、「文字列対応モード」が「センター」に設定されているか否かを判定する（Ｓ４４８）。「文字列対応モード」が「センター」に設定されていれば、外接矩形を用いてセンタリング位置を計算する（Ｓ４４９）。具体的な処理方法は、位置再計算処理Ａで用いた方法と同一であるので、ここでの詳しい説明は省略する。
【０１２７】
ステップＳ４４８において、「文字列対応モード」が「センター」に設定されていなければ、「文字列対応モード」が「右下」に設定されている事を意味するので、文字グループが横書きなら右寄せで、縦書きなら下寄せで位置を計算する（Ｓ４５０）。具体的な処理方法についての詳細な説明は省略する。
以上で、対応図形グループ更新処理を終了し、図１１のフロ−チャ−トに戻って、隣接図形処理（Ｓ３０５）へと進む。隣接図形処理の処理内容は、編集対象が文字グループである場合も、編集対象が図形グループである場合と同様であるのでここでの詳細な説明は省略する。
【０１２８】
以上のように対応筆跡グループ更新部６の処理を終了すると、図１０のフロ−チャ−トに戻って、筆跡データ編集部５が、更新後のデータの表示を行う（Ｓ２０３）。ここで操作者は、対応筆跡グループ更新部６によって更新された図形グループ若しくは文字グループの更新内容が不適切であった場合等に、更新取消ボタンを押すことで、対応筆跡グループ更新部６による自動更新を取り消すことができる。即ち、手書きデータ編集装置は、ステップＳ２０４において、更新取消ボタンが押されたか否かを判定し、更新取消ボタンが押された場合には、対応筆跡グループ更新部６による編集を取り消すべく、更新前データ保持部８に格納されている編集前のデータを復帰させて（Ｓ２０５）、編集処理を終了する。
【０１２９】
ステップＳ２０４において更新取消ボタンが押されなかったときは、そのまま編集処理を終了する。なお、更新取消ボタンが押されたときでも、操作者によって編集を指示され、筆跡データ編集部５により更新された図形グループ若しくは文字グループの内容は、そのまま有効となる。
以上のような処理を行うことにより、例えばフロ−チャ−ト等のように、文字データと図形データとが混在し、しかも両者が一体となって意味を持つような性質を有する文書において、図形データ若しくは文字データのみを編集した場合に、編集されたデータに対応付けられた図形データ又は文字データの編集を自動的に行うことが可能となり、編集作業の負担を軽減することができる。
【０１３０】
なお、本実施の形態では、文字グループと図形グループとを１対１で対応付けているため、例えば筆跡データ編集部５による図形グループの更新に伴って、複数の文字グループを更新するということは行っていないが、文字グループ及び図形グループのデータ構造を変更し、１対多の対応付けを可能とすることにより、上記のような更新を実現することも可能である。
【０１３１】
また、本実施の形態では、文字グループ内に図形グループを包含するような場合には、両者の対応付けを行っていないため、文字グループ内に存する図形グループを編集した場合に、当該図形グループを包含する文字グループを更新することは行っていないが、対応付け手段の処理内容を追加することにより、上記のような更新を実現することも可能である。
【０１３２】
また、本実施の形態では、隣接する文字グループについては、対応筆跡グループ更新部６による更新を行っていないが、対応筆跡グループ更新部６の処理内容を追加することにより、隣接する文字グループについても更新を行うようにすることは容易に実現できる。
さらに、本実施の形態では、筆跡グループ分類部２による処理において、毎回全ての筆跡データの分類を行っているが、未処理の筆跡データについてのみ処理を行うようにすることも可能である。
【０１３３】
また、筆跡グループ対応部４による対応付け処理においても、毎回全ての図形グループについて行うようになっているが、当該対応付け処理においても、新規に入力された図形グループについてのみ行うようにすることも可能である。
また、前述のとおり、図１の各ブロックの機能、図４、図６、図７の記憶内容及び図５、図８等のフロ−チャ−トに示される処理は、プログラム等からなるソフトウェアをＣＰＵ、メモリ等から構成されるコンピュータシステムで実行することにより実現される。このソフトウェアは、フロッピーディスク、光ディスク等の記録媒体や、ネットワーク等の伝送媒体を介してソフトウェア市場を流通し、パッケージソフトウェアや、ダウンロード用プログラムとして取り引きの客体となり得る。
【０１３４】
【発明の効果】
以上の説明から明らかなように、本発明に係る手書きデータ編集装置は、手書きの描画軌跡から筆跡データを抽出し、抽出された筆跡データを編集する手書きデータ編集装置であって、筆跡データを、文字を構成する筆跡データを示す文字グループと、図形を構成する筆跡データを示す図形グループとに分類する分類手段と、文字グループと図形グループとの位置関係が所定の条件を満たす場合に、両者を対応付けることにより組にする対応付け手段と、前記組に含まれる文字グループと図形グループのうち、操作者によって指定されたグループについて、操作者の指示に基づき視覚的な変更を加える第１の変更手段と、前記第１の変更手段により前記何れかのグループに変更が加えられた場合に、当該組に含まれる文字グループと図形グループとの少なくとも一つについて、所定の規則に基づいて位置と大きさとの少なくとも一方を変更する第２の変更手段とを備える。
【０１３５】
分類手段は、筆跡データを、文字を構成する文字グループと、図形を構成する図形グループとに分類し、対応付け手段は、文字グループと図形グループとの位置関係が所定の条件を満たす場合に、両者を対応付けることにより組にし、第１の変更手段が、前記組に含まれる文字グループと図形グループのうち、操作者によって指定されたグループについて、操作者の指示に基づき視覚的な変更を加えた場合に、第２の変更手段が、当該組に含まれる文字グループと図形グループとの少なくとも一つについて、所定の規則に基づいて位置と大きさとの少なくとも一方を変更する。
【０１３６】
以上のような構成をとることにより、例えばフロ−チャ−ト等のように、文字と図形とが混在し、しかも両者が一体となって意味を持つような性格を有する手書きデータの編集において、文字と図形との配置等に余計な手間をかけることなく編集作業を行うことができるという効果を奏する。
また、前記対応付け手段は、文字グループの外接矩形と図形グループの外接矩形とが重なる領域の面積と、当該文字グループの外接矩形の面積との比が、第１の所定の割合を超える場合に両者を対応付けることにより組にすることが可能である。
【０１３７】
前記対応付け手段が、文字グループと図形グループとの位置関係を解析し、自動的に対応付け処理を行うことにより、操作者による対応付け処理が不要となり、編集作業が簡略化されるという効果がある。
また、前記対応付け手段は、図形グループの幅と高さの何れか一方が、第１の所定のしきい値より短いか否かを判定する図形形状判定部と、前記図形形状判定部により、短いと判定された場合に、図形グループの外接矩形と文字グループの外接矩形との間隔が、第２の所定のしきい値以下であるか否かを判定する間隔判定部と、前記間隔判定部により、第２のしきい値以下であると判定された場合に、当該図形グループの幅と高さの長い方の座標軸への射影と、当該文字グループにおいて対応する幅又は高さの座標軸への射影とが重なる範囲の長さを算出する重複範囲長算出部とを有し、前記重複範囲長算出部により算出された長さと、前記文字グループにおいて対応する幅又は高さの座標軸への射影の長さとの比が、第２の所定の割合を超える場合に両者を対応付けることにより組にすることも可能である。
【０１３８】
図形形状判定部は、図形グループが、例えばアンダーラインのようなライン型のものであるか否かを判定し、間隔判定部が、図形グループがライン型である場合に、文字グループの外接矩形と、図形グループの外接矩形との間隔が第２の所定のしきい値以下であるか否かを判定し、重複範囲長算出部は、前記間隔判定部により両者の間隔が所定の第２のしきい値以下であると判定された場合に、当該図形グループの幅と高さの長い方の座標軸への射影と、当該文字グループにおいて対応する幅又は高さの座標軸への射影とが重なる範囲の長さを算出し、第２の変更手段が、前記重複範囲長算出部により算出された長さと、前記文字グループにおいて対応する幅又は高さの座標軸への射影の長さとの比が、第２の所定の割合を超える場合に両者を対応付けることにより組にすることで、ライン型の図形グループの近傍に存在する文字グループについても、図形グループとの対応付けを自動的に行うことができるため、ライン型の図形グループ及びその近傍に存在する文字グループの編集が簡略化されるという効果がある。
【０１３９】
また、前記対応付け手段はさらに、操作者の指示に基づき、対応付けられていない文字グループと図形グループとを対応付けることにより組にし、及び既に対応付けられている文字グループと図形グループとの対応付けを解除することもできる。
このような機能を有することにより、自動的に行われた図形グループと文字グループとの対応付けが期せずして適切ではなかったというような場合にも、対処することが可能になるという効果がある。
【０１４０】
また、前記第２の変更手段は、前記第１の変更手段による変更の後に、図形グループから文字グループのはみ出しが発生しているか否かを判定するはみ出し判定部を有し、前記はみ出し判定部によりはみ出しが発生したと判定された場合に、当該はみ出しを解消すべく、当該組に含まれる文字グループと図形グループとの少なくとも一つについて位置と大きさの少なくとも一方を変更することができる。
【０１４１】
はみ出し判定部が、図形グループからの文字グループのはみ出しが発生しているか否かを判定し、はみ出しが発生した場合に、第２の変更手段が自動的にはみ出しを解消することにより、図形グループ又は文字グループの変更により、文字グループが図形グループからはみ出してしまった場合に、操作者が編集作業を行うことなく、はみ出しを解消することができるという効果を奏する。
【０１４２】
また、前記第２の変更手段は、前記第１の変更手段により変更された図形グループ又は文字グループの拡大率又は縮小率を算出する変形率算出部を有し、算出された拡大率又は縮小率と同一の拡大率又は縮小率を用いて、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方を拡大又は縮小するとともに、当該拡大率又は縮小率に基づいて前記第１の変更手段により変更されなかった方の位置を変更することが可能である。
【０１４３】
変形率算出部が、第１の変更手段による変更における図形グループ又は文字グループの拡大率又は縮小率を算出し、第２の変更手段が、算出された拡大率又は縮小率と同一の拡大率又は縮小率を用いて、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方を拡大又は縮小するとともに、当該拡大率又は縮小率に基づいて前記第１の変更手段により変更されなかった方の位置を変更することにより、例えばフロ−チャ−トのような手書きデータの編集において、操作者が図形グループ又は文字グループを編集した場合に、近傍に存する文字グループ又は図形グループの編集が、適切な拡大率又は縮小率で自動的に行われるため、操作者が位置合わせ、サイズ調整を行う必要がなくなり、編集作業に要する手間を軽減することができるという効果がある。
【０１４４】
また、前記第２の変更手段は、変更後における図形グループに対する文字グループの位置を、左寄せとするか、右寄せとするか、センタリングするかを指示する横書き文字位置指示部を有し、前記第１の変更手段により、前記組に含まれる図形グループと文字グループとの何れか一方が変更され、かつ、前記組に含まれる文字グループが横書きである場合に、前記横書き文字位置指示部の指示する位置関係を実現すべく、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方に変更を加えることが可能である。
【０１４５】
横書き文字位置指示部が、変更後における図形グループに対する文字グループの位置を、左寄せとするか、右寄せとするか、センタリングするかを指示し、第２の変更手段が、第１の変更手段により前記組に含まれる図形グループと文字グループとの何れか一方が変更され、かつ、前記組に含まれる文字グループが横書きである場合に、前記横書き文字位置指示部の指示する位置関係を実現すべく、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方に変更を加えることにより、編集作業において操作者が位置合わせに要する手間を軽減することができるという効果を奏する。
【０１４６】
また、前記第２の変更手段は、変更後における図形グループに対する文字グループの位置を、上寄せとするか、下寄せとするか、センタリングするかを指示する縦書き文字位置指示部を有し、前記第１の変更手段により、前記組に含まれる図形グループと文字グループとの何れか一方が変更され、かつ、前記組に含まれる文字グループが縦書きである場合に、前記縦書き文字位置指示部の指示する位置関係を実現すべく、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方に変更を加えることが可能である。
【０１４７】
縦書き文字位置指示部が、変更後における図形グループに対する文字グループの位置を、上寄せとするか、下寄せとするか、センタリングするかを指示し、第２の変更手段が、第１の変更手段により前記組に含まれる図形グループと文字グループとの何れか一方が変更され、かつ、前記組に含まれる文字グループが縦書きである場合に、前記縦書き文字位置指示部の指示する位置関係を実現すべく、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方に変更を加えることにより、編集作業において操作者が位置合わせに要する手間を軽減することができるという効果を奏する。
【０１４８】
また、前記第２の変更手段はさらに、前記第１の変更手段又は前記第２の変更手段により図形グループが変更された場合に、当該図形グループと、当該図形グループに隣接する図形グループとの間の交差関係の変化を検知する交差関係検知手段を備え、前記交差関係検知手段により交差関係の変化が検知された場合に、当該交差関係を変化する前の交差関係に戻すように前記隣接する図形グループを変更することもできる。
【０１４９】
交差関係検知手段は、第１の変更手段又は第２の変更手段により図形グループが変更された場合に、当該図形グループと、当該図形グループに隣接する図形グループとの間の交差関係の変化を検知し、交差関係の変化が検知された場合に、第２の変更手段が、当該交差関係を変化する前の交差関係に戻すように前記隣接する図形グループを変更することにより、例えばフロ−チャ−ト等のように一つの図形グループを編集することにより、隣接する他の図形グループの編集が必要となるような文書の編集において、操作者が編集作業に要する手間を軽減することができるという効果がある。
【０１５０】
また、前記第２の変更手段はさらに、前記第１の変更手段による変更がなされた場合に、第２の変更手段による変更を行うか否かを指示する変更指示手段を備え、前記変更指示手段により、第２の変更手段による変更を行わない旨の指示がなされた場合には、第１の変更手段による変更が行われた場合でも第２の変更手段による変更を行わないようにすることも可能である。
【０１５１】
変更指示手段が、第２の変更手段による変更を行わない旨の指示を行った場合に、第２の変更手段による変更を行わないようにすることにより、文書の内容や、図形グループと文字グループとの位置関係等に起因する理由により、操作者が指定した図形グループ又は文字グループ以外の図形グループ又は文字グループを変更したくない場合にも容易に対処できるという効果がある。
【０１５２】
また、前記手書きデータ編集装置はさらに、前記第２の変更手段による変更が行われる場合に、当該変更により変更される文字グループ又は図形グループについて、当該変更が行われる前の状態を保持する変更前データ保持手段と、操作者からの、前記第２の変更手段による変更を無効にする旨の指示を受け付ける変更取消受付手段とを備え、前記第２の変更手段は、前記変更取消受付手段が、前記第２の変更手段による変更を無効にする旨の指示を受け付けた場合に、当該変更により変更された文字グループ又は図形グループを、前記変更前データ保持手段が保持する状態に復帰させることも可能である。
【０１５３】
変更前データ保持手段は、前記第２の変更手段による変更が行われる場合に、当該変更により変更される文字グループ又は図形グループについて、当該変更が行われる前の状態を保持し、変更取消受付手段が、操作者からの、前記第２の変更手段による変更を無効にする旨の指示を受け付けた場合に、第２の変更手段が、変更された文字グループ又は図形グループを、前記変更前データ保持手段が保持する状態に復帰させることにより、期せずして第２の変更手段による自動変更の結果が意に反するものであったような場合に、第２の変更手段により変更された図形グループ又は文字グループを、容易に元の状態に復帰させることができるという効果を奏する。
【０１５４】
また、手書きの描画軌跡から筆跡データを抽出し、抽出された筆跡データを編集する手書きデータ編集装置における手書きデータ編集方法であって、抽出された筆跡データを、文字を構成する筆跡データを示す文字グループと、図形を構成する筆跡データを示す図形グループとに分類する分類ステップと、前記分類ステップにおいて分類された文字グループと図形グループとの位置関係が所定の条件を満たす場合に、両者を対応付けることにより組にする対応付けステップと、前記組に含まれる図形グループと文字グループのうち、操作者によって指定されたグループについて、操作者の指示に基づき視覚的な変更を加える第１の変更ステップと、前記第１の変更ステップにおいて、前記何れかのグループに変更が加えられた場合に、当該組に含まれる文字グループと図形グループとの少なくとも一つについて、位置と大きさとの少なくとも一方を変更する第２の変更ステップとを有することを特徴とする手書きデータ編集方法を用いることが可能である。
【０１５５】
以上のような方法によっても、例えばフロ−チャ−ト等のように、文字と図形とが混在し、しかも両者が一体となって意味を持つような性格を有する手書きデータの編集において、文字と図形との配置等に余計な手間をかけることなく編集作業を行うことができるという効果を得ることができる。
【図面の簡単な説明】
【図１】本発明に係る手書きデータ編集装置の構成を示すブロック図である。
【図２】編集モード保持部に保持される編集モードを指定するための画面の一例を示す図である。
【図３】手書きデータを入力してから、文字と図形の対応付けを行うまでの手書きデータ編集装置の処理内容を示すフロ−チャ−トである。
【図４】筆跡データのデータ構造を説明するための図である。
【図５】筆跡グループ分類部の処理内容を示すフロ−チャ−トである。
【図６】文字グループのデータ構造を示す図である。
【図７】図形グループのデータ構造を示す図である。
【図８】筆跡グループ対応部の処理内容を示すフロ−チャ−トである。
【図９】文字グループと図形グループとの対応付けについて説明するための図である。
【図１０】文字グループとライン型の図形グループとの対応付けについて説明するための図である。
【図１１】操作者から編集指示がなされた場合の手書きデータ編集装置の処理内容を示すフロ−チャ−トである。
【図１２】筆跡データ編集部の処理内容を示すフロ−チャ−トである。
【図１３】対応筆跡グループ更新部の処理内容を示すフロ−チャ−トである。
【図１４】対応文字グループ更新処理の詳細な処理内容を示すフロ−チャ−トである。
【図１５】はみ出し処理Ａの詳細な処理内容を示すフロ−チャ−トである。
【図１６】はみ出し処理Ａの処理内容を説明するための図である。
【図１７】はみ出し処理Ａの処理内容を説明するための図である。
【図１８】はみ出し処理Ａの処理内容を説明するための図である。
【図１９】文字列形状決定処理Ａの詳細な処理内容を示すフロ−チャ−トである。
【図２０】位置再計算処理Ａの詳細な処理内容を示すフロ−チャ−トである。
【図２１】位置再計算処理Ａの処理内容を説明するための図である。
【図２２】隣接図形処理の詳細な処理内容を示すフロ−チャ−トである。
【図２３】隣接図形との交差関係について説明するための図である。
【図２４】対応図形グループ更新処理の詳細な処理内容を示すフロ−チャ−トである。
【図２５】はみ出し処理Ｂの詳細な処理内容を示すフロ−チャ−トである。
【図２６】文字列形状決定処理Ｂの詳細な処理内容を示すフロ−チャ−トである。
【図２７】位置再計算処理Ｂの詳細な処理内容を示すフロ−チャ−トである。
【図２８】従来の手書きデータ編集装置の構成を示すブロック図である。
【符号の説明】
１ 筆跡データ抽出部
２ 筆跡グループ分類部
３ 筆跡データ保持部
４ 筆跡グループ対応部
５ 筆跡データ編集部
６ 対応筆跡グループ更新部
７ 編集モード保持部
８ 更新前データ保持部
９ 更新前図形データ保持部
１１ 筆跡データ入力部
１２ 指示入力部
１３ 表示部

Claims (12)

1. 手書きの描画軌跡から筆跡データを抽出し、抽出された筆跡データを編集する手書きデータ編集装置であって、
   筆跡データを、文字を構成する筆跡データを示す文字グループと、図形を構成する筆跡データを示す図形グループとに分類する分類手段と、
   文字グループと図形グループとの位置関係が所定の条件を満たす場合に、両者を対応付けることにより組にする対応付け手段と、
   前記組に含まれる文字グループと図形グループのうち、操作者によって指定されたグループについて、操作者の指示に基づき視覚的な変更を加える第１の変更手段と、
   前記第１の変更手段により前記何れかのグループに変更が加えられた場合に、当該組に含まれる文字グループと図形グループとの少なくとも一つについて、所定の規則に基づいて位置と大きさとの少なくとも一方を変更する第２の変更手段と
   を備えることを特徴とする手書きデータ編集装置。
2. 前記対応付け手段は、
   文字グループの外接矩形と図形グループの外接矩形とが重なる領域の面積と、当該文字グループの外接矩形の面積との比が、第１の所定の割合を超える場合に両者を対応付けることにより組にする
   ことを特徴とする請求項１記載の手書きデータ編集装置。
3. 前記対応付け手段は、
   図形グループの幅と高さの何れか一方が、第１の所定のしきい値より短いか否かを判定する図形形状判定部と、
   前記図形形状判定部により、短いと判定された場合に、図形グループの外接矩形と文字グループの外接矩形との間隔が、第２の所定のしきい値以下であるか否かを判定する間隔判定部と、
   前記間隔判定部により、第２のしきい値以下であると判定された場合に、当該図形グループの幅と高さの長い方の座標軸への射影と、当該文字グループにおいて対応する幅又は高さの座標軸への射影とが重なる範囲の長さを算出する重複範囲長算出部とを有し、
   前記重複範囲長算出部により算出された長さと、前記文字グループにおいて対応する幅又は高さの座標軸への射影の長さとの比が、第２の所定の割合を超える場合に両者を対応付けることにより組にする
   ことを特徴とする請求項１又は２記載の手書きデータ編集装置。
4. 前記対応付け手段はさらに、
   操作者の指示に基づき、対応付けられていない文字グループと図形グループとを対応付けることにより組にし、及び既に対応付けられている文字グループと図形グループとの対応付けを解除する
   ことを特徴とする請求項１乃至３の何れかに記載の手書きデータ編集装置。
5. 前記第２の変更手段は、
   前記第１の変更手段による変更の後に、図形グループから文字グループのはみ出しが発生しているか否かを判定するはみ出し判定部を有し、
   前記はみ出し判定部によりはみ出しが発生したと判定された場合に、当該はみ出しを解消すべく、当該組に含まれる文字グループと図形グループとの少なくとも一つについて位置と大きさの少なくとも一方を変更する
   ことを特徴とする請求項１乃至４の何れかに記載の手書きデータ編集装置。
6. 前記第２の変更手段は、
   前記第１の変更手段により変更された図形グループ又は文字グループの拡大率又は縮小率を算出する変形率算出部を有し、
   算出された拡大率又は縮小率と同一の拡大率又は縮小率を用いて、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方を拡大又は縮小するとともに、当該拡大率又は縮小率に基づいて前記第１の変更手段により変更されなかった方の位置を変更する
   ことを特徴とする請求項１乃至５の何れかに記載の手書きデータ編集装置。
7. 前記第２の変更手段は、
   変更後における図形グループに対する文字グループの位置を、左寄せとするか、右寄せとするか、センタリングするかを指示する横書き文字位置指示部を有し、
   前記第１の変更手段により、前記組に含まれる図形グループと文字グループとの何れか一方が変更され、かつ、前記組に含まれる文字グループが横書きである場合に、前記横書き文字位置指示部の指示する位置関係を実現すべく、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方に変更を加える
   ことを特徴とする請求項１乃至６の何れかに記載の手書きデータ編集装置。
8. 前記第２の変更手段は、
   変更後における図形グループに対する文字グループの位置を、上寄せとするか、下寄せとするか、センタリングするかを指示する縦書き文字位置指示部を有し、
   前記第１の変更手段により、前記組に含まれる図形グループと文字グループとの何れか一方が変更され、かつ、前記組に含まれる文字グループが縦書きである場合に、前記縦書き文字位置指示部の指示する位置関係を実現すべく、前記組に含まれる図形グループ又は文字グループのうち第１の変更手段により変更されなかった方に変更を加える
   ことを特徴とする請求項１乃至７の何れかに記載の手書きデータ編集装置。
9. 前記第２の変更手段はさらに、
   前記第１の変更手段又は前記第２の変更手段により図形グループが変更された場合に、当該図形グループと、当該図形グループに隣接する図形グループとの間の交差関係の変化を検知する交差関係検知手段を備え、
   前記交差関係検知手段により交差関係の変化が検知された場合に、当該交差関係を変化する前の交差関係に戻すように前記隣接する図形グループを変更する
   ことを特徴とする請求項１乃至８の何れかに記載の手書きデータ編集装置。
10. 前記第２の変更手段はさらに、
    前記第１の変更手段による変更がなされた場合に、第２の変更手段による変更を行うか否かを指示する変更指示手段を備え、
    前記変更指示手段により、第２の変更手段による変更を行わない旨の指示がなされた場合には、第１の変更手段による変更が行われた場合でも第２の変更手段による変更を行わない
    ことを特徴とする請求項１乃至９の何れかに記載の手書きデータ編集装置。
11. 前記手書きデータ編集装置はさらに、
    前記第２の変更手段による変更が行われる場合に、当該変更により変更が加えられる文字グループ又は図形グループについて、当該変更が行われる前の状態を保持する変更前データ保持手段と、
    操作者からの、前記第２の変更手段による変更を無効にする旨の指示を受け付ける変更取消受付手段とを備え、
    前記第２の変更手段は、
    前記変更取消受付手段が、前記第２の変更手段による変更を無効にする旨の指示を受け付けた場合に、当該変更により変更された文字グループ又は図形グループを、前記変更前データ保持手段が保持する状態に復帰させる
    ことを特徴とする請求項１乃至１０の何れかに記載の手書きデータ編集装置。
12. 手書きの描画軌跡から筆跡データを抽出し、抽出された筆跡データを編集する手書きデータ編集装置における手書きデータ編集方法であって、
    抽出された筆跡データを、文字を構成する筆跡データを示す文字グループと、図形を構成する筆跡データを示す図形グループとに分類する分類ステップと、
    前記分類ステップにおいて分類された文字グループと図形グループとの位置関係が所定の条件を満たす場合に、両者を対応付けることにより組にする対応付けステップと、
    前記組に含まれる図形グループと文字グループのうち、操作者によって指定されたグループについて、操作者の指示に基づき視覚的な変更を加える第１の変更ステップと、
    前記第１の変更ステップにおいて、前記何れかのグループに変更が加えられた場合に、当該組に含まれる文字グループと図形グループとの少なくとも一つについて、所定の規則に基づいて位置と大きさとの少なくとも一方を変更する第２の変更ステップと
    を有することを特徴とする手書きデータ編集方法。

Images