JP2014081816A - 電子機器および方法 - Google Patents

Abstract

【課題】手書きされた図形を図形オブジェクトに変換するための辞書を効率的に作成できる電子機器を実現する。
【解決手段】実施形態によれば、電子機器は、生成手段、選択手段、変換手段、および記憶媒体を具備する。生成手段は、手書き入力された１以上のストロークに対応する第１ストロークデータを生成する。選択手段は、前記第１ストロークデータに関連付ける第１図形オブジェクトを選択する。変換手段は、前記第１ストロークデータを、前記第１図形オブジェクトを変形させた第２図形オブジェクトに対応する第２ストロークデータに変換する。記憶媒体は、前記第１図形オブジェクトと前記第１ストロークデータを関連付けて保存し、前記第２図形オブジェクトと前記第２ストロークデータとを関連付けて保存する。
【選択図】図５

Description

本発明の実施形態は、手書き文書を処理することが可能な電子機器および同電子機器で用いられる手書き文書処理方法に関する。

近年、タブレット、ＰＤＡ、スマートフォンといった種々の電子機器が開発されている。この種の電子機器の多くは、ユーザによる入力操作を容易にするために、タッチスクリーンディスプレイを備えている。

ユーザは、タッチスクリーンディスプレイ上に表示されるメニューまたはオブジェクトを指などでタッチすることにより、これらメニューまたはオブジェクトに関連付けられた機能の実行を電子機器に指示することができる。

このような電子機器では、ユーザが、タッチスクリーンディスプレイ上で文字や図形等を手書きするための機能を有するものもある。このような手書きの文字や図形を含む手書き文書（手書きページ）は保存され、必要に応じて閲覧される。

また、手書き文書内の手書きの文字を認識することによって、その文字を文字コードに変換する技術も提案されている。そのような変換によって、手書き文書内の文字に対応する文字コードを、例えば、Word（登録商標）のような文書作成ソフトウェアで扱うことができるようになる。

特開２００５−２８４７１６号公報

手書き文書には、矢印や矩形、円形等の各種の図形を手書きすることもできる。また、手書きの文字と同様に、手書きの図形を認識することによって、その図形を図形オブジェクトに変換することが期待される。

しかし、手書きの図形の形状や筆順はユーザによって異なる場合があるので、手書きの図形を、ユーザが意図した図形オブジェクトに変換することは困難である可能性がある。

本発明の一形態は、手書きされた図形を図形オブジェクトに変換するための辞書を効率的に作成できる電子機器および手書き文書処理方法を提供することを目的とする。

実施形態によれば、電子機器は、生成手段、選択手段、変換手段、および記憶媒体を具備する。生成手段は、手書き入力された１以上のストロークに対応する第１ストロークデータを生成する。選択手段は、前記第１ストロークデータに関連付ける第１図形オブジェクトを選択する。変換手段は、前記第１ストロークデータを、前記第１図形オブジェクトを変形させた第２図形オブジェクトに対応する第２ストロークデータに変換する。記憶媒体は、前記第１図形オブジェクトと前記第１ストロークデータを関連付けて保存し、前記第２図形オブジェクトと前記第２ストロークデータとを関連付けて保存する。

実施形態に係る電子機器の外観を示す斜視図。 同実施形態の電子機器によって処理される手書き文書の例を示す図。 同実施形態の電子機器によって記憶媒体に保存される、図２の手書き文書に対応する時系列情報を説明するための図。 同実施形態の電子機器のシステム構成を示すブロック図。 同実施形態の電子機器によって実行されるデジタルノートブックアプリケーションプログラムの機能構成を示すブロック図。 同実施形態の電子機器によって表示される手書き図形登録画面の例を示す図。 同実施形態の電子機器によって用いられる図形オブジェクトと変形された図形オブジェクトとの例を説明するための図。 同実施形態の電子機器によって、手書き図形が変形手書き図形に変換される例を説明するための図。 同実施形態の電子機器によって用いられる図形オブジェクトデータの一構成例を示す図。 同実施形態の電子機器によって用いられる変形図形グループデータの一構成例を示す図。 同実施形態の電子機器によって変換された変形手書き図形のストロークの例を示す図。 同実施形態の電子機器によって変換された変形手書き図形のストロークの別の例を示す図。 同実施形態の電子機器によって表示される手書き文書認識画面の例を示す図。 同実施形態の電子機器によって実行される手書き図形学習処理の手順の例を示すフローチャート。 同実施形態の電子機器と外部装置との連係動作を示す図。

以下、実施の形態について図面を参照して説明する。
図１は、一実施形態に係る電子機器の外観を示す斜視図である。この電子機器は、例えば、ペンまたは指によって手書き入力可能なペン・ベースの携帯型電子機器である。この電子機器は、タブレットコンピュータ、ノートブック型パーソナルコンピュータ、スマートフォン、ＰＤＡ等として実現され得る。以下では、この電子機器がタブレットコンピュータ１０として実現されている場合を想定する。タブレットコンピュータ１０は、タブレットまたはスレートコンピュータとも称される携帯型電子機器であり、図１に示すように、本体１１とタッチスクリーンディスプレイ１７とを備える。タッチスクリーンディスプレイ１７は、本体１１の上面に重ね合わせるように取り付けられている。

本体１１は、薄い箱形の筐体を有している。タッチスクリーンディスプレイ１７には、フラットパネルディスプレイと、フラットパネルディスプレイの画面上のペンまたは指の接触位置を検出するように構成されたセンサとが組み込まれている。フラットパネルディスプレイは、例えば、液晶表示装置（ＬＣＤ）であってもよい。センサとしては、例えば、静電容量方式のタッチパネル、電磁誘導方式のデジタイザなどを使用することができる。以下では、デジタイザとタッチパネルの２種類のセンサの双方がタッチスクリーンディスプレイ１７に組み込まれている場合を想定する。

デジタイザおよびタッチパネルの各々は、フラットパネルディスプレイの画面を覆うように設けられる。このタッチスクリーンディスプレイ１７は、指を使用した画面に対するタッチ操作のみならず、ペン１００を使用した画面に対するタッチ操作も検出することができる。ペン１００は例えば電磁誘導ペンであってもよい。

ユーザは、外部オブジェクト（ペン１００又は指）を使用してタッチスクリーンディスプレイ１７上で手書き入力操作を行うことができる。手書き入力操作中においては、画面上の外部オブジェクト（ペン１００又は指）の動きの軌跡、つまり手書き入力操作によって手書きされるストロークの軌跡（筆跡）がリアルタイムに描画され、これによって各ストロークの軌跡が画面上に表示される。外部オブジェクトが画面に接触されている間の外部オブジェクトの動きの軌跡が１ストロークに相当する。手書きされた文字または図形などに対応する多数のストロークの集合、つまり多数の軌跡（筆跡）の集合が手書き文書を構成する。

本実施形態では、この手書き文書は、イメージデータではなく、各ストロークの軌跡の座標列とストローク間の順序関係を示す時系列情報を含む手書き文書データとして記憶媒体に保存される。この時系列情報の詳細は図３を参照して後述するが、この時系列情報は、概して、複数のストロークにそれぞれ対応する時系列のストロークデータの集合を意味する。各ストロークデータは、手書きにより入力可能なある一つのストロークを表現可能なデータであればどのようなものであっても良く、例えば、このストロークの軌跡上の点それぞれに対応する座標データ系列（時系列座標）を含む。これらストロークデータの並びの順序は、ストロークそれぞれが手書きされた順序つまり筆順に相当する。

タブレットコンピュータ１０は、記憶媒体から既存の任意の手書き文書データを読み出し、この手書き文書データに対応する手書き文書、つまり、時系列情報によって示される複数のストロークそれぞれに対応する軌跡が描画された手書き文書を、画面上に表示することができる。

次いで、図２および図３を参照して、ユーザによって手書きされたストローク（文字、マーク、図形、表など）と時系列情報との関係について説明する。図２は、ペン１００などを使用してタッチスクリーンディスプレイ１７上に手書きされる手書き文書（手書き文字列）の例を示している。

手書き文書では、一旦手書きされた文字や図形などの上に、さらに別の文字や図形などが手書きされるというケースが多い。図２においては、「ＡＢＣ」の手書き文字列が「Ａ」、「Ｂ」、「Ｃ」の順番で手書きされ、この後に、手書きの矢印が、手書き文字「Ａ」のすぐ近くに手書きされた場合が想定されている。

手書き文字「Ａ」は、ペン１００などを使用して手書きされる２つのストローク（「∧」形状の軌跡、「−」形状の軌跡）によって、つまり２つの軌跡によって表現される。最初に手書きされる「∧」形状のペン１００の軌跡は例えば等時間間隔でリアルタイムにサンプリングされ、これによって「∧」形状のストロークの時系列座標ＳＤ１１、ＳＤ１２、…ＳＤ１ｎが得られる。同様に、次に手書きされる「−」形状のペン１００の軌跡もサンプリングされ、これによって「−」形状のストロークの時系列座標ＳＤ２１、ＳＤ２１、…ＳＤ２ｎが得られる。

手書き文字「Ｂ」は、ペン１００などを使用して手書きされた２つのストローク、つまり２つの軌跡によって表現される。手書き文字「Ｃ」は、ペン１００などを使用して手書きされた手書きされた１つのストローク、つまり１つの軌跡によって表現される。手書きの「矢印」は、ペン１００などを使用して手書きされた２つのストローク、つまり２つの軌跡によって表現される。

図３は、図２の手書き文書に対応する時系列情報２００を示している。時系列情報は、複数のストロークデータＳＤ１、ＳＤ２、…、ＳＤ７を含む。時系列情報２００内においては、これらストロークデータＳＤ１、ＳＤ２、…、ＳＤ７は、筆跡順に、つまり複数のストロークが手書きされた順に時系列に並べられている。

時系列情報２００において、先頭の２つのストロークデータＳＤ１、ＳＤ２は、手書き文字「Ａ」の２つのストロークをそれぞれ示している。３番目と４番目のストロークデータＳＤ３、ＳＤ４は、手書き文字「Ｂ」を構成する２つのストロークをそれぞれ示している。５番目のストロークデータＳＤ５は、手書き文字「Ｃ」を構成する１つのストロークを示している。６番目と７番目のストロークデータＳＤ６、ＳＤ７は、手書き矢印を構成する２つのストロークをそれぞれ示している。

各ストロークデータは、一つのストロークに対応する座標データ系列（時系列座標）、つまり一つのストロークの軌跡上の複数の点それぞれに対応する複数の座標を含む。各ストロークデータにおいて、複数の座標は、ストロークが書かれた順に時系列に並べられている。例えば、手書き文字「Ａ」に関しては、ストロークデータＳＤ１は、手書き文字「Ａ」の「∧」形状のストロークの軌跡上の点それぞれに対応する座標データ系列（時系列座標）、つまりｎ個の座標データＳＤ１１、ＳＤ１２、…ＳＤ１ｎを含む。ストロークデータＳＤ２は、手書き文字「Ａ」の「−」形状のストロークの軌跡上の点それぞれに対応する座標データ系列、つまりｎ個の座標データＳＤ２１、ＳＤ２２、…ＳＤ２ｎを含む。なお、座標データの数はストロークデータ毎に異なっていてもよい。

各座標データは、対応する軌跡内のある１点に対応するＸ座標およびＹ座標を示す。例えば、座標データＳＤ１１は、「∧」形状のストロークの始点のＸ座標（Ｘ１１）およびＹ座標（Ｙ１１）を示す。ＳＤ１ｎは、「∧」形状のストロークの終点のＸ座標（Ｘ１ｎ）およびＹ座標（Ｙ１ｎ）を示す。

さらに、各座標データは、その座標に対応する点が手書きされた時点に対応するタイムスタンプ情報Ｔを含んでいてもよい。手書きされた時点は、絶対時間（例えば、年月日時分秒）またはある時点を基準とした相対時間のいずれであってもよい。例えば、各ストロークデータに、ストロークが書き始められた絶対時間（例えば、年月日時分秒）をタイムスタンプ情報として付加し、さらに、ストロークデータ内の各座標データに、絶対時間との差分を示す相対時間をタイムスタンプ情報Ｔとして付加してもよい。

このように、各座標データにタイムスタンプ情報Ｔが追加された時系列情報を使用することにより、ストローク間の時間的関係をより精度よく表すことができる。
各座標データには、筆圧を示す情報（Ｚ）を追加してもよい。

さらに、本実施形態では、上述したように、手書き文書は、イメージまたは文字認識結果ではなく、時系列のストロークデータの集合から構成される時系列情報２００として記憶されるので、言語に依存せずに手書きの文字や図形を扱うことができる。よって、本実施形態の時系列情報２００の構造は、使用言語の異なる世界中の様々な国で共通に使用できる。

図４は、タブレットコンピュータ１０のシステム構成を示す図である。
タブレットコンピュータ１０は、図４に示されるように、ＣＰＵ１０１、システムコントローラ１０２、主メモリ１０３、グラフィクスコントローラ１０４、ＢＩＯＳ−ＲＯＭ１０５、不揮発性メモリ１０６、無線通信デバイス１０７、エンベデッドコントローラ（ＥＣ）１０８等を備える。

ＣＰＵ１０１は、タブレットコンピュータ１０内の各種モジュールの動作を制御するプロセッサである。ＣＰＵ１０１は、ストレージデバイスである不揮発性メモリ１０６から主メモリ１０３にロードされる各種ソフトウェアを実行する。これらソフトウェアには、オペレーティングシステム（ＯＳ）２０１、および各種アプリケーションプログラムが含まれている。アプリケーションプログラムには、デジタルノートブックアプリケーションプログラム２０２が含まれている。このデジタルノートブックアプリケーションプログラム２０２は、上述の手書き文書を作成および表示する機能、手書き文書内の手書き文字を文字コードに変換する機能、手書き文書内の手書き図形を図形オブジェクトに変換する機能、変換時に用いられる図形オブジェクトと手書き図形との対応を示す辞書を作成する機能、等を有している。

また、ＣＰＵ１０１は、ＢＩＯＳ−ＲＯＭ１０５に格納された基本入出力システム（ＢＩＯＳ）も実行する。ＢＩＯＳは、ハードウェア制御のためのプログラムである。

システムコントローラ１０２は、ＣＰＵ１０１のローカルバスと各種コンポーネントとの間を接続するデバイスである。システムコントローラ１０２には、主メモリ１０３をアクセス制御するメモリコントローラも内蔵されている。また、システムコントローラ１０２は、ＰＣＩ ＥＸＰＲＥＳＳ規格のシリアルバスなどを介してグラフィクスコントローラ１０４との通信を実行する機能も有している。

グラフィクスコントローラ１０４は、本タブレットコンピュータ１０のディスプレイモニタとして使用されるＬＣＤ１７Ａを制御する表示コントローラである。このグラフィクスコントローラ１０４によって生成される表示信号はＬＣＤ１７Ａに送られる。ＬＣＤ１７Ａは、表示信号に基づいて画面イメージを表示する。このＬＣＤ１７Ａ上にはタッチパネル１７Ｂおよびデジタイザ１７Ｃが配置されている。タッチパネル１７Ｂは、ＬＣＤ１７Ａの画面上で入力を行うための静電容量式のポインティングデバイスである。指が接触される画面上の接触位置および接触位置の動き等はタッチパネル１７Ｂによって検出される。デジタイザ１７ＣはＬＣＤ１７Ａの画面上で入力を行うための電磁誘導式のポインティングデバイスである。ペン１００が接触される画面上の接触位置および接触位置の動き等はデジタイザ１７Ｃによって検出される。

無線通信デバイス１０７は、無線ＬＡＮまたは３Ｇ移動通信などの無線通信を実行するように構成されたデバイスである。ＥＣ１０８は、電力管理のためのエンベデッドコントローラを含むワンチップマイクロコンピュータである。ＥＣ１０８は、ユーザによるパワーボタンの操作に応じて本タブレットコンピュータ１０を電源オンまたは電源オフする機能を有している。

次に、図５を参照して、デジタルノートブックアプリケーションプログラム２０２の機能構成について説明する。デジタルノートブックアプリケーションプログラム２０２は、タッチスクリーンディスプレイ１７を用いた手書き入力操作によって入力されるストロークデータを使用することによって、手書き文書の作成、表示、編集等を行う。また、デジタルノートブックアプリケーションプログラム２０２は、手書き文書を整形する、すなわち、手書き文書内の手書き文字を文字コードに変換し、手書き図形を図形オブジェクトに変換する。さらに、デジタルノートブックアプリケーションプログラム２０２は、手書き文書の整形（変換）時に用いられる図形オブジェクトと手書き図形との対応を示す辞書を作成する。

デジタルノートブックアプリケーションプログラム２０２は、例えば、軌跡表示処理部３０１、時系列情報生成部３０２、図形オブジェクト表示処理部３０３、選択部３０４、変形図形生成部３０５、登録部３０６、認識部３０７等を備える。

タッチスクリーンディスプレイ１７は、「タッチ」、「移動（スライド）」、「リリース」等のイベントの発生を検出するように構成されている。「タッチ」は、画面上に外部オブジェクトが接触したことを示すイベントである。「移動（スライド）」は、画面上に外部オブジェクトが接触されている間に接触位置が移動されたことを示すイベントである。「リリース」は、画面から外部オブジェクトが離されたことを示すイベントである。

軌跡表示処理部３０１および時系列情報生成部３０２は、タッチスクリーンディスプレイ１７によって発生される「タッチ」または「移動（スライド）」のイベントを受信し、これによって手書き入力操作を検出する。「タッチ」イベントには、接触位置の座標が含まれている。「移動（スライド）」イベントには、移動先の接触位置の座標が含まれている。したがって、軌跡表示処理部３０１および時系列情報生成部３０２は、タッチスクリーンディスプレイ１７から、接触位置の動きの軌跡に対応する座標列を受信することができる。

軌跡表示処理部３０１は、タッチスクリーンディスプレイ１７から座標列を受信し、この座標列に基づいて、ペン１００等を使用した手書き入力操作によって手書きされる各ストロークの軌跡をタッチスクリーンディスプレイ１７内のＬＣＤ１７Ａの画面上に表示する。この軌跡表示処理部３０１により、画面にペン１００が接触している間のペン１００の軌跡、つまり各ストロークの軌跡がＬＣＤ１７Ａの画面上に描かれる。

時系列情報生成部３０２は、タッチスクリーンディスプレイ１７から出力される上述の座標列を受信し、この座標列に基づいて、図３で詳述したような構造を有する時系列情報（ストロークデータ）を生成する。この場合、時系列情報、つまりストロークの各点に対応する座標およびタイムスタンプ情報は作業メモリに一時保存してもよい。
上述の構成により、ユーザは、手書きの文字や図形を含む手書き文書を作成することができ、また、辞書に登録するための手書き図形を入力することもできる。

次いで、手書き文書に含まれる手書き図形を図形オブジェクトに変換する際に用いられる、図形オブジェクトと手書き図形との対応を示す図形オブジェクト辞書データ４０１を作成するための動作について説明する。ここでは、上述の軌跡表示処理部３０１および時系列情報生成部３０２によって、辞書に登録するための手書き図形を構成する１以上のストロークが入力されていることを想定する。

図形オブジェクト表示処理部３０３は、入力された手書き図形を関連付ける、図形オブジェクトの候補の一覧を表示する。図形オブジェクト表示処理部３０３は、例えば、図形オブジェクト辞書データベース４０１で規定された複数の図形オブジェクトの一覧を表示する。図形オブジェクト辞書データベース４０１は、例えば、コンピュータ１０内のストレージに格納されている。

なお、図形オブジェクト表示処理部３０３は、図形オブジェクト辞書データベース４０１で規定された複数の図形オブジェクトが、入力された手書き図形に対応する１以上のストロークとの類似度が高い順（１以上のストロークと類似している順）に配置された一覧を表示してもよい。その場合、認識部３０７は、入力された手書き図形と複数の図形オブジェクトの各々との類似度を算出する。例えば、認識部３０７は、入力された手書き図形（１以上のストローク）の形状に関する特徴量を算出し、複数の図形オブジェクトの各々の形状に関する特徴量との類似度を算出する。そして、図形オブジェクト表示処理部３０３は、算出された類似度が高い順に、それら複数の図形オブジェクトが配置された一覧を画面に表示する。

選択部３０４は、ユーザがタッチスクリーンディスプレイ１７を用いて、表示された図形オブジェクトの一覧から一つの図形オブジェクトを選択する図形オブジェクト選択操作に応じて、入力された手書き図形に関連付ける図形オブジェクト（以下、第１図形オブジェクトとも称する）を選択する。

図６は、手書き図形と図形オブジェクトとを関連付けるための手書き図形登録画面５１の例を示す。この手書き図形登録画面５１は、手書き図形入力エリア５２とオブジェクト選択エリア５３とを備える。手書き図形入力エリア５２は、辞書（図形オブジェクト辞書データベース４０１）に登録したい図形を手書きするためのエリアである。オブジェクト選択エリア５３には、手書き図形入力エリア５２内の手書き図形に関連付ける図形オブジェクトの候補の一覧が表示される。

ユーザは、タッチスクリーンディスプレイ１７を用いて、手書き図形入力エリア５２内に、辞書に登録したい図形を手書きする。そして、ユーザは、オブジェクト選択エリア５３内の一覧から、手書きした図形に関連付ける図形オブジェクト（第１図形オブジェクト）５４を選択するための操作を行う。換言すると、ユーザは、一覧から手書き図形が認識された場合に認識結果として提示されるべき図形オブジェクトを選択する。

なお、図６では、ユーザが、辞書に登録したい図形をインタラクティブに手書きする例を示したが、ストレージに保存された手書き図形を含む手書き文書データ（時系列情報）を読み出してもよい。

登録部３０６は、図形オブジェクト辞書データベース４０１に、入力された手書き図形５２を構成する１以上のストロークに対応する時系列情報（以下、第１ストロークデータとも称する）と、選択された第１図形オブジェクト５４とを関連付けて保存する。すなわち、登録部３０６は、第１図形オブジェクト５４に対応する手書き図形５２の第１ストロークデータを学習する。

次いで、変形図形生成部３０５は、変形図形グループデータベース４０２を参照して、選択された第１図形オブジェクト５４に対応する変形図形オブジェクト（以下、第２図形オブジェクトとも称する）を検出する。選択された図形オブジェクトに対応する変形図形オブジェクトは複数であってもよい。ある図形オブジェクトに対応する変形図形オブジェクトとは、その図形オブジェクトに対して、回転、反転、拡大、縮小、アスペクト比の変更、一部のみの拡大、縮小、伸長、萎縮、その他任意の幾何学的変換等の変形を施した図形オブジェクトであればどのようなものであっても良い。変形図形グループデータベース４０２では、図形オブジェクトに対応する変形図形オブジェクトと、図形オブジェクトをその変形オブジェクトに変換するための変換方法とが規定されている。この変換方法は、ある図形オブジェクトに対応する変形図形オブジェクトを規定できればどのような情報であっても良く、例えば、「９０度回転」や「上下反転」等である。変形図形グループデータベース４０２は、例えば、コンピュータ１０内のストレージに格納されている。

変形図形生成部３０５は、変形図形グループデータベース４０２から、検出された第２図形オブジェクトへの変換方法を読み出し、その変換方法に基づいて、第１ストロークデータを、第２図形オブジェクトに対応する第２ストロークデータ（時系列情報）に変換する。そして、登録部３０６は、第２図形オブジェクトと第２ストロークデータとを関連付けて、図形オブジェクトデータベース４０１に保存する。すなわち、登録部３０６は、第１図形オブジェクト５４に対応する手書き図形５２の第１ストロークデータを学習する際に、この第１図形オブジェクト５４を変形した第２図形オブジェクトに対応する第２ストロークデータも学習する。

図７を参照して、変形図形グループデータベース４０２で規定される、図形オブジェクトに対応する変形図形オブジェクトと、図形オブジェクトをその変形オブジェクトに変換するための変換方法とについて説明する。

図７に示す例では、右向きの矢印である第１図形オブジェクト５４に対応する変形図形オブジェクトが、上向きの矢印である図形オブジェクト５４Ａ、下向きの矢印である図形オブジェクト５４Ｂ、および左向きの矢印である図形オブジェクト５４Ｃであることと、それら図形オブジェクト５４Ａ，５４Ｂ，５４Ｃへの変換方法がそれぞれ、９０度回転、２７０度回転、１８０度回転であることとが示されている。

同様に、三角形の図形オブジェクト５５に対応する複数の変形図形オブジェクト５５Ａ，５５Ｂ，５５Ｃと、三角形の図形オブジェクト５５から、それら変形オブジェクト５５Ａ，５５Ｂ，５５Ｃへの変換方法がそれぞれ、９０度回転、上下反転、−９０度回転であることとが示されている。

その場合、変形図形生成部３０５は、図６に示す画面において選択された第１図形オブジェクト５４に対応する変形図形オブジェクト５４Ａ，５４Ｂ，５４Ｃを検出する。そして、変形図形生成部３０５は、入力された手書き図形５２に対応する第１ストロークデータを、変形図形オブジェクト５４Ａ，５４Ｂ，５４Ｃの各々への変換方法に基づいて、変形図形オブジェクト５４Ａ，５４Ｂ，５４Ｃの各々に対応するストロークデータに変換する。

図８に示すように、手書き入力された手書き図形５２は、図７に示した変形図形オブジェクト５４Ａ，５４Ｂ，５４Ｃの各々への変換方法に基づいて、変形手書き図形５７，５８，５９に変換することができる。例えば、右向きの矢印である手書き図形５２は、反時計回りに９０度回転させることによって上向きの矢印である手書き図形５７に変換される。つまり、変形図形生成部３０５は、右向きの矢印である手書き図形５２に対応する時系列情報（ストロークデータ）に含まれる複数の座標の各々を９０度回転させた座標を算出することによって、上向きの矢印である手書き図形５７に対応する時系列情報を生成する。同様にして、右向きの矢印である手書き図形５２は、反時計回りに２７０度回転させることによって下向きの矢印である手書き図形５８に変換される。また、右向きの矢印である手書き図形５２は、反時計回りに１８０度回転（または左右反転）させることによって左向きの矢印である手書き図形５９に変換される。

登録部３０６は、変形図形オブジェクト５４Ａ，５４Ｂ，５４Ｃと各々に対応する、変換されたストロークデータとを関連付けて、図形オブジェクト辞書データベース４０１に保存する。

なお、例えば、上向きの矢印である手書き図形が入力された場合にも、図７に示した、右向きの矢印５４から上向きの矢印５４Ａ、下向きの矢印５４Ｂおよび左向きの矢印５４Ｃの各々への変換方法を用いて、上向きの矢印である手書き図形を、右向きの矢印である手書き図形、下向きの矢印である手書き図形、および左向きの矢印である手書き図形にそれぞれ変換することができる。例えば、図７に示した変換方法では、右向きの矢印から上向きの矢印への変換方法が反時計回りに９０度回転することであることが示されているので、上向きの矢印から右向きの矢印への変換方法は、その逆の、反時計回りの−９０度回転（時計回りの９０度回転）であることが分かる。また、上向きの矢印を左向きの矢印に変換する場合には、上述の上向きの矢印から右向きの矢印への変換を経て、右向きの矢印から左向きの矢印への変換である、反時計回りの１８０度回転を適用すればよい。つまり、上向きの矢印から左向きの矢印への変換方法は、反時計回りの−９０度回転（上向きの矢印から右向きの矢印への変換）と反時計回りの１８０度回転（右向きの矢印から左向きの矢印への変換）とが組み合わせられた、反時計回りの９０度回転であることが分かる。このような方法によって、同一の図形グループに属する図形を相互に変換することができる。

次いで、図９は、図形オブジェクト辞書データベース４０１に格納される図形オブジェクトデータの一構成例を示す。

図形オブジェクトデータは、複数の図形オブジェクトに対応する複数のエントリを含む。各エントリは、例えば、図形ＩＤ、図形オブジェクト、手書き図形のストロークデータを含む。ある図形オブジェクトに対応するエントリにおいて、「図形ＩＤ」は、その図形オブジェクトに付与された識別情報を示す。「図形オブジェクト」は、その図形オブジェクトの形状を示す。例えば、「図形オブジェクト」は、その図形オブジェクトのベクトルデータや画像データを示す。「手書き図形のストロークデータ」は、その図形オブジェクトに関連付けられるストロークデータ（時系列情報）を示す。つまり、「手書き図形のストロークデータ」は、図形オブジェクトの手書き図形が入力された際のストロークデータ、または変形図形オブジェクトの手書き図形が入力された際のストロークデータを変換したストロークデータを示す。

また、図１０は、変形図形グループデータベース４０２に格納される変形図形グループデータの一構成例を示す。

変形図形グループデータは、複数の図形グループに対応する複数のエントリを含む。各図形グループには複数の図形オブジェクトが属する。１つの図形グループに属する複数の図形オブジェクトは、回転、反転、およびアスペクト比変更の内の少なくとも一つの変形方法によって互いに変換可能である。

各エントリは、例えば、グループＩＤ、代表図形ＩＤ、変形図形ＩＤ、変換方法を含む。あるグループに対応するエントリにおいて、「グループＩＤ」は、そのグループに付与された識別情報を示す。「代表図形ＩＤ」は、そのグループに属する複数の図形オブジェクトの内の代表の図形オブジェクトに付与された図形ＩＤを示す。「変形図形ＩＤ」は、そのグループに属する複数の図形オブジェクトの内、代表の図形オブジェクト以外の図形オブジェクト（変形図形オブジェクト）に付与された図形ＩＤを示す。「変換方法」は、代表の図形オブジェクトを、「変形図形ＩＤ」に示される図形オブジェクトに変換する方法を示す。「変換方法」には、例えば、“９０度回転”、“上下反転”、“左右反転”等が記述される。なお、“９０度回転”のような回転の向きは、時計回りと反時計回りのいずれを用いるかが予め規定されている。また、回転の角度は、９０度毎に限らず、４５度毎であってもよいし、任意の角度であってもよい。

例えば、図９に示すエントリ４０２Ａでは、図形ＩＤ“０００１”の図形（図形オブジェクト）を９０度回転させること（変換方法１）によって、図形ＩＤ“０００２”の図形が得られることと、図形ＩＤ“０００１”の図形を上下反転させること（変換方法２）によって、図形ＩＤ“０００３”の図形が得られることとが規定されている。

各エントリには、そのグループに属する変形図形オブジェクトの数だけ、「変形図形ＩＤ」と「変換方法」とのペアが含まれる。なお、エントリ４０２Ｂに示すように、１つの変形図形オブジェクト（図形ＩＤ“００１６”）に対して、２種類の変換方法（“１８０度回転”および“左右反転”）が規定されてもよい。

また、上述のエントリの例では、「代表図形ＩＤ」で示される図形オブジェクトを、変形図形オブジェクトに変換する変換方法が規定されたが、１つの図形グループに属する複数の図形オブジェクトのそれぞれを相互に変換するための変換方法が規定されてもよい。

以上により、ユーザによって選択された第１図形オブジェクトと、入力された手書き図形を構成する１以上のストロークに対応する第１ストロークデータとのペアと共に、第１図形オブジェクトを変形した第２図形オブジェクトと、第１ストロークデータを変換した第２ストロークデータとのペアも、図形オブジェクト辞書データベース４０１に登録することができる。したがって、手書きされた図形を図形オブジェクトに変換するための辞書を効率的に作成することができる。

さらに、作成された辞書（図形オブジェクト辞書データベース４０１）を参照することによって、手書き文書内の手書き図形を図形オブジェクトに変換することができる。手書き文書（手書きページ）内に含まれる手書きの図形は、PowerPoint（登録商標）などのプレゼンテーション資料を作成するためのソフトウェアや、ドロー系のグラフィクスソフトウェア等で利用可能な図形オブジェクトに変換される。

具体的には、認識部３０７は、手書き文書内に手書きされた複数のストロークに対応する時系列情報（時系列順に並べられた複数のストロークデータ）が読み出されたとき、それら複数のストロークをグループ化処理することによって、１以上のストロークを含む複数のブロック（手書きブロック）に分割する。グループ化処理では、近傍に位置し且つ連続的に手書きされた１以上のストロークに対応する１以上のストロークデータが同一ブロックに分類されるように、時系列情報によって示される複数のストロークデータがグループ化される。

認識部３０７は、グループ化によって得られた複数のブロックの各々に含まれる１以上のストロークを、複数の図形オブジェクトの内の一つに変換する。つまり、認識部３０７は、図形オブジェクト辞書データベース４０１を参照して、複数のブロックの各々に含まれる１以上のストロークに類似するストロークが関連付けられた図形オブジェクトを検出する。

例えば、認識部３０７は、図形オブジェクト辞書データベース４０１に保存された第１図形オブジェクトの第１ストロークデータと、処理対象のブロックに含まれる１以上のストロークに対応する１以上のストロークデータ（以下、第３ストロークデータとも称する）とを用いて、第１ストロークデータに対応する１以上のストロークと第３ストロークデータに対応する１以上のストロークとの類似度（第１類似度）を算出する。この類似度は、例えば、第１ストロークデータを用いて算出された、第１ストロークデータに対応する１以上のストロークの傾きおよび筆順を表す多次元特徴ベクトルと、第３ストロークデータを用いて算出された、第３ストロークデータに対応する１以上のストロークの傾きおよび筆順を表す多次元特徴ベクトルとの内積である。認識部３０７は、算出された類似度がしきい値以下である場合に、処理対象のブロックに含まれる１以上のストロークを第１図形オブジェクトに変換する。

また、例えば、認識部３０７は、図形オブジェクト辞書データベース４０１に保存された第２図形オブジェクト（すなわち、第１図形オブジェクトの変形図形オブジェクト）の第２ストロークデータと、処理対象のブロックに含まれる１以上のストロークに対応する１以上のストロークデータ（第３ストロークデータ）とを用いて、第２ストロークデータに対応する１以上のストロークと第３ストロークデータに対応する１以上のストロークとの類似度（第２類似度）を算出する。この類似度は、例えば、第２ストロークデータを用いて算出された、第２ストロークデータに対応する１以上のストロークの傾きおよび筆順を表す多次元特徴ベクトルと、第３ストロークデータを用いて算出された、第３ストロークデータに対応する１以上のストロークの傾きおよび筆順を表す多次元特徴ベクトルとの内積である。認識部３０７は、算出された類似度がしきい値以下である場合に、処理対象のブロックに含まれる１以上のストロークを第２図形オブジェクトに変換する。

上述の説明では、類似度が、図形オブジェクトの１以上ストロークと処理対象のブロックに含まれる１以上のストロークとが類似しているほど小さく、類似していないほど大きいものと規定されている。なお、認識部３０７による類似度としきい値とに基づく判定は、類似度の算出方法に応じて適宜変更され得る。例えば、類似度は、図形オブジェクトの１以上ストロークと処理対象のブロックに含まれる１以上のストロークとが類似しているほど大きく、類似していないほど小さいものと規定されてもよい。その場合、認識部３０７は、例えば、算出された類似度がしきい値以上である場合に、処理対象のブロックに含まれる１以上のストロークを図形オブジェクトに変換する。

認識部３０７は、図形オブジェクト辞書データベース４０１に規定された複数の図形オブジェクトの各々に関連付けられた１以上のストロークと、処理対象のブロックに含まれる１以上のストロークとの類似度を算出し、類似度が最大であるストローク（すなわち、最も類似しているストローク）に対応する図形オブジェクトを検出することによって、処理対象のブロックに含まれる１以上のストロークを、その検出された図形オブジェクトに変換してもよい。

なお、図形オブジェクト辞書データベース４０１に規定された図形オブジェクトに、まだ手書き図形のストロークが関連付けられていない場合には、手書き図形のストロークの傾きおよび筆順を示す多次元特徴ベクトルを利用することができない。その際には、認識部３０７は、入力された手書き図形（１以上のストローク）の形状に関する特徴量と、図形オブジェクトの形状に関する特徴量との類似度を算出してもよい。

以上により、図形オブジェクト辞書データベース４０１を用いて、手書き文書内の手書き図形を図形オブジェクトに変換することができる。上述のように辞書を作成することによって、ユーザが辞書に登録するために手書き入力した第１図形オブジェクトの手書き図形だけでなく、第１図形オブジェクトと同一のグループに属する変形図形オブジェクトの手書き図形も、適切に変換することができる。

なお、手書き図形に対応する時系列情報は、「９０度回転」や「上下反転」のような変形手書き図形毎の変換方法に基づいて、変形手書き図形に対応する時系列情報に変換される。しかし、変換された時系列情報に示される筆順は、ユーザが実際に手書きする筆順とは異なっている場合がある。

図１１を参照して、手書き図形６１が、変形図形グループデータ４０２に示される変換方法に基づいて変換された際の筆順の例について説明する。この手書き図形６１は、右向きの矢印であり、第１画目の左端から右端への「−」形状のストロークと、第２画目の上端から下端への「＞」形状のストロークとから構成されることを想定する。

上下反転された変形手書き図形６４は、左向きの矢印であり、第１画目の左端から右端への「−」形状のストロークと、第２画目の下端から上端への「＞」形状のストロークとから構成される。この変形手書き図形６４は、元の手書き図形６１と同じ右向きの矢印であるが、手書き図形６１とは筆順が異なっている。

１８０度回転された変形手書き図形６２は、左向きの矢印であり、第１画目の右端から左端への「−」形状のストロークと、第２画目の下端から上端への「＜」形状のストロークとから構成される。左右反転された変形手書き図形６５も、左向きの矢印であり、第１画目の右端から左端への「−」形状のストロークと、第２画目の上端から下端への「＜」形状のストロークとから構成される。変形手書き図形６２と変形手書き図形６５とは、同じ左向きの矢印であるが、第２画目の「＜」形状のストロークの筆順が異なっている。

９０度回転された変形手書き図形６３は、下向きの矢印であり、第１画目の上端から下端への「｜」形状のストロークと、第２画目の右端から左端への「∨」形状のストロークとから構成される。

２７０度回転された変形手書き図形６６は、上向きの矢印であり、第１画目の下端から上端への「｜」形状のストロークと、第２画目の左端から右端への「∧」形状のストロークとから構成される。

このような変換によって示される筆順は、ユーザによる実際の筆順とは相違している可能性がある。そのため、変形図形生成部３０５および登録部３０６は、筆順のバリエーションを考慮した変形手書き図形の時系列情報（ストロークデータ）を生成し、図形オブジェクト辞書データベース４０１に登録してもよい。

図１２を参照して、図１１に示した変形手書き図形６３に対して、筆順のバリエーションを考慮した時系列情報が生成された例について説明する。変形手書き図形７１〜７７には、変形手書き図形６３とは、２つのストロークが手書きされる順序（すなわち、どちらのストロークを第１画目に手書きするか）や、各ストロークの筆順（すなわち、ストロークがどちらの端部から手書きされるか）が異なるバリエーションが示されている。

このように、変形手書き図形の筆順のバリエーションを考慮した時系列情報が生成されることによって、認識部３０７は、ユーザがどのような筆順で図形を手書きしたとしても、手書きされた図形に対応する図形オブジェクトを正しく認識することができる。なお、利用される可能性が低い筆順のバリエーションの時系列情報は、生成されないようにしてもよい。さらに、実際に変形手書き図形が手書きされた場合には、その手書きされたストロークに対応する時系列情報を、当該変形手書き図形に対応する図形オブジェクトに関連付けて図形オブジェクト辞書データベース４０１に保存し、その図形オブジェクトに関連付けられていた他の筆順のバリエーションの時系列情報をデータベース４０１から削除してもよい。

次いで、図１３は、手書き文書内の手書き図形を図形オブジェクトに変換するための手書き文書認識画面８０の例を示す。この手書き文書認識画面８０では、手書き文書内の手書き図形を図形オブジェクトに変換する際に、手書き図形の学習を行うこともできる。

手書き文書認識画面８０には、手書き文書エリア８１と認識結果エリア８６とが含まれる。ここでは、手書き文書エリア８１に、手書きの円形８２、矢印８３および三角形８４を含む手書き文書が表示されている。そして、認識結果エリア８６には、手書き文書エリア８１に表示された手書き図形８２，８３，８４の認識結果である図形オブジェクトが表示されている。

認識結果エリア８６では、手書きの円形８２が変換された円形の図形オブジェクト８７と、手書きの三角形８４が変換された三角形の図形オブジェクト８９とが表示されている。そして、手書きの矢印８３には、複数種の矢印の図形オブジェクト８８Ａ，８８Ｂ，８８Ｃの候補が示されている。これら候補８８Ａ，８８Ｂ，８８Ｃは、例えば、認識結果エリア８６に、一つの矢印の図形オブジェクト８８Ａが表示されているときに、この図形オブジェクト８８Ａを選択（例えば、タッチ）する操作に応じて、プルダウンメニューとして表示される。

ユーザは、複数種の矢印の図形オブジェクト８８Ａ，８８Ｂ，８８Ｃから、手書きの矢印８３に対応する図形オブジェクトを、選択（変更）する操作を行うことができる。このユーザによる選択操作に応じて、手書きの矢印８３が変換される矢印の図形オブジェクトが決定される。

変形図形生成部３０５および登録部３０６は、上述のように、決定された矢印の図形オブジェクトに、手書きの矢印８３を構成する複数のストロークに対応する時系列情報（ストロークデータ）を関連付け、また、決定された矢印の図形オブジェクトの変形図形オブジェクトに、変換された時系列情報を関連付ける。

これにより、ユーザは、手書き文書内の手書き図形を図形オブジェクトに変換する際に、手書き図形に対応する図形オブジェクトを選択する操作を一度行うだけで、手書き図形を図形オブジェクトに変換するための辞書を作成することができる。

ある図形オブジェクトに対応する手書き図形は、ユーザ毎に多様な書き方がある。例えば、図１３に示した矢印の手書き図形８３が、矢印の図形オブジェクト８８Ａ，８８Ｂ，８８Ｃのいずれを意図しているかは、ユーザ毎に異なる可能性がある。しかし、同一のユーザであれば、図形オブジェクトと手書き図形との対応は一貫している可能性が高い。さらに、その図形オブジェクトの変形図形オブジェクトと変形手書き図形との対応も同様に一貫している可能性が高い。したがって、本実施形態によって、手書きされた図形を図形オブジェクトに変換するための辞書を効率的に作成することができる。

図１４のフローチャートを参照して、デジタルノートブックアプリケーションプログラム２０２によって実行される手書き図形学習処理の手順について説明する。

まず、軌跡表示処理部３０１は、タッチスクリーンディスプレイ１７上での手書き入力操作に応じて、手書きによる軌跡（ストローク）を表示する（ブロックＢ１１）。時系列情報生成部３０２は、手書きされたストロークに対応する時系列情報（時系列順に並べられたストロークデータ）を生成する（ブロックＢ１２）。

次いで、選択部３０４は、手書き図形の入力が完了したか否かを判定する（ブロックＢ１３）。選択部３０４は、例えば、手書き図形の入力が完了したことを示す所定の操作（例えば、所定のボタンを押下げる操作）が行われたとき、手書き図形の入力が完了したと判断する。手書き図形の入力が完了していない場合（ブロックＢ１３のＮＯ）、ブロックＢ１１に戻り、手書き図形の入力のための処理が続行される。

手書き図形の入力が完了した場合（ブロックＢ１３のＹＥＳ）、選択部３０４は、生成された時系列情報（すなわち、手書き図形に対応する時系列情報）に関連付ける図形オブジェクト（第１図形オブジェクト）を選択する（ブロックＢ１４）。選択部３０４は、例えば、表示された図形オブジェクトの一覧から、１つの図形オブジェクトを選択するユーザ操作に応じて、生成された時系列情報に関連付ける図形オブジェクトを決定する。そして、登録部３０６は、選択された第１図形オブジェクトに、時系列情報を関連付けて記憶媒体に保存する（ブロックＢ１５）。

次いで、変形図形生成部３０５は、変形図形グループデータベース４０２を参照して、第１図形オブジェクトに関連付けられた変形図形オブジェクト（第２図形オブジェクト）を検出する（ブロックＢ１６）。この変形図形オブジェクトは、第１図形オブジェクトを変形（例えば、回転、反転、アスペクト比変更、等）した図形オブジェクトである。変形図形生成部３０５は、変形図形グループデータベース４０２から、検出された変形図形オブジェクトに対応する変換方法を読み出し、その変換方法に基づいて、手書き図形に対応する時系列情報（第１図形オブジェクトに関連付けられた時系列情報）を変換する（ブロックＢ１７）。そして、登録部３０６は、変形図形オブジェクトに、変換された時系列情報を関連付けて記憶媒体に保存する（ブロックＢ１８）。

次いで、変形図形生成部３０５は、第１図形オブジェクトに関連付けられた他の変形図形オブジェクトがあるか否かを判定する（ブロックＢ１９）。他の変形図形オブジェクトがある場合（ブロックＢ１９のＹＥＳ）、ブロックＢ１７に戻り、その変形図形オブジェクトに対して、変換された時系列情報を関連付けるための処理が実行される。他の変形図形オブジェクトがない場合（ブロックＢ１９のＮＯ）、処理を終了する。

なお、図１５に示すように、上述のタブレットコンピュータ１０による動作は、タブレットコンピュータ１０とサーバ２との連係動作によって実現されてもよい。

サーバ２はハードディスクドライブ（ＨＤＤ）のようなストレージデバイス２Ａを備えている。タブレットコンピュータ１０とサーバ２との間のセキュアな通信を確保するために、通信開始時には、サーバ２がタブレットコンピュータ１０を認証するようにしてもよい。この場合、タブレットコンピュータ１０の画面上にユーザに対してＩＤまたはパスワードの入力を促すダイアログを表示してもよいし、タブレットコンピュータ１０のＩＤやペン１００のＩＤなどを自動的にタブレットコンピュータ１０からサーバ２に送信してもよい。

また、タブレットコンピュータ１０のタッチスクリーンディスプレイ１７に手書き図形登録画面５１を表示し、その手書き図形登録画面５１に対する各種の操作（手書き入力操作、図形オブジェクト選択操作、等）を示す操作情報をサーバ２に送信してもよい。サーバ２では、上述のデジタルノートブックアプリケーションプログラム２０２に相当する構成を有するプログラムが実行されており、タブレットコンピュータ１０から送信された操作情報に対応する手書き図形のストロークデータの学習処理が実行される。サーバ２は、例えば、タブレットコンピュータ１０のタッチスクリーンディスプレイ１７上で手書き入力されたストロークのストロークデータと、選択された図形オブジェクトを示すデータとを用いて、図形オブジェクトにストロークデータを関連付け、当該図形オブジェクトの変形手書き図形オブジェクトに、変換されたストロークデータを関連付けて、ストレージデバイス２Ａに保存する。サーバ２は、ストレージデバイス２Ａに保存された辞書データを用いて、タブレットコンピュータ１０で作成された手書き文書に含まれる手書き図形を、図形オブジェクトに変換することができる。

これにより、サーバ２において、図形オブジェクトの辞書データを作成するための学習処理や、手書き文書内の手書き図形を図形オブジェクトに変換する処理が実行されるので、タブレットコンピュータ１０における処理の負荷を軽減することができる。

以上説明したように、本実施形態によれば、手書きされた図形を図形オブジェクトに変換するための辞書を効率的に作成することができる。時系列情報生成部３０２は、タッチスクリーンディスプレイ１７を用いて手書き入力された、１以上のストロークに対応する第１ストロークデータを生成する。選択部３０４は、例えば、ユーザによる選択操作に応じて、この第１ストロークデータに関連付ける第１図形オブジェクトを選択する。そして、変形図形生成部３０２は、第１ストロークデータを、第１図形オブジェクトを変形させた第２図形オブジェクトに対応する第２ストロークデータに変換する。登録部３０６は、第１図形オブジェクトと第１ストロークデータを関連付けて記憶媒体に保存し、また、第２図形オブジェクトと前記第２ストロークデータとを関連付けて記憶媒体に保存する。

これにより、選択された第１図形オブジェクトと、入力された１以上のストロークに対応する第１ストロークデータとのペアと共に、第１図形オブジェクトを変形した第２図形オブジェクトと、第１ストロークデータを変換した第２ストロークデータとのペアも、記憶媒体に保存することができる。したがって、手書きされた図形を図形オブジェクトに変換するための辞書を効率的に作成することができる。

なお、本実施形態の手書き図形学習処理の手順は全てソフトウェアによって実行することができる。このため、手書き図形学習処理の手順を実行するプログラムを格納したコンピュータ読み取り可能な記憶媒体を通じてこのプログラムを通常のコンピュータにインストールして実行するだけで、本実施形態と同様の効果を容易に実現することができる。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１７Ａ…ＬＣＤ、２０２…デジタルノートブックアプリケーション、３０１…軌跡表示処理部、３０２…時系列情報生成部、３０３…図形オブジェクト表示処理部、３０４…選択部、３０５…変形図形生成部、３０６…登録部、３０７…認識部、４０１…図形オブジェクト辞書データベース、４０２…変形図形グループデータベース。

実施形態によれば、電子機器は、第１生成手段、第２生成手段、および記憶制御手段を具備する。第１生成手段は、手書き入力された１以上のストロークに対応する第１ストロークデータを生成する。第２生成手段は、前記第１ストロークデータと第１図形オブジェクトとが関連付けられる場合に、前記第１ストロークデータを用いて、前記第１図形オブジェクトを変形させた第２図形オブジェクトに対応する第２ストロークデータを生成する。記憶制御手段は、前記第１図形オブジェクトと前記第１ストロークデータとを関連付けて保存し、前記第２図形オブジェクトと前記第２ストロークデータとを関連付けて保存する。前記第２図形オブジェクトは、前記第１図形オブジェクトを回転もしくは反転した図形オブジェクト、または前記第１図形オブジェクトのアスペクト比を変更した図形オブジェクトである。

Claims (11)

1. 手書き入力された１以上のストロークに対応する第１ストロークデータを生成する生成手段と、
   前記第１ストロークデータに関連付ける第１図形オブジェクトを選択する選択手段と、
   前記第１ストロークデータを、前記第１図形オブジェクトを変形させた第２図形オブジェクトに対応する第２ストロークデータに変換する変換手段と、
   前記第１図形オブジェクトと前記第１ストロークデータを関連付けて保存し、前記第２図形オブジェクトと前記第２ストロークデータとを関連付けて保存する記憶媒体とを具備する電子機器。
2. 前記第２図形オブジェクトは、前記第１図形オブジェクトを回転または反転した図形オブジェクトである請求項１記載の電子機器。
3. 前記第２図形オブジェクトは、前記第１図形オブジェクトのアスペクト比を変更した図形オブジェクトである請求項１記載の電子機器。
4. 前記変換手段は、前記記憶媒体から前記第１図形オブジェクトを前記第２図形オブジェクトに変換するための変換方法を読み出し、当該変換方法に基づいて、前記第１ストロークデータを第２ストロークデータに変換する請求項１記載の電子機器。
5. 複数の図形オブジェクトの一覧を表示する表示処理手段をさらに具備し、
   前記選択手段は、前記一覧から一つの図形オブジェクトを選択するユーザ操作に応じて、前記第１図形オブジェクトを選択する請求項１記載の電子機器。
6. 前記表示処理手段は、前記複数の図形オブジェクトが、前記手書き入力された１以上のストロークとの類似度が高い順に配置された一覧を表示する請求項５記載の電子機器。
7. 手書き文書内の１以上のストロークに対応する第３ストロークデータと前記第１ストロークデータとを用いて、前記第３ストロークデータに対応する１以上のストロークと前記第１ストロークデータに対応する１以上のストロークとの第１類似度を算出し、前記第１類似度がしきい値以下である場合に、前記第３ストロークデータに対応する１以上のストロークを前記第１図形オブジェクトに変換する認識手段をさらに具備する請求項１記載の電子機器。
8. 前記認識手段は、さらに、前記第３ストロークデータと前記第２ストロークデータとを用いて、前記第３ストロークデータに対応する１以上のストロークと前記第２ストロークデータに対応する１以上のストロークとの第２類似度を算出し、前記第２類似度が前記しきい値以下である場合に、前記第３ストロークデータに対応する１以上のストロークを前記第２図形オブジェクトに変換する請求項７記載の電子機器。
9. タッチスクリーンディスプレイをさらに具備し、
   前記１以上のストロークは、前記タッチスクリーンディスプレイを用いて手書き入力され、
   前記第１図形オブジェクトは、前記タッチスクリーンディスプレイを用いて選択される請求項１記載の電子機器。
10. 手書き入力された１以上のストロークに対応する第１ストロークデータを生成し、
    前記第１ストロークデータに関連付ける第１図形オブジェクトを選択し、
    前記第１ストロークデータを、前記第１図形オブジェクトを変形させた第２図形オブジェクトに対応する第２ストロークデータに変換し、
    前記第１図形オブジェクトと前記第１ストロークデータを関連付けて記憶媒体に保存し、前記第２図形オブジェクトと前記第２ストロークデータとを関連付けて前記記憶媒体に保存する手書き文書処理方法。
11. コンピュータにより実行されるプログラムであって、前記プログラムは、
    手書き入力された１以上のストロークに対応する第１ストロークデータと関連付ける第１図形オブジェクトを選択する手順と、
    前記第１ストロークデータを、前記第１図形オブジェクトを変形させた第２図形オブジェクトに対応する第２ストロークデータに変換する手順と、
    前記第１図形オブジェクトと前記第１ストロークデータを関連付けて記憶媒体に保存し、前記第２図形オブジェクトと前記第２ストロークデータとを関連付けて前記記憶媒体に保存する手順とを前記コンピュータに実行させるプログラム。

Images