JPH0744311A

JPH0744311A - 手書き情報処理装置

Info

Publication number: JPH0744311A
Application number: JP22659693A
Authority: JP
Inventors: Hirobumi Tamori; 寛文田守
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1993-07-31
Filing date: 1993-07-31
Publication date: 1995-02-14

Abstract

(57)【要約】【構成】テキスト又は図形の処理に関する一連のメニ
ュー及び／又はテキスト又は図形の処理に関する一連の
ジェスチャとメニュー及び／又はジェスチャに対応した
処理内容を記憶するＲＯＭ１４と、メニューを組み合わ
せた一連のメニュー操作及び／又はジェスチャを組み合
わせた一連のジェスチャをマクロジェスチャとして登録
して記憶するＲＡＭ１３と、マクロジェスチャを認識す
るマクロジェスチャ認識手段及びマクロジェスチャに対
応する一連のメニュー操作及び／又は一連のジェスチャ
に対応する処理を実行する演算部１０のＣＰＵ１１とを
有し、マクロジェスチャが描画されるとテキスト又は図
形の処理に関する一連のメニュー及び／又は一連のジェ
スチャに対応する処理を実行する。【効果】複雑な機能を簡単に指示することができ、操
作性が向上する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、例えばいわゆるペンコ
ンピュータのように手書き情報を処理する手書き情報処
理装置に関するものである。

【０００２】

【従来の技術】従来より、ペンコンピュータは、ペンと
タブレットが対になった入力部から座標値（手書き入力
された文字や図形等をもとに形成される座標値）を入力
し、演算部でそのデータを処理した後、例えば液晶ディ
スプレイからなる出力部にその文字や図形データ等を表
示するように構成されている。

【０００３】このようなペンコンピュータの特徴を活か
す操作として、いわゆる〔ジェスチャ〕が有望視されて
いる。当該ジェスチャとは、〔動作（簡単な図形の入
力）でコンピュータに操作を指示する〕記号である。例
えば図３６のＡの（ａ）に示すように、〔編集の昨日〕
とディスプレイに表示されている場合において、〔昨
日〕を削除したいときには、ジェスチャとして削除のジ
ェスチャ１０１を上記〔昨日〕の上に記入して実行する
ことで、図３６のＡの（ｂ）に示すように上記〔昨日〕
が削除された〔編集の〕の文字が表示されるようにな
る。また、図３６のＢの（ａ）に示すように、〔にわに
はにわうら〕の文字が表示されている場合において、
〔にわにはにわ〕の文字を〔にわにはにわうら〕の文字
の後ろの場所にコピーしたいときには、〔にわにはに
わ〕の文字の範囲を示すジェスチャ１０３とこのジェス
チャ１０３で囲われた範囲内の文字をコピーして移す
（複写する）ジェスチャ１０２，１０４を記入して実行
することで、図３６のＢの（ｂ）に示すようにディスプ
レイ上の表示は〔にわにはにわうらにわにはにわ〕とな
る。

【０００４】上記ジェスチャの利点は、直観的で判り易
いこと、動作の指示と範囲の指示などを一度に行うこと
ができる（例えば図３６のＡの（ａ）のように削除のジ
ェスチャの×を書いてその×の下にかかった部分を全部
消すなどの指示）ことなどである。

【０００５】なお、従来のジェスチャの一例と、各ジェ
スチャの機能を表１の表(1) に示す。

【０００６】

【表１】

【０００７】

【発明が解決しようとする課題】しかし、上記ジェスチ
ャには、初めから複雑な形のものを多数定義してあると
ユーザが理解できないために限られた単純な機能を表現
するジェスチャしか定義できないことや、１個のジェス
チャによって単純な指示しか与えることができないこと
などの欠点がある。

【０００８】したがって、複雑な機能を一度に実行した
いような場合には、複数のジェスチャを用いなければな
らず、ユーザにとっては煩雑である。

【０００９】そこで、本発明は、上述したようなことに
鑑み、複雑な機能を簡単に指示することができる手書き
情報処理装置を提供することを目的としている。

【００１０】

【課題を解決するための手段】本発明の手書き情報処理
装置は、上述の目的を達成するために提案されたもので
あり、テキスト又は図形の処理に関する一連のメニュー
及び／又はテキスト又は図形の処理に関する一連のジェ
スチャと上記メニュー及び／又はジェスチャに対応した
処理内容を記憶する第１の記憶手段と、上記メニューを
組み合わせた一連のメニュー操作及び／又は上記ジェス
チャを組み合わせた一連のジェスチャをマクロジェスチ
ャとして登録して記憶する第２の記憶手段と、上記第２
の記憶手段に記憶された一連のメニュー操作及び／又は
一連のジェスチャに対応する上記マクロジェスチャを認
識するマクロジェスチャ認識手段と、上記マクロジェス
チャに対応する一連のメニュー操作及び／又は一連のジ
ェスチャに対応する処理を実行する実行手段とを有し、
上記マクロジェスチャが描画されると上記テキスト又は
図形の処理に関する一連のメニュー及び／又は一連のジ
ェスチャに対応する処理を実行することを特徴とするも
のである。

【００１１】ここで、本発明の手書き情報処理装置に
は、さらに上記組み合わせた一連のメニュー操作及び／
又は一連のジェスチャを自動記録する記録手段を設け、
当該一連のメニュー操作及び／又は一連のジェスチャの
自動記録が指示されるとこの一連のメニュー操作及び／
又は一連のジェスチャを自動記録するようにしている。

【００１２】また、本発明の手書き情報処理装置では、
上記自動記録した一連のメニュー操作及び／又は一連の
ジェスチャを編集する編集手段を設け、上記自動記録し
た一連のメニュー操作及び／又は上記一連のジェスチャ
の中から所定操作に対応するコマンドを使用者に指示さ
れると削除し、所定のメニュー操作及び／又は所定のジ
ェスチャに対応するコマンドを使用者の指示により追加
することにより編集して、上記編集された一連のコマン
ドをマクロジェスチャとして登録して実行するようにし
ている。

【００１３】すなわち、本発明では、ペンコンピュータ
のジェスチャ操作に関する改良点として、メニュー動
作、スクリプトをまとめてマクロジェスチャとして登録
すること及び／又は複数の簡単なジェスチャの組合せを
まとめてマクロジェスチャとして登録するようにしてい
る。

【００１４】

【作用】本発明の手書き情報処理装置によれば、メニュ
ーを組み合わせた一連のメニュー操作及び／又はジェス
チャを組み合わせた一連のジェスチャをマクロジェスチ
ャとして登録することで、このマクロジェスチャによっ
て複数の機能を一度に実行することができる。

【００１５】

【実施例】以下、本発明の手書き情報処理装置の実施例
を図面を参照しながら説明する。

【００１６】本発明実施例の手書き情報処理装置の一構
成例を図１に示す。本発明実施例の手書き情報処理は、
テキスト又は図形の処理に関する一連のメニュー及び／
又はテキスト又は図形の処理に関する一連のジェスチャ
と上記メニュー及び／又はジェスチャに対応した処理内
容を記憶する第１の記憶手段であるＲＯＭ１４と、上記
メニューを組み合わせた一連のメニュー操作及び／又は
上記ジェスチャを組み合わせた一連のジェスチャをマク
ロジェスチャとして登録して記憶する第２の記憶手段で
あるＲＡＭ１３と、上記ＲＡＭ１３に記憶された一連の
メニュー操作及び／又は一連のジェスチャに対応する上
記マクロジェスチャを認識するマクロジェスチャ認識手
段及び上記マクロジェスチャに対応する一連のメニュー
操作及び／又は一連のジェスチャに対応する処理を実行
する実行手段としての演算部１０のＣＰＵ１１とを有
し、上記マクロジェスチャが描画されると上記テキスト
又は図形の処理に関する一連のメニュー及び／又は一連
のジェスチャに対応する処理を実行するようにしてい
る。

【００１７】さらに、本実施例の手書き情報処理装置
は、上記組み合わせた一連のメニュー操作及び／又は上
記一連のジェスチャの自動記録を行うようになされてお
り、上記一連のメニュー操作及び／又は上記一連のジェ
スチャの自動記録が指示されると、ＣＰＵ１１は、上記
ＲＡＭ１３に対して上記一連のメニュー操作及び／又は
一連のジェスチャを自動記録するようにしている。

【００１８】また、本実施例の手書き情報処理装置のＣ
ＰＵ１１は、上記自動記録した一連のメニュー操作及び
／又は一連のジェスチャを編集する編集手段を設け、上
記自動記録した一連のメニュー操作及び／又は上記一連
のジェスチャの中から所定操作に対応するコマンドを使
用者に指示されると削除し、所定のメニュー操作及び所
定のジェスチャに対応するコマンドを使用者の指示によ
り追加することにより編集して、上記編集された一連の
コマンドをマクロジェスチャとして登録して実行するよ
うにしている。

【００１９】以下、この図１の手書き情報処理装置の詳
細について説明する。すなわち、本実施例の手書き情報
処理装置において、各部を制御すると共に各種演算を行
う演算部１０のＣＰＵ１１は、システムバスを介して記
憶部１２，入力部２３，出力部１５の各構成要素と接続
されている。

【００２０】記憶部１２のＲＯＭ１４は、上記第１の記
憶手段として動作すると共に、装置全体のシステムプロ
グラム、例えばワードプロセッサ機能用のカナ漢字変換
プログラム及びそのための辞書テーブル、さらに手書き
入力に対する認識プログラム及びそのための辞書テーブ
ル、さらに手書き入力に対する認識情報及びそのための
辞書テーブルなどが書き込まれている。ＲＡＭ１３は、
上記第２の記憶手段として動作すると共に、ワーキング
用ＲＡＭとして動作上必要なデータが随時記憶されると
共に、バックアップ用ＲＡＭとしても機能する。なお、
上記第２の記憶手段に記憶される情報は当該ＲＡＭ１３
のバックアップ部に記憶される。

【００２１】なお、上記記憶部１２としては、いわゆる
ハードディスクを用いることもできる。

【００２２】入力部２３のタブレット２６は、Ｘ軸方向
に例えば５１２本の電極を有しており、Ｙ軸方向に３４
２本の電極を有している。これにより、５１２×３４２
画素に対応する位置を検出することが可能となる。

【００２３】タブレットドライバ２４は、タブレット２
６及びペン（スタイラスペン）２５とシステムバスを介
したＣＰＵ１１とを接続すると共に、タブレット２６の
コントロールを行う。このタブレットドライバ２４は、
タブレット２６の３４２本の電極の１本１本に所定のク
ロックに基づいて順次所定の電圧を印加すると共に、５
１２本の電極の１本１本に所定のクロックに基づいて順
次所定の電圧を印加する。これにより、タブレット２６
は、Ｘ軸及びＹ軸方向にスキャンされることになる。

【００２４】このとき、ペン２５をタブレット２６上の
任意の位置に近づけると、タブレット２６とペン２５と
の間に所定の静電容量が形成される。そして、ペン２５
をタブレット２６に押圧したとき、ペン２５の選択のス
イッチがオンするので、ペン２５とタブレット２６上の
電極との間に発生した電荷がタブレットドライバ２４に
よって検出される。すなわち、タブレットドライバ２４
は、Ｘ軸方向とＹ軸方向の所定のクロックの発生タイミ
ングを管理しているので、ペン２５から供給された検出
信号とクロックの発生タイミングとからタブレット２６
上のペン２５による押圧位置を検出することができる。

【００２５】タブレットドライバ２４は、このようにし
て検出したペン２５による操作座標をＣＰＵ１１に供給
する。ＣＰＵ１１は、ペン２５がタブレット２６を押圧
し、ペン２５の先端のスイッチがオンした（ペンダウン
した）位置と、タブレット２６からペン２５が離れ、当
該ペン２５の先端のスイッチがオフした（ペンアップし
た）位置を常に監視している。そして、ぺンダウンで入
力を受け付け、ペンアッペで入力を確定する。

【００２６】一方、ＣＰＵ１１は、出力部１５のＬＣＤ
ドライバ１７を制御し、メモリ（Ｖ−ＲＡＭ）１６表示
すべき画像に対応するデータを書き込む。ＬＣＤドライ
バ１７は、メモリ１６からデータを読み出し、データに
対応して液晶ディスプレイ１８を駆動する。液晶ディス
プレイ１８には、タブレット２６に対応して水平方向に
５１２本の電極を有し、垂直方向に３４２本の電極を有
している。ＬＣＤドライバ１７は、この液晶ディスプレ
イ１８の上記５１２本の電極に１本ずつ順次所定の電圧
を印加すると共に、上記３４２本の電極に１本ずつ順次
所定の電圧を印加する。これにより、液晶ディスプレイ
１８上の各画素がスキャンされ、当該液晶ディスプレイ
１８上に所定の画像が表示されるようになる。

【００２７】この液晶ディスプレイ１８上に上記タブレ
ット２６が設けられている。この液晶ディスプレイ１８
は、例えば、上下に設けられたガラス板と、その中間に
挿入された液晶デバイスとから構成されている。液晶デ
ィスプレイ１８の下方には、蛍光板（ＥＬ）が配置さ
れ、この蛍光板がバックライトとして光を発生すると、
その光が液晶ディスプレイ１８の液晶デバイスを証明す
る。また、タブレット２６は、透明な部材により形成さ
れているため、液晶デバイス上に表示された画像を観察
することができる。

【００２８】以下、本発明実施例について、第１の具体
例として、メニュー動作をまとめてジェスチャとして登
録する場合と、第２の具体例として、複数の簡単なジェ
スチャの組合せをまとめてジェスチャとして登録する場
合の二つに分けて具体的に説明する。

【００２９】先ず、メニュー操作を１個のジェスチャに
マクロ定義（マクロジェスチャとして定義）する上記第
１の具体例について説明する。なお、従来より、〔ファ
ンクションキー〕や〔ホットキー〕と呼ばれるキーに複
数の文字列を定義しておいて、一度の打鍵で複数のコマ
ンドを実行させるものはあるが、本発明では、それに類
似した機能をマクロジェスチャで行うようにしている。

【００３０】図２には、画面の表示例を示す。ディスプ
レイ１８の画面上部には、メニューバー３１が表示さ
れ、このメニューバー３１に表示されるいずれかのメニ
ュー（〔ファイル〕，〔編集〕，〔文字〕等）を上記ペ
ン２５で押すと、プルダウンメニューが表示される。例
えば、メニューバー３１の〔編集〕と表示されているメ
ニューの領域をペン２５で押した場合には、図２のよう
なプルダウンメニュー３２が表示される。このプルダウ
ンメニュー３２にはさらにメニューとして例えば〔取消
し〕，〔カット〕，〔コピー〕，〔ペースト〕の表示が
なされる。

【００３１】また、このメニューバー３１の下部には編
集画面３３が表示されている。この編集画面３３に表示
される文字列が編集操作の対象となる。この図２の例で
は、〔ＡＢＣＤ・・・・〕の文字列が表示されていると
する。

【００３２】さらに、上記メニューバー３１の例えば右
端部分にはマクロジェスチャの定義の開始又は終了を指
示するためのマクロ定義ボタン３４が仮想スイッチとし
て表示されている。このマクロ定義ボタン３４を押すこ
とで、マクロジェスチャの定義の開始と終了を指示す
る。

【００３３】この第１の具体例では、マクロ定義に入れ
ることができるのは、基本的にメニューの選択（或いは
もしハードウェアにキーボードも設けられているならば
対応するコマンドキーの入力）の操作である。

【００３４】以下、メニュー操作登録の手順について説
明する。

【００３５】ここでは、選択した範囲の文字を斜体／太
字に変更する操作を１個のジェスチャにマクロ定義する
例について順番に説明する。

【００３６】１．先ず、図３に示すように、ペン２５に
よって範囲を選択するジェスチャ４１を記入すること
で、範囲を選択する。この範囲選択のジェスチャ４１の
範囲を選択すると、図４に示すように、選択された範囲
の各文字は例えば白ぬきの文字となされて表示される。

【００３７】２．次に、図５に示すように、上記ペン２
５によってマクロ定義ボタン３４を押す。このマクロ定
義ボタン３４を押すと、これからもう一度マクロ定義ボ
タン３４が押されるまでの間のメニュー操作が記録され
る。

【００３８】３．次に、図６に示すように、上記メニュ
ーバー３１で〔文字〕のメニュー３５をペン２５によっ
て指定し、さらに当該〔文字〕のメニュー３５の内から
選択された文字を斜体に変更する〔斜体〕のメニュー３
６を選択する。

【００３９】４．これにより、図７に示すように、選択
された範囲の各文字が斜体に変わる。

【００４０】５．次に、図８に示すように、上記〔文
字〕のメニュー３５の内から選択された文字を太字に変
更する〔太字〕のメニュー３７を選択する。

【００４１】６．これにより、図９に示すように、選択
された範囲が太字に変わる。

【００４２】７．次に、マクロ定義ボタン３４をペン２
５によって押す。これでマクロ定義がなされるメニュー
操作が締め切られる。

【００４３】８．その後、図１０に示すように、画面上
にマクロジェスチャ登録用のウインドウ４２が表示され
る。このマクロジェスチャ登録用ウインドウ４２は、ジ
ェスチャの書き込み領域４５と、仮想スイッチである登
録ボタン４３と取消ボタン４４とが表示されるものであ
る。したがって、例えば図１１に示すように、上記書き
込み領域４５に、ペン２５によって登録したいジェスチ
ャ（すなわちマクロジェスチャ）４６を書き込み、この
ジェスチャ４６でよければ図１２に示すように登録ボタ
ン４３をペン２５で押して作業を終わる。なお、登録し
たいジェスチャを他ものにしたいときには取消ボタン４
４を押してから、再び新たなジェスチャを書き込んで登
録ボタン４３を押すようにする。

【００４４】ここで、マクロジェスチャのデータ構造と
しては、例えば図１３に示すようなものを挙げることが
できる。このデータ構造は、ジェスチャ形状データ５３
と、個々の定義済みジェスチャの編集命令（例えばカッ
ト，スペースなど）を順番に複数記録した編集命令列５
２と、全体をマクロジェスチャの情報と結びつけるリン
ク情報５４とからなり、これらが１個のジェスチャマク
ロのデータとなっている。これらジェスチャマクロのデ
ータがマクロジェスチャの定義毎に複数設けられるよう
になる。

【００４５】次に、本実施例の手書き情報処理装置の第
１の具体例における要部の処理のフローチャートを図１
４に示す。この図１４において、ステップＳ１ではジェ
スチャのマクロ定義ボタンが押されたか否かの判断を行
う。当該ステップＳ１でマクロ定義ボタンが押されたと
判断した場合（イエス）はステップＳ３のジェスチャマ
クロ登録処理に進み、マクロ定義ボタンが押されていな
いと判断した場合（ノー）はステップＳ２のその他の処
理に進む。

【００４６】上記ステップＳ３のジェスチャマクロ登録
処理の詳細なフローチャートを図１５に示す。この図１
５において、上記図１４のフローチャートからステップ
Ｓ３に進むと、ステップＳ１１でＲＡＭ１３におけるマ
クロジェスチャ（ジェスチャマクロ）用の一時保存領域
をクリアし、ステップＳ１２に進む。

【００４７】ステップＳ１２では、上記編集命令のため
のカウンタをクリアし、ステップＳ１３に進む。ステッ
プＳ１３ではメニューを使った編集作業を行い、次のス
テップＳ１４では、今行ったメニューに対応する編集命
令を１個、上記保存領域に記録する。

【００４８】ステップＳ１５では、編集命令のカウンタ
の値を１増やし、次のステップＳ１６ではジェスチャの
マクロ定義ボタンが押されたか否かの判断を行う。当該
ステップＳ１６でマクロ定義ボタンが押されていないと
判断した場合（ノー）はステップＳ１３に戻り、マクロ
定義ボタンが押されたと判断した場合（イエス）はステ
ップＳ１７に進む。

【００４９】ステップＳ１７では、マクロジェスチャ登
録用のウインドウを開き、ステップＳ１８ではマクロジ
ェスチャの筆跡を入力する。

【００５０】次のステップＳ１９では登録ボタンが押さ
れたか否かの判断を行う。当該ステップＳ１９で登録ボ
タンが押されたと判断した場合（イエス）はステップＳ
２２に進み、当該ステップＳ２２でマクロジェスチャを
登録する。また、ステップＳ１９で登録ボタンが押され
ていないと判断した場合（ノー）はステップＳ２０に進
む。

【００５１】ステップＳ２０では、取消しボタンが押さ
れたか否かの判断を行う。当該ステップＳ２０で取消し
ボタンが押されていないと判断した場合（ノー）はステ
ップＳ１８に戻り、取消しボタンが押されたと判断した
場合（イエス）はステップＳ２１に進む。

【００５２】ステップＳ２１では入力を取消し、ステッ
プＳ１８に戻る。これにより、再び新たな登録を行う。

【００５３】また、図１６には上述のようにして登録さ
れたマクロジェスチャに応じた実行処理（ジェスチャマ
クロの実行処理）の流れのフローチャートを示す。この
図１６において、ステップＳ３１ではペンからの入力が
単純なジェスチャ（すなわちマクロジェスチャではない
ジェスチャ）か否かを判断し、単純なジェスチャである
と判断した場合（イエス）はステップＳ３３に進む。当
該ステップＳ３３ではそのジェスチャに対応した編集処
理を行った後、処理を終了する。

【００５４】一方、上記ステップＳ３１において、単純
なジェスチャでないと判断した場合（ノー）はステップ
Ｓ３２に進む。当該ステップＳ３２では、マクロジェス
チャ（ジェスチャマクロ）か否かの判断を行う。このス
テップＳ３２でマクロジェスチャであると判断した場合
（イエス）にはステップＳ３４に進み、当該ステップＳ
３４でそのマクロジェスチャに対応する処理を行う。ま
た、ステップＳ３２でマクロジェスチャでないと判断し
た場合（ノー）は処理を終了する。

【００５５】図１７には、上記図１６のステップＳ３４
の処理を具体的に示す。この図１７において、ステップ
Ｓ４１では既に記録されているデータ構造の先頭の〔各
ジェスチャの編集命令〕を得て、これをＡとする。

【００５６】ステップＳ４２では、上記Ａに対応した編
集処理を行い、ステップＳ４３に進む。

【００５７】ステップＳ４３では、筆跡情報がまだ残っ
ているか否かを判断し、残っていないと判断した場合
（ノー）には処理を終了し、残っていると判断した場合
（イエス）にはステップＳ４４に進む。

【００５８】ステップＳ４４では、次の〔各ジェスチャ
の編集命令〕を得て、これをＡとしてステップＳ４２に
戻る。

【００５９】すなわち、図１７の処理では、記録されて
いる個々のジェスチャの示す〔命令〕を順番に再生して
いくような処理を行っている。

【００６０】次に、複数ジェスチャをまとめて１個のマ
クロジェスチャに定義する第２の具体例の場合について
説明する。

【００６１】ジェスチャは、範囲、位置の指定の必要の
有る／無しによって、〔対象の位置のみ指定〕と、〔ソ
ース（操作元）のみ指定〕と、〔ソース及びディスティ
ネーション（移動元）ともに指定〕の３通り考えること
ができる。なお、〔対象の位置のみ指定〕では、例えば
英文文書作成装置（ワードプロセッサ）などの場合に使
用され、ジェスチャを書き込む位置によって文字、単
語、段落が自動的に指定される。

【００６２】〔ソース（操作元）のみ指定〕では、範囲
の指定を行う。対象への操作は例えば範囲指定されてい
る部分に重ねてジェスチャを書き込むメニューを選択す
るなどで行う。〔ソース及びディスティネーション（移
動先）ともに指定〕では、ある範囲（ソース）を指定し
て何か操作を行い、別の位置（ディスティネーション）
に結果を反映させる。

【００６３】これらのうち上の２つ（〔対象の位置のみ
指定〕と〔ソース（操作元）のみ指定〕）については、
前述のメニュー操作を纏めて１個のジェスチャに定義す
るのと同じ方法で対応できるので、ここではソースとデ
ィスティネーションがあるもの（〔ソース及びディステ
ィネーション（移動先）ともに指定〕）を例に挙げて説
明する。

【００６４】図１８には、第２の具体例でのディスプレ
イ１８の画面表示の一例を示す。この図１８の例では、
仮想スイッチとしてのジェスチャマクロ定義ボタン５１
を押すことで、ジェスチャのマクロ定義を開始したり登
録を指定したりする。また、この図１８のメニューバー
３１にはガイド表示欄５２も設けられる。このガイド表
示欄５２には、現在の状態を表示する。なお、この図１
８の編集画面３３には〔ａｂｃｄ・・・・〕の文字が表
示されているとする。この編集画面３３がジェスチャを
使って編集を行う領域である。

【００６５】ここで、先ず、図１９に示すように、マク
ロ定義ボタン５１をペン２５で押す。

【００６６】次に、図２０に示すように、編集画面３３
の文字〔ａｂｃｄｅｆ・・・〕の例えば〔ｃｄｅ〕の上
に、ペン２５によって〔×〕のジェスチャ６１を書く。
このジェスチャ６１は、当該〔×〕がかかった範囲をカ
ットして一旦カットバッファに入れると言うジェスチャ
である。なお、ここでは上記〔×〕のジェスチャ６１の
機能をカットとしているが、後述する表(2) 〜表(5) に
示すカットのジェスチャを用いることもできる。

【００６７】このジェスチャ６１を上記〔ｃｄｅ〕の文
字の上に書くことで、図２１に示すように、上記編集画
面３３の文字は上記〔ａｂｃ〕がカットされた、〔ａｂ
ｆｇｈｉ・・・〕の文字となる。

【００６８】また、図２２に示すようなジェスチャ６２
は、カットバッファに入っている内容を当該ジェスチャ
６２で指定された位置にペーストするというジェスチャ
である。なお、ここでは上記ジェスチャ６２の機能をペ
ーストとしているが、後述する表(2) 〜表(5) に示すペ
ースとのジェスチャを用いることもできる。

【００６９】ここで、先ずジェスチャ６１で任意の文字
をカットすると共にカットバッファに入れ、その後、ジ
ェスチャ６２で位置（例えば〔ｉ〕と〔ｊ〕の間の位
置）を指定すると、図２３に示すように、文字列は〔ａ
ｂｆｇｈｉｃｄｅｊｋｌｍｎｏｐ〕となる。

【００７０】このように、上記ジェスチャ６１及び６２
の２個のジェスチャを連続して操作ことで、文字列の移
動を行うことができるが、それを１個のジェスチャにま
とめる例を以下に示す。

【００７１】１．先ず、前記図１９に示すように、ジェ
スチャのマクロ定義ボタン５１をペン２５で押す。

【００７２】２．これにより、ジェスチャ記録中状態に
入るので、前記図２０のように既存のジェスチャ６１を
使用し、図２１のように文字列の一部を削除する。この
文字列はカットバッファに記憶される。

【００７３】３．次に、図２２のようにペン２５によっ
てジェスチャ６２を例えば文字〔ｉ〕の後ろ（〔ｉ〕と
〔ｊ〕の間）に記入する。これにより、図２３のように
カットバッファに入っている文字列〔ｃｄｅ〕をペース
トする。これで文字列の入替えができる。

【００７４】４．次に、図２４に示すよに、ジェスチャ
マクロ定義ボタン５１をペン２５で押す。これにより一
連のジェスチャの記録が済む。

【００７５】５．ここで、図２５に示すように、上記マ
クロ定義ボタン５１を押すと、マクロジェスチャ登録中
状態になり、ソース（〔ｃｄｅ〕）だった部分の各文字
が例えば白抜きで表示され、図２５に示すように、ディ
スティネーション（〔ｉ〕の後ろ）に記号６４が表示さ
れる。

【００７６】６．次に、図２６に示すように、上記白抜
き文字と記号６４にかかるようにマクロ定義ジェスチャ
６５を入力する。これによって上記白抜き文字にかかっ
た形状（ジェスチャ６５の左の曲線で囲まれた部分）が
ソースの範囲指定に使われることを装置に指示すること
になる。また、記号６４にかかった部分（ジェスチャ６
５の右の端点）はディスティネーション指定であること
を示す。

【００７７】７．その後、図２７に示すように、マクロ
定義ジェスチャの入力終了を示すためにジェスチャマク
ロ定義ボタン５１を押す。なお、マクロ定義のマクロジ
ェスチャは複数画からできていてもかまわないが、ここ
では一画で表現されるとする。

【００７８】８．これにより、図２８に示すように、ソ
ース及びディスティネーションだと認識された文字列が
網点の文字として表示される。また、この文字列の網点
表示への変化と共に、編集画面３３の上にウインドウ６
６を開いて、装置はユーザに対してマクロジェスチャを
登録してもよいかどうか聞いてくる。このとき、ソース
及びディスティネーションの範囲が正しければ、図２９
に示すように、当該ウインドウ６６内の仮想スイッチで
ある登録ボタン６７を押して登録する。また、マクロジ
ェスチャの登録を行わない場合にはウインドウ６６内の
取消しボタン６８を押す。

【００７９】上述したようなマクロジェスチャの登録の
方法を使用することで、図３０に示すように、複数の処
理をひとつにまとめることもできる。

【００８０】すなわち、この図３０の例では、文字列７
０，７１，７２に示すように、例えば、文字列７０に対
して範囲を指定するジェスチャ７３と、文字列７１に対
してコピーを指定するジェスチャ７７と、文字列７２に
対しては移動を示すジェスチャ７４とのような複数の処
理を、文字列７６に示すように範囲を指定してコピーし
た部分を移動するマクロジェスチャ７５にまとめること
ができる。

【００８１】図３１には、第２の具体例におけるマクロ
ジェスチャ登録処理のフローチャートを示す。

【００８２】この図３１において、ステップＳ５１で
は、ジェスチャのマクロ定義ボタンが押されたか否かの
判断を行い、イエスと判断した場合にはステップＳ５３
に、ノーと判断した場合にはステップＳ５２に進む。ス
テップＳ５３ではマクロジェスチャの登録処理を行い、
ステップＳ５２ではその他の処理を行う。なお、この図
３１は前記第１の具体例の図１４のフローチャートと同
じであるが、ステップＳ５３が当該第２の具体例に対応
している。

【００８３】図３２には、上記図３１のステップＳ５３
のより詳細なフローチャートを示す。この図３２におい
て、ステップＳ６１ではジェスチャ記録中の表示を行
い、ステップＳ６２では、ＲＡＭのマクロジェスチャ用
の一時保存領域をクリアする。次のステップＳ６３では
ジェスチャを使った編集作業に入る。

【００８４】ステップＳ６４では、上記ジェスチャの
〔編集命令〕を一時保存領域に追加し、ステップＳ６５
ではジェスチャのマクロ定義ボタンが押されたか否かの
判断を行う。当該ステップＳ６５でノーと判断された場
合にはステップＳ６３に戻り、イエスと判断された場合
にはステップＳ６６に進む。

【００８５】ステップＳ６６では、ジェスチャ登録中の
表示を行い、次のステップＳ６７ではソース、ディステ
ィネーションを白抜き文字と記号６４で表示する。

【００８６】次のステップＳ６８では、マクロジェスチ
ャ用のジェスチャ形状を入力し、認識を行う。ステップ
Ｓ６９では認識したソース，ディスティネーションを網
点文字と記号６４で表示する。

【００８７】ステップＳ７０では登録ボタンが押された
か否かの判断を行い、登録ボタンが押された場合にはス
テップＳ７３で新しいマクロジェスチャ（ジェスチャマ
クロ）としてＲＡＭのマクロ定義領域に登録する。

【００８８】また、ステップＳ７０で登録ボタンが押さ
れていないと判断した場合にはステップＳ７１に進み、
当該ステップＳ７１で取消しボタンが押されたか否かの
判断を行う。当該ステップＳ７１でノーと判断した場合
には、ステップＳ７０に戻り、イエスと判断した場合に
はステップＳ７２に進む。

【００８９】ステップＳ７２では今の入力を取消し、そ
の後ステップＳ６７に戻る。

【００９０】なお、この第２の具体例の場合のデータ構
造については第１の具体例同様であるため説明は省略す
る。

【００９１】次に、図３３には、上記第２の具体例にお
けるマクロジェスチャの実行処理の流れを示す。

【００９２】この図３３において、ステップＳ８１では
ペンからの入力が単純なジェスチャか否かを判断し、単
純なジェスチャであると判断した場合（イエス）はステ
ップＳ８３に進む。当該ステップＳ８３ではそのジェス
チャに対応した編集処理を行った後、処理を終了する。

【００９３】一方、上記ステップＳ８１において、単純
なジェスチャでないと判断した場合（ノー）はステップ
Ｓ８２に進む。当該ステップＳ８２では、マクロジェス
チャか否かの判断を行う。このステップＳ８２でマクロ
ジェスチャであると判断した場合（イエス）にはステッ
プＳ８４に進み、当該ステップＳ８４でそのマクロジェ
スチャに対応する処理を行う。また、ステップＳ８２で
マクロジェスチャでないと判断した場合（ノー）は処理
を終了する。なお、この図３３は前述した第１の具体例
の図１６と同様なものであるが、この図３３では、ステ
ップＳ８４が第２の具体例に対応したものとなる。

【００９４】図３４には、上記図３３のステップＳ８４
の処理を具体的に示す。この図３４において、ステップ
Ｓ９１ではマクロジェスチャ（ジェスチャマクロ）の筆
跡を解析してソースとディスティネーションを決める。
次のステップＳ９２では、先頭の〔各ジェスチャの編集
命令〕を得て、これをＡとする。

【００９５】ステップＳ９３では、上記Ａに対応した編
集処理を行い、ステップＳ９４に進む。

【００９６】ステップＳ９４では、筆跡情報がまだ残っ
ているか否かを判断し、残っていないと判断した場合
（ノー）には処理を終了し、残っていると判断した場合
（イエス）にはステップＳ９５に進む。

【００９７】ステップＳ９５では、次の〔各ジェスチャ
の編集命令〕を得て、これをＡとしてステップＳ４２に
戻る。

【００９８】すなわち、図３４の処理でも、記録されて
いる個々のジェスチャの示す〔命令〕を順番に再生して
いくような処理を行っている。

【００９９】図３５には、本実施例の手書き情報処理装
置の外観を示す。すなわち、本実施例の装置は、各構成
要素を内蔵する筐体２９と、上記液晶ディスプレイ１８
及びタブレット２６とからなり、ペン２５によってタブ
レット２６上に記入することで、手書き入力可能となっ
ている。

【０１００】なお、上述した第１，第２の具体例では指
定された範囲の文字列の白抜き文字としているが、これ
に限らず白抜き文字に斜線をかけた文字とすることもで
き、この指定された範囲を明示できるものであればどの
ようなものであってもよい。

【０１０１】なお、本発明実施例では、上記マクロジェ
スチャの他の通常のジェスチャとして、特に日本語に対
応させて好適な例えば表２の表(2) 〜表５の表(5) に示
すようなジェスチャを用いることができる。また、表２
の(2) には基本となるジェスチャを示し、表３の表(3)
には文字列操作のジェスチャを、表４の表(4) には高速
操作に対応するジェスチャを、表５の表(5) には一括実
行型編集で使用するジェスチャを示している。

【０１０２】

【表２】

【０１０３】

【表３】

【０１０４】

【表４】

【０１０５】

【表５】

【０１０６】以下、上記表(2) 〜表(5) に示した各ジェ
スチャの形状と機能の対応における各ジェスチャの意味
について簡単に説明する。

【０１０７】先ず、“ヘルプ”は、操作法，補助的情報
等の情報を提示する。このヘルプによれば、説明を提示
するための対話ウインドウが自動的に開き、使用者はウ
インドウ内のメニューを選択して所望の情報を閲覧す
る。

【０１０８】“取り消し”では、直前に行なった操作あ
るいは筆跡の下に書き込まれているジェスチャの処理を
取り消し、操作を行なう前の状態に戻す。２度続けて取
り消しを行なった場合、さらに前の操作を取り消す（多
重取り消し) 動作と、取り消し操作自身を取り消す（ト
グル取り消し) 動作の二種類が考えられる。

【０１０９】“開く”では、筆跡の下にあるオブジェク
トを開く。この“開く”とは、オブジェクト内の対象を
操作可能とする機能のことであり、例えば、ファイルを
開くとエディタが起動し、アプリケーションソフトを開
くとアプリケーションソフトが起動し、プリンタアイコ
ンを開くとプリンタの機種，印刷待ち状態等が表示さ
れ、印刷する対象の入力を促す。

【０１１０】“位置”／“オブジェクト指定”では、指
示された位置を指定位置として設定、あるいは指示され
たオブジェクトを指定オブジェクトとして追加設定す
る。位置指定操作に入力が限定されている場合を除き、
付近にオブジェクトがあればオブジェクト指定操作とみ
なされる。オブジェクトが指定された場合は直前までに
指定されていたオブジェクトに追加する形で指定され
る。この追加操作は指定されたオブジェクトに対して何
らかの操作が施されるまで継続する。また、既に指定さ
れているオブジェクトを指示した場合はそのオブジェク
トを指定オブジェクトの中から除外する。

【０１１１】“範囲指定”では、筆跡の角の部分から２
本の線分によって区切られる９０度分の方向を指定領域
とする。すなわち例えば（〔、すなわち横書き用の鉤括
弧）の形状のジェスチャは角の部分から右下方向を指定
領域とする。さらにもうひとつの（〕）型のジェスチャ
と一組になって矩形範囲の指定となる。また、縦書き用
の鉤括弧の型のジェスチャも一組でやはり矩形範囲の指
定となる。

【０１１２】“方向”では、筆跡の開始点の下にあるオ
ブジェクトを筆跡が払った方向に送る。当該ジェスチャ
では２次元平面上の実際の方向だけでなく上下，前後等
の言葉で表される抽象的な方向の双方を指定することが
できる。抽象的な方向指定における実際の動作は対象と
なる（筆跡の開始点の下にある）オブジェクトによって
大きく異なるが、基本的には順序をもつオブジェクトに
対してひとつ隣のオブジェクトに移る操作を意味する。

【０１１３】“消す”では、筆跡の下が指定領域であれ
ば現在指定されている領域を全てクリアし、筆跡の下が
指定されているオブジェクトであれば現在指定されてい
るオブジェクトを全て消去し、筆跡の下が指定状態でな
ければ筆跡の下にあるオブジェクトを消去する。致命的
な削除操作となるような場合は確認を求める。また、オ
ブジェクトを事前に指定せずに消去する場合は、ジェス
チャのサイズ，外形と附近のオブジェクトのサイズ，外
形を比較して消去するオブジェクトを決定する。

【０１１４】“移動”のジェスチャでは、現在指定され
ている領域，オブジェクトを移動する。指定がなければ
筆跡の開始点の下にあるオブジェクトを移動する。移動
先は筆跡の終了点とする。移動先に特殊なオブジェクト
が存在する場合は、移動が行なわれないことがある。例
えばファイルのアイコンをプリンタのアイコンの上まで
移動した場合、移動したファイルの印刷を行なう指示と
して解釈され、移動は実際には行なわれずファイルのア
イコンは元の位置に戻る。

【０１１５】“引き出し線”のジェスチャでは、現在指
定されている領域，オブジェクトに設定されている情報
を参照あるいは設定する。指定がなければ筆跡の開始点
の下にあるオブジェクトを対象とする。筆跡の終了点付
近に情報の参照，入力用のウインドウを自動的に開く。

【０１１６】“変換”のジェスチャでは、現在指定され
ているオブジェクトに対して変換操作を施す。オブジェ
クトが指定されていない場合は筆跡の下にあるオブジェ
クトが対象となる。アンダーライン，傍線の先頭や末尾
に変換のための形状を組み合わせた短縮型の入力が可能
である。変換動作は、対象となるオブジェクトによって
大きく異なるが、基本的な意味は変換機能の起動と第一
候補の表示である。

【０１１７】“挿入”のジェスチャでは、筆跡の尖った
部分（挿入指示部分）にオブジェクトを挿入する。筆跡
で指定された位置に挿入のためのウインドウを開く。

【０１１８】“複写”のジェスチャでは、現在指定され
ている領域，オブジェクトを複写する。指定がなければ
筆跡の開始点の下にあるオブジェクトを複写する。複写
先は筆跡の終了点となる。複写先に特殊なオブジェクト
が存在する場合は複写が行なわれないことがある。

【０１１９】“カット”のジェスチャでは、筆跡の書き
だし部分（あるいはその極近傍）にあるオブジェクトを
カットバッファと呼ばれる特殊な領域に移動する。指定
操作が事前に行なわれていた場合は指定されたオブジェ
クトをカットバッファに移動する。カットバッファとは
作業帳のようなオブジェクトであり、ＯＳ（基本ソフ
ト）あるいはアプリケーションソフトが用意する。カッ
トバッファに移動されたオブジェクトは、ペーストと呼
ばれる操作によってアプリケーションソフトに戻され
る。これによってページをまたいだ移動などを効率よく
行なうことができる。また、オブジェクトを消去する目
的でカット利用することもできる。ＯＳによってカット
バッファの機能が実現されている場合は、アプリケーシ
ョンソフト同士がカットバッファを共有することになる
ので、それを仲介してアプリケーションソフト同士のオ
ブジェクトの受渡しが可能になる。

【０１２０】“コピー”のジェスチャでは、筆跡の書き
だしのカギの先端部分（あるいはそのごく近傍）にある
オブジェクトをカットバッファに複写する。指定操作が
事前に行なわれていた場合は指定されたオブジェクトを
カットバッファに複写する。ペースト操作と組み合わせ
て、離れた場所への複写や連続した複写に利用する。

【０１２１】“ペースト”のジェスチャでは、筆跡の書
きだしのカギの先端部分にカットバッファにあるオブジ
ェクトを複写する。カギの先端部分に文字列オブジェク
トが存在し、カットバッファのオブジェクトも文字列で
ある場合は文字列挿入が行なわれる。いずれの場合もカ
ットバッファの中身には影響を及ぼさない。指定操作が
事前に行なわれていた場合は指定が取り消される。カッ
ト，コピー操作と組み合わせて、離れた場所への移動，
複写，連続複写などに利用する。

【０１２２】“入力終了指示”のジェスチャでは、現在
行なっている入力，選択等の操作を終了し、処理を実行
する。直前の処理の再実行，一括実行型編集時の編集の
実行，引出し線による詳細設定など終了の契機がはっき
りしない入力操作の終了に用いられる。処理を先に指定
して後から対象となるオブジェクトを指定する場合も指
定終了の契機を伝えるために使用する。また、処理が指
示されていない場合は指定されたオブジェクトに対して
直前の処理を実行する。

【０１２３】“空白”のジェスチャでは、ペンを下ろし
た点の前の文字と後ろの文字との間に空白文字を挿入す
る。

【０１２４】“タブ”のジェスチャでは、ペンを下ろし
た点の前の文字と後ろの文字との間にタブ文字を挿入す
る。

【０１２５】“改行”のジェスチャでは、筆跡によって
区切られた部分で文字列を改行する。

【０１２６】“接続”のジェスチャでは、筆跡の前後の
文字列オブジェクトを接続する。

【０１２７】“ジェスチャ座標データ切替え”のジェス
チャでは、ジェスチャとして認識された筆跡を座標デー
タに切替える。或いは座標データとして認識された筆跡
をジェスチャとして認識する。

【０１２８】

【発明の効果】上述したように、本発明の手書き情報処
理装置においては、メニューを組み合わせた一連のメニ
ュー操作及び／又はジェスチャを組み合わせた一連のジ
ェスチャをマクロジェスチャとして登録することで、こ
のマクロジェスチャによって複数の機能を一度に実行す
ることができる。したがって、複雑な機能を簡単に指示
すること可能となり、操作性が向上するようになる。

【図面の簡単な説明】

【図１】本発明実施例の手書き情報処理装置の概略構成
を示すブロック回路図である。

【図２】第１の具体例のマクロジェスチャ定義を説明す
る際の画面表示の例を示す図である。

【図３】第１の具体例のマクロジェスチャ定義の手順を
説明するための図であり、範囲を指定する様子を説明す
るための図である。

【図４】第１の具体例のマクロジェスチャ定義の手順を
説明するための図であり、指定された範囲を示す図であ
る。

【図５】第１の具体例のマクロジェスチャ定義の手順を
説明するための図であり、マクロ定義ボタンを押してい
る状態を示す図である。

【図６】第１の具体例のマクロジェスチャ定義の手順を
説明するための図であり、〔文字〕メニューの〔斜体〕
メニューを選択している様子を示す図である。

【図７】第１の具体例のマクロジェスチャ定義の手順を
説明するための図であり、指定された範囲の文字が斜体
となった様子を示す図である。

【図８】第１の具体例のマクロジェスチャ定義の手順を
説明するための図であり、〔文字〕のメニューの〔太
字〕のメニューを選択している様子を示す図である。

【図９】第１の具体例のマクロジェスチャ定義の手順を
説明するための図であり、指定された範囲の文字が太字
となった様子を示す図である。

【図１０】第１の具体例のマクロジェスチャ定義の手順
を説明するための図であり、マクロジェスチャを登録す
るウインドウが開かれた状態を示す図である。

【図１１】第１の具体例のマクロジェスチャ定義の手順
を説明するための図であり、マクロジェスチャを記入し
ている様子を示す図である。

【図１２】第１の具体例のマクロジェスチャ定義の手順
を説明するための図であり、マクロジェスチャを登録す
るための登録ボタンを押している状態を示す図である。

【図１３】第１の具体例及び第２の具体例のマクロジェ
スチャのデータ構造の例を説明するための図である。

【図１４】第１の具体例のマクロジェスチャ定義の処理
の流れを示すフローチャートである。

【図１５】図１４のフローチャートのステップＳ３を、
より詳細に示すフローチャートである。

【図１６】第１の具体例のマクロジェスチャの実行処理
の流れを示すフローチャートである。

【図１７】図１６のフローチャートのステップＳ３４
を、より詳細に示すフローチャートである。

【図１８】第２の具体例のマクロジェスチャ定義を説明
する際の画面表示の例を示す図である。

【図１９】第２の具体例のマクロジェスチャ定義の手順
を説明するための図であり、ジェスチャマクロ定義ボタ
ンを押している状態を示す図である。

【図２０】第２の具体例のマクロジェスチャ定義の手順
を説明するための図であり、カットのジェスチャを記入
している様子を示す図である。

【図２１】第２の具体例のマクロジェスチャ定義の手順
を説明するための図であり、〔ｃｄｅ〕の文字がカット
された様子を示す図である。

【図２２】第２の具体例のマクロジェスチャ定義の手順
を説明するための図であり、ペーストのジェスチャを記
入している様子を選択している様子を示す図である。

【図２３】第２の具体例のマクロジェスチャ定義の手順
を説明するための図であり、カットとディスティネーシ
ョンの操作後の文字列の様子を示す図である。

【図２４】第２の具体例のマクロジェスチャ定義の手順
を説明するための図であり、図２３の表示画面において
ジェスチャマクロ定義ボタンを押した状態を示す図であ
る。

【図２５】第２の具体例のマクロジェスチャ定義の手順
を説明するための図であり、カットされる文字列とディ
スティネーションの位置を示す図である。

【図２６】第２の具体例のマクロジェスチャ定義の手順
を説明するための図であり、マクロジェスチャを記入し
ている様子を示す図である。

【図２７】第２の具体例のマクロジェスチャ定義の手順
を説明するための図であり、記入されたマクロジェスチ
ャを登録するためにジェスチャマクロ定義ボタンを押し
ている状態を示す図である。

【図２８】第２の具体例のマクロジェスチャ定義の手順
を説明するための図であり、マクロジェスチャを登録す
る際のウインドウが表示された表示画面を示す図であ
る。

【図２９】第２の具体例のマクロジェスチャ定義の手順
を説明するための図であり、マクロジェスチャを登録す
るために登録ボタンを押している状態を示す図である。

【図３０】第２の具体例のマクロジェスチャ定義の他の
登録例を示す図である。

【図３１】第２の具体例のマクロジェスチャ定義の処理
の流れを示すフローチャートである。

【図３２】図３１のフローチャートのステップＳ５３
を、より詳細に示すフローチャートである。

【図３３】第２の具体例のマクロジェスチャの実行処理
の流れを示すフローチャートである。

【図３４】図３３のフローチャートのステップＳ８４
を、より詳細に示すフローチャートである。

【図３５】本実施例の手書き情報処理装置の概略的な外
観を示す外観斜視図である。

【図３６】従来のジェスチャ及びその機能を説明するた
めの図である。

【符号の説明】

１０・・・・・演算部１１・・・・・ＣＰＵ１２・・・・・記憶部１３・・・・・ＲＡＭ１４・・・・・ＲＯＭ１５・・・・・出力部１６・・・・・Ｖ−ＲＡＭ１７・・・・・ＬＣＤドライバ１８・・・・・液晶ディスプレイ２３・・・・・入力部２４・・・・・タブレットドライバ２５・・・・・ペン２６・・・・・タブレット

Claims

【特許請求の範囲】

【請求項１】テキスト又は図形の処理に関する一連の
メニューと上記メニューに対応した処理内容を記憶する
第１の記憶手段と、上記メニューを組み合わせた一連のメニュー操作をマク
ロジェスチャとして登録して記憶する第２の記憶手段
と、上記第２の記憶手段に記憶された一連のメニュー操作に
対応する上記マクロジェスチャを認識するマクロジェス
チャ認識手段と、上記マクロジェスチャに対応する一連のメニュー操作に
対応する処理を実行する実行手段とを有し、上記マクロジェスチャが描画されると上記テキスト又は
図形の処理に関する一連のメニューに対応する処理を実
行することを特徴とする手書き情報処理装置。
【請求項２】テキスト又は図形の処理に関する一連の
ジェスチャと上記ジェスチャに対応した処理内容を記憶
する第１の記憶手段と、上記ジェスチャを組み合わせた一連のジェスチャをマク
ロジェスチャとして登録して記憶する第２の記憶手段
と、上記第２の記憶手段に記憶された一連のジェスチャに対
応する上記マクロジェスチャを認識するマクロジェスチ
ャ認識手段と、上記マクロジェスチャに対応する一連のジェスチャに対
応する処理を実行する実行手段とを有し、上記マクロジェスチャが描画されると上記テキスト又は
図形に関する一連のジェスチャに対応する処理を実行す
ることを特徴とする手書き情報処理装置。
【請求項３】テキスト又は図形の処理に関する一連の
メニューの幾つかを組み合わせた一連のメニュー操作及
び／又はテキスト又は図形の処理に関する一連のジェス
チャの幾つかを組み合わせた一連のジェスチャを自動記
録する記録手段を設け、上記組み合わせた一連のメニュー操作及び／又は一連の
ジェスチャの自動記録が指示されると当該一連のメニュ
ー操作及び／又は一連のジェスチャを自動記録すること
を特徴とする請求項１又は２記載の手書き情報処理装
置。
【請求項４】上記自動記録した一連のメニュー操作及
び／又は一連のジェスチャを編集する編集手段を設け、上記自動記録した一連のメニュー操作及び／又は一連の
ジェスチャの中から所定操作に対応するコマンドを使用
者に指示されると削除し、所定のメニュー操作及び／又
は所定のジェスチャに対応するコマンドを使用者の指示
により追加することにより編集して、上記編集された一
連のコマンドをマクロジェスチャとして登録して実行す
ることを特徴とする請求項３記載の手書き情報処理装
置。