JP2004517398A - Stylus computer - Google Patents

Stylus computer Download PDF

Info

Publication number
JP2004517398A
JP2004517398A JP2002553607A JP2002553607A JP2004517398A JP 2004517398 A JP2004517398 A JP 2004517398A JP 2002553607 A JP2002553607 A JP 2002553607A JP 2002553607 A JP2002553607 A JP 2002553607A JP 2004517398 A JP2004517398 A JP 2004517398A
Authority
JP
Japan
Prior art keywords
writing
mouse
stylus
user
present
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002553607A
Other languages
Japanese (ja)
Other versions
JP2004517398A5 (en
Inventor
ガーサビアン、フィルーツ
Original Assignee
ガーサビアン、フィルーツ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ガーサビアン、フィルーツ filed Critical ガーサビアン、フィルーツ
Publication of JP2004517398A publication Critical patent/JP2004517398A/en
Publication of JP2004517398A5 publication Critical patent/JP2004517398A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/043—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves
    • G06F3/0433—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves in which the acoustic waves are either generated by a movable member and propagated within a surface layer or propagated within a surface layer and captured by a movable member
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/17—Image acquisition using hand-held instruments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/30—Writer recognition; Reading and verifying signatures
    • G06V40/37—Writer recognition; Reading and verifying signatures based only on signature signals such as velocity or pressure, e.g. dynamic signature recognition

Abstract

本発明は、ポインティング・デバイスの筆記チップに向けられており、当該チップは、筆記表面上における筆記チップを用いた筆記の間に、筆記表面と筆記チップとの接触が、異なる方向に応じて異なるサウンドを生成するように構造化された表面を備える。少なくとも筆記チップによって生成されたサウンドの認識を基礎とする手書き認識システムが提供され、当該チップは、筆記表面上における筆記チップを用いた筆記の間に、筆記表面と筆記チップとの接触が、認識システムによる使用のために、異なる方向に応じて異なるサウンドを生成するように構造化された表面を備える。SUMMARY OF THE INVENTION The present invention is directed to a writing chip for a pointing device, wherein during writing with the writing chip on the writing surface, the contact between the writing surface and the writing chip varies according to different directions. It comprises a surface structured to produce sound. A handwriting recognition system is provided that is based at least on the recognition of sounds generated by a writing chip, wherein the chip recognizes contact between the writing surface and the writing chip during writing with the writing chip on the writing surface. It comprises a surface structured to produce different sounds according to different directions for use by the system.

Description

【０００１】
（発明の分野）
本発明は、容易、自然、かつ迅速なフル・テキストならびに機能の入力を提供することが可能な手書きサウンド認識システムを基礎とするデータ入力システムおよび方法に関する。また本発明は、モバイルならびに据え置き型電子デバイス用の、データの入力および操作のためのコンピュータ・マウス・システムにも関する。さらにこれは、上記のデータ入力方法および手段を使用するスタイラス‐タイプのコンピュータ・デバイスに関する。
【０００２】
（発明の背景）
今日のテクノロジの向上にとって、小型化は重要な要素であり、それによってサイズのみが理由で実現できなかった多くのデバイスの製造が可能になる。実際、まったくの本質において、たとえばポータブル・コンピュータならびにセルラ電話は、そのサイズが第１の特徴となる。
【０００３】
しかしながら、いくつかの分野においては、基本的には人間が使用するという制限から小型化の発展に多くの障害が存在する。たとえば、財布の中に収まるポータブル・コンピュータがあると望ましいと考えられるが、その種のコンピュータも、人間とコンピュータのインタラクションを可能にする大きな入力デバイスなくしては役立たない。言い換えると、複雑な小型コンピュータならびにセルラ電話（現在は、インターネット、ｅ‐メール、ｍ‐コマース、ショート・メッセージ・サービス等にも使用されている）、ノートブック、携帯情報端末（ＰＤＡ）デバイス等のデバイスは、ユーザによる電話番号の入力、ｅ‐メールの送信もしくは文字の書き込みといったことを可能にするために、いずれもキーボード、数字パッドあるいはそのほかの入力ファシリティを必要とする。また、入力されたデータあるいは受信されたデータを表示するために好都合なＬＣＤディスプレイも重要な特徴である。このように、小型化のテクノロジに達成可能な進歩があれば、その一方に、特定のデバイスの真に小型化された状態の実現を妨げる人的要因が存在する。
【０００４】
よく知られているように、成功している技術製品の主要な特徴は、その容易な操作にある。上記の機器ならびに類似デバイスの場合であれば、迅速かつ容易な、また最も重要なことであるが、自然な、フル・テキストならびに機能の入力システムが決定的となる。また、標準テキスト行の幅の表示デバイスも価値が高い。
【０００５】
小さい通信デバイスを使用し、いかにして迅速かつ容易にテキストならびに機能を入力するかという、この基本的なマン‐マシン‐インターフェースの問題を解決するための提案もいくつかなされている。
【０００６】
電話機タイプのキーパッドは、小型エレクトロニクスならびにテレコミュニケーション機器用のもっとも一般的な入力デバイスである。モバイルならびに通常の電話、ＰＤＡ、ノートブック、ラップトップ、ファクシミリ、ＴＶその他の電子デバイスのリモート・コントロール、カメラといった多くの電子デバイスにもこの種のキーパッドが組み込まれている。このキーパッドは、通常、１２のキーを有しているが、テキストあるいはメッセージの書き込みに使用されるキャラクタならびに機能の数は、少なくともその７倍はある。たとえば、コンピュータのキーボードは、８０を超えるキーを有し、それらのキーの一部は、２つのキャラクタ、記号もしくは機能によって兼用されている。
【０００７】
キーの数が不充分であることに起因する電話キーパッド（たとえば、モバイル電話用キーパッド）の制限から、標準電話キーパッドの各キーには、キャラクタのグループならびに通常は１つの数字が割り当てられている。インターネットの使用、あるいは短いメッセージの入力であっても、多くの複雑性がユーザを拘束する。
【０００８】
この問題の１つの解決策は、単一のキーを複数回にわたって押すことによりそのキーによって表される文字もしくは記号の中から１つを選択することである。現在は、ほとんどのモバイル電話キーパッドが、このシステムを使用している。これは、時間を要する方法であり、ユーザにフラストレーションを起こさせる。
【０００９】
このシステムを改善するために、単語を明確にするソフトウエア・プロダクツが開発されている。これは、辞書データベースおよび言語モデルを使用し、押されたキーに応じて可能性のある単語をスキャンして呈示する。続いてユーザが、呈示された可能性の中から希望する単語を選択する。この種のアプローチには、語彙外の単語、あるいはユーザに対する単語の選択の強要等の多くの問題が関係する。それに加えて、ここでも数字もしくは個別キャラクタの入力に時間を要することになる。
【００１０】
この問題を解決するために外付けの小型キーボードも製造されているが、それによりユーザには２つの異なる機器の携行が強要され、容易な可搬性という小型エレクトロニクス製品の基本的な理念と衝突する。
【００１１】
その種の限界の克服を試みた最近のテクノロジの１つに、音声／言葉認識テクノロジがある。音声認識は、個人の音声に含まれる１ないしは複数の音声パターンを、対応するコンピュータ入力コマンド、単語または機能として認識する処理である。たとえばユーザは、キーボード上において文字をタイプする代わりにその文字を声に出し、認識エンジンが、その文字の音声パターンと、その文字に対応するコンピュータ入力キャラクタを関連付けする。つまり、ユーザの音声がすべての入力を提供することになるため、各個人は、入力デバイスを用いることなく、この方法に従ってデバイスを操作することができる。残念ながら、個人の音声の有する多くの複雑な側面を考慮すると、入力デバイスに完全に代わることができる充分なレベルで正確に音声パターンの認識を行う認識デバイスはまだ存在しない。
【００１２】
それに加えて『Ｂ』と『Ｐ』、あるいは『Ｄ』と『Ｔ』といった、スピーチ・エンジンにとって混同しやすい文字もいくつか存在する。ただしこれは、必ずしもこの種のエンジンの欠陥ではなく、これらは、人間にとっても混同しやすい文字である。次に、音声／言葉認識システムに関係する問題点ならびに欠点をリストする。
‐単一言語のみ、ほとんどの場合は英語
‐単一個人の音声のみを認識
‐外部ノイズの擾乱（特に、モバイル・テレコミュニケーション機器の使用時）により認識精度が低下
‐訂正の不便から小型ディスプレイに不向き（特に、モバイル電話等の小型ＬＣＤ付きの機器の使用時）
‐単一の単語を声に出したとき（連続しない言葉）に多くの誤りを発生
‐類音語（例：ｔｗｏ、ｔｏ、ｔｏｏ）
‐数字を記述する場合のユーザの意図が予測不可（例：ｔｗｅｎｔｙ ｆｏｕｒ、２４）
‐数字と記号が混在する場合のユーザの意図が予測不可（例：ｓｉｘ ｂｙ ｆｏｕｒ、６ ｂｙ ４、６×４）
‐文字の間の区別が困難（例：Ｂ、Ｐ）
‐通常は１シラブルで多数の文字が発音されて差の認識が困難（例：『ｗｒｉｔｅ』、『ｒｉｇｈｔ』）。
【００１３】
最も重要なことは、プライバシーの問題であり、このシステムは、たとえば公共の場での使用に適していないと考えられる。文字、単語、あるいはコマンドを声に出すことは、孤立したシステムではない。
【００１４】
もう１つのデータ入力方法は、手書き文字認識システムである。この方法については、各種のアプローチを考えることができる。
【００１５】
（ａ）ドキュメントが手書きされた後に、光学リーダ等の手段によって読み取られディジタル化される（たとえば、遅延手順）。個人ごとに完全に異なる手書き図形に頼ることから、このシステムを介した個人の手書き文字認識は極めて複雑になる。この方法を基礎とした適切な認識システムはまだ存在しない。
【００１６】
（ｂ）ＰＤＡデバイス、光学リーダ等のリアルタイム手書き文字認識手段が、手書きによる図形、その図形が書かれるときのペンの方向、図形の中の角度、図形の中の各ポイントが書かれたタイミング等の複数の入力パラメータを即座に処理する。
【００１７】
文字および記号がしばしば単純な図形となり、多くの場合には類似して見えることから、認識エンジンによる認識誤りを生じることがある。そのため、文字を書く上でのいくつかの制限がユーザに課せられている。
【００１８】
このシステムを使用するもっともよく知られた機器は、パーム‐タイプのＰＤＡデバイスである。このデバイスは、ディジタイザ・システムおよび傷つきやすい筆記表面を有している。その表面上に図形を書くための対応のペンも提供される。またディジタル化の後に入力されたデータを表示するための小型のスクリーンも備えられている。通常、１つの記号を筆記する手順は、筆記表面から最後までペンを離すことなく行われなければならない。テキストは、文字ごとに離して書かれる必要がある。次に、このシステムの欠点をリストする。
‐傷つきやすい筆記表面を持ち運ぶことが必要。
‐ＰＤＡの筆記表面が小さく、ユーザは、そこからはみ出ないように注意しなければならないことから筆記が遅くなる。
‐ＰＤＡおよび対応するペンを携行しなければならず、加えて、これはより重要なことであるが、両手を使用する必要があり、モバイル環境に好都合でない
‐ディスプレイのサイズが小さい。
‐ＰＤＡ自体がかさばり、たとえばユーザのポケット内に入れて常時持ち歩くことができない。
【００１９】
小型化が重要視されるにもかかわらず、ポータブルおよびそのほかの電子デバイスは、セキュリティならびに効率といった多くの問題を抱えている。たとえば、セルラ電話を置き忘れたか、あるいはなくした者は、窃盗犯もしくは他者がその電話を不法に使用することによって料金が発生する前に、直ちに通信サービスを打ち切らなければならない。この種の権限のない使用を防止するための周知の方法の１つに、セルラ電話もしくはそのほかの暗号システムを有するデバイスのロックがある。このシステムは、多くの場合に有効であるが、真のオーナにとっては、発信に先行する冗長なプロセスを経てから電話をアクティブにしなければならないことから、面倒であり、非効率である。同様に、多くの電子デバイスの権限のない使用を防止する単純な方法はなく、暗号システムを伴うデバイスをロックするか、あるいはそのほかの時間を要する不便なプロセスを最初に伴うことになる。
【００２０】
セキュリティ問題は、たとえば、ユーザのクレジット・カード番号もしくは銀行口座情報を必要とするｅ‐コマースあるいはバンキング運用等を目的として機器が使用されるときには一層不可欠なものとなる。
【００２１】
このように、今必要とされているものは、上記のユーザを締め付けるジレンマを解決し、小型化が、その真の可能性を継続的に実現していくことができるテクノロジである。さらに、この種のテクノロジは、特にデバイスならびに情報の権限のない使用を防止することが可能な、従来技術に比較して、より安全であり、かつ効果的な手段を提供する必要がある。
【００２２】
本発明は、データ入力を必要とする電子機器（特に、モバイル通信機器）に、慣れ親しんだ、迅速であり、かつ容易なデータ入力システムを提供することを目的とする。また本発明は、孤立した、迅速かつ容易なデータ入力および操作機能を有し、ユーザが、たとえばＡ３／Ａ４用紙幅のディスプレイ上で作業することを可能にする大型ディスプレイを備えた、日常的であり、かつ携行容易なスタイラス‐タイプのコンピュータもしくはＰＤＡをユーザに提供することを別の目的とする。以下に説明するシステム、デバイス、および方法は、独立に使用されてもよく、またほかの通信デバイスならびにシステムとともに使用されるものとしてもよい。
【００２３】
（図面の簡単な説明）
図面においては、複数の観点を通じて、類似する要素には類似する参照記号が割り当てられている。
Ｆｉｇ．１ａは、ペンおよび筆記表面を示した説明図である。
Ｆｉｇ．１ｂは、筆記の間におけるペンの方向の例を示した説明図である。
Ｆｉｇ．２ａは、２つの方向の線を筆記しているペンを示した説明図である。
Ｆｉｇ．２ｂは、上記の線を筆記するときのペンと筆記表面の接触によって生成される仮想的なサウンドの波形を示した説明図である。
Ｆｉｇ．３ａは、筆記表面上における筆記時に、異なる方向ごとに異なるサウンドを生成する望ましい筆記具のチップを示した説明図である。
Ｆｉｇ．３ｂは、上記の異なるサウンドを生成するための筆記具のチップの表面構造を示した説明図である。
Ｆｉｇ．３ｃは、方向の異なる２本の類似の線を描画する間に、ポインティング・デバイスの構造化されたチップによって生成される２つの異なるサウンド波形を示した説明図である。
Ｆｉｇ．３ｄは、Ｆｉｇ．３ｂに示されるようなペン先によって筆記された記号、および筆記表面上におけるその記号の筆記の間に前記ペン先によって生成されるサウンドの波形を示した説明図である。
Ｆｉｇ．４ａは、筆記表面上における異なる方向のストロークの間の異なるサウンドの生成を向上させた各種形状の筆記チップの例を示した説明図である。
Ｆｉｇ．４ｂは、筆記表面上における異なる方向のストロークの間の異なるサウンドの生成を向上させた各種テクスチャの筆記チップの例を示した説明図である。
Ｆｉｇ．４ｃは、筆記表面上における異なる方向のストロークの間の異なるサウンドの生成を向上させた各種形状および各種テクスチャの組み合わせによる筆記チップの例を示した説明図である。
Ｆｉｇ．４ｄは、ユーザが筆記を行う間の筆記表面に対する筆記具の角度を示した説明図である。
Ｆｉｇ．４ｅは、筆記の間における円錐（たとえば凸状）のペン先と筆記表面の接触エリアを示した説明図である。
Ｆｉｇ．４ｆは、ペン軸のポジションに対する２つの異なる回転における、筆記表面上のペン先の２つの異なる接触エリアを示した正面図である。
Ｆｉｇ．４ｇは、別のポインティング・デバイスの構造化されたチップ形状を示した側面図ならびに正面図である。
Ｆｉｇ．５ａは、ペンによって生成された手書き文字図形を示した説明図である。
Ｆｉｇ．５ｂは、その文字を筆記する間の、前記ペンと筆記表面の接触によって生成されたサウンドの仮想的なグラフを示した説明図である。
Ｆｉｇ．５ｃは、その文字を声に出したときの仮想的な音声グラフを示した説明図である。
Ｆｉｇ．６は、英字および記号を表すキーを備える標準的なコンピュータ・キーボードを示した説明図である。
Ｆｉｇ．６ａは、類似する手書きキャラクタを示した説明図である。
Ｆｉｇ．６ｂは、印刷および手書きによる英語の大文字ならびに小文字、および類似の記号を示した説明図である。
Ｆｉｇ．６ｃは、類似する３つのキャラクタの手書き方法、および認識システムによる区別の方法を示した説明図である。
Ｆｉｇ．６ｄは、さらに別の類似の手書きキャラクタおよび区別を可能にするための筆記方法の提案を示した説明図である。
Ｆｉｇ．６ｅは、類似する数字およびキャラクタを示した説明図である。
Ｆｉｇ．６ｆ〜６ｊは、カテゴリごとの印刷および手書きによるキャラクタ、および認識システムがそれらを容易に認識できるように、それらを筆記する間に守るべき方向の提案を示した説明図である。
Ｆｉｇ．６ｋは、キーボードにプリントされているすべてのキャラクタ、および認識システムがそれらを容易に認識できるように、それらを筆記する間に守るべき方向の提案を示した説明図である。
Ｆｉｇ．７は、本発明の一実施態様に従った手書き認識処理を示したブロック図である。
Ｆｉｇ．７ａは、入力システムとして手書きサウンド認識システムを使用するスタイラス‐タイプのコンピュータを示した説明図である。
Ｆｉｇ．７ｂは、追加の特徴が備えられた前記スタイラス‐タイプのコンピュータ用のペン‐タイプのチップの正面図である。
Ｆｉｇ．７ｃは、本発明の一実施態様に従ったスタイラス‐タイプのコンピュータを示した説明図である。
Ｆｉｇ．７ｄは、本発明の一実施態様に従ったスタイラス‐タイプのコンピュータの筆記チップの正面図である。
Ｆｉｇ．７ｅは、筆記の間における筆記表面上のポインティング・チップの接触のサウンドを増幅するための指数関数曲線形状を有する手段を備えたスタイラス‐タイプのコンピュータを示した説明図である。
Ｆｉｇ．７ｆは、筆記の間における筆記表面上のポインティング・チップの接触のサウンドを増幅するための共振チャンバを備えたスタイラス‐タイプのコンピュータを示した説明図である。
Ｆｉｇ．８ａ〜８ｄは、本発明の一実施態様に従ったスタイラス‐タイプのコンピュータ、およびライティング・チップの閉じられたポジション、開かれたポジション、筆記中のポジションを示した説明図である。
Ｆｉｇ．９ａ〜９ｃは、本発明の一実施態様に従ったコンピュータのイレーシング機能およびイレーシング手順を示した説明図である。
Ｆｉｇ．１０ａ〜１０ｂは、本発明の一実施態様に従ったコンピュータの別のイレーシング手順を示した説明図である。
Ｆｉｇ．１１は、平面もしくは凸状のＬＣＤディスプレイを備える本発明の一実施態様に従ったスタイラス‐タイプのコンピュータを示した説明図である。
Ｆｉｇ．１１ａは、曲面もしくは円筒状（たとえば凸状）のＬＣＤディスプレイを備える本発明の一実施態様に従ったスタイラス‐タイプのコンピュータを示した説明図である。
Ｆｉｇ．１１ｂ〜１１ｃは、前記曲面／円筒状ディスプレイの平均的なサイズを示した説明図である。
Ｆｉｇ．１２は、本発明の一実施態様に従った、データを操作し、最終的にはデータを入力するためのボタン・タイプのマウスを備えるスタイラス‐タイプのコンピュータを示した説明図である。
Ｆｉｇ．１２ａは、本発明の一実施態様に従った前記マウスのペン軸方向の動きおよびポジションを示した説明図である。
Ｆｉｇ．１２ｂは、本発明の一実施態様に従った前記マウスをペン軸方向にクリックする動き／ポジションを示した説明図である。
Ｆｉｇ．１２ｃは、本発明の一実施態様に従った各ポジションにおける前記マウスのスタイラス軸周りの回転を示した説明図である。
Ｆｉｇ．１２ｄは、本発明の一実施態様に従ったマウスをユーザがスタイラス軸と垂直に押すことによって生じる、前記マウスの別の種類の動きを示した側面図である。
Ｆｉｇ．１２ｅは、マウスの正面図およびそれを押す方向を示した正面図である。
Ｆｉｇ．１２ｆは、スタイラス‐タイプのコンピュータのディスプレイ上のポインタ／セレクタ手段を操作するためのブル（ｂｕｌｌ）を有するマウスを示した側面図および正面図である。
Ｆｉｇ．１３ａ〜１３ｃは、本発明の一実施態様に従ったマウスによってメニュー・リストを選択する方法を示した説明図である。
Ｆｉｇ．１４ａ〜１４ｆは、本発明の一実施態様に従ったマウス操作によってメニューを選択する方法を示した説明図である。
Ｆｉｇ．１５ａ〜１５ｈは、本発明の一実施態様に従って、マウスを使用してメニュー・バーおよび機能を選択する方法を示した説明図である。
Ｆｉｇ．１６ａ〜１６ｄは、本発明の一実施態様に従って、マウスを使用してＬＣＤディスプレイ上のテキストを前送りまたは逆送りする方法を示した説明図である。
Ｆｉｇ．１７ａ〜１７ｆは、本発明の一実施態様に従って、マウスを使用してテキスト内のカーソルをキャラクタ単位で前送りまたは逆送りする方法を示した説明図である。
Ｆｉｇ．１８ａ〜１８ｄは、本発明の一実施態様に従って、あらかじめ決定済みのポジションにマウスがある場合に、スクリーン上に表示されたドキュメント上のテキスト選択インジケータを移動する方法を示した説明図である。
Ｆｉｇ．１９ａ〜１９ｅは、本発明の一実施態様に従ったマウスの使用によりテキストの部分を選択する手順を示した説明図である。
Ｆｉｇ．１９ａ〜１９ｄは、本発明の一実施態様に従ったマウスの使用によるコピー手順を示した説明図である。
Ｆｉｇ．２１ａ〜２１ｅは、本発明の一実施態様に従ったマウスの使用によるペースト手順を示した説明図である。
Ｆｉｇ．２２ａ〜２２ｂは、本発明の一実施態様に従ったイレーサの使用により選択したテキストを削除する方法を示した説明図である。
Ｆｉｇ．２２ｃは、本発明の一実施態様に従ったイレーサの使用により選択したテキストを削除する方法を示した説明図である。
Ｆｉｇ．２３ａ〜２３ｅは、本発明の一実施態様に従った、別のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用するコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
Ｆｉｇ．２４ａ〜２２４ｈは、本発明の一実施態様に従った、同一のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用した、スクリーンに表示されているドキュメント上のテキスト選択インジケータを移動する方法、およびコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
Ｆｉｇ．２４ｉ〜２２４ｎは、本発明の一実施態様に従ってマウスをスタイラス軸と垂直に押すことによってテキスト内のカーソルを操作する方法を示した説明図である。
Ｆｉｇ．２５は、マウスの各種ポジションおよび各ポジションにおけるクリック方向を示した説明図である。
Ｆｉｇ．２５ａは、１つのあらかじめ決定済みのポジションにあるマウス、およびそのポジションにおけるマウスの動きに割り当てられたテキスト操作手順およびステップを示した説明図である。
Ｆｉｇ．２５ｂは、別のあらかじめ決定済みのポジションにあるマウス、およびそのポジションにおけるマウスの動きに割り当てられたメニューならびに機能の操作手順およびステップを示した説明図である。
Ｆｉｇ．２６ａ〜２６ｃは、スタイラス‐タイプのコンピュータに関して説明したマウス・システムならびにデバイスを、本発明の一実施態様に従って別のタイプのコンピュータの異なる位置に使用する態様を示した説明図である。
Ｆｉｇ．２６ｄは、伝統的なキーボードに代えて、本発明の筆記表面および入力システムを備えたコンピュータを示した説明図である。
Ｆｉｇ．２７ａは、本発明の別の実施態様に従ったスタイラス‐タイプのコンピュータ用の押しボタンを示した説明図である。
Ｆｉｇ．２７ｂ〜２７ｆは、本発明の一実施態様に従ったスタイラス‐タイプのコンピュータにおける追加の多方向ボタンおよびその機能を示した説明図である。
Ｆｉｇ．２７ｇ〜２７ｊは、本発明の別の実施態様に従ったスタイラス‐タイプのコンピュータ用のマルチポジション・クリップ・ボタンを示した説明図である。
Ｆｉｇ．２７ｋは、本発明の一実施態様に従ったスタイラス・コンピュータの筆記チップの近くに配置されるＦｉｇ．２７ｂ〜２７ｆのクリップ・ボタンを示した説明図である。
Ｆｉｇ．２７Ｌは、本発明の一実施態様に従ったスタイラス・コンピュータ用の、指向性マイクロフォンおよび／またはアンテナおよび／またはクリップ・ボタンとして使用される、オープン・ポジションにあるマルチセクション／指向性クリップを示した説明図である。
Ｆｉｇ．２７ｍ〜２７ｎは、Ｆｉｇ．２７Ｌのマルチセクション・クリップの、各種のオープン・ポジションを示した説明図である。
Ｆｉｇ．２８ａ〜２８ｅは、本発明の一実施態様に従ったディスプレイおよびマウスの使用による追加の入力システムを示した説明図である。
Ｆｉｇ．２９〜２９ｄは、本発明の一実施態様に従ったスタイラス‐タイプのコンピュータ用のカバーの、ＬＣＤディスプレイ不使用時における保護およびその装着ステップを示した説明図である。
Ｆｉｇ．２９ｅ〜２９ｇは、電話およびテレコミュニケーション機器として使用するときのスタイラス‐タイプのコンピュータを示した説明図である。
Ｆｉｇ．３０ａは、本発明の一実施態様に従ったスタイラス‐タイプのコンピュータを示した説明図である。
Ｆｉｇ．３１は、本発明の一実施態様に従った別のナビゲーション・ボタンを備えるスタイラス‐タイプのコンピュータを示した説明図である。
Ｆｉｇ．３１ａは、本発明の一実施態様に従ったカーソル・ナビゲーション・ボタンを示した説明図である。
Ｆｉｇ．３１ｂ〜３１ｆは、本発明の一実施態様に従った前記ボタンの操作による画面上のカーソルのナビゲーションを示した説明図である。
Ｆｉｇ．３２ａ〜３２ｆは、本発明の一実施態様に従ったメニュー・ナビゲーション・ボタンおよびその操作を示した説明図である。
Ｆｉｇ．３３ａは、本発明の一実施態様に従った筆記表面およびその上における筆記の間にペンによって生成されるサウンドを入力するためのマイクロフォンを備えたモバイル電話を示した説明図である。
Ｆｉｇ．３３ｂ〜３３ｃは、本発明の一実施態様に従ったディスプレイ、筆記表面およびその上における筆記の間にペンによって生成されるサウンドを入力するためのマイクロフォンを備えた、電話もしくはＰＤＡ等の電子デバイスと組み合わされる腕時計等の手首に装着されるデバイスを示した説明図である。
Ｆｉｇ．３３ｄは、本発明の一実施態様に従ったディスプレイおよびその上における筆記の間にペンによって生成されるサウンドを入力するためのマイクロフォンを備えた、電話もしくはＰＤＡ等の電子デバイスと組み合わされる腕時計等の手首に装着されるデバイスを示した説明図である
Ｆｉｇ．３３ｅは、本発明の一実施態様に従った少なくともディスプレイを備え、また、最終的には、筆記の間にペンによって生成されるサウンドを入力するためのマイクロフォンを備える各種の電子デバイスを示した説明図である。
Ｆｉｇ．３３ｆ〜３３ｇは、フル‐テキストおよび機能の入力を可能にする本発明の手書きサウンド認識システムが結合される改善されたキーボードを示した説明図である。
Ｆｉｇ．３４ａは、本発明の一実施態様に従った、ビーコンからペン先のポジションを決定する手段を備えたスタイラス‐タイプのコンピュータを示した説明図である。
Ｆｉｇ．３４ｂは、本発明の一実施態様に従ってビーコンとして使用されるＦｉｇ．２９ａのスタイラス‐タイプのコンピュータのカバーを示した説明図である。
Ｆｉｇ．３５は、本発明の一実施態様に従ってスタイラス‐タイプのコンピュータによるノートパッド上のピン・ポジションの決定を可能にする水平ビーコンを備えたノートパッドを示した説明図である。
Ｆｉｇ．３６は、ノートパッド上の位置を示す水平および垂直のバーコードを有するノートパッドを示した説明図である。
Ｆｉｇ．３７は、筆記表面上の位置を示す番号、記号、または色を有する筆記表面を示した説明図である。
Ｆｉｇ．３８は、筆記表面およびその表面上に位置を示す記号を投影するプロジェクタを示した説明図である。
【００２４】
（発明の詳細な説明）
以下、データ入力の方法について説明するが、それにおいては、ペン、スタイラス等のポインティング・デバイス、さらにはユーザの指が筆記表面との関連で使用されて、手書きデータ入力が促進される。この入力は、筆記の間におけるポインティング・デバイスもしくは指と筆記表面の接触によって生成されるサウンドを基礎としている。
【００２５】
最初にＦｉｇ．１ａを参照すると、ペン（１１）および筆記表面（１０）が示されており、そこには２つの記号（１２）がペンによって書かれている。
【００２６】
Ｆｉｇ．１ｂを参照すると、ペン先（１３）の部分が拡大されて示されている。ここでは、筆記表面（１０）上において考えられる、筆記時のペン先の動きならびに方向を例示している。ペンは、各種の方向（１４）に動くことができる。この図においては、それらのうちのいくつかの方向（１５）が使用されて、筆記表面（１０）上に記号（１２）が筆記されている。
【００２７】
筆記手順の間における、ペンと筆記表面の間の接触は、各種のサウンドならびにノイズを生成する。これらのサウンドは、ペン先の表面構造、開始ポイントの態様、記号の終了する態様、ペンの方向、方向の変更、各方向の持続時間、各方向における速度、筆記表面上における筆圧の変化等のパラメータによって異なるものとなり得る。
【００２８】
Ｆｉｇ．２ａは、筆記表面（２０）およびペン（２１）を示している。ユーザが、ペンを使用することによって筆記表面上に記号（２５）を描画したところである。この記号は、連続して描画された直線（２２，２３）からなり、最初のラインと２番目のラインの方向が異なる。それぞれの描画は、独自の特性を有する。この例におけるいくつかの特徴として、開始ポイント（２４）の態様、１番目および２番目のラインの方向（２１１，２１２）ならびに持続時間、変更ポイントの態様（たとえば、曲がり、直線、強調）等が挙げられる。通常、ユーザによって記号が筆記される間の、筆記表面上におけるポインティング機器のチップの接触は、各種のサウンドならびにその記号を特徴づけるサウンド波形の生成をもたらす。同一ポインティング・デバイス・チップおよび同一ユーザにより同一の態様でその記号が筆記されるごとに、同一のサウンドおよび波形が生成されることになる。
【００２９】
Ｆｉｇ．２ｂは、Ｆｉｇ．２ａの記号（２５）を筆記する間において生成されるサウンドを仮想した波形（２６）であり、時間（ｘ軸）にわたる振幅（ｙ軸）の変化を示している。波形の第１の部分（２６）は、開始ポイント（２４）の描画表面上におけるペン先の衝撃によって生成されたサウンドに関係する。波形の第２の部分（２７）は、最初のライン（２２）の描画の間に生成されたサウンドに関係する。方向変更ポイント（２９）においては、強調が行われていないことからサウンドが生成されないこともある。波形の最後の第３の部分（２８）は、２番目のライン（２３）の描画によって生成される。
【００３０】
筆記表面上におけるペン先の衝撃によって生成されるサウンドは、それぞれの記号ごとに異なることがある。たとえば、文字『ｃ』の開始衝撃サウンド波形は、文字『ｂ』の開始ポイントより強い。同じことが終了ポイントに関しても言える。文字『ｃ』の終了ポイントのサウンドは、文字『ｂ』の終了ポイントより緩やかに弱まる。これは、手書きサウンドおよび／またはセンサ認識システム（以下、ＨＷＳＲＳ）によって考慮することができる追加のパラメータであり、それについての詳細は後述する。
【００３１】
筆記表面上における各種方向のポインティング・デバイスのストロークによって生成されるサウンドもしくはサウンド波形の変化は、ポインティング・デバイス・チップの表面が滑らかな場合には区別が容易でないことがある。その逆に、ポインティング・デバイスが、異なる方向に対して異なるサウンドを生成する態様で構造化された粗いチップ表面を伴う場合には、これらの変化を容易に認識することができる。Ｆｉｇ．３ａは、ポインティング・デバイス・チップの正面図を示しており、この構造化されたポインティング・デバイス・チップ（３０）を筆記表面上の各種の方向（３２）においてシフトすることによって生成される仮想的な各種の波形（３１）を併せて示している。
【００３２】
このような異なるサウンドを生成するための１つの解決策は、Ｆｉｇ．３ｂに示されるようなポインティング・チップ（３５）を作ることである。ポインティング・チップ（３５）は、異なる部分（３６）に分割することが可能であり、各部分を異なる材料（３３，３４）から作れば、異なるサウンド（３７，３８）を生成することができる。このシステムは、たとえば対向する２つの方向（３３１，３３２）について２つの異なるサウンド（３８，３９）を持つことを可能にする。また、より良好な精度を得るために、隣接する部分が明確に著しく異なるサウンドを生成する態様で構成してもよい。
【００３３】
Ｆｉｇ．３ｃは、前述したチップ（３５）のような構造化チップを有するポインティング・デバイスによって描画された２本の平行線（３４１，３４２）を示している。第１のライン（３４１）は、右から左の方向（３４５）に向かって描画され、そのサウンド波形（３４３）によって示されるサウンドを生成した。第２のライン（３４２）は、第１のラインと平行に描画されている。これは、第１のラインと同一のポインティング・デバイスによって描画され、ユーザの手の中のポジションも同一であるが、それと逆の関係で描かれ、すなわち左から右の方向（３４６）に描画されてそのサウンド波形（３４４）によって示される異なるサウンドを生成している。左側のペン先表面が、右側のそれと異なることから、見かけ上は類似している２本のラインについて、２つの異なるサウンドが生成された。これは、見かけが類似している２つの記号に関して２つの異なる記号を持つことを可能にする有利な特徴である。たとえば、数字の『０』を時計回りの方向に書き、文字『Ｏ』を反時計回りの方向に書くことができる。このシステムを使用すれば、これらによって２つの異なるサウンドが生成され、したがって２つの異なるサウンド波形が生成される。これらは、ＨＷＳＲＳによって容易に認識されることになる。
【００３４】
Ｆｉｇ．３ｄは、描画された記号（３５１）およびそのサウンド波形（３５２）を示している。この記号は、Ｆｉｇ．３ｂのポインティング・チップによって描画されたものである。この記号を書くために、ポインティング・チップが５つの方向（３５３）で使用された。波形（３５２）は、５つの連続的なサウンド（３５４）によって構成され、そのそれぞれは、この記号の描画の間における５つのポインティング・チップの方向（３５３）によって生じている。
【００３５】
ここで、Ｆｉｇ．３ｂに示したポインティング・チップが単なる例示にすぎないことを理解する必要がある。このほかにも多様な形状あるいは多くのタイプのポインティング・チップが考えられる。たとえば、ポインティング・チップをより多くの部分に、あるいはより少ない部分に分割してもよい。Ｆｉｇ．４ａに示されるように、ポインティング・チップには、各種の外形ならびにフォームを持たせることができる。これらの表面は、Ｆｉｇ．４ｂに示されているように、異なる外形とし、かつ異なる材料から作ることもできる。異なるサウンドの生成を向上させ、それらの差を強調するために、Ｆｉｇ．４ｃに示されるように、ポインティング・チップの表面を異なる部分に分割し、それぞれの部分を異なる材料（４１０，４１１）から構成することも可能である。それに加えて、ペン先の分割した部分に異なるフォームを与えることもできる。
【００３６】
Ｆｉｇ．４ｂに示されるように、ポインティング・チップは、たとえばチップ表面の異なる場所の上に配置される各種のピンを備えることができる。これらのピンは、それぞれの方向ごとに異なった態様で筆記表面と触れて、それぞれの方向に対して異なるサウンドを生成するように配置することができる。そのために、これらのピンに異なる外形を持たせてもよい。たとえば、それらを長めに（４１２）あるいは短めに（４１３）し、左寄りもしくは右寄りに傾け、ポインティング・チップ（４１５，４１６）上において異なる向きに取り付けることができる。これより、チップの同一部分であってもシフト方向が異なれば異なるサウンドが生成されることが可能になる。
【００３７】
本発明の一実施態様によれば、チップ表面がセンサ（４１４）を有し、記号もしくはコマンドを筆記する間のポインティング・チップの描画動作により、異なるセンサに印加された圧力に従って異なる信号を生成し、方向、方向の持続時間等の情報を示すことができる。したがってその場合には、このデバイスは、異なるサウンド、異なる波形およびそのほかの、筆記された記号をＨＷＳＲＳエンジンが認識するために必要な情報を生成することができる。
【００３８】
また、このポインティング・デバイスに、筆記表面上もしくは空間におけるポインティング・デバイス・チップの方向を認識することが可能な方向認識システムを備えてもよい。したがってその場合には、このデバイスが異なるサウンド、異なる波形、およびそのほかの、筆記された記号をＨＷＳＲＳエンジンが認識するために必要な情報を生成することができる。
【００３９】
同一の方向に関して同一のサウンドを生成するためは、筆記表面に接触しているペン先表面の部分が常に同じ類似性を有していなければならない（たとえば、構造、テクスチャ、材料、ポジション）。上記のポインティング・チップの表面構造は、ユーザに対して、ポインティング・デバイスをあらかじめ決定されたポジションで手の中に保持しなければならない。この種の制約を回避するために、ペン先（およびその表面）は、それが筆記表面に触れたとき、触れている部分が常に類似となるように構成される必要がある。
【００４０】
Ｆｉｇ．４ｄに示されているように、記号を筆記する間のユーザは、通常、スタイラスまたはペン（４２０）を手の中に同じポジションで保持し、かつ筆記表面（４２１）に対して同じ角度（４２４）に維持する。一般にユーザは、手の中のペンのポジション（４２５）を根本的に変更することはない。Ｆｉｇ．４ｅに、半球形状（たとえば凸状）のポインティング・デバイス・チップ（４３０）の側面図を示す。曲面形状（凸状表面）（４３５）を有するポインティング・デバイス・チップを用いて平坦な筆記表面（４３１）上に筆記を行う間は、ポインティング・デバイス・チップ表面の、ポインティング・デバイスと筆記表面の間における接点（４３３）近傍のわずかな部分（４３２）だけが筆記表面と接触する。このチップが調和の取れた形状、たとえば半球形状を有していれば、ユーザが常に筆記表面とペンを同一の角度関係に維持するという事実によって、接触エリアが常に、概略で同一の幾何学形状を有することになる。チップ表面が、同一の接触部分が同一の構造を有するように構成されている場合には、ユーザは、スタイラスの軸に関する任意の回転ポジションでペンを手に取り、筆記表面上に書くことができる。Ｆｉｇ．４ｆは、半球または円錐（たとえば凸状）のペン先（４４１）の正面図を示している。このペン先は、異なる回転ポジション（ペンの軸に対して）であるが、あらかじめ決定された同一の角度でペンが筆記表面に触れたときには、常に、筆記表面（４４２，４４３）と接触するチップの部分が、同一の形状、構造、材料等（４４４，４４５）を有するように構成されている。ここで理解されることは、筆記表面上における筆記時に、異なる方向に対して異なるサウンドをペン先が生成する構造になっていなければならないということである。前述したような各種の構造材料をピンとして使用することができる。Ｆｉｇ．４ｇは、ここで提案している別のペン先形状の横断面図（４５１）および正面図（４５２）である。ここで注意する必要があるが、これまで説明してきたペン先の形状ならびに構造は例示にすぎない。当業者にあっては、そのほかにも多くのペン先形状ならびに構造を、各種の材料から作り出すことができよう。より良好かつ迅速な認識のために、複数の手書きキャラクタ・セットならびに記号のサウンド波形およびパターンを、ユーザのペン先により、筆記表面に対する異なる筆記角度で生成し、ＨＷＳＲＳに与えてもよい。
【００４１】
また好ましくは、ペン先によって生成されるサウンドが増大されるように筆記表面を構成してもよい。
【００４２】
ここで注意しなければならないことは、各種の方向を必要とする記号を筆記する間、それに応じて筆記表面上における構造化されたポインティング・チップのストロークによって生成される連続的な各種のサウンドが、その記号とその記号だけを固有に特徴づける波形を生成するということである。たとえば、文字『Ｏ』を筆記する間、ポインティング・チップは、文字『Ｏ』に関する特性波形を生成する各種の異なる短い方向を使用する。
【００４３】
サウンド、波形、およびそのほかの、各記号もしくは機能に関してポインティング・チップによって生成される特性情報は、パターン化および記録の後、ＨＷＳＲＳによって処理し、ユーザが筆記したテキストもしくは描画の認識を行うことができる。たとえば、以下においてＨＷＳＣＳと呼ぶ、ユーザの手書きサウンド文字セットの波形を、そのユーザの個人的なキャラクタ・セットとしてパターン化し、ＨＷＳＲＳに『学習』させることができる。より高い精度を得るために、それぞれの筆記表面ごとに異なる「手書きサウンド・キャラクタ・セット」を提供してもよい。
【００４４】
Ｆｉｇ．５ａに、構造化されたチップ（５１２）を備えるスタイラス（５１１）を示す。この図は、このスタイラスによって文字『ｅ』（５１３）が筆記されたところを示している。Ｆｉｇ．５ｂは、文字『ｅ』の筆記の間にスタイラスによって生成されるサウンドの仮想的な波形である。最後のＦｉｇ．５ｃは、ユーザによって文字『ｅ』が発音されたときの仮想的な波形を示している。
【００４５】
これらの図を比較すると、本発明の利点が立証される。最初の図形（５１３）、つまり筆記された文字『ｅ』は、非常に短い図形である。この文字がどのように筆記されたか、あるいは誰によって筆記されたかに応じて、伝統的な手書き認識エンジンは、たとえば文字『ｃ』あるいは文字『ｌ』との解釈誤りを頻繁に生じる可能性があった。それとは対照的に、筆記表面上のペン先の動きのサウンドによって生成されたＦｉｇ．５ｂのグラフ（波形）は、その筆記の間における各種のペンの方向によって生成された各種のサウンドに起因して、複数の変化および特徴を伴う長いグラフになっている。これは、容易に認識されることになる。
【００４６】
最後のＦｉｇ．５ｃは、短いグラフであり、ほとんど変化を伴わない。これと、ｂ、ｄ、ｐといった文字、さらには外部ノイズ等の解釈誤りが、音声認識エンジンによって容易に生じ得る。文字の手書きの間に筆記表面と接触するペン先によって生成されたサウンドの波形は、はるかに長く、多くの変化を有し、したがって音声エンジンによる認識がはるかに容易になる。
【００４７】
手書き入力は、音声入力に比較すると次のような多くの利点を有する。
‐孤立的である（プライバシーの問題が解決される）。
‐ユーザの意図が考慮されない（『２４』は『ｔｗｅｎｔｙ ｆｏｕｒ』と異なること、６×４はｓｉｘ ｂｙ ｆｏｕｒと異なることなど）。
‐音声認識エンジンの有する欠点がない（ｐはｂと異なる）。
‐類似の発音を伴う単語（例：ｔｗｏ、ｔｏ、ｔｏｏ）であっても、異なって書かれる。
‐連続しない言葉の問題が解決される。
‐訂正が迅速である。
‐すべての言語に適している。
‐外部ノイズが問題とならない。
【００４８】
伝統的な手書き認識システムは、キャラクタ単位である。筆記された単語の図形を認識するより、筆記されたキャラクタの図形を認識する方がはるかに容易である。２つの連続的に筆記された類似の単語は、同一人物によって書かれたものであっても類似に見えることがない。一方、筆記された単語を構成している連続的なキャラクタを区別することは、認識システムにとって非常に困難である。しかしながら、キャラクタ単位の筆記された図形を基礎とする伝統的な手書き認識システムは、主要な問題を抱えており、しばしばその認識は人間が行っても困難である：すなわち、キャラクタおよび記号の図形が短すぎて多くの場合に類似して見える。それらが明確に書かれていない場合には、解釈誤りを生じ、まったく認識できないこともある。
【００４９】
また、発音された文字および／または単語の音声波形が類似していることもある（例：『Ｔ』、『Ｔｅｅ』、『Ｔｅａ』）。したがって、音声または言葉認識システムは、通常、センテンスを基礎にしている。言葉認識エンジンにとっては、単一の単語もしくは文字の認識より、センテンスの認識の方が容易である。言葉認識システムは、受け取った単語が示唆する意味を分析し、予測されるセンテンスに従って、たとえば、受け取った単語が『ｒｉｇｈｔ』であるか、あるいは『ｗｒｉｔｅ』であるかを決定する。このシステムは、多くの場合に単一の単語、文字もしくは記号だけが入力されることから良好でない。
【００５０】
ＨＷＳＲＳは、これらの問題すべてに対する答えをもたらす。これは、手書きシステムのすべての利点を有し、その欠点を解決する。このシステムは、好ましくはキャラクタ単位の認識を基礎として機能するが、認識は、キャラクタを筆記する間の筆記表面上のポインティング・デバイス・チップによって生成されたサウンドの波形、パターンおよびそのほかの情報に基づいて行われる。これらの波形は、すでに説明したように、筆記されたキャラクタの図形あるいは声に出されたサウンド波形よりもはるかに長く、かつ多くの変化を有し、次のような、より多くの特徴パラメータを含んでいる。
‐記号、あるいは不連続に書かれる記号の部分の開始／終了サウンド。
‐記号の筆記によって生成されるシラブルの数；ここでシラブルは、実質的に一定の形状を有する記号の部分を言う。この数は、手書き図形における異なる角度、および記号が連続的に書かれたか否かに依存する。記号の各不連続部分のシラブル数はＮ＋１であり、それにおいてＮは、角の数である。
‐それぞれの方向における筆記の速度に従ってサウンドの変化が生じる。
‐記号を筆記する間の筆記表面上における圧力の差が、書いている図形の形状に従って、それに応じた変化をサウンドにもたらす。
‐各方向における筆記の持続時間。
‐異なるユーザ、あるいは同一ユーザであっても筆記の異なる期間において異なるキャラクタ・セットのサイズ（たとえば、より大きな、もしくはより小さなキャラクタの筆記）を使用することがあり、それぞれの方向に関してのサウンドが短く、あるいは長くなる。筆記された文字の異なる部分は、それらが異なるフォント・サイズで筆記される場合であっても固有の関係ならびに比率を有している。このことは、ミュージック・ドメインの『オクターブ』になぞらえる。
‐さらに、このシステムから導出される追加のパラメータもある。
したがって、認識がはるかに容易になる。
【００５１】
ラインの長さ、キャラクタのサイズ等の情報は、これらのパラメータを使用することによって有効になる。これらの原理ならびにパラメータによれば、高性能のＨＷＳＲＳが、ペン等の通常のポインティング・デバイス・チップによって、あるいはユーザの指もしくは爪による場合であっても、筆記表面上に筆記された記号の手書きサウンド・パターンに従って記号を認識することが可能になる。その場合、構造化されたチップが必要なくなることもある。
【００５２】
外部ノイズの欠陥は、ＨＷＳＲＳを備えた電子デバイスの中にマイクロフォンを取り付けることによって、あるいはポインティング・デバイス自体の中にそれを取り付けることによって容易に解決できる。たとえばワイヤによってペン先にセンサを接続すれば、筆記手順の結果として生成されたスタイラス内側のサウンドだけが取り込まれて、認識エンジンに伝達される。
【００５３】
上記に加えて、より良好な精度を得るために、そのほかのシステム、たとえば手書き図形認識システム、ペン／手の動き認識システム、音声／言葉認識、口唇認識、および／またはそのほかの認識システム等を独立に、もしくは組み合わせてＨＷＳＲＳとともに用いてもよい。たとえば、ユーザが、キャラクタ等の記号、または単語もしくはセンテンスを筆記すると同時に、それらを声に出してもよい。ＨＷＳＲＳと音声認識システムの組み合わせは、入力された文字のより良好な精度を提供することができる。自然であり、ユーザ・フレンドリな入力方法という意味では、ユーザがテキストを筆記している間に自然に口にする文字、単語、センテンス、あるいはそのほかの記号だけをユーザが筆記の間に声に出せばよい。そのほかの少なくとも句読点の一部等の記号は、それらを声に出すことなく筆記することができる。
【００５４】
このシステムは、異なる言語の文字、単語、および記号の、１ないしは複数のデータベースを備えることができる。予測単語認識システムをこのシステムと結合させて、完全な入力の前に可能性のある単語の選択を行うこともできる。このシステムは、望ましい単語を、その入力が完了する前にシステムが自動的に選択することを可能にし、場合によってはユーザの介入が必要ないこともある。これは、単語のキャラクタまたは記号を個別に、かつ連続的に（たとえばキャラクタ単位で）筆記することによって、また多くの場合には対応する単語が非常に少なく、その単語の筆記を完了する前に単語予測システムが望ましい単語を決定するか、あるいはいくつかの可能性のある単語を示してユーザがそれらのうちの１つを選択できることから可能になる。
【００５５】
単語を筆記する間にユーザが誤った文字を入力した場合であっても、あるいは与えられた文字の識別をＨＷＳＲＳが失敗した場合であっても、多くのケースではその単語のほかの文字が正しく入力されることから、予測単語認識システムは、誤った文字を自動的に訂正することができる。
【００５６】
ここで理解されることであるが、キャラクタ単位に代えて、このシステムは、単語全体、さらにはセンテンス全体の認識を基礎とすることもできる。その場合においては、筆記される単語、記号、さらにはセンテンス全体に関するサウンド波形もしくはサウンド・パターンのデータベースをＨＷＳＲＳに備えればよい。
【００５７】
より精度を高め、認識を容易にするために、ユーザは、ユーザ自身の手書きをＨＷＳＲＳに『学習』（たとえばトレーニング）させることができる。その場合、認識プロシージャがより容易かつ高速になる。
【００５８】
それに加えてユーザが、ユーザ自身の手書きの特徴に基づいた独自のコマンドを作り出すことが可能になる。たとえば、ユーザの電子デバイスが、ユーザの手書きサウンド・パターンおよび／またはサウンド波形に基づいた手書きインストラクションによってだけオン・オフされるようにしてもよい。またユーザが、ユーザの機器をパーソナル化することも可能である。その場合においては、ユーザの手書き入力だけがそのユーザのデバイスを操作できることになる。ユーザが、独自のカスタム化したキャラクタ、記号、マクロ、機能、コマンド等を作り出すことも可能になる。創作した記号に、複数の別の記号もしくはコマンドを参照させることもできる。通常のキーボードとは異なり、このシステムは、ユーザが無数の記号もしくはコマンドのバリエーションを創作し、使用することを可能にする。
【００５９】
ユーザは、ユーザ自身の署名をＨＷＳＲＳに学習させることもできる。この場合、そのユーザの署名は、決してまねられることがない。たとえば、銀行口座を開くとき、ユーザは、そのユーザの個人的な構造化されたポインティング・チップならびに選択した筆記表面を用いて、ユーザ自身の署名のサウンド波形を銀行の照会先に与えることができる。署名、個人的な構造化されたポインティング・チップおよび選択した筆記表面の組み合わせは、一意的なサウンド波形ならびにパターンを生成することになり、模倣を不可能にする。この手順によって、電話バンキング・トランザクション、ｅ‐コマース運用等が安全になる。
【００６０】
ｅ‐メール、ショート・メッセージング・サービス（ＳＭＳ）等を親展にすることもできる。最初にユーザは、そのユーザの銀行もしくは友人のＨＷＳＲＳに、ユーザの個人的な装置（たとえば、ポインティング・チップ構造、筆記表面）に基づく、そのユーザ自身の手書きサウンド・パターンもしくは波形を与える。続いて、そのユーザの手書きサウンド・パターンによって、すべてのオペレーションまたはメッセージが、行われまたは送信される。これらは、相手のディレクトリ内に記録されている手書きサウンド・パターンと比較される。一致の後、オペレーションが実行され、かつ／またはメッセージが読まれることになる。
【００６１】
セキュリティを理由として、ユーザは、ユーザ自身の手書きサウンド・パターンに基づいて独自の暗号を作り出すことができる。前述した理由から、そのユーザの暗号は極めて機密性が高く、そのユーザは、相手の認識システムが暗号化されたパターンのコピーを有している場合に限って、相手が暗号解除することができる暗号化されたドキュメントを送信することができる。
【００６２】
テキストを筆記する間に番号、数字、キャラクタ、記号、コマンド等は、たとえばユーザのカスタム化した追加の（非関係者にとって）無意味な図形の筆記によって暗号化することが可能であり、その結果、記号のサウンド波形が追加の無意味なシラブルを有することになる。これらの追加の無意味な図形は、筆記の間の任意の時および場所に（たとえば記号と組み合わせて、あるいは個別に）筆記することができる。これらは、そのユーザのカスタム化された意味のない図形を熟知している受け取り側の相手のＨＷＳＲＳによってフィルタリングされ、結果的に情報の暗号解除が行われる。このシステムは、ｅ‐コマース運用におけるユーザのクレジット・カード番号等の機密情報の送信を補助することができる。
【００６３】
ここで理解されようが、ＨＷＳＲＳを強化するために、あらゆる音声もしくは言葉認識システムならびにそのほかの、伝統的な手書き認識システム等の認識システムならびにテクノロジを使用することもできる。
【００６４】
認識手順は、時間遅延を伴って実行されるようにしてもよい。これは、筆記サウンド、タイミング、筆記速度といったすべてのパラメータが筆記の間に記録され、その後ＨＷＳＲＳによって処理されて手書き記号の認識ができることを意味する。
【００６５】
ほとんどすべての電子デバイス、特にモバイル機器は、この方法に基づいた入力デバイスを備えることができる。電子デバイスには、このＨＷＳＲＳおよび最終的には筆記表面に接続されるマイクロフォンを備えればよい。好ましくは、ユーザが、構造化された表面を伴うポインティング・デバイスを有し、その表面上に筆記を行うことによってデータを入力することができる。Ｆｉｇ．３３ａ〜３３ｅは、これらのデバイスのいくつかを示している。たとえばＦｉｇ．３３ａは、筆記表面（３３０１）、少なくとも１つのマイクロフォン、およびＨＷＳＲＳを備えるモバイル電話を示している。ユーザは、構造化された表面を伴うポインティング・デバイス（３３０２）を有しており、そのポインティング・デバイスをその筆記表面上において使用し、手書きデータを入力することができる。データを筆記する間に、筆記表面上のポインティング・デバイスのストロークによって生成されたサウンドは、プロセッサに渡され、入力されたデータをＨＷＳＲＳがディジタル化する。このシステムは、Ｆｉｇ．３３ｂ〜３３ｄに示されているような非常に小さいデバイス（例：腕時計電話、リストＰＤＡデバイス）の場合であっても使用することが可能である。Ｆｉｇ．３３ｂは、腕時計電話／ＰＤＡデバイスを示している。Ｆｉｇ．３３ｃは、ＬＣＤディスプレイ・ユニット（３３１１）ならびに筆記表面（３３１２）を示しており、好ましくはそれらが、腕時計ユニット（３３１３）の逆側に配置される。本発明の、好ましくは構造化されたチップ表面を有するポインティング・デバイス（３３１４）が提供されて、筆記表面上における筆記によってデータが入力される。ここで理解されようが、電子デバイス自体が、その望ましいロケーション内に本発明の筆記チップを備えてもよい。
【００６６】
良好に構造化されたポインティング・チップ、良好なマイクロフォン、および精巧な認識エンジンを使用することによって、デバイス上のあらゆる表面を前記表面上の筆記のために使用することができる。たとえばユーザは、Ｆｉｇ．３３ｄに示されているように、任意の表面、たとえば腕時計電話の金属ブレスレット（３３１５）上においてデータを入力することができる。
【００６７】
電子デバイスの設計および／またはコンセプトに応じて、マイクロフォンおよび／または認識システムの少なくとも一方をポインティング・デバイス（たとえばペン）内もしくは電子デバイス自体の中に組み込むことができる。当然のことながら、スタイラス・コンピュータの場合には、それらをスタイラス・コンピュータの中に組み込むことができる。
【００６８】
ＨＷＳＲＳを使用する１つの利点は、すべての電子デバイス内に、最終的にそれらのデバイスを変形することを必要とせずに組み込むことが可能な点である。
【００６９】
Ｆｉｇ．６は、文字、数字、句読点、およびそのほかの，適切なテキストもしくはデータを書くための記号を備えた伝統的なコンピュータ・キーボード（６００）を示している。Ｆｉｇ．６ａに示されているように、キーボードのキャラクタを手書きするとき、『１』、『ｌ』、『｜』、『Ｉ』（６０２〜６０５）、あるいは『９』、『ｇ』（６０６〜６０７）といったいくつかのキャラクタは、ほとんど同じに見えることがある。伝統的な手書き文字認識システム、あるいは人間にとっても、これらの文字の間の区別は不可能である。この問題は、構造化されたペン先およびＨＷＳＲＳを使用することによって解決される。次に、いくつかのもっとも重要なケースについて説明する。
【００７０】
Ｆｉｇ．６ｂは、表の１つの列（６２８）に大文字のローマ字を、別の列（６２９）に小文字のローマ字を含む表（６２０）を示す。続く列（６３０，６３１）には、これらの文字に類似するいくつかのキャラクタならびに数字が示されている。これらの類似に関して提案された手書き記号が、それらと並ぶ白い列内に示されている（６４１〜６４４）。ユーザ自身が、自らの便宜のために独自の手書きフォント、記号、および手書きコマンドを作り出すこともできる。
【００７１】
図示されているように、文字『ｇ』（６３２）等のようないくつかのキャラクタについては、見かけが類似している文字『ｑ』（６３３）あるいは数字『９』（６３４）等のキャラクタが存在する。ＨＷＳＲＳがこれらの間を容易に区別できるようにするため、ＨＷＳＲＳが筆記された記号のサウンド波形ならびにパターンに作用することから、Ｆｉｇ．６ｃに示されているように、ユーザは、それぞれに関して異なる方向（６３５〜６３７）を使用することによってそれらの文字を筆記すればよい。これは、それぞれのキャラクタごとに異なるサウンド波形ならびにパターンを生成することになり、それらを容易に区別することができる。
【００７２】
これらは、それぞれを筆記する間に生成されるサウンドに従ってパターン化されて記憶される。ユーザは、随時新しい記号を作成し、あるいは古い記号を削除することができる。記号が筆記される間、ＨＷＳＲＳは、すでにパターン化され記憶している記号とそれを比較する。システムは、入力された記号に一致するパターンを見つけると、入力されたものとしてそのパターンを選択する。
【００７３】
前述したように、このシステムの１つの目的はユーザに、慣れ親しんだ入力システムおよびデバイスを提供することである。人々は、複雑な入力システムを伴う電子デバイスを拒絶することから、これは非常に重要な問題である。また、伝統的な手書きキャラクタおよび標準が尊重される必要がある。それにもかかわらず、より良好な精度のために、このシステムの利点ならびに特徴のいくつかを使用することができる。たとえば、文字の『Ｏ』（大文字）は、反時計方向（６５１）に筆記し、数字の『０』は、時計方向（６５２）に筆記することができる。これらは、２つの異なるサウンドを生成し、その結果、２つの異なるサウンド波形が作られる。小文字の『ｏ』は、ほとんどの人々が通常に筆記するように（６５３）筆記することができる。
【００７４】
より区別が困難なキャラクタもいくつかある。たとえば、Ｆｉｇ．６ｄに示されるように、小文字の『ｌ』（６６０）、大文字の『Ｉ』（６６１）、数字の『１』（６６２）、あるいは記号『｜』（６６３）は、異なる書き方をしないと、伝統的な手書き認識システムによって区別されない。これらを互いに区別するために、それぞれ異なる一般的な形状（６６４〜６６７）に従ってこれらを筆記することができる。
【００７５】
それに加えて、Ｆｉｇ．６ｅに示されるように、不連続に筆記される文字、符号、および数字、たとえば大文字の『Ｂ』（６６９）または数字の『１３』（６６８）等は、伝統的な手書き認識システムに混乱をもたらすことがある。
【００７６】
Ｆｉｇ．６ｆは、全体もしくは一部が垂直の直線からなり、自然な形では同じ文字（６７１）の残りの部分と分けて筆記されるキャラクタ（６７０）のグループを示している。手書き認識システムには、それらの部分が筆記される（表面上の）場所がわからないことから、たとえば筆記される記号（６７２）が文字『Ｔ』（６７３）に関係するか、あるいは２つの独立したキャラクタ『｜‐』もしくは（Ｉ‐）等に関係するかを知ることができない。
【００７７】
ＨＷＳＲＳを使用すれば、それらのキャラクタを変形することなく上記の問題を解決することができる。左から３番目の列（６７４）は、左から１番目の列（６７０１）の印刷されたキャラクタに対応する手書きキャラクタを示している。これに示されるように、いずれの手書きキャラクタも変形されていない。ユーザが従わなければならない唯一の規則は、筆記表面上においてペン先をストロークしなければならない（本質的に一般的な）方向である。右から１番目の列（６７５）は、各キャラクタが手書きされる方向に関する提案を示している。ここで理解されようが、このほかの方向も考えられ、さらにはユーザによってそれを行ってもよい。前述し、かつ示したように、小文字の『ｌ』（６７１２）および数字の『１』（６７１１）は、異なる書き方が可能である。キャラクタ『｜』（６７６）は、下から上に向かう方向（６７７）の直線によって筆記することができる。上向きの方向は、キャラクタを書くときの一般的な方向ではない。このキャラクタにそれを使用する理由は、このキャラクタが頻繁に使用されないことである。
【００７８】
これにより下向きに書く直線を使用して多くのほかの文字を書くことが可能になり、互いにそれらを区別し、かつ混乱を避けることが可能になる。システムは、下向きに書かれる直線を、常に、不連続に書かれる記号の開始部分と見なすことができる。この線が書かれるとき、システムは、その線に続いてさらに図形（たとえば、ストローク）が書かれ、それを受け取ることを期待する。この方法によって、大文字の『Ｉ、Ｂ、Ｄ、Ｈ、Ｋ、Ｐ、Ｒ、Ｔ』（６７８）およびキャラクタ『＄』（６８３）を普通に筆記し、システムに認識させることができる。システムを混乱させないために、ここで注意しなければならないことであるが、手書きの原理によって知られているように、文字の筆記には、２つのサイズの異なる水平線、つまり短い線および長い線を使用する必要がある。たとえば、文字『Ｔ』を書くときに使用する水平線（６７９）は、文字『Ｉ』に使用される水平線（６８０）よりかなり長くなければならない。これにより、たとえば文字『Ｉ』または連続して書かれる２つのキャラクタ『Ｔ‐』の筆記の間における混乱を招きやすい状態を回避することが可能になる。
【００７９】
大文字の『Ｆ』について考えると、大文字の『Ｆ』とたとえば大文字の『Ｉ』の混同を避けるために、まず『Ｌ』を上下逆にした連続する線（６８０１）を書き、それに続いて１本のサイズの短い水平線（６８０）を書く。また、大文字の『Ｅ』と、たとえば大文字の『Ｉ』に続くキャラクタ『‐』の混同を避けるために、まず『Ｌ』を上下逆にした連続する線（６８１１）を書き、それに続いて２本のサイズの短い水平線（６８１）を書く。大文字の『Ｌ、Ｍ、Ｎ』は、図示のように連続する線（６８２）によって書くことができる。
【００８０】
システムを単純にするために、直線形状を有するか、あるいは直線で始まるすべての非テキスト関連のキャラクタを、同じキャラクタを有するテキスト関連のキャラクタと逆の方向関係で開始されるものとすることができる。
【００８１】
Ｆｉｇ．６ｇを参照すると、さらに、共通の特徴を有する３つのキャラクタ（６８４）が示されている。これらは、すべて斜めの直線である。大文字の『Ｘ』は、通常、２本の下へ向かう斜めの線『＼？／』（６８４０６）によって書かれるため、キャラクタ『／、＼』を上向き（６８４０１〜６８４０２）に書くことによって、大文字の『Ｘ』（６８４０５）との混乱の可能性が避けられる。
【００８２】
Ｆｉｇ．６ｈは、共通の特徴を有する別の記号グループを示している。これらはすべて、少なくとも個別に書かれる水平線を有している。このキャラクタのグループもまた、テキスト関連のグループ（６８５）と非テキスト関連のグループ（６８６）に分けることができる。テキスト関連のキャラクタ『‐』および『＿』（６８７１）は、それぞれ長短の２つの異なる長さを有している。これらは、いずれも共通して左から右へ向かう方向（６８７）に書くことができる。残りの、非テキスト関連のグループの記号は、好ましくは短い右から左へ向かう水平線（６８８２）を伴って開始するものとすることができる。この線を書いた後は、システムが、追加の筆記情報によって所望の記号が完成されることを期待する。たとえば、追加の短い右から左へ向かう水平線（６８８）によって、システムは、キャラクタ『＝』（６８８１）が入力されたことを理解する。このほかの記号（６８８３）に関して提案されている別の方向（６８９）についても示されている。記号の不連続部分のそれぞれを入力する順序に従うことは重要である。これらは、大多数のユーザのやり方に従って例示されている。
【００８３】
Ｆｉｇ．６ｉを参照すると、手書き方向の方法の、もう１つの重要な部分が例示されている。キャラクタ『．』（６９０）が示されている。『：』および『；』（６９３０１）といった、ほかの不連続なキャラクタもまた記号『．』を含み、それに別の記号が追加されている。これにおいても認識システムによる混同を回避するために、キャラクタ『．』を非常に小さい円（６９１）として、反時計方向（６９２）に書くものとすることができる。記号『．』を含む別のキャラクタ（６９３）は、この記号で開始（６９４）するが、時計方向（６９５）に書くものとすればよい。このシステムは、これがキャラクタ『．』ではなく、記号の残りの部分が入力されることを期待する。第４列（４９４１）は、記号の部分が入力される順序および方向を例示している。
【００８４】
Ｆｉｇ．６ｊは、標準キーボード上において利用可能な追加の、印刷による記号（６９６）、共通する筆記のやり方に基づいた手書きフォーム（６９７）、および各記号を書くために採用される方向（６９８）を示している。
【００８５】
それに加えて、たとえばペン先で筆記表面上をたたく動作（たとえば、シングル・タップ）等の動作によって生成される特殊な記号もしくは機能のサウンド波形が、ＨＷＳＲＳに対して空白文字または『．』（たとえば、ドット文字）を示すこともできる。多くの場合に、単語、キャラクタ、記号等の終了が空白文字またはドット文字によって示されることから、これが特に重要となる。更なるたたく動作のそれぞれは、追加のスペースを表す。また不連続な記号の終了をシステムに示す場合においても、筆記表面上のペン先の接触等の動作（たとえば、波形を生成するための動作）または音声信号等を用いることができる。
【００８６】
Ｆｉｇ．６ｋは、標準キーボードにプリントされているすべての記号ならびにキャラクタ、およびここに説明した原理に基づいた、各記号の筆記の間に結果として守られるべき方向の提案を示している。これに示されているように、変形されている記号は皆無であり、ユーザが従わなければならない制約は最小かつ論理的であり、したがってそれらは、ユーザによって容易に採用されることとなろう。またここで理解されようが、上記提案の記号を筆記するための原則および方向は、各種の可能性のうちのいくつかの例にすぎない。開示した発明の形式ならびに詳細における各種の省略ならびに代用および変更は、本発明の精神から逸脱することなく、当業者であれば可能であると見られる。たとえば、テキスト内において、かなり大きなサイズで重々しく小文字を筆記することによって、それらを大文字と見なすことをＨＷＳＲＳに伝えてもよい。このことは、使用パターンがより少なくなることから、これらの認識システムを容易にすることができる。なお、これらの方法ならびに発明が、特に、アラビア語あるいは中国語等のほかの言語に対してさえも適用できることに注意しなければならない。
【００８７】
前述したように、ユーザは、本発明の認識システムに、ユーザ自身の手書きを『学習』させることができる。たとえば、本発明の構造化された筆記チップおよび手書き認識システムを有する電子デバイスの使用開始時に、ユーザが、筆記を意図しているすべての記号（たとえば、言語内のキャラクタ・セット、ユーザのカスタム化した記号等）を筆記してもよい。認識システムは、各記号に関するパターン（たとえば、キー・パターン）を生成し、『パターン化されたキャラクタ・セット』を作成して、その後の、そのユーザによって筆記される記号（たとえば入力）の認識のための比較にそれらを使用することができる。筆記（たとえばテキスト、図等）の間に、ユーザが、新しい記号（たとえば、新しいキー・パターン）をそのユーザの『パターン化されたキャラクタ・セット』に追加することもできる。すでに述べたように、異なる構造を有する異なる表面（たとえば、紙、木製テーブル等の各種材料から作られた表面）上に筆記された記号の認識精度を高くするために、ユーザは、それらの表面上において上記と同じ『学習』手順を繰り返して新しい『パターン化されたキャラクタ・セット』を作成してもよく、またより数の少ない基本記号（たとえば、各種方向の直線、時計方向の円、反時計方向の円等）を当該表面上に筆記してもよい。その後システムが、オリジナルの『パターン化されたキャラクタ・セット』のキャラクタおよび前記表面上に筆記された前記基本記号の特性に基づいて、前記表面に関する新しい『パターン化されたキャラクタ・セット』を自動的に作成するようにできる。
【００８８】
本発明の一実施態様によれば、ユーザの振る舞いによって、希望する数の記号の繰り返しをシステムに伝えることができる。たとえば記号を筆記する前、筆記の間、あるいは筆記後に、ユーザが指を使って、あるいはイレーサを用いて筆記表面をたたき、最後に筆記した記号の繰り返しを指示することが考えられる。
【００８９】
本発明の別の実施態様によれば、筆記した記号を繰り返すために、ユーザは、たとえばスタイラス上に備わるあらかじめ定義済みのボタンを押すことができ、それによって、最後に筆記された記号が繰り返される。またユーザは、すでに入力済みであり、スタイラスのスクリーン上のカーソルの直前に表示されている記号を繰り返すこともできる（カーソルについては、この明細書内において後述する）。あらかじめ定義済みのボタンを１度だけ押せば、その記号が１度だけ繰り返される。追加して押す（たとえばタップ）ごとに、その記号の繰り返しが追加されることになる。この記号の連続的な繰り返しを行うためには、ユーザは、そのボタンを押し続ければよい。この記号の繰り返しは、ユーザがそのボタンを押すことを止めるまで続けられることになる。
【００９０】
ディジタル化した記号の波形が、キー・パターン・キャラクタ・セットのキー・パターンに一致しないこともしばしばあり、そのため筆記されたその文字が、本発明の手書き認識システムによって認識されないこともある。本発明の一実施態様によれば、記号がシステムによって認識されなかった場合には、当該記号に関連する情報（たとえば、そのグラフィティ、波形、テキスト内の場所等）が、たとえば前記スタイラス・コンピュータのメモリ内にストアされて、ユーザは、最終的な操作のためにその情報にアクセスすることができる。たとえば、前記記号を描画して保存し、あるいはプリントしてもよい。
【００９１】
Ｆｉｇ．７に、本発明の一実施態様に従ったデータ（たとえば、筆記表面上におけるスタイラス筆記チップによる記号の筆記の間のサウンド）の入力ならびにデータの出力のステップに関係するブロック図７００を示す。これに示されているように、ステップ７０１において生成された（かつ、おそらくは増幅された）サウンドが、ステップ７０２においてマイクロフォンによって取り込まれ、波形が生成される。前記波形は、ステップ７０３に示されるように、ディジタイザに渡される。リアルタイム認識処理等の処理手順に応じてディジタイザは、たとえば前記ディジタル化された波形を、ＨＷＳＲＳシステム７０６がインストールされているスタイラス・コンピュータのＲＡＭ７０４に渡すことができる。遅延認識処理等の理由から、あるいは単に前記ディジタル化された波形を記録するために、前記ディジタル化された波形を前記スタイラス・コンピュータ７００のメモリ７０７に渡してもよい。前記記憶されたディジタル化された入力７０８は、その後の処理（たとえば、遅延ＨＷＳＲＳ処理）において使用することができる。また前記メモリ７０７が、ディジタル化された入力の認識のためにＨＷＳＲＳによって使用される、あらかじめ定義済みの各種記号の波形のディジタル化されたキー・パターンを含んでいることもある。前記ディジタル化された入力を前記スタイラス・コンピュータのＲＡＭ７０４に（リアルタイムで、あるいは遅延して）渡した後、マイクロプロセッサ７０５を使用することによって、前記スタイラス・コンピュータのスタイラス・コンピュータのＨＷＳＲＳが、前記ディジタル化された入力と前記キー・パターンとを比較し、前記入力と前記キー・パターンの一致を試みる。ディジタル化された入力との類似性がもっとも高いキー・パターンを選択した後、システムは、前記選択したキー・パターンに対応するディジタル化された記号を選択する。必要に応じて、前記ディジタル化された記号をメモリ７０７にストアしてもよく、あるいは前記スタイラス・コンピュータのディスプレイ７０１１等のデバイス、もしくは外部デバイス７０１２等のデバイスに、出力として渡すこともできる。
【００９２】
これまで説明してきた実施態様は、筆記表面上における、当該筆記表面上に記号を筆記する間のポインティング・デバイス筆記チップの接触によって生成されるサウンドを使用するデータ入力方法に関係している。本発明の別の実施態様によれば、前述したように、スタイラス・コンピュータの構造化された筆記チップ等のポインティング・デバイスの筆記チップ内にセンサが備えられる。前記センサの例およびそれらの構造については、この明細書においてすでに説明した。前述したように、前記センサは、筆記表面上に記号を筆記する間の構造化された筆記チップの異なる部分に印加される（たとえば振動、熱等に従った）圧力レベル等の情報を取り込み、前記情報を、Ｆｉｇ．７に示したような認識処理のために、スタイラス・コンピュータのディジタイザに伝達することができる。ここで理解される必要があるが、これまで、およびこれ以降に述べる、手書きサウンド認識システムに関係するすべての実施態様ならびに例は、前記ポインティング・デバイス筆記チップのセンサによって生成される任意の波形を基礎とする認識に適用することができる。
【００９３】
前述し、またＦｉｇ．７ａに示されるように、本発明のもう１つの目的は、ユーザが慣れ親しんだ形の、ユーザ・フレンドリな可搬性の高い、スタイラス（７５０）形式の小型の電子デバイスをユーザに提供することである。このスタイラスは、簡単なオーガナイザ、モバイル通信デバイス、ＰＤＡデバイス、コンピュータ等として機能することができる。好ましくはそれが、入力として手書きサウンドを生成する本発明の構造化されたペン先、ディスプレイ（７５２）、およびＨＷＳＲＳを備える。スタイラスは、指示手段（７５１）を有し、筆記の間にユーザがあらかじめ決められたポジションでスタイラスを手の中に保持することを可能にする。これは、構造化されたペン先が、常に同一方向に関して同一のサウンド（すでにパターン化され、ＨＷＳＲＳに与えられている）を生成する必要があることによる。Ｆｉｇ．７ｂに、仮想的なスタイラス・コンピュータ筆記チップの正面図（７７０）を示す。このペン先は、インク（７７１）等の従来の筆記手段も有しており、必要な場合および必要なときに、同時に、あるいは別々に従来の手書きドキュメントを生成することができる。レーザ、赤外線等の通信手段、およびカメラ（７７２）、光学リーダ（７７３）といったそのほかの特徴をペン先内もしくはスタイラスの内／外の任意の場所に備えてもよい。
【００９４】
本発明の一実施態様によれば、Ｆｉｇ．７ｃに示されているように、本発明のスタイラス・コンピュータ７１０が、少なくとも１つのマイクロフォン７１１を備えて、スタイラス筆記チップ７８２によって、筆記表面上における筆記の間に生成されたサウンドを取り込むことができる。前記マイクロフォンは、指向性マイクロフォンとしてもよい。より良好な取り込みのためには、前記マイクロフォンをスタイラス・コンピュータのポインティング・チップ７１２の近傍に備えることができる。
【００９５】
本発明の一実施態様によれば、前記筆記表面上における筆記の間の、ポインティング・デバイス・チップと筆記表面との接触によって生成されるサウンドの取り込みを可能にする態様で、少なくとも１つのマイクロフォンを、スタイラス・コンピュータ本体内に備えることができる。この種のサウンドは、スタイラス・コンピュータの本体の中を伝わることができる。さらにＦｉｇ．７ｃを参照するが、たとえばマイクロフォン７１３をスタイラス・コンピュータ７１０の内側に備えることができる。筆記表面上における筆記チップの接触によって生成されるサウンドの伝達を可能にするために、スタイラス・コンピュータ本体の内側に向かって、好ましくは筆記チップ７１２の近傍の、スタイラス・コンピュータ本体の表面にホール７１４を備えてもよい。前記ホールは、スタイラス本体内に伝達される前記サウンドを増幅する態様で設計することができる。また、スタイラス筆記チップ７１２を、スタイラス・コンピュータ本体内への前記サウンドの伝達を可能にするホールを備える態様で構成することもできる。Ｆｉｇ．７ｄは、スタイラス・コンピュータの筆記チップ７２０の例である。これに示されているように、たとえば前記筆記チップを、たとえば構造化された部分７３１の間に空の通路（たとえばホール）７２１を備える態様で設計することができる。また、前記筆記チップ上のセンサが、たとえば筆記表面上において筆記チップによって生成された振動をスタイラス内に伝達し、スタイラス内に配置された前記マイクロフォンによって受け取られるサウンドを生成してもよい。
【００９６】
筆記表面上において筆記チップによって生成されたサウンドを増幅するために、スタイラス・コンピュータ内に増幅手段を備えることもできる。Ｆｉｇ．７ｅは、指数関数曲線形状（たとえば、従来のラウドスピーカの形状）を有する増幅手段７８３を備えたスタイラス・コンピュータ７８０を示している。筆記表面上においてポインティング・チップ７８２を用いる筆記の間の、前記筆記表面と前記ポインティング・チップとの接触によるサウンドは、前記増幅手段７８３の内側に伝達されて、適切な場所（たとえば、増幅手段の他端）に配置されたマイクロフォン７８１によって取り込まれる。
【００９７】
筆記表面上においてポインティング・チップを用いる筆記の間の前記筆記表面と前記ポインティング・チップの接触によるサウンドは、さらに増幅することができる。本発明の一実施態様によれば、Ｆｉｇ．７ｆに示されるように、前記サウンドを増幅するために、共鳴チャンバ７９４等の増幅手段をスタイラス・コンピュータ７９０内に備えることができる。筆記表面上におけるスタイラス筆記チップ７９１の接触によって生成されたサウンドは、前記共鳴チャンバ７９４に伝達され、そこで、前記サウンドは増幅される。マイクロフォン７９２を、前記チャンバ内に備えて、前記増幅されたサウンドを取り込ませることができる。この増幅プロシージャは、すでに説明した指数関数曲線形状の手段７９３等のほかの増幅プロシージャに追加して備えられるものとしてもよい。ここで理解されようが、当業者に周知の任意の伝達ならびに増幅手段を、高品質サウンドの取り込みに使用することができる。たとえば増幅チャンバは、増幅を目的とした任意の形状、構造を有し、任意の材料からなるものとすることができる。
【００９８】
Ｆｉｇ．８ａに示されているように、スタイラス（８５０）は、コンピュータの全機能ならびに追加の手段、すなわち少なくとも１つのバッテリ（８５１）、メモリ（ＲＡＭ）（８５２）、ハードディスク、マイクロプロセッサ（８５３）、トランシーバ（８５４）、マイクロフォン（８５７）、光学リーダ（８５６）、ポジション検出手段（８５８）、筆記開始／終了検出手段（８５５）、スピーカ（８５９）、タイマ（図示せず）、ＬＣＤディスプレイ（図示せず）等を備えることができる。
【００９９】
スタイラスの非使用時は、望ましくない動作を回避するために、構造化されたペン先をスタイラス内側に隠れるポジション（８４０）に収めることができる。Ｆｉｇ．８ｂは、スタイラス外側の露出ポジション（８４２）にある構造化されたペン先を示している。またこれには、筆記開始／終了検出手段（８５５）がピン（８４１）を有することが示されている。Ｆｉｇ．８ｃに示されているように、チップが筆記表面（８３０）と接触している間は、筆記検出ピン（８４１）が内側のポジションにあり、筆記状態にあることが示される。ユーザがペン先を持ち上げると（Ｆｉｇ．８ｄ）、検出ピン（８４１）が外側に出て非筆記状態であることが示される。ここで理解されたいが、ここに説明した検出手段は一例にすぎない。このほかの筆記開始／終了表示手段およびシステムを使用してもよい。たとえば、構造化されたペン先に１ないしは複数のセンサを取り付け、システムに筆記状態または非筆記状態を示すこともできる。また、ペン先と筆記表面の接触によって作り出されるサウンドが筆記状態を示すようにしてもよい。無音は、非筆記状態を示すことができる。
【０１００】
引き続きＦｉｇ．８ｄを参照するが、スタイラス（８５０）は、１ないしは複数のＬＣＤディスプレイ（８６０）を備え、データ（８６１）を表示することができる。またこれは、訂正のためのイレーサ（８６３）を備えることもできる。イレーサ表面は特殊なテクスチャを有し、筆記表面上における従来のペン・イレーサとして機能し、同時にイレーシング状態をＨＷＳＲＳに伝達するための特殊なサウンドを生成することができる。構造化されたペン先と同様に、筆記表面上のそのストロークの方向に従った複数のサウンドを生成するように、イレーサ表面を特殊なテクスチャから構成してもよい。当然のことながら、これらのサウンドは、構造化されたペン先からのサウンドと異なる必要がある。オン／オフ、送信／受信等のコマンドまたは機能を、イレーサによって、筆記表面上に対応する単語もしくは記号を筆記するときに生成されるサウンドに割り当ててもよい。当然ではあるが、同一のマイクロフォンまたは追加の（好ましくは指向性の）マイクロフォンを備え、筆記表面と接触する前記イレーサによって生成されるサウンドを明瞭に取り込むことができる。
【０１０１】
Ｆｉｇ．９ａは、ユーザがスタイラス（８５０）を使用して３つの手書き文字（９１０）筆記した紙のノート（９００）等の筆記表面を示している。これらの文字は、スタイラス・コンピュータによってディジタル化され（９２０）、スタイラスのＬＣＤディスプレイ（９０２）上に表示されている。最後に入力されたキャラクタの直後には、カーソル（９０４）が配置されている。ユーザが誤って入力したキャラクタの削除を希望する場合には、ユーザは、構造化されたイレーサ（９０１）を使用することができる。Ｆｉｇ．９ｂおよび９ｃに示されているように、筆記表面上において、たとえば左右方向（９１１）の直線ストロークを与えることによって、イレーサおよび筆記表面の接触から生成されるサウンドがＨＷＳＲＳにイレーシング動作を通知する。最後に入力されたキャラクタがディスプレイ（９１２）ならびにスタイラス・コンピュータのメモリ内から削除されることになる。さらに続けてキャラクタの削除を行うためには、追加のストロークを順次与えればよい。ユーザが、最後に入力したキャラクタ以外のキャラクタの削除を希望する場合には、そのキャラクタの隣にカーソルを置き、前述のイレーシング手順を行うことができる。このスタイラスを用いて従来の手書きドキュメントを作成できることから、実用上の理由から、ノートパッド上のキャラクタを同時に消すために、複数のストロークが必要になることがある。その場合には、コンピュータ化されたイレーシング・システムを修正してほかのイレーシング・システムを許容することができる。たとえば、（伝統的な鉛筆用消しゴムを用いた手書きイレーシング手順のような）連続的な短い間隔のストロークによって、１キャラクタの削除をＨＷＳＲＳに伝達することが考えられる。次のキャラクタを削除するためには、少なくとも短いポーズを適用すればよい。筆記表面上における前記イレーサストロークによって生成されるサウンドのより良好な取り込みを行うために、少なくとも１つの追加の（好ましくは指向性の）マイクロフォンを、前記イレーサ内もしくはその近傍に備えることができる。ここで、この原理に基づいた、可能性のあるほかのイレーシング手順も適用可能であることを理解する必要がある。また、ユーザが、独自のカスタム化したイレーシングに関する手順または記号もしくは動作を作り出すこともできる。
【０１０２】
本発明のさらに別の実施態様によれば、前述したイレーシング手順を構造化されたペン先によって行うことができる。Ｆｉｇ．１０ａに示されているように、筆記表面（１００２）上にスタイラス（１０００）によってテキスト（１００１）が筆記されている。これらの文字はディジタル化され（１００２）スタイラスのＬＣＤディスプレイ（１００３）上に表示される。最後に入力されたキャラクタの後ろには、カーソル・バー（１００４）が配置されている。Ｆｉｇ．１０ａに示されているように、ユーザは、１キャラクタの削除を希望するとき、伝統的な手書き手順の場合と同様にして、ペン先（１０１１）を用いて筆記表面上に取消線（１０１０）を引き、カーソルの手前にある最後の文字をコンピュータのメモリから削除することができる。筆記表面上におけるペン先のストロークによって生成されるサウンドは、ＨＷＳＲＳにイレーシング状態を伝えることができる。カーソルの手前の文字は、メモリならびにディスプレイ（１０１２）から削除される。さらに続けて文字を削除する場合には同様の手順が必要になる。
【０１０３】
Ｆｉｇ．１１は、前述したスタイラス・タイプのコンピュータ（１１１１）を示しており、これには、本発明の一実施態様に従ったフラット・ディスプレイ（１１１０）が備わっている。
【０１０４】
Ｆｉｇ．１１ａに、本発明の一実施態様に従ったスタイラス・コンピュータ（１１００）を例示する。このスタイラスは、前述した特徴の一部もしくはすべてを有するものとすることができる。さらにこれには曲面（たとえば凸面）ＬＣＤディスプレイ・ユニット（１１０１）が備わり、スタイラス・コンピュータ表面の少なくとも一部を覆っている。Ｆｉｇ．１１ｂは、半分開いたポジション（１１１２）のディスプレイを示している。平均的な従来のスタイラスの表面を覆う寸法は、幅が約１７センチメートル、高さが４〜５センチメートルの大きさである。ユーザは、ディスプレイ全体の見る場合に、手の中でスタイラスを回転すればよい。
【０１０５】
１７センチメートルは、Ａ３／Ａ４の用紙に筆記される標準的なテキスト行にほぼ等しいサイズである。Ｆｉｇ．１１ｃに示されているように、標準的なスタイラス形式のコンピュータを覆う、１７×５センチメートル（１１２２）の寸法を有するＬＣＤディスプレイ・スクリーン（１１２１）は、実寸のテキストの表示に充分であり、そのテキストの実寸の操作を可能にする。またこれは、ピクチャの表示あるいは実寸のウェブ・ページのブラウズを可能にする充分な大きさでもある。前述したようなユーザ・フレンドリな手書き入力システムと、ここで説明したような大型ディスプレイを、ペン形式という慣れ親しんだ形の装置内において組み合わせることによって、可搬性が高く、強力な小型化された機器が作り出される。これは、誰でも使用できる簡単なディジタル・ペン（たとえば、主婦のためのショッピング・メモ）あるいはモバイル電話、ＰＤＡデバイス、もしくはコンピュータ等のより高度な機器というように多くのバージョンで製造することができる。この機器の大きな利点の１つは、筆記表面を持ち歩く必要がなくなることである。ユーザは、テーブルの表面等の利用可能な任意の表面上に入力を筆記することができる。ここで注意しなければならないが、このスタイラス・コンピュータのディスプレイ・ユニット１１１２は、取り外し自在にスタイラス・コンピュータに取り付け可能であり、ケーブルもしくはワイヤレスによってスタイラス・コンピュータに接続することができる。前記ディスプレイは、フレキシブル（たとえば、可塑性材料から作られる）としてもよく、その結果、たとえば前記スタイラス・コンピュータを使用しないときには、前記スタイラスの周囲に前記ディスプレイを巻き付けるか、もしくは前記スタイラスに巻き付けて取り付け、あるいはスタイラス・コンピュータの内側またはそのカバーの中に収めておくこともできる。前記ディスプレイの、使用のための取り外しおよび／または展開（たとえば広げる）を行うこともできる。このコンセプトを使用することによって、より大きな（たとえば、スタイラス・コンピュータの周囲に数回にわたって巻き付けられる）ディスプレイをスタイラス・コンピュータに組み込むこと、および／またはそれとともに使用することも考えられる。さらに、このスタイラス・コンピュータをケーブルもしくワイヤレスを経由して任意の外部ディスプレイに接続してもよい。前記ディスプレイと前記スタイラスがワイヤレス接続される場合には、ワイヤレス通信手段（たとえば、ブルートゥース（ｂｌｕｅ ｔｏｏｔｈ）、赤外線等）を前記ディスプレイおよび／または前記スタイラスに備えることができる。
【０１０６】
本発明の一実施態様によれば、Ｆｉｇ．１２に示されているように、スタイラス・コンピュータ（１２００）にボタン‐タイプのマウス（たとえば、ポインティングおよび／または選択デバイス）（１２０１）を備えてもよく、好ましくはそれが、ポインティング・チップ（１２０２）と逆側に取り付けられる。Ｆｉｇ．１２ａ〜１２ｅを参照し、このマウスの、可能性のあるいくつかの物理的な動きを示す。Ｆｉｇ．１２ａは、スタイラスのマウス側（１２１０）、すなわちマウス（１２０１）が取り付けられる側を示している。マウスは、内側ポジション（１２１２）、あるいは外側ポジション（１２１３）というように、１つ、２つ、もしくはそれを超える取り付けポジションをスタイラス軸上に有することが可能である。取り付けポジションを変更するためには、マウスを引き出す（１２４１）か、あるいはスタイラス軸内に押し込む（１２４２）。指示手段（１２１６）または指示マーク（１２２７）により、マウスのポジションを示してもよい。Ｆｉｇ．１２ｂに示されているように、マウスは、各種のクリック・システム、たとえば、スタイラスの内側方向（１２１７）のクリック、およびスタイラスの外側方向（１２１５）のクリックを有することもできる。
【０１０７】
またＦｉｇ．１２ｃを参照すると、このマウス（１２０１）は、各ポジションまたはクリック状態ごとに互いに逆方向となる回転（１２１９）を有することもできる。
【０１０８】
さらに、Ｆｉｇ．１２ｄに示されているように、このマウス（１２０１）は、内側ポジション（１２６１）または外側ポジション（１２６２）等のそれぞれのポジショニング状態において、スタイラスの軸と垂直に全方向（１２５１，１２５２，１２５３等）に押すことができる。Ｆｉｇ．１２ｅは、このマウスの側面図（１２２３）およびそのマウスに対する加圧方向（１２７２，１２７３等）のいくつかを示している。またこの図は、マウスの正面図（１２２２）およびそれに対する加圧方向（１２２４，１２２５等）のいくつかを示している。さらに、ここに説明した動きが、各種の可能性のうちの一部の例であることもここで理解される。開示した発明の形式ならびに詳細における各種の省略ならびに代用および変更は、本発明の精神から逸脱することなく、当業者であれば実施可能と見られる。たとえば、Ｆｉｇ．１２ｆに示されるように、スタイラス‐タイプのコンピュータのマウスに、ラップトップ・コンピュータに使用されているものに類似のブル・システム（ｂｕｌｌ ｓｙｓｔｅｍ）を備え、ラップトップと同じ方法に従って操作することもできる。
【０１０９】
前述したマウスの動きおよび／またはそれらの組み合わせに、各種のコンピュータ・コマンド、機能、システ・モード等を割り当ててもよい。これにより、スタイラス‐タイプのコンピュータの、完全であり、容易かつ迅速なデータならびに機能のコントロールが可能になる。以下、これを立証するために各種の実施態様のいくつかについて説明する。ここで注意しなければならないが、前述の例もしくは以下に説明する例は、いくつかの方法を例示しているにすぎない。当業者においては、本発明の精神から逸脱することなく、割り当ての組み合わせの多くのバリエーションが使用できることを認識されよう。
【０１１０】
本発明の一実施態様によれば、スタイラス・コンピュータのディスプレイを任意のコンピュータ・ディスプレイと類似にできる。つまり、プログラム・アイコン、メニュー、異なるウインドウの表示等を含むことができる。たとえば、Ｆｉｇ．１３ａに示されているように、ワード・プロセッシング・プログラムを開くと、ディスプレイ（１３００）に少なくとも２つの異なるセクションが現れる。メニュー・セクション（１３０１）が、たとえばスクリーンのトップに配置され、テキスト・セクション（１３０２）が、たとえばメニュー・セクションの下側に配置される。メニュー・セクションは、１ないしは複数のメニュー行（１３０３）を含み、そのそれぞれがメニュー・バー・タイトル（１３０４）のリストを含み、必要に応じてそれらを開くことができる。この例においては、メニュー・リストの行の１つを表示しているディスプレイが示されている。ここで理解する必要があるが、スタイラス・コンピュータのディスプレイ・ユニットは、必要性および／または利用可能な表面の制限等に応じて、一度に複数行のメニュー・リストを示すこともできる。
【０１１１】
本発明の一実施態様によれば、ユーザは、マウス（１３０９）を使用してメニュー・リストをスクロールすることができる。たとえばユーザは、希望するメニュー・バーを含むメニュー・リストを探し出すために、まずマウスを、たとえば内側ポジション（１３０７）となるメニュー・モードに位置決めする。続いて、Ｆｉｇ．１３ｂ〜１３ｃに示されているように、マウスを任意の方向（１３０８）に回転し、ディスプレイ上において新しいメニュー・リスト（１３１３，１３２３等）をスクロールする。ユーザは、希望するメニューを含むメニュー・リストが現れたところで回転を停止する。
【０１１２】
本発明の一実施態様によれば、ユーザは、マウスを使用することによってメニュー・リスト内を移動することができる。これを目的としてユーザは、前述したように、またＦｉｇ．１４ａに示したように、まずマウス（１４００）をメニュー・モード・ポジション（１４０１）に位置決めする。これによりシステムが、メニュー・リスト選択モードに入る。続いて、Ｆｉｇ．１４ｂに示されるように、マウスをスタイラス軸に沿って内側方向（１４１１）に、クリックが生じる充分な強さで押すと、システムがメニュー（バー）選択モードに入り、メニュー（バー）選択インジケータ手段（１４１２）がメニュー・リスト上に現れる。この時点では、インジケータがいずれのメニューもポイントしていない。次に、Ｆｉｇ．１４ｃに示されるように、マウスを回転（１４２１）するとメニュー・バー選択インジケータがメニュー・バー・タイトル上を移動する（１４２２）。選択インジケータがリスト上の最後のメニューまで到達した後にさらにユーザがマウスを回転すると、Ｆｉｇ．１４ｄに示されるように、次のメニュー・リスト（１４３２）が現れ、メニュー・バー選択インジケータは、新しいメニューの最初のロケーション（１４３３）にジャンプすることになる。これが、Ｆｉｇ．１４ｅに示されるように、たとえば希望のメニューにインジケータが到達してユーザがマウスの回転を停止するまで続けられる。メニュー・モードからメニュー・リスト選択モードに戻るときは、Ｆｉｇ．１４ｆに示されているように、ユーザは、たとえばマウスを内側方向にクリックし、同時に任意の方向にそれ（１４５１）わずかに回転させる。
【０１１３】
Ｆｉｇ．１５ａ〜１５ｈは、マウス操作によるメニュー内の移動および機能の例を示している。Ｆｉｇ．１５ａを参照すると、スタイラス‐タイプのコンピュータ（１５００）が示されている。前述してように、ＬＣＤディスプレイ（１５０３）の上側部分は、メニュー・リストに割り当てられている。メニュー・バー内の機能を選択するために、ユーザは、そのメニュー・バーが位置するメニュー・リストを見る必要がある。たとえば、ユーザがフォントの変更を希望した場合には、対応するメニュー・リストに移動しなければならない。そのためにユーザは、まず、たとえば（スタイラス軸の）内側ポジション（１５０２）のメニュー選択モードにマウス（１５０１）を位置決めする必要がある。希望するメニュー・バーが現在のメニュー・リスト内（１５０４）になく、システムがメニュー（バー）選択モードであれば、ユーザはマウスを回転（１５０５）し、必要に応じて選択インジケータ（１５０６）を、Ｆｉｇ．１５ｂに示されるように、最後のメニュー・バー・タイトル（１５１０）に到達するまで、前方もしくは後方に移動させる。ユーザがマウスの回転を継続すれば、Ｆｉｇ．１５ｃに示されるように、次のメニュー・リスト（１５２０）が現れる。メニュー選択インジケータは、新しいメニュー・リストの最初のロケーションにジャンプする。そのメニュー・リストもユーザの希望するものでない場合には、ユーザは、引き続きマウスを回転してメニュー・バー・インジケータ（１５２１）を、Ｆｉｇ．１５ｄに示されるように、最後のメニュー・タイトルに達するまで移動し、新しいメニュー・リスト（１５３０）をスクリーン上に表示させる。メニュー・バー・インジケータは、再び新しいメニュー・リストの次のロケーションにジャンプし、ユーザがマウスの回転を停止して、インジケータをメニュー・タイトル（１５３１）上に位置決めするまで進み続ける。誤って選択メニュー・タイトル・インジケータを必要以上に進ませてしまった場合には、Ｆｉｇ．１５ｅに示されるように、ユーザはマウス（１５０１）を逆方向（１５４１）に回転し、メニュー・バー選択インジケータを戻して、希望するメニュー・タイトル（１５４２）上で止めればよい。Ｆｉｇ．１５ｆに示されているように、この時点においてユーザは、マウスを内側方向（１５５１）に押してクリックする。システムが機能選択モードに入り、メニュー・バー（たとえば、例証の目的で平坦に延びるポジションで示した、ペン表面を取り囲むポップアップ・メニュー）（１５５２）が開く。機能選択インジケータ（１５５３）は、現在の選択肢の上に置かれている。Ｆｉｇ．１５ｇに示されているように、それを希望する選択肢上に移動するために、ユーザは、インジケータが希望する機能（１５６３）に到達するまで、必要な方向にマウス（１４０１）を回転（１５６２）する。このポップアップ・メニューには、コンピュータのポップアップ・メニューに類似した原理を使用してもよい。Ｆｉｇ．１５ｈに示されているように、その後ユーザは、再びマウスの内側方向（１５７１）に押してクリックする。機能が選択され、以前の選択肢に置き換わってメニュー・バー・タイトル（１５７２）に表示される。さらにマウスは、機能選択モードからメニュー（バー）選択モードに戻る。
【０１１４】
本発明の一実施態様によれば、スタイラス軸上のマウス・ポジションの１つにテキスト編集モードを割り当てることが可能であり、マウスがテキスト編集モードにあるときには、ユーザがマウスを回転することによってテキスト・ドキュメント行またはページをスクロールすることができる。Ｆｉｇ．１６ａは、たとえば前述したすべての特徴ならびにシステムを有するスタイラス‐タイプのコンピュータ（１６００）を示している。この例においては、テキスト編集ウインドウ（１６０１）が示されている。ディスプレイ・ユニットは、２つのセクションに分割されている。上側のセクション（１６０２）がメニュー・リストに割り当てられ、下側のセクション（１６０３）がテキストに割り当てられる。この例の場合、２行のテキストを表示するディスプレイが例示されている。ここで理解されようが、このシステムのディスプレイ・ユニットは、必要性および／または利用可能な表面の制限等に応じて、２行より多くの、あるいはそれより少ない行を表示することもある。マウス・ボタン（１６０４）は、たとえば内側ポジションのメニュー・モードにある。Ｆｉｇ．１６ｂに示されているように、ユーザは、たとえばマウスを引き出し（１６１０）、それを外側ポジションに位置させ、システムをテキスト編集モードにする。その後ユーザは、Ｆｉｇ．１６ｃに示されているように、たとえば時計方向（１６０５）にマウスを回転することによってテキスト行ならびにページ（１６０８）を前方にスクロールし、Ｆｉｇ．１６ｄに示されているように、マウスを反時計方向（１６０６）に回転することによってテキスト行ならびにページ（１６０９）を後方にスクロールすることができる。
【０１１５】
本発明のさらに別の実施態様によれば、マウスを回転することによってカーソルを操作することもできる。これについては、Ｆｉｇ．１７ａ〜１７ｆに例示されている。Ｆｉｇ．１７ａに示されているように、まずユーザは、マウスをテキスト編集モードに関連するポジション、たとえば外側のポジション（１７０１）に位置決めする必要がある。テキスト・ナビゲーション・モードが行スクロール・モードになっている場合には、Ｆｉｇ．１７ｂに示されているように、ユーザは、マウスを外側方向（１７０２）にクリックしてシステムをカーソル（キャラクタ）ナビゲーション・モードにする。カーソルが現在のページにあるときには、それがテキスト内の同じポジションにとどまる。カーソルが現在のページにない場合には、テキスト内のオリジナルのロケーションにとどまるか、あるいは自動的に現在のページに移動し、たとえば、最後の行（１７０４）もしくはあらかじめ定義済みの行の、先頭のポジション（１７０３）または最後のポジション、あるいは行内のポジションに位置する。その後、Ｆｉｇ．１７ｃ〜１７ｄに示されているように、たとえばマウスを時計方向（１７１０）に回転することによってカーソルがキャラクタ間を前方に、それが行内の最後のポジション（１７２１）に到達するまで進む。スクリーン上に次の行が表示されている場合には、カーソルが次の行の先頭にジャンプし、ユーザがマウスの回転を続ける限り、継続して前方に移動する。現在の行がスクリーン上の最後の行であり、カーソルが行の最後のポジションに到達した場合には、ユーザが継続してマウスを回転することによって、Ｆｉｇ．１７ｅに示されているように、その次の行（１７３２）が現れ、カーソルが次の行（１７３３）に進み、ユーザがマウスの回転を続ける限り、それが継続される。ユーザは、逆方向（１７４１）へのカーソルの移動を希望する場合に、マウスを逆方向（１７４２）に回転する。行スクロール・モードに戻る場合には、本発明の一実施態様に従って、マウスを引いてクリックすると同時に、わずかにそれを回転する。
【０１１６】
本発明の一実施態様によれば、Ｆｉｇ．１８ａに示されるように、たとえばコンピュータに使用されているものに類似のテキスト選択インジケータ（１８０１）が、スタイラス・コンピュータデバイスのテキスト編集モードに備わっている。Ｆｉｇ．１８ｂに示されているように、マウス（１８１０）を使用して、スクリーン上のインジケータを移動（１８１２）することができる。これを目的としてテキスト編集モード等のポジションに、この例の場合であれば外側のポジション（１８１５）にマウスを位置決めすることができる。たとえばＦｉｇ．１８ｃに示されているように、テキスト内のロケーション（１８２１）を選択する場合においてユーザは、まずスタイラス軸と垂直な方向にマウスを押すことによって、インジケータ（１８２２）をそこに移動する。続いてユーザは、Ｆｉｇ．１８ｄに示されているように、マウスを外側方向（１８３１）にクリックすることによって、そのポイントを選択し、カーソル（１８３２）をそこに配置する。ほかの機能との混同を防止するために（たとえば、行スクロール・モードからカーソル操作モードへの移行）、ユーザは、クリックを行う間、より長く（たとえば１秒間）マウスを押す状態を維持する必要がある。マウスのクリックに代えて、ユーザは、スタイラス・コンピュータに備わる別のあらかじめ定義済みのボタン、たとえばＦｉｇ．２７ｇに示されているようなボタン２７０１（たとえば、詳細を後述するクリップ‐タイプのボタン）を押してもよく、または当業者に周知の別の動作に進んでもよい。
【０１１７】
本発明のさらに別の実施態様によれば、マウスの動きを使用して、ドキュメントまたはテキストの全部もしくは部分を選択することもできる。Ｆｉｇ．１９ａは、スタイラス‐タイプのコンピュータ（１９００）のディスプレイ（１９０１）を示しており、それにおいては、カーソル（１９０２）がテキスト（１９０３）内の特定のロケーションに位置しており、マウス（１９０７）が、テキスト・モード、たとえば外側ポジション（１９０８）に位置決めされている。システムがキャラクタ／カーソル操作モードになっているときには、Ｆｉｇ．１９ｂに示されているように、テキスト選択モードに入るために、ユーザは、マウスを外側に（１９１１）、それがクリック音を生じる充分な強さで引く。ユーザがボタンを放すと、好ましくはそれが最初の外側ポジションに戻る。テキストの部分を選択するために、ここでユーザは、マウスを時計方向もしくは反時計方向に回転する。Ｆｉｇ．１９ｃに示されているように、マウスを時計方向（１９２１）に回転することによって、システムが前方への選択を開始し、たとえば、ユーザが回転を停止するまでの回転角度に応じ、カーソル・ポジション（１９２２）の直後に位置するテキストが選択される。ユーザがマウスを逆方向（１９３１）に回転した場合には、Ｆｉｇ．１９ｄに示されているように、システムがカーソル・ポジションから徐々に選択を開始し、たとえば、ユーザが回転を停止するまでの回転角度に応じ、カーソル・ポジション（１９３２）の直前からテキストが選択される。選択したテキストのコピー、削除、フォント変更等の操作に進むことをユーザが希望する場合には、マウス・ポジションをメニュー選択モードのポジション（たとえば内側のポジション）に変更すればよい。それによりシステムが、次に説明するプロシージャに進むことになる。
【０１１８】
Ｆｉｇ．１９ｅに示されているように、ユーザは、テキスト選択ステップを終了することを希望するのであれば、マウスがクリック音を発するまで（１９４１）、それを外側方向に引いてから放す。それによりシステムがキャラクタ（カーソル）操作モードに戻る。
【０１１９】
Ｆｉｇ．２０ａに示されているように、たとえば前述の手順によってテキスト（２００１）が選択される。たとえば、このように選択されているテキストにコピー等の編集手順を適用する場合に、ユーザは、前述したようにマウスをメニュー選択モード（２００２）に設定し、「ｅｄｉｔ（編集）」メニュー（２００３）を探してそれを選択し、続いてＦｉｇ．２０ｂに示されるように、マウスを内側方向（２０１０）にクリックしてメニュー（２０２１）を開く。その後ユーザは、前述したように、またＦｉｇ．２０ｃに示されているように、マウス（２０３１）を回転することによって機能選択モードを『ｃｏｐｙ（コピー）』機能（２０３２）上に設定する。さらに、Ｆｉｇ．２０ｄに示されているように、再びマウスを内側方向（２０３３）に、クリック音を発する充分な強さで１回押すことによって、システムがそのテキストをコピーし、機能モードを終了する。
【０１２０】
コンピュータ・ドメインにおいて周知の、コピーしたテキストを別の場所にペーストするといった操作を行うために、まずユーザは、カーソルを用いてペーストを行う場所をシステムに示さなければならない。このためにユーザは、Ｆｉｇ．２１ａに示されているように、まず、たとえばマウスを引いて、外側ポジション（２１００）に位置決めすることによって、システムをテキスト編集モードに設定する。続いてユーザは、前述したように、またＦｉｇ．２１ｂに示されているように、マウスをスタイラス軸（２１１０）と垂直に、必要な方向に押すことによって、テキストをペーストする場所にカーソル（２１１１）を移動する。その後ユーザは、コピー手順に関して説明したように、たとえばマウスを内側ポジションに位置決めすることによって、システムをメニュー選択モードに戻し、マウス（２１１３）を回転することによって『ｅｄｉｔ（編集）』メニュー（２１１２）を探し出す。そのメニュー・バーの名前（たとえば『Ｅｄｉｔ（編集）』）上にメニュー選択インジケータを位置決めした後、Ｆｉｇ．２１ｃに示されるように、ユーザはマウスを内側方向（２１２０）にクリックし、メニュー・バー（２１２１）を開く。その後ユーザは、前述したように、またＦｉｇ．２１ｄに示されているように、マウス（２１３０）を回転することによって、希望する機能（２１３１）、すなわちこの例の場合であれば『Ｐａｓｔｅ（ペースト）』機能の上まで機能インジケータを移動する。さらに、Ｆｉｇ．２１ｅに示されているように、マウスを内側方向（２１４０）にクリックすることによって、ペースト機能が選択されて、コピー済みのテキスト（２１４２）が、カーソル（２１４１）によってポイントされているドキュメント内のロケーションにペーストされる。
【０１２１】
またＦｉｇ．２２ａに示されているように、消去のためにテキスト（２２０１）を選択した場合には、『Ｐａｓｔｅ（ペースト）』機能に関して前述した手順と同様に『Ｅｄｉｔ（編集）』メニュー・バー内の『Ｃｌｅａｒ（クリア）』機能を使用することによって、あるいはＦｉｇ．２２ｂに示し、かつ前述したように、イレーシング・ツール（２２１１）を使用し、消去に関する指示としてＨＷＳＲＳによって認識されるサウンド波形を生じるあらかじめ定義済みの動作を行うことによってそれを消去することができる。筆記表面上におけるイレーサの単一のイレーシング動作が、選択されたテキスト全体を消去する。追加のイレーシング動作は、カーソルの手前に位置するテキストのキャラクタもしくは記号を消去することになる。イレーシング・ツールに代えてユーザは、これについても前述したが、ペン先によって、ＨＷＳＲＳに削除コマンドを伝えるすでにパターン化済みのサウンド波形を発生するあらかじめ定義済みの取り消し記号（２３１１）を筆記することができる。この場合においても、前述したように、筆記表面上のペン先による単一のイレーシング動作が、選択されたテキスト全体を消去する。追加のイレーシング動作は、カーソルの手前に位置するテキストの追加のキャラクタもしくは記号を消去することになる。
【０１２２】
本発明の一実施態様によれば、「通常選択（ポインタ）」インジケータによりメニュー・リスト内のメニューをポイントし、そのメニュー内の機能を選択することもできる。Ｆｉｇ．２３ａ〜２３ｅに示されているように、最初にユーザは、マウスを、たとえば内側ポジションのメニュー・モードに位置決めする。続いてユーザは、スタイラス軸と垂直に（２３４０）マウス（２３００）を押すことによって、通常選択インジケータ（２３４１）をメニュー・リスト（２３４２）内の希望するメニューに向けて移動する。インジケータを希望のメニュー・タイトル（２３５３）上まで移動した後に、ユーザは、Ｆｉｇ．２３ｃに示されるように、たとえば内側方向（２３６０）にマウスをクリックしてメニュー・バーを開くことができる。これによりメニュー・バー（２３６１）が開く。このメニュー・バー内にある機能を選択する場合には、ユーザは、スタイラス軸と垂直にマウス（２３００）を押す（２３７０）ことによって希望する機能（２３７１）までインジケータを移動した後に、内側方向（２３７３）にマウスをクリックすれば、その機能を選択することができる。モードの選択との混同を防止するためには、ユーザがクリックを行う間、より長くマウスを押す状態を維持するようにできる（たとえば１秒間）。マウスのクリックに代えて、ユーザは、スタイラス・コンピュータに備わる別のあらかじめ定義済みのボタン、たとえばＦｉｇ．２７ｇに示されているようなボタン２７０１（たとえば、詳細を後述するクリップ‐タイプのボタン）を押してもよく、または当業者に周知の別の動作に進んでもよい。
【０１２３】
本発明の一実施態様によれば、テキスト選択インジケータおよび通常選択インジケータに２つの異なるマウス・モード（たとえば、内側および外側ポジション）を割り当てることに代えて、両方のインジケータに単一のマウス・モード（たとえば内側ポジション）を割り当てることができる。Ｆｉｇ．２４ａに示されているように、コンピュータに使用されているものに類似のテキスト選択インジケータ（２４０１）をスタイラス‐タイプのコンピュータ・デバイスに備えてもよい。Ｆｉｇ．２４ｂに示されているように、マウス（２４１０）を使用してスクリーン上のインジケータ（２４１２）を移動することができる。それを目的として、マウスをメニュー選択モード等のポジション、すなわちこの例の場合であれば内側ポジション（２４１５）に位置決めすることができる。Ｆｉｇ．２４ｃに示されているように、たとえばテキスト内のロケーション（２４２１）を選択する場合にユーザは、まずスタイラス軸と垂直にマウスを押して、インジケータ（２４２２）をそのポイントに移動させる。続いてＦｉｇ．２４ｄに示されるように、ユーザは、マウスを内側方向（２４３１）にクリックしてそのポイントを選択し、カーソル（２４３２）をそこに配置する。ほかのモードとの混同を防止するために、ユーザは、クリックを行う間、より長くマウスを押す状態を維持する必要がある（たとえば１秒間）。マウスのクリックに代えて、ユーザは、スタイラス・コンピュータに備わる別のあらかじめ定義済みのボタン、たとえばＦｉｇ．２７ｇに示されているようなボタン２７０１（たとえば、詳細を後述するクリップ‐タイプのボタン）を押してもよく、または当業者に周知の別の動作に進んでもよい。
【０１２４】
このインジケータは、メニュー・リスト内のメニューをポイントすることもできる。Ｆｉｇ．２４ｅ〜２４ｆに示されているように、ユーザは、スタイラス軸と垂直（２４４０）にマウスを押して、インジケータ（２４４１）をメニュー・リスト（２４４２）に向けて移動させる。コンピュータの場合と同様に、インジケータがメニュー・リストに到達すると、そのアピアランスがバー形状（２４４１）から矢印形状（２４５２）に変化する。希望するメニュー・タイトル（２４５３）までインジケータを移動した後、ユーザは、Ｆｉｇ．２４ｇに示されるように、メニュー・バーを開くために、マウスを内側方向（２４６０）にクリックすることができる。それによりメニュー・バーが開く（２４６１）。また、Ｆｉｇ．２４ｈに示されているように、ユーザは、スタイラス軸と垂直にマウスを押して、インジケータを希望する機能（２４７１）まで移動することができる。続いてユーザは、マウスを内側方向（２４７３）にクリックすることによって、その機能を選択する。ほかのモードとの混同を防止するために、ユーザは、クリックを行う間、より長くマウスを押す状態を維持する必要がある（たとえば１秒間）。マウスのクリックに代えて、ユーザは、スタイラス・コンピュータに備わる別のあらかじめ定義済みのボタン、たとえばＦｉｇ．２７ｇに示されているようなボタン２７０１（たとえば、詳細を後述するクリップ‐タイプのボタン）を押してもよく、または当業者に周知の別の動作に進んでもよい。
【０１２５】
上記のポインタ割り当てによって、マウスが別のポジション（たとえば外側ポジション）にある場合にそれをスタイラス軸と垂直に押す動作をほかに利用することが可能になるが、たとえばそれに、テキスト内のカーソル操作手順を割り当ててもよい。その手順をＦｉｇ．２４ｉ〜２４ｎに示す。
【０１２６】
本発明の一実施態様によれば、たとえばスタイラス軸と垂直にマウスを押すことによってカーソルを操作することができる。Ｆｉｇ．２４ｉに示されているように、最初にユーザは、マウスを、たとえば外側ポジションのテキスト編集モード（２４８１）に設定する。テキスト・モードが行スクロール・モードになっている場合には、Ｆｉｇ．２４ｊに示されているようにユーザは、マウスを外側方向（２４８２）にクリックしてシステムをキャラクタ／カーソル・ナビゲーション・モードにする。前述したように、カーソルが現在のページにあるときには、それがテキスト内の同じポジションにとどまる。カーソルが現在のページにない場合には、たとえば、それがドキュメントの現在のページの、たとえば最後の行（２４８４）の、たとえば最後のポジション（２４８３）もしくは最初のポジションに現れる。その後、Ｆｉｇ．２４ｋ〜２４ｎに示されているように、スタイラス軸と垂直にそれぞれの方向（２４９５〜２４９８）にマウスを押すことによって、テキスト上のカーソルを、上（２４９０）、左（２４９１）、下（２４９２）、もしくは右（２４９３）の方向に移動させることができる。
【０１２７】
前述したように、マウスに、スタイラス・コンピュータ上における１つ、２つ、またはそれを超える数のポジションを与え、より良好かつ容易な機能性のために、各ポジションに対して、たとえば同一ドメインの多数の機能を割り当てることができる。このマウスがスタイラス・コンピュータ軸上に無数のポジションを有することは可能であるが、マウスの容易な使用のため、ならびにユーザのフラストレーションを回避するために、マウスが有するスタイラス・コンピュータ上のポジションが２箇所を超えないことが好ましい。より機能性を高めるためには、それに加えて、各ポジションの側（たとえば内側、外側）において、追加のクリック・システムをマウスに提供することができる。ここで注意が必要であるが、クリック・システムをマウスに備えることに代えて、スタイラス・コンピュータ上に備えたあらかじめ定義済みの１ないしは複数のボタンを、マウス・ボタンとしてマウスとともに使用することもできる。たとえば、マウスを操作する間にユーザが、スタイラス・コンピュータに備わる、Ｆｉｇ．２７ｇに示されている２７０１等のあらかじめ定義済みのボタン（たとえば、詳細を後述するクリップ‐タイプのボタン）を押すようにしてもよい。クリック・システムを包含したマウスおよび／またはあらかじめ定義済みの対応するボタンが組み合わされるマウスは、コンピュータのマウスと類似に機能し、コンピュータのマウスのすべての機能を少なくとも持つことができる。ここで注意しなければならないが、これまで説明した例またはこれ以降に説明する例は、いくつかの方法を例示しているにすぎない。当業者であれば、各種多数の割り当ての組み合わせを、本発明の精神から逸脱することなく採用することができる。
【０１２８】
Ｆｉｇ．２５は、本発明の一実施態様に従ったマウス（２５００）を示しており、このマウスは、スタイラス上においてスタイラス軸方向に２つのポジション（２５０１，２５０２）を有している。これにおいても、より高いマウスの機能性を得るために、それに加えてそれぞれのポジションの側（たとえば内側、外側）に、クリック・システム（２５０７，２５０８）を備えている。
【０１２９】
本発明の一実施態様によれば、マウス・ポジションの１つ、たとえば外側ポジションにテキスト編集（操作）機能を割り当てることができる。Ｆｉｇ．２５ａは、マウスがどのように機能するかについての一例を示している。最初のステップ（２５１０）においては、マウスが、行／ページ・スクロール・モードに設定されている。ユーザは、マウスをスタイラスの軸と垂直に、時計方向もしくはその逆方向に回転（２５１１）することによって、前述の例に示したように、ＬＣＤディスプレイ上のテキスト・ドキュメント行を前後に移動させることができる。ユーザがマウスを、クリック音が生じる充分な強さで引くと（２５１２）、システムがモードを変更し、カーソル／キャラクタ・モード（２５２０）に入る。この状態でユーザがマウスを回転すると（２５２１）、テキスト内のカーソルが文字単位で前後に移動する。行モード（２５１０）に戻るときには、ユーザは、たとえばマウスを引き出してクリック（２５１９）すると同時に、マウスをわずかに回転（２５１８）すればよい。
【０１３０】
これに対して、ユーザがテキストの部分の選択を希望する場合には、まずシステムがカーソル／キャラクタ選択ステップ（モード）（２５２０）を設定している間に、選択するテキストの前もしくは後ろにカーソルを位置決めしなければならない。続いてユーザが、マウスを引き出してクリック（２５２２）すると、システムがテキスト選択ステップ（モード）（２５３０）に入る。この状態でマウスをいずれかの方向（２５３１）に回転すれば、それに応じてカーソルの前、もしくは後のテキストが選択されることになる。選択されるテキストの長さは、回転量（程度）に依存する。テキストを選択した後、ユーザは、選択したテキストの部分を操作（例：コピー、太字、削除等）することができる。カーソル・モード（２５２０）に戻る場合には、ユーザは、再びマウスを引き出してクリックする（２５２９）。
【０１３１】
ユーザは、いずれのステップにおいても、たとえば他方のポジション（たとえば内側ポジション、メニュー選択モード）にマウスを位置決めすることによって、テキスト・モードを終了（２５４１〜２５４３）することができる。現在のテキスト・ページ、カーソル・ポジション、および現在選択しているステップは、デフォルトとして維持される。ユーザが、再びテキスト・モードに入るときには、入る前と同じポジションならびにステップ（２５４５〜２５４７）のテキスト・モードに入ることになる。
【０１３２】
ここで注意しなければならないが、テキスト行／ページをスクロールするステップ（たとえば行／ページ・スクロール・モード）は省略することができる。その場合にユーザは、カーソル／キャラクタ・モードにおいてマウスを回転し、カーソルを前方（または後方）に移動させることによって行をスクロールすることができる。カーソルがテキスト内の最後の（もしくは最初の）ポジションに到達した時、さらにユーザが回転を続けると、次の行／ページが現れることになる。ここで理解される必要があるが、テキストが数行にわたって構成され、そのうちの１行ないしは複数行を同時に、スタイラス・コンピュータのスクリーン・ディスプレイ・ユニット上に表示できる。
【０１３３】
本発明の一実施態様によれば、マウス・ポジションの１つ、たとえば内側ポジションにメニューおよび機能操作を割り当てることができる。Ｆｉｇ．２５ｂは、その場合にマウスがどのように機能するかについての例示である。最初のステップ（２５５０）においては、マウスが、メニュー・リスト選択モードに設定されている。ユーザは、マウスをペンの軸と垂直に、時計方向もしくは反時計方向に回転（２５５１）することによって、前述の例に示したように、ＬＣＤディスプレイ上のメニュー・リストを前後にスクロールすることができる。いかなる時点でもユーザがクリック音を生じる充分な強さでマウスを押すと（２５５２）、システムが現在のメニュー・リストを選択し、モード（ステップ）を変更してメニュー選択モード（ステップ）（２５６０）に入る。メニュー・リスト上のあらかじめ定義済みのロケーションにメニュー選択インジケータが現れる。この状態でユーザが、マウスを回転すると（２５６１）、選択されたメニュー・リストのメニュー上を、メニュー選択インジケータがメニュー単位で前後に（ユーザによる回転方向に従って）移動する。メニュー選択インジケータがリスト内の最後のメニューに到達した後、さらにユーザが回転を継続すると、回転の方向に従って次もしくは手前のメニュー・リストが現れる。メニュー選択インジケータは、（回転の方向に従って）最初もしくは最後のメニューにジャンプし、ユーザが回転を停止するまでメニュー・タイトル上を移動する。メニュー・リスト選択モード（２５６０）に戻る場合には、ユーザは、たとえばマウスを押し込んでクリック（２５５９）すると同時に、マウスをわずかに回転（２５５８）すればよい。
【０１３４】
一方、ユーザがメニュー内に含まれている機能の選択を希望する場合には、まずシステムがメニュー選択モード（２５６０）を設定している間に、選択するメニュー上にメニュー選択インジケータを位置決めしなければならない。続いてユーザが、マウスを押し込んでクリック（２５６２）すると、システムが機能選択モード（ステップ）（２５７０）に入る。メニュー内に１つの機能しか含まれていなければ、それが自動的に選択される。２つの選択肢があり、その一方がすでに使用中の場合（たとえば太字、標準）には、他方の選択肢が自動的に選択される。現在使用中の機能のほかに、２つもしくはそれを超える数の機能が存在する場合には、そのメニューに対応するメニュー・バーが開く。この状態で、必要に応じていずれかの方向（２５７１）にマウスを回転すると、機能選択インジケータが現れて、ユーザがそれらのうちの希望する１つの上でインジケータを停止させるまで、機能タイトル上を移動する。ユーザがその機能を選択するためには、再びマウスを押し込んでクリックする（２５６９）。この機能が最終的に選択され、システムがメニュー選択モード（ステップ）（２５６０）に戻る。
【０１３５】
ユーザは、たとえばマウスを引いてそれを外側ポジション（たとえば、テキスト選択モード）に位置決めすることによってメニュー・モード（２５８１〜２５８３）を終了することができる。現在のメニュー・リストが、デフォルトとして維持されるようにしてもよい。システムが再びメニュー・モード（２５８４）に入ったとき、このデフォルトのメニュー・リストがスクリーン上に表示されることになる。
【０１３６】
ここで注意しなければならないことは、メニュー・リストをスクロールするステップ（たとえば、メニュー・リスト・モード）が省略できることである。その場合にユーザは、メニュー選択モードにおいてマウスを回転し、メニュー選択インジケータを前方（または後方）に移動させることによって行をスクロールすることができる。インジケータがメニュー・リスト内の最後（または最初）のポジションに到達した時は、ユーザが、さらに回転を継続することによって、次のメニュー・リスト（たとえば行）を表示することができる。ここで理解されようが、メニュー・リストが数行にわたって構成され、そのうちの１行ないしは複数行を同時に、スタイラス・コンピュータのスクリーン・ディスプレイ・ユニット上に表示できる。
【０１３７】
ここで注意しなければならないが、個別に、あるいはマウスの回転とともに前述した通常選択インジケータを使用して機能を選択することも可能である。
【０１３８】
本発明の一実施態様によれば、マウスもしくはそのほかのボタンに割り当てられているコマンドの少なくとも一部について、筆記によるコマンドを提供することができる。たとえば、マウスの操作によってテキストの部分を選択した後、ユーザは、筆記表面上に単語『ｃｏｐｙ（コピー）』を筆記することができる。この時点においてシステムが、選択されているドキュメントの部分をコピーする。ユーザがその部分を別の場所にペースすることを希望する場合には、ユーザは、まずカーソルをそのポジションに移動し、単語『ｐａｓｔｅ（ペースト）』を筆記する。コピーした部分が、システムによってその場所にペーストされることになる。筆記した単語がテキストの一部ではなく、コマンドであることをシステムに伝えるために、次のような各種の表示システムを使用することができる。
【０１３９】
‐特殊な現存するか、あるいはカスタム化した予約済みのコマンド・ワードもしくは記号をそれぞれのコマンドに、あるいは複数のコマンドに使用する（例：ｃｏｐｙ，ｃｐ）（たとえばユーザは、“ “等のあらかじめ定義済みのカスタム化した記号を筆記して、テキストの次のページに進むことをシステムに伝えることができる）。
【０１４０】
‐コマンド・ワードに予約済みの現存する、もしくはカスタム化した、たとえば『ｃｍ』等の単語（１ないしは複数）を先行させる（例：ｃｍｃｏｐｙ，ｃｍｏｐｅｎ等）。
【０１４１】
‐このアイデアに基づくそのほかの可能性。たとえば、テキスト内を５行先に進む場合に、ユーザは『ａｌ０５』（ａｄｖａｎｃｅ ｌｉｎｅ ０５ ｌｉｎｅｓ；この場合、ａｌは予約語になる）と筆記することができる。
【０１４２】
本発明の一実施態様によれば、スタイラス・コンピュータに備えられている別のペン先を用いてコマンドを筆記することができる。また前述したように、マウスの構造化された表面によってこれらのコマンドを入力することもできる。前記マウス表面と筆記表面の接触によって生成されたサウンドを、より良好に取り込むために、少なくとも１つの追加の（好ましくは指向性）マイクロフォンを、スタイラス・コンピュータ本体の前記マウスに近い内側（たとえば、筆記チップのマイクロフォンに関して前述したように）あるいはその外側に備えてもよい。さらに、クリップ・ボタン等のボタンを備え、それを使用し、ペン先による筆記コマンドの開始をシステムに伝達することもできる。その場合には、予約語もしくは制限された単語が必要なくなる。
【０１４３】
また、ポインティング・デバイス・チップの一部を筆記コマンド用に割り当てることができるように、その構造化を行ってもよい。Ｆｉｇ．４ｅに示されているようにポインティング・デバイス・チップ（４１５）は、構造化された一方の部分（４１８）がテキストに割り当てられ、異なって構造化された他方の部分（４１９）が手書きコマンドに割り当てられるような形で構造化することができる。このポインティング・デバイス・チップのコマンド用に割り当てられた部分（４１９）を用いて筆記表面上にコマンドを筆記することによって、筆記したデータもしくは記号が、生成されたサウンドに従って、またそれとパターン化され、記憶されている波形との比較の後に、ＨＷＳＲＳによってコマンドとして解釈される。
【０１４４】
本発明の一実施態様によれば、通常のコンピュータと同様に、ディスプレイが各種のアイコンを表示することができる。たとえば通常選択ポインタを使用して、アイコンの選択、ファイルのオープン、垂直もしくは水平のエレベータ（ｅｌｅｖａｔｏｒｓ）、プログラムの実行、および／または通常のコンピュータの通常選択ポインタを用いて行われる少なくともそのほかすべての操作を行うことができる。
【０１４５】
本発明の一実施態様によれば、最初に、たとえばマウスを垂直方向に動かし、あるいは回転することによって、希望のアイコンまたはオブジェクトの上に通常選択ポインタを位置決めすることができる。続いて、たとえばマウスを１回クリックすることによって、そのオブジェクトを選択することができる。より長い時間にわたる押下げおよびクリック手順によって、そのオブジェクトを選択し、その状態を維持して、たとえば別の場所にそれをシフトすることができる。オブジェクトをリリースするときには、再び長いクリックを行えばよい。また、伝統的なコンピュータ・マウスと同様に、スタイラス・コンピュータのダブルクリックにいくつかの機能もしくはコマンドを割り当ててもよい。伝統的なコンピュータ・マウスによるこのほかすべての操作を、本発明のスタイラス‐タイプのコンピュータ・マウスによって実現することができる。これらのマウス操作は、コンピュータ・ユーザにとって周知である。
【０１４６】
前述したようなコマンドならびに選択システム、および動きを有するマウスは、コンピュータ、ラップトップ、ＰＤＡデバイス、モバイル電話、通常の電話といったシンプルな移動／選択手段を必要とするすべての電子デバイスに取り付けることができる。この種のデバイスのいくつかをＦｉｇ．３３ａ〜３３ｅに示す。Ｆｉｇ．２６ａは、本発明のマウス（２６０１）を側方に備えたラップトップ・コンピュータを示している。Ｆｉｇ．２６ｂに示されているように、コンピュータ上の別の場所（２６０２）、たとえば中央に取り付けてもよい。またＦｉｇ．２６ｃに示されているように、複数のマウスまたは追加の相補的なマウス・ボタン（２６０４）をコンピュータ上に備えることもできる。Ｆｉｇ．３３ａ〜３３ｅは、前述したように、マウス（３３２６）およびそのマウスによる選択システムを備えた各種の電子機器を示している。
【０１４７】
本発明の一実施態様によれば、本発明の手書きサウンド認識システムおよび／または本発明のマウス・システムを、キーボード、キーパッド、もしくはそのほかの入力システム、たとえば音声／スピーチ認識等が備えられたコンピュータならびにそのほかの電子デバイスに備え、それらの入力システムに置き換えるか、あるいはそれらと組み合わせて使用することができる。Ｆｉｇ．２６ｄを参照すると、筆記表面（２６０３）、マイクロフォン（図示せず）、本発明のＨＷＳＲＳ、およびそのほかの必要なものすべて（図示せず）がコンピュータに取り付けられ、好ましくは本発明のペン先を備えたペンを用いてその表面上に記号を筆記し、ペン先によって筆記された記号に従ったサウンドを生成することができる。また好ましくは、筆記表面を、ペン先によって生成されるサウンドが向上する態様で構造化してもよい。マイクロフォンは、サウンドを取り込み、それをコンピュータに渡し、コンピュータは、ＨＷＳＲＳを用いて手書きデータ入力をディジタル化する。このシステムは、Ｆｉｇ．３３ａ〜３３ｅに示されているような、そのほかのあらゆる電子機器について使用可能である。
【０１４８】
また、ＨＷＳＲＳおよびマイクロフォンを備えたコンピュータおよびそのほかの電子機器は、筆記表面を有していなくてもよい。その場合においては、コンピュータのカバー等の任意の場所への筆記によって生成された対応するサウンドを、ＨＷＳＲＳによって解釈することができる。このシステムは、Ｆｉｇ．３３ａ〜３３ｅに示されているような、そのほかのあらゆる電子機器について使用可能である。
【０１４９】
このシステムの１つの重要な利点は、本発明のＨＷＳＲＳによって、電子デバイスおよびコンピュータの、かさばっていたキーボードならびにフラストレーションを招いていたキーパッドが置換できることである。好ましくは本発明の構造化されたチップを有するペン等のシンプルなポインティング・デバイスを持つことによって、ユーザは、非常に多様なデータを電子デバイスに入力することが可能になる。当然のことながら、その電子機器は、本発明のＨＷＳＲＳおよびマイクロフォンを少なくとも備えていなければならない。またこれらは、そのほかの必要な機能、たとえばプロセッサ、メモリ等を備えている必要がある。好ましくは、筆記の間の筆記表面上におけるポインティング・デバイス・チップの接触によって生成されるサウンドを向上させる構造化された筆記表面をそれらの電子機器内に備えてもよい。
【０１５０】
本発明の一実施態様によれば、Ｆｉｇ．２７ａに示されているように、特に頻繁に使用される『Ｅｎｔｅｒ』、『Ｎｅｘｔ Ｌｉｎｅ』、『Ｔａｂ』、または『Ｃａｐｓ Ｌｏｃｋ』といった機能に使用される追加のボタン（２７０１）をスタイラス・コンピュータ上に備えることができる。
【０１５１】
本発明の別の実施態様によれば、これらのボタンに代えて、あるいはそれらに加えて、回転および／またはクリック・システムをスタイラス・コンピュータのポインティング側に備えることができる。たとえば、Ｆｉｇ．２７ｂに示されているように、３つの頻繁に使用する機能『Ｅｎｔｅｒ』、『Ｔａｂ』、および『Ｃａｐｓ Ｌｏｃｋ』（２７１１）をスタイラス・タイプのペン・ヘッド（２７１０）に示し、選択インジケータ（２７１２）をコンピュータの本体の端部に配置する。Ｆｉｇ．２７ｃ〜２７ｄに示されているように、スタイラスのヘッドまたは本体を回転（２７１９）し、表示された機能（２７１４，２７１５）の正面に指示マーク（２７１２）を移動することによって、指示された機能に関係する機能が選択されて実行されることになる。ヘッドは、自動的にそのオリジナルの位置に戻る。たとえば、Ｆｉｇ．２７ｃおよびＦｉｇ．２７ｄにおいては、機能『Ｃａｐｓ Ｌｏｃｋ』および『Ｅｎｔｅｒ（Ｎｅｘｔ Ｌｉｎｅ）』がそれぞれ選択されている。Ｆｉｇ．２７ｅ〜２７ｆに示されている例によれば、ヘッドを内側方向（２７２１）に押してクリックすることによって『Ｔａｂ』機能（２７２０）が実行される。それぞれの追加のクリックは、追加的にタブを前進させる。
【０１５２】
本発明のさらに別の一実施態様によれば、Ｆｉｇ．２７ｇに示されているように、スタイラス‐タイプのコンピュータ（２７００）にクリップ・タイプのボタン（２７０１）を備えることができる。このクリップ上のいくつかの場所を押すことによって、異なる機能またはコマンドを実行することができる。たとえばＦｉｇ．２７ｈに示されているように、クリップ・ボタンの中央（２７１０）を押すことによって、たとえばオン／オフ・コマンドが実行されるようにしてもよい。またクリップ・ボタンの横側を押してコマンドを実行させることもできる。たとえば、クリップ・ボタン（２７２１）の左側（２７２０）を押したときに『Ｅｎｔｅｒ』または『Ｎｅｘｔ Ｌｉｎｅ』機能（２７２２）が実行されるようにしてもよい。またたとえば、クリップ・ボタン（２７３１）の右側（２７３０）を押したときに『Ｔａｂ』機能（２７３１）が実行されるようにしてもよい。右側を押すごとに、スクリーン上の次のタブ位置にカーソルがジャンプする。クリップ・ボタンを押す位置に空白文字等の記号を割り当ててもよい。また、たとえばユーザがクリップ・ボタンのあらかじめ定義済みの位置（たとえば、前記クリップ・ボタンのキー）を押し続けた場合には、ユーザがキーを押すことを停止するまで、その場所に割り当てられている記号または機能が繰り返されるようにすることもできる。さらに、クリップ・ボタンの各位置のダブルクリックに、異なる機能を割り当てることもできる。たとえば、クリップ・ボタンの左側のダブルクリックに『Ｃａｐｓ Ｌｏｃｋ』機能等を割り当て、またたとえばデバイスが電話モードのときには、クリップ・ボタンを『送信』／『終了』（通信）等の機能に使用することもできる。
【０１５３】
クリップ・ボタン２７０１上の位置の押し下げまたはダブルクリック（たとえば、キー２７１０，２７２０，２７３０等）といったインタラクションを、スタイラス・コンピュータのポインティング・デバイスまたは選択デバイス（たとえばマウス）とともに使用することもできる。クリップ・ボタン・キーを、前記マウス・キーとして機能させてもよい。これらのマウスとクリップ・ボタン・キーの組み合わせのインタラクションは、前述したマウスのクリック機能と置き換えてもよく、またすでに説明したスタイラス・コンピュータのマウス機能に追加の機能を付加することもできる。たとえばユーザは、たとえば右手を用いてマウスを操作し、ポインティング・インジケータの矢印をファイルのアイコン上に位置決めし、左手を用いてクリック・ボタンのキーを押しあるいはダブルクリックをして、そのファイルを選択するか開くことができる。また、テキスト編集の間にユーザは、前記クリップ・ボタン・キーを使用して、たとえばメニューの選択、機能の選択、あるいはモードの変更（たとえば、メニュー・リスト・モードからメニュー選択モードへの変更もしくはその逆の変更、テキスト内の行選択／スクロール・モードからカーソル操作モードへの変更もしくはその逆の変更）等を行うことができる。たとえば、システムがメニュー選択モードに設定されていれば、ユーザは、メニュー選択インジケータをメニュー上に置いた後に、クリップ・ボタンのあらかじめ定義済みのキーを押して、そのメニュー・バーを開くこともできる。また、モードの終了を希望する場合、たとえばメニュー選択モードを終了して、メニュー・リスト・モードに入る場合に、マウスのクリックおよびそれと同時の回転に代えて、スタイラスの、ボタン・クリップ・キーのあらかじめ定義済みのキー（またはあらかじめ決定済みのそのほかのタイプのキー）を使用することもできる。言い換えると、マウスならびにそれに組み込まれたクリック・モード、および／またはマウスならびにそれに割り当てられたほかのキーは、パーソナルコンピュータのマウスのすべての機能を少なくとも包含することができる。
【０１５４】
クリップ・ボタンは、スタイラス・コンピュータ上の別の位置に配置してもよい。たとえば、Ｆｉｇ．２７ｋに示されるように、本発明のスタイラス・コンピュータ２７４０の筆記チップ２７４２に近い位置に、本発明の多機能クリップ・ボタン２７４１を備えることも考えられる。ここで理解されることは、使用の便宜等の理由で、前記クリップ・ボタンをスタイラス上の任意の位置に、たとえばマウスの近く、もしくは筆記チップの近く、あるいはスタイラスの中央といった位置に配置できることである。それに加えて、前記クリップ・ボタンを、たとえばこのスタイラス・コンピュータをユーザのポケットに取り付ける態様（たとえば、通常のペンをユーザのポケットに取り付ける態様）で設計してもよい。また、必要な場合には、スタイラス・コンピュータ上に複数のクリップ・ボタンを備えることもできる。
【０１５５】
本発明の一実施態様によれば、スタイラス・コンピュータ２７４０が少なくとも１つの追加のマイクロフォン２７４３を備える。前記マイクロフォンは、ユーザの音声を取り込む方法に従って備えることができる。そのために、ユーザの口に近いスタイラス上の位置２７４４に、前記マイクロフォンを備えることができる（たとえば、スタイラスのポインティング・チップが取り付けられる端部に対して逆側の端部）。
【０１５６】
本発明のさらに別の実施態様によれば、Ｆｉｇ．２７Ｌに示されているように、スタイラス・コンピュータ２７５０が、たとえばユーザの音声を取り込むためのマルチセクション／指向性マイクロフォン２７５１を備えることができる。前記マイクロフォン２７５１は、前記ユーザの口に向かって、ユーザの音声を明瞭に取り込めるように延びるものとすることができる。このマイクロフォンのマルチセクション構造２７５２を、スタイラス・コンピュータのアンテナとして使用してもよい。前記アンテナは、ダイバーシティ・アンテナとすることができる。閉じられたポジションにおいては、前記マルチセクション・マイクロフォンおよび／またはアンテナが、前述したスタイラス・コンピュータのクリップ・ボタンの外観および／または機能を有することができる。
【０１５７】
Ｆｉｇ．２７ｍ〜２７ｎは、前述したマルチセクション・マイクロフォン／アンテナの別のポジションを示している。Ｆｉｇ．２７ｍを参照すると、スタイラス・コンピュータ２７６０の、マルチセクション構造２７６２を有するクリップ・ボタン２７６１が示されている。この例においては、クリップ・ボタン２７６１自体が枢動および／または回転されて、スタイラスを希望のポジションに調整する補助となる。前記クリップ・ボタンは、テレスコープ・セクション２７６３を有し、前記クリップ・ボタンから延ばすことができる。クリップ・ボタン・システムが、クリップ・ボタンの下側にキー２７６４を備える場合には（たとえば、前記クリップ・ボタンを押すことによって操作される）、たとえば、あるポジションに向けてマイクロフォンを延ばすために、前記クリップ・ボタンを回転している間は前記ボタンが露出し、ユーザが直接指で操作することができる。ここで理解されたいが、クリップ・ボタンの構造は、当業者に周知の現存する任意のテクノロジを包含することができる。たとえばＦｉｇ．２７ｎに示されているように、スタイラス２７８０のクリップ・ボタン２７８１が、第１の固定構造２７８２、および追加の枢動２８８３構造２７８４を備えていてもよい。
【０１５８】
スタイラスの筆記チップに近いマイクロフォンおよびユーザの口に近い、本発明のマルチセクション・マイクロフォンを使用することによって、システムは、入力される同一のデータ（たとえば記号）に関する２つの明瞭な入力を取り込むことができる。ユーザは、たとえばテキストを筆記しながらそれを声に出すことができる。より良好な認識を得るために、システムが両方の入力（たとえば、ストロークを手書きするサウンドおよびユーザの言葉入力）を同時に使用してもよい。この問題については、さらに詳細を後述する。前記マイクロフォンは、筆記の間にわたって、ユーザの口の近くに自動的に固定されてとどまる方法で機能させることができる。そのために、たとえば、ワイヤ等のバイアス手段を備えて、たとえばマイクロフォンをユーザの身体の一部もしくは着衣に取り付けることができる。ここで理解されたいが、マルチセクション構造を有する代わりに、ワイヤにより、ユーザの口に向けてマイクロフォンを延ばしてもよい。
【０１５９】
本発明のさらに別の実施態様においては、Ｆｉｇ．２８ａに示されているように、本発明の手書きサウンド入力システムと別体のシステムもしくはその相補システムとして、英数キャラクタおよび記号（２８０１）を包含するメニュー・リストをスタイラス・タイプのコンピュータに備えることができる。キャラクタもしくは記号は、前述したメニュー選択方法のいずれを用いても選択ならびに入力を行うことが可能である。たとえば、英数メニュー・リストを選択した後に、希望する記号（２８０３）上にメニュー選択インジケータ（２８０２）が到来するまでマウス（２８００）を回転すればよい。続いて、Ｆｉｇ．２８ｂに示されるように、マウスを内側方向（２８０５）にクリックすることによって、そのキャラクタが選択され／入力されて、ＬＣＤスクリーン上に表示（２８０６）される。Ｆｉｇ．２８ｃ〜２８ｄに示されているように、この手順を繰り返して追加のキャラクタまたは記号（２８０７）を選択することができる。それに加えて、Ｆｉｇ．２８ｅに示されているように、メニュー・バー（２８３１）を作ることによって、ショートカット機能（たとえば、太字、フォント、サイズ等）を各キャラクタに適用してもよい。ここで理解する必要があるが、機能（２８３２）がサブ機能（２８３３）を包含している場合には、その機能上にインジケータ（２８３４）が到達したときにマウスを押すことによって、サブ機能メニュー（２８３３）が開く。サブ機能メニュー内の機能を選択する場合に、ユーザは、再びマウスを希望する機能まで回転し、マウスをたとえば内側方向にクリックすることによってそれを選択する。機能がサブ機能を含む限り、別のサブ機能を選択することなく、この手順を繰り返すことができる。
【０１６０】
本発明の一実施態様によれば、上記の手順を、サブ機能等を包含する機能を有する任意のメニュー・バーに逐次適用することができる。
【０１６１】
本発明の一実施態様によれば、前記スタイラス‐タイプのコンピュータにカバーを備え、当該デバイスのディスプレイならびにそのほかのすべての機能を保護することができる。それに加えて、カバーは、偶発的な誤り入力からペン先を保護することもできる。Ｆｉｇ．２９ａ〜２９ｄは、スタイラス‐タイプのコンピュータ（２９００）、およびスタイラス・コンピュータを覆うためのカバー（２９０１）を示している。カバーは、特殊な構造（２９０２）を有しており、コンピュータのクリップ・ボタン（２９０３）の使用ならびにそれが機能することを可能にしつつ（２９９９）、しかもコンピュータを覆う（２９０４）。これは、スタイラス‐タイプのコンピュータが電話およびテレコミュニケーション機能を有し得ることによる。このデバイスがモバイル電話として使用され、ユーザが呼び出しを受信したとき、ユーザは、デバイスが覆われた状態で応答することができる。このカバーは、デバイスを水ぬれからも保護することができる。
【０１６２】
本発明の一実施態様によれば、スタイラス‐タイプのコンピュータが、ワイヤレス電話もしくはＰＤＡデバイス等の、テレコミュニケーション・デバイスとしても機能することができる。Ｆｉｇ．２９ｅ〜２９ｇに示されているように、このスタイラス（２９０５）は、本発明の装置ならびにシステムの一部または全部を備え、さらに追加の、ここに述べていない必要な機能を備えることができる。また、トランシーバ（図示せず）ならびにそのほかの、他の電子デバイスとの通信に必要なすべての機能を備えることができる。たとえばこのデバイスに、少なくとも１つのスピーカ（２９０７）、マイクロフォン（２９０６）、カメラ等を備えてもよい。本発明の入力システムおよび機能は、筆記表面に番号（２９０８）を筆記することによってダイアルし、送信メッセージ（２９１１）を筆記し、ファイル、画像の送信、データの受信、記憶、および操作等を行うことができる。電話機能およびメニューは、そのほかのコンピュータ機能およびメニューと類似の態様で系統化してもよい。たとえば、ユーザによっても、１ないしは複数の機能を含む１ないしは複数のメニュー・リストならびにメニュー・バーを、電話帳、受信済み／送信済み呼び出し等の電話操作に関して系統化することができる。それに加えて、このスタイラス‐タイプのコンピュータデバイスは、音声またはユーザの言葉によるデータならびに機能、コマンド等の入力を代替的に可能にする音声認識システムを備えることができる。言葉の命令によって番号のダイアルを行うこともできる。
【０１６３】
Ｆｉｇ．２９ｇに示されているように、このデバイスは、衝撃および最終的には水ぬれから保護するためのカバーを備えることができる。カバーを開けることなく、たとえば呼び出しを受信するために、カバー上の、スピーカ、マイクロフォン、カメラ等の機能の位置に、ホール（２９２１，２９２２）を備えることもできる。このデバイスが電話モードにあるとき、何らかの電話機能のためにクリップ・ボタン（２９２３）を使用することができる。たとえば『送信』、『終了』等の機能を、ボタンの左側を押すことに対して割り当てることができる。また、たとえば『オン』、『オフ』機能をクリップ・ボタンの中央（２９２５）に割り当て、『音声（たとえばメール）ボックス』をクリップ・ボタンの右側（２９２６）に割り当てることが考えられる。当然のことながら、スタイラス・テレコミュニケーション・デバイスがカバーされている間にそれを使用するために、ディスプレイの少なくとも一部が利用可能となるようにしてもよい。
【０１６４】
本発明の一実施態様によれば、前述したスタイラス・コンピュータ・ディスプレイに代えて、あるいはそれに加えて、本発明のスタイラス・コンピュータ／テレコミュニケーション・デバイスのカバー内にディスプレイ・ユニットを備え、着信の電話番号の確認といった電話操作のための前記デバイスの使用を、デバイスのカバーの取り外しを必要とせずに可能にすることができる。前記ディスプレイと前記デバイスの間の接続はワイヤレスで、あるいは電気的な接続によって行うことができる。たとえば、前記テレコミュニケーション・デバイス内、および前記カバー内に電気接点を備え、カバーが前記電子デバイスを覆っている間は、前記接点が互いに接触し、前記テレコミュニケーション・デバイスと、前記カバー内に備えられた前記ディスプレイの間の相互接触が得られるようにすることが可能である。
【０１６５】
また、スピーカに代えて、受信したサウンドもしくはメッセージを対応する振動に変換し、ユーザがスタイラスを耳に近づけて保持している間にユーザの耳に伝えられるようにしてもよい。
【０１６６】
本発明の一実施態様によれば、本発明のスタイラス‐タイプのコンピュータは、赤外線、レーザ等のテレコミュニケーション手段も有し、ほかのコンピュータ、ＰＤＡデバイス、ＴＶ等の電子機器と通信することができる。これは、たとえばドキュメントならびにデータの送受（たとえば、コンピュータとの間、プリンタへの送信等）を可能にする。
【０１６７】
スタイラス‐タイプのコンピュータについて、このほかのタイプのボタンならびにマウスも考えられる。たとえば、Ｆｉｇ．３０ａに示されているような複数のボタン（３００１，３００２）によって、以前マウスに割り当てた機能のいくつかを置き換えることが可能である。この例においては、マウス（３０００）を、たとえば行／ページの上送りおよび下送りに使用することができる。４つのボタン（３００２）をカーソルの左右上下の移動に使用し、ほかのボタン（３００１）には別の機能を割り当ててもよい。
【０１６８】
さらに本発明の別の実施態様においては、Ｆｉｇ．３１に示されているように、スタイラス‐タイプのコンピュータ（３０００）が機能のグループ（たとえば、ページの上／下送り）用の少なくとも１つのマウス（３００８）、カーソル操作等の機能用に少なくとも１つの多方向ボタン（３００１）、およびたとえばメニュー／機能選択等の操作のための少なくとも１つの多機能ボタン（３００２）を備えることができる。そのほかに追加の単機能／多機能ボタン（３００３）を備えてもよい。
【０１６９】
Ｆｉｇ．３１ａは、カーソル操作に使用することができる多方向ボタン（３１０１）を示している。このボタンの異なるエッジ（３１０２）を押すことによって、カーソルがそれに応じた方向（３１０３）に移動することになる。Ｆｉｇ．３１ｂ〜３１ｆは、ボタン（３１０２）の各種操作（３１１２）によってカーソル（３１１１）がＬＣＤディスプレイ上の異なる方向に移動することを例示している。
【０１７０】
Ｆｉｇ．３２ａ〜３２ｆは、本発明の一実施態様に従って、別のタイプの機能選択ボタン（３２０１）がどのように動作するかを例示している。Ｆｉｇ．３２ａ〜３２ｂに示されているように、このボタンを右に（３２０２）あるいは左に（３２０３）回転することによって、メニュー選択インジケータ（３２０４）が左または右に移動する。
【０１７１】
メニューを選択するために、まずユーザは、選択するメニュー（３２０６）上にインジケータを移動する。続いてＦｉｇ．３２ｃに示されているように、ユーザは、メニュー選択ボタン（３２２１）を内側に、スタイラスの方向に押せばよい。メニュー・バー（３２２２）が開いてシステムが機能選択モードに入り、キーは、オリジナルのポジション（たとえば、クリック・ボタン）に戻る。Ｆｉｇ．３２ｄに示されているように、次にユーザは、ボタン（３２２３）を回転し、選択する機能上に機能インジケータ（３２２４）を移動する。その後、Ｆｉｇ．３２ｅに示されているように、ユーザは、選択ボタン（３２２１）を再びクリックしてその機能を選択する。最後にＦｉｇ．３２ｆに示されているように、機能（３２２５）が選択されて、システムが機能選択モードからメニュー選択モードに戻る。
【０１７２】
本発明の一実施態様によれば、このほかの、たとえば記号もしくはコマンドの筆記済みの図形および描画（たとえば、遅延手書き認識システム）、あるいは、たとえば筆記表面上におけるスタイラス・チップのリアルタイムの動きに基づく手書き入力および認識システムが、本発明のスタイラス‐タイプのコンピュータによって使用されることがある。また、キャラクタ、イメージ等の印刷された素材を、スタイラス・コンピュータにより、入力されたデータとしてスキャンしてもよい。それを目的として、このスタイラスは、光学リーダ、レーザ装置、カメラ等の手段ならびにＯＣＲ等の認識システム、および現時点もしくは将来において利用可能なそのほかのテクノロジを備えることができる。
【０１７３】
また、そのほかの、音声、言葉、キーボード、キーパッド、ディジタイザ等の入力ならびにテクノロジおよびシステムをこのスタイラス‐タイプのコンピュータが使用するようにしてもよい。
【０１７４】
さらに、すでに説明したようにシステムが、各種言語の文字、単語、および記号に関する、１ないしは複数のデータベースを備えることもできる。このシステムと予測単語認識システムを組み合わせて、単語を完全に入力する前にその単語の選択を可能にすることもできる。このシステムは、多くの場合に、その完全な入力が終わる前に望ましい単語がシステムによって自動的に選択されることを可能にし、ユーザの介入が必要ないことさえあり得る。これは、単語のキャラクタまたは記号を個別かつ連続的に（たとえばキャラクタ単位で）筆記することによって、また多くの場合には対応する単語が非常に少なく、その単語の筆記を完了する前に単語予測システムが望ましい単語を決定するか、あるいはいくつかの可能性のある単語を示してユーザがそれらのうちの１つを選択できることから可能になる。可能性のある単語の選択肢は、メニュー／機能バーに類似のバー・リスト内にリストされ、ユーザは、メニュー・バー内の機能の選択と同様のマウスの動きおよび手順を使用して、それらの中から希望する単語を選択することができる。
【０１７５】
本発明の一実施態様によれば、ＨＷＳＲＳが、ほかの認識システムと組み合わされて、入力される記号の認識を容易にすることができる。たとえば、記号（たとえば文字、句読点、コマンド、単語またはセンテンス等）を筆記する間に、ユーザが、同時にその記号を発音してもよい。これにより、音声認識システムと組み合わされたＨＷＳＲＳによる前記記号の認識が、さらに容易になる。
【０１７６】
一実施態様によれば、前述したようにユーザは、キャラクタごとに分離してテキストの単語を書くことができる（たとえば、各キャラクタの終了を示すために、ユーザは各キャラクタを筆記した後にペン先を筆記表面から持ち上げる）。またユーザは、その単語の文字を筆記する間に、同時にその単語を声に出すこともできる。本発明のＨＷＳＲＳは、前記単語の各キャラクタを解釈する。システムは、前記キャラクタの解釈の後、前記キャラクタと声に出された単語を比較し、その逆も行う。それら２つの単語（たとえば、筆記された単語および声に出された単語）と筆記された単語の辞書データベースならびに対応するキー・パターン化済みの声に出された単語のマッチングの後に、システムは、ユーザによって入力された、意図された単語である可能性がもっとも高い候補を選択する。これは、ユーザによる極めて自然な筆記方法を可能にし、しかもシステムが、より精度の高い認識能力を持つことを可能にする。スタイラスの筆記チップの近くに指向性マイクロフォンを備え、ユーザの口の近くに延長可能な指向性マイクロフォンを備えることによって、より良好な品質の手書き（筆記表面上の筆記チップのサウンドに基づく）入力および音声入力が促進される。当然のことながら、前述したデータ入力方法（たとえば、ＨＷＳＲＳおよび／または音声認識を使用する方法）は、個別に、あるいはほかのデータ入力システムと組み合わせて使用してもよい。たとえば、入力認識の精度をより良好にするために、前記データ入力方法に加えて、かつそれと同時に、筆記されたキャラクタのグラフィティを基礎とする記号認識に基づいた光学手書き認識システムを、ここに述べたような認識手段と組み合わせることが考えられる。
【０１７７】
より高速なデータ入力のためには、速記システムの記号に関するサウンド・パターンをユーザによって記憶され、その後、本発明のＨＷＳＲＳを使用するデータ入力の間に前記ユーザが速記したテキストと比較することもできる。
【０１７８】
また『Ｃａｐｓ Ｌｏｃｋ』等のコマンドが音声により入力されるようにしてもよい。たとえばユーザは、『Ｃａｐ』と言って『ａ』を筆記することができる。これによりシステムは、『Ａ』を入力することになる。さらに、記号を筆記する間の異なる筆記の速度に対して、異なる記号を割り当てることができる。たとえば、すばやい小文字の筆記をその文字の小文字に対応させ、同一の文字の遅い筆記をその文字の大文字に対応させることができる。
【０１７９】
またＦｉｇ．３３ｆに示されているように、標準キーボード上において利用可能な文字ならびに機能を、キーの数が限られたキーパッド（３３５０）（たとえば、電話のキーパッド）の異なるキーに割り当てる（３３５１）ことができる。これらのキーパッドのキーは、通常のクリック・キー、感応キー（たとえばディジタイザ、タッチ・センサ、押圧キー等）、あるいはそのほかのタイプのキーとしてもよい。キー上において、そのキー（３３５４）に割り当てられているキャラクタ（３３５３）の１つ（３３５２）を筆記することによって（または、キー上の記号もしくはキー上の記号に対応する場所に割り当てられたサウンドを発生するあらかじめ定義済みの方向に直線を描画するといった、あらかじめ定義済みの記号を筆記することによって）、また必要であれば同時にそのキーを押すことによって、キー認識システムがそのキーを選択し、ＨＷＳＲＳは、そのキー上に筆記されたキャラクタが選択されそのキーに割り当てられているうちの１つであることを理解する。これによりＨＷＳＲＳは、入力されたキャラクタと、選択されたキーに関して利用可能なキャラクタのパターンの比較だけを行えばよく、その結果、認識がはるかに容易になる。ここで認識されようが、筆記具（たとえば、ペン、スタイラス）は、好ましくは本発明の構造化されたチップを備えるものとすることができる。
【０１８０】
筆記入力システムを向上させるために、追加のテクノロジならびに手段を使用することができる。たとえば、筆記表面上におけるスタイラス・チップのポジションもしくはそのパスをロケートするために、スタイラスが、信号を送信し、その戻りを受信するための手段（たとえばレーダ）を備えてもよい。レーザ、光、マイクロ波、赤外線等の各種テクノロジを、信号の送信および戻り信号の受信に使用することができる。Ｆｉｇ．３４ａに示されているように、反射ビーコン（３４０１）等を、たとえば筆記表面（３４０４）上に配置し、スタイラスのペン先が頻繁に送信する信号（３４０３）を反射する。スタイラスは、信号の送信と戻り信号の受信の間の時間に基づいて反射器からペン先のポジションまでの距離を求める測定システムを備えることができる。ペン先のポジション（３４０２）は、たとえばビーコン上のあらかじめ決定済みの２つのポイント（３４０５，３４０９）からの距離に基づいて計算することができる。ここで理解されようが、ビーコンの関係角度（３４０６）は、９０度と異なる角度にしなければならない。さらにここで理解されようが、システムは、ペン先が筆記表面と触れているか否かについて随時知ることができる。このポジショニング・システムは、単語、センテンス等の終了を認識システムに示すといった多くの利点を有する。
【０１８１】
空間におけるポインティング・デバイスの動きに従った手書き認識システムも提供することができる。たとえば、記号を筆記する手順の間における空間内のポインティング・デバイス・チップのロケーションに関係する３次元パラメータのスキャン／提供を行う反射／検出手段を使用してもよい。正確な時間における空間内の前記ポインティング・チップのポジションは、ポインティング・デバイス・チップによって送信／受信が行われ、検出される信号によって、かつ／または前記ポインティング・デバイス・チップに対して前記信号を反射し、それに受信させることによって、決定することができる。
【０１８２】
さらに、本発明の別の実施態様によれば、ポインティング・デバイスならびにそのチップを、たとえば前記ポインティング・デバイスおよび／またはそのチップの異なる部分に印加される空気圧レベルを（たとえばセンサを用いて）検出する態様で構造化し、設計することができる。
【０１８３】
また本発明の別の実施態様によれば、ポインティング・デバイスおよび／またはそのチップが、記号を筆記する間の空気との接触における、たとえば前記ポインティング・デバイスおよびそのチップの異なる部分の温度レベルを検出する態様で構造化し、設計することもできる。たとえば、システムによってあらかじめセンサを一定に加熱し、筆記の間に前記ポインティング・デバイスが空気と接触するとき、それに応じて前記部分のそれぞれの温度が変化するようにしてもよい。これらを、認識システムによって検出し、分析することができる。
【０１８４】
本発明のさらに別の実施態様によれば、Ｆｉｇ．３４ｂに示されているように、スタイラス・カバー（３４１０）を反射ビーコンとして使用することができる。
【０１８５】
ここで理解されようが、反射ビーコン・システムの使用に代えて、スタイラスのペン先から信号を送信して検出手段に検出させてもよい。それを目的として、前述のビーコン等の検出ユニットを備えてこれらの信号を検出し、かつ必要に応じてそれを処理することができる。続いて検出手段は、情報（たとえば、正確な時間におけるスタイラス・チップのポジション）をスタイラス‐タイプのコンピュータに送信することができる。ここでは、３次元検出／反射手段を提供するように前記反射ビーコンを構成できることが理解される。
【０１８６】
上記の正確な時間におけるポジション情報は、リアルタイム手書き認識システムの手順による、筆記された記号の解釈に使用することができる。
【０１８７】
本発明の一実施態様によれば、前述したテクノロジを使用することによって、反射または検出ビーコンを筆記表面上に水平に固定することができる。Ｆｉｇ．３５に示されているように、ノートパッド、ノート、およびそのほかの筆記表面は、反射手段が組み込まれる形に製造することができる。
【０１８８】
本発明のさらに別の実施態様によれば、スタイラス‐タイプのコンピュータが、バーコード読み取り／認識システムを備えることができる。前記バーコード・リーダは、本発明のスタイラス・コンピュータ内もしくはその外側の適切な場所に取り付けることができる。
【０１８９】
本発明の一実施態様によれば、本発明のスタイラス・コンピュータが、筆記チップの近傍に取り付けられるバーコード・リーダを有し、記号を筆記する間の、それぞれの瞬間における前記筆記チップのポジションに関する情報をスキャンする。
【０１９０】
本発明のさらに別の実施態様によれば、スタイラス‐タイプのコンピュータのバーコード・リーダが、記号を筆記する間の筆記表面上のそれぞれの瞬間における、前記スタイラス・コンピュータの筆記チップのポジションに関する情報をスキャンする態様で、それを前記スタイラス・コンピュータの回転クリップ・ボタン上に配置することができる。記号を筆記する間の筆記表面上の筆記チップに関する視界を良好にするために、ユーザは、前記クリップ・ボタンを回転し、適切なポジションに固定してもよい。
【０１９１】
ここで理解されようが、テキストを筆記する間のスタイラス・コンピュータの各種の異なる動きから、より良好なスキャンのために、スタイラスの異なる場所および／または別の場所に複数のバーコード・リーダを配置することもできる。
【０１９２】
Ｆｉｇ．３６に筆記表面（３６０１）を示す。この筆記表面上の水平位置は垂直バーコード（３６０２）によって数値化されており、筆記表面上の垂直位置は水平バーコード（３６０３）によって数値化されている。筆記表面上におけるこれらのバーコードの交点（３６０４）は、筆記表面上の厳密なポジションを表す。そのために、２本のバーが交差する各点は、一意的な情報特性を有していなければならない。たとえば、２本のバー（たとえば、垂直バーと水平バー）の交点近傍のあらかじめ定義済みの数の隣接バー（たとえば、垂直および水平のバー）に、同じ筆記表面上の前記バーコードの別の２本のバーの交点近傍にある、同じあらかじめ定義済みの数の隣接バーと異なる特性（たとえば、バーの構成が異なるか、バーが異なる色を有するなど）を持たせることができる。前記あらかじめ定義済みの数の隣接バーコードを、筆記手順の間に、たとえば本発明のスタイラス・コンピュータに取り付けられているバーコード・リーダが読み取ることによって、筆記された記号のグラフィティの形状、描画、あるいはテキスト内の場所もしくはテキストを筆記する間の筆記表面上の場所、または記号の終了、２つの記号の間の間隔といった情報が提供され、それをリアルタイムで処理し、かつ／または遅延処理用にストアすることができる。ここで理解されることであるが、バーコードのバーは、異なる幅、異なる色等の異なる特性を有することができる。また、ここに示した水平および垂直のバーコードが単なる例示にすぎないことに注意が必要である。バーコードのバーの方向についても各種考えられる。たとえば、第１のバーのグループを水平にし、同一表面上で交差する第２のバーのグループを斜めにしてもよい。また、筆記表面上に備えるバーのグループを２グループより多くし、それぞれのバーのグループが異なる方向を有するようにしてもよい。
【０１９３】
スタイラス‐タイプのコンピュータのチップにバーコード・リーダならびにシステムを備えることによって、システムは、筆記の間の、それぞれの瞬間における筆記表面上のペン先のポジションを知ることができる。
【０１９４】
本発明の別の実施態様によれば、Ｆｉｇ．３７に示されているように筆記パッド上の各位置を異なる番号、異なる色等の手段によってマークすることができる。その場合、スタイラス‐タイプのコンピュータは、光学および／またはカラー・リーダおよび認識システムを備えることができる。
【０１９５】
Ｆｉｇ．３８に示されているように、バーコード、番号、色、および／またはそのほかの位置表示情報は、プロジェクタ（３８０１）によって筆記表面上に投影されるようにしてもよい。
【０１９６】
以上のとおり、本発明の本質的に新しい特徴について、それが代替実施態様に適用される場合を説明し、かつ示してきたが、当業者にとっては、本発明の精神から逸脱することなく、開示した発明の形式ならびに詳細における各種の省略ならびに置き換えおよび変更が可能であろう。したがって、これに付随する特許請求の範囲によって示されるとおりにのみ限定されることを意図している。また図面は、必ずしも実寸を反映するものと理解されるべきでなく、本質的に概念的であることを理解する必要がある。
【図面の簡単な説明】
【Ｆｉｇ．１ａ】ペンおよび筆記表面を示した説明図である。
【Ｆｉｇ．１ｂ】筆記の間におけるペンの方向の例を示した説明図である。
【Ｆｉｇ．２ａ】２つの方向の線を筆記しているペンを示した説明図である。
【Ｆｉｇ．２ｂ】上記の線を筆記するときのペンと筆記表面の接触によって生成される仮想的なサウンドの波形を示した説明図である。
【Ｆｉｇ．３ａ】筆記表面上における筆記時に、異なる方向ごとに異なるサウンドを生成する望ましい筆記具のチップを示した説明図である。
【Ｆｉｇ．３ｂ】上記の異なるサウンドを生成するための筆記具のチップの表面構造を示した説明図である。
【Ｆｉｇ．３ｃ】方向の異なる２本の類似の線を描画する間に、ポインティング・デバイスの構造化されたチップによって生成される２つの異なるサウンド波形を示した説明図である。
【Ｆｉｇ．３ｄ】Ｆｉｇ．３ｂに示されるようなペン先によって筆記された記号、および筆記表面上におけるその記号の筆記の間に前記ペン先によって生成されるサウンドの波形を示した説明図である。
【Ｆｉｇ．４ａ】筆記表面上における異なる方向のストロークの間の異なるサウンドの生成を向上させた各種形状の筆記チップの例を示した説明図である。
【Ｆｉｇ．４ｂ】筆記表面上における異なる方向のストロークの間の異なるサウンドの生成を向上させた各種テクスチャの筆記チップの例を示した説明図である。
【Ｆｉｇ．４ｃ】筆記表面上における異なる方向のストロークの間の異なるサウンドの生成を向上させた各種形状および各種テクスチャの組み合わせによる筆記チップの例を示した説明図である。
【Ｆｉｇ．４ｄ】ユーザが筆記を行う間の筆記表面に対する筆記具の角度を示した説明図である。
【Ｆｉｇ．４ｅ】筆記の間における円錐（たとえば凸状）のペン先と筆記表面の接触エリアを示した説明図である。
【Ｆｉｇ．４ｆ】ペン軸のポジションに対する２つの異なる回転における、筆記表面上のペン先の２つの異なる接触エリアを示した正面図である。
【Ｆｉｇ．４ｇ】別のポインティング・デバイスの構造化されたチップ形状を示した側面図ならびに正面図である。
【Ｆｉｇ．５ａ】ペンによって生成された手書き文字図形を示した説明図である。
【Ｆｉｇ．５ｂ】その文字を筆記する間の、前記ペンと筆記表面の接触によって生成されたサウンドの仮想的なグラフを示した説明図である。
【Ｆｉｇ．５ｃ】その文字を声に出したときの仮想的な音声グラフを示した説明図である。
【Ｆｉｇ．６】英字および記号を表すキーを備える標準的なコンピュータ・キーボードを示した説明図である。
【Ｆｉｇ．６ａ】類似する手書きキャラクタを示した説明図である。
【Ｆｉｇ．６ｂ】印刷および手書きによる英語の大文字ならびに小文字、および類似の記号を示した説明図である。
【Ｆｉｇ．６ｃ】類似する３つのキャラクタの手書き方法、および認識システムによる区別の方法を示した説明図である。
【Ｆｉｇ．６ｄ】さらに別の類似の手書きキャラクタおよび区別を可能にするための筆記方法の提案を示した説明図である。
【Ｆｉｇ．６ｅ】類似する数字およびキャラクタを示した説明図である。
【Ｆｉｇ．６ｆ】カテゴリごとの印刷および手書きによるキャラクタ、および認識システムがそれらを容易に認識できるように、それらを筆記する間に守るべき方向の提案を示した説明図である。
【Ｆｉｇ．６ｇ】カテゴリごとの印刷および手書きによるキャラクタ、および認識システムがそれらを容易に認識できるように、それらを筆記する間に守るべき方向の提案を示した説明図である。
【Ｆｉｇ．６ｈ】カテゴリごとの印刷および手書きによるキャラクタ、および認識システムがそれらを容易に認識できるように、それらを筆記する間に守るべき方向の提案を示した説明図である。
【Ｆｉｇ．６ｉ】カテゴリごとの印刷および手書きによるキャラクタ、および認識システムがそれらを容易に認識できるように、それらを筆記する間に守るべき方向の提案を示した説明図である。
【Ｆｉｇ．６ｊ】カテゴリごとの印刷および手書きによるキャラクタ、および認識システムがそれらを容易に認識できるように、それらを筆記する間に守るべき方向の提案を示した説明図である。
【Ｆｉｇ．６ｋ】キーボードにプリントされているすべてのキャラクタ、および認識システムがそれらを容易に認識できるように、それらを筆記する間に守るべき方向の提案を示した説明図である。
【Ｆｉｇ．７】本発明の一実施態様に従った手書き認識処理を示したブロック図である。
【Ｆｉｇ．７ａ】入力システムとして手書きサウンド認識システムを使用するスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．７ｂ】追加の特徴が備えられた前記スタイラス‐タイプのコンピュータ用のペン‐タイプのチップの正面図である。
【Ｆｉｇ．７ｃ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．７ｄ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータの筆記チップの正面図である。
【Ｆｉｇ．７ｅ】筆記の間における筆記表面上のポインティング・チップの接触のサウンドを増幅するための指数関数曲線形状を有する手段を備えたスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．７ｆ】筆記の間における筆記表面上のポインティング・チップの接触のサウンドを増幅するための共振チャンバを備えたスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．８ａ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータ、およびライティング・チップの閉じられたポジション、開かれたポジション、筆記中のポジションを示した説明図である。
【Ｆｉｇ．８ｂ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータ、およびライティング・チップの閉じられたポジション、開かれたポジション、筆記中のポジションを示した説明図である。
【Ｆｉｇ．８ｃ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータ、およびライティング・チップの閉じられたポジション、開かれたポジション、筆記中のポジションを示した説明図である。
【Ｆｉｇ．８ｄ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータ、およびライティング・チップの閉じられたポジション、開かれたポジション、筆記中のポジションを示した説明図である。
【Ｆｉｇ．９ａ】本発明の一実施態様に従ったコンピュータのイレーシング機能およびイレーシング手順を示した説明図である。
【Ｆｉｇ．９ｂ】本発明の一実施態様に従ったコンピュータのイレーシング機能およびイレーシング手順を示した説明図である。
【Ｆｉｇ．９ｃ】本発明の一実施態様に従ったコンピュータのイレーシング機能およびイレーシング手順を示した説明図である。
【Ｆｉｇ．１０ａ】本発明の一実施態様に従ったコンピュータの別のイレーシング手順を示した説明図である。
【Ｆｉｇ．１０ｂ】本発明の一実施態様に従ったコンピュータの別のイレーシング手順を示した説明図である。
【Ｆｉｇ．１１】平面もしくは凸状のＬＣＤディスプレイを備える本発明の一実施態様に従ったスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．１１ａ】曲面もしくは円筒状（たとえば凸状）のＬＣＤディスプレイを備える本発明の一実施態様に従ったスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．１１ｂ】前記曲面／円筒状ディスプレイの平均的なサイズを示した説明図である。
【Ｆｉｇ．１１ｃ】前記曲面／円筒状ディスプレイの平均的なサイズを示した説明図である。
【Ｆｉｇ．１２】本発明の一実施態様に従った、データを操作し、最終的にはデータを入力するためのボタン・タイプのマウスを備えるスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．１２ａ】本発明の一実施態様に従った前記マウスのペン軸方向の動きおよびポジションを示した説明図である。
【Ｆｉｇ．１２ｂ】本発明の一実施態様に従った前記マウスをペン軸方向にクリックする動き／ポジションを示した説明図である。
【Ｆｉｇ．１２ｃ】本発明の一実施態様に従った各ポジションにおける前記マウスのスタイラス軸周りの回転を示した説明図である。
【Ｆｉｇ．１２ｄ】本発明の一実施態様に従ったマウスをユーザがスタイラス軸と垂直に押すことによって生じる、前記マウスの別の種類の動きを示した側面図である。
【Ｆｉｇ．１２ｅ】マウスの正面図およびそれを押す方向を示した正面図である。
【Ｆｉｇ．１２ｆ】スタイラス‐タイプのコンピュータのディスプレイ上のポインタ／セレクタ手段を操作するためのブル（ｂｕｌｌ）を有するマウスを示した側面図および正面図である。
【Ｆｉｇ．１３ａ】本発明の一実施態様に従ったマウスによってメニュー・リストを選択する方法を示した説明図である。
【Ｆｉｇ．１３ｂ】本発明の一実施態様に従ったマウスによってメニュー・リストを選択する方法を示した説明図である。
【Ｆｉｇ．１３ｃ】本発明の一実施態様に従ったマウスによってメニュー・リストを選択する方法を示した説明図である。
【Ｆｉｇ．１４ａ】本発明の一実施態様に従ったマウス操作によってメニューを選択する方法を示した説明図である。
【Ｆｉｇ．１４ｂ】本発明の一実施態様に従ったマウス操作によってメニューを選択する方法を示した説明図である。
【Ｆｉｇ．１４ｃ】本発明の一実施態様に従ったマウス操作によってメニューを選択する方法を示した説明図である。
【Ｆｉｇ．１４ｄ】本発明の一実施態様に従ったマウス操作によってメニューを選択する方法を示した説明図である。
【Ｆｉｇ．１４ｅ】本発明の一実施態様に従ったマウス操作によってメニューを選択する方法を示した説明図である。
【Ｆｉｇ．１４ｆ】本発明の一実施態様に従ったマウス操作によってメニューを選択する方法を示した説明図である。
【Ｆｉｇ．１５ａ】本発明の一実施態様に従って、マウスを使用してメニュー・バーおよび機能を選択する方法を示した説明図である。
【Ｆｉｇ．１５ｂ】本発明の一実施態様に従って、マウスを使用してメニュー・バーおよび機能を選択する方法を示した説明図である。
【Ｆｉｇ．１５ｃ】本発明の一実施態様に従って、マウスを使用してメニュー・バーおよび機能を選択する方法を示した説明図である。
【Ｆｉｇ．１５ｄ】本発明の一実施態様に従って、マウスを使用してメニュー・バーおよび機能を選択する方法を示した説明図である。
【Ｆｉｇ．１５ｅ】本発明の一実施態様に従って、マウスを使用してメニュー・バーおよび機能を選択する方法を示した説明図である。
【Ｆｉｇ．１５ｆ】本発明の一実施態様に従って、マウスを使用してメニュー・バーおよび機能を選択する方法を示した説明図である。
【Ｆｉｇ．１５ｇ】本発明の一実施態様に従って、マウスを使用してメニュー・バーおよび機能を選択する方法を示した説明図である。
【Ｆｉｇ．１５ｈ】本発明の一実施態様に従って、マウスを使用してメニュー・バーおよび機能を選択する方法を示した説明図である。
【Ｆｉｇ．１６ａ】本発明の一実施態様に従って、マウスを使用してＬＣＤディスプレイ上のテキストを前送りまたは逆送りする方法を示した説明図である。
【Ｆｉｇ．１６ｂ】本発明の一実施態様に従って、マウスを使用してＬＣＤディスプレイ上のテキストを前送りまたは逆送りする方法を示した説明図である。
【Ｆｉｇ．１６ｃ】本発明の一実施態様に従って、マウスを使用してＬＣＤディスプレイ上のテキストを前送りまたは逆送りする方法を示した説明図である。
【Ｆｉｇ．１６ｄ】本発明の一実施態様に従って、マウスを使用してＬＣＤディスプレイ上のテキストを前送りまたは逆送りする方法を示した説明図である。
【Ｆｉｇ．１７ａ】本発明の一実施態様に従って、マウスを使用してテキスト内のカーソルをキャラクタ単位で前送りまたは逆送りする方法を示した説明図である。
【Ｆｉｇ．１７ｂ】本発明の一実施態様に従って、マウスを使用してテキスト内のカーソルをキャラクタ単位で前送りまたは逆送りする方法を示した説明図である。
【Ｆｉｇ．１７ｃ】本発明の一実施態様に従って、マウスを使用してテキスト内のカーソルをキャラクタ単位で前送りまたは逆送りする方法を示した説明図である。
【Ｆｉｇ．１７ｄ】本発明の一実施態様に従って、マウスを使用してテキスト内のカーソルをキャラクタ単位で前送りまたは逆送りする方法を示した説明図である。
【Ｆｉｇ．１７ｅ】本発明の一実施態様に従って、マウスを使用してテキスト内のカーソルをキャラクタ単位で前送りまたは逆送りする方法を示した説明図である。
【Ｆｉｇ．１７ｆ】本発明の一実施態様に従って、マウスを使用してテキスト内のカーソルをキャラクタ単位で前送りまたは逆送りする方法を示した説明図である。
【Ｆｉｇ．１８ａ】本発明の一実施態様に従って、あらかじめ決定済みのポジションにマウスがある場合に、スクリーン上に表示されたドキュメント上のテキスト選択インジケータを移動する方法を示した説明図である。
【Ｆｉｇ．１８ｂ】本発明の一実施態様に従って、あらかじめ決定済みのポジションにマウスがある場合に、スクリーン上に表示されたドキュメント上のテキスト選択インジケータを移動する方法を示した説明図である。
【Ｆｉｇ．１８ｃ】本発明の一実施態様に従って、あらかじめ決定済みのポジションにマウスがある場合に、スクリーン上に表示されたドキュメント上のテキスト選択インジケータを移動する方法を示した説明図である。
【Ｆｉｇ．１８ｄ】本発明の一実施態様に従って、あらかじめ決定済みのポジションにマウスがある場合に、スクリーン上に表示されたドキュメント上のテキスト選択インジケータを移動する方法を示した説明図である。
【Ｆｉｇ．１９ａ】本発明の一実施態様に従ったマウスの使用によりテキストの部分を選択する手順を示した説明図である。
【Ｆｉｇ．１９ｂ】本発明の一実施態様に従ったマウスの使用によりテキストの部分を選択する手順を示した説明図である。
【Ｆｉｇ．１９ｃ】本発明の一実施態様に従ったマウスの使用によりテキストの部分を選択する手順を示した説明図である。
【Ｆｉｇ．１９ｄ】本発明の一実施態様に従ったマウスの使用によりテキストの部分を選択する手順を示した説明図である。
【Ｆｉｇ．１９ｅ】本発明の一実施態様に従ったマウスの使用によりテキストの部分を選択する手順を示した説明図である。
【Ｆｉｇ．２０ａ】本発明の一実施態様に従ったマウスの使用によるコピー手順を示した説明図である。
【Ｆｉｇ．２０ｂ】本発明の一実施態様に従ったマウスの使用によるコピー手順を示した説明図である。
【Ｆｉｇ．２０ｃ】本発明の一実施態様に従ったマウスの使用によるコピー手順を示した説明図である。
【Ｆｉｇ．２０ｄ】本発明の一実施態様に従ったマウスの使用によるコピー手順を示した説明図である。
【Ｆｉｇ．２１ａ】本発明の一実施態様に従ったマウスの使用によるペースト手順を示した説明図である。
【Ｆｉｇ．２１ｂ】本発明の一実施態様に従ったマウスの使用によるペースト手順を示した説明図である。
【Ｆｉｇ．２１ｃ】本発明の一実施態様に従ったマウスの使用によるペースト手順を示した説明図である。
【Ｆｉｇ．２１ｄ】本発明の一実施態様に従ったマウスの使用によるペースト手順を示した説明図である。
【Ｆｉｇ．２１ｅ】本発明の一実施態様に従ったマウスの使用によるペースト手順を示した説明図である。
【Ｆｉｇ．２２ａ】本発明の一実施態様に従ったイレーサの使用により選択したテキストを削除する方法を示した説明図である。
【Ｆｉｇ．２２ｂ】本発明の一実施態様に従ったイレーサの使用により選択したテキストを削除する方法を示した説明図である。
【Ｆｉｇ．２２ｃ】本発明の一実施態様に従ったイレーサの使用により選択したテキストを削除する方法を示した説明図である。
【Ｆｉｇ．２３ａ】本発明の一実施態様に従った、別のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用するコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２３ｂ】本発明の一実施態様に従った、別のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用するコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２３ｃ】本発明の一実施態様に従った、別のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用するコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２３ｄ】本発明の一実施態様に従った、別のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用するコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２３ｅ】本発明の一実施態様に従った、別のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用するコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２４ａ】本発明の一実施態様に従った、同一のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用した、スクリーンに表示されているドキュメント上のテキスト選択インジケータを移動する方法、およびコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２４ｂ】本発明の一実施態様に従った、同一のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用した、スクリーンに表示されているドキュメント上のテキスト選択インジケータを移動する方法、およびコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２４ｃ】本発明の一実施態様に従った、同一のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用した、スクリーンに表示されているドキュメント上のテキスト選択インジケータを移動する方法、およびコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２４ｄ】本発明の一実施態様に従った、同一のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用した、スクリーンに表示されているドキュメント上のテキスト選択インジケータを移動する方法、およびコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２４ｅ】本発明の一実施態様に従った、同一のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用した、スクリーンに表示されているドキュメント上のテキスト選択インジケータを移動する方法、およびコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２４ｆ】本発明の一実施態様に従った、同一のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用した、スクリーンに表示されているドキュメント上のテキスト選択インジケータを移動する方法、およびコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２４ｇ】本発明の一実施態様に従った、同一のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用した、スクリーンに表示されているドキュメント上のテキスト選択インジケータを移動する方法、およびコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２４ｈ】本発明の一実施態様に従った、同一のあらかじめ決定済みのポジションにマウスがある場合の、マウスを使用した、スクリーンに表示されているドキュメント上のテキスト選択インジケータを移動する方法、およびコンピュータの『通常選択』インジケータによるメニュー・バーおよび機能の選択手順を示した説明図である。
【Ｆｉｇ．２４ｉ】本発明の一実施態様に従ってマウスをスタイラス軸と垂直に押すことによってテキスト内のカーソルを操作する方法を示した説明図である。
【Ｆｉｇ．２４ｊ】本発明の一実施態様に従ってマウスをスタイラス軸と垂直に押すことによってテキスト内のカーソルを操作する方法を示した説明図である。
【Ｆｉｇ．２４ｋ】本発明の一実施態様に従ってマウスをスタイラス軸と垂直に押すことによってテキスト内のカーソルを操作する方法を示した説明図である。
【Ｆｉｇ．２４ｌ】本発明の一実施態様に従ってマウスをスタイラス軸と垂直に押すことによってテキスト内のカーソルを操作する方法を示した説明図である。
【Ｆｉｇ．２４ｍ】本発明の一実施態様に従ってマウスをスタイラス軸と垂直に押すことによってテキスト内のカーソルを操作する方法を示した説明図である。
【Ｆｉｇ．２４ｎ】本発明の一実施態様に従ってマウスをスタイラス軸と垂直に押すことによってテキスト内のカーソルを操作する方法を示した説明図である。
【Ｆｉｇ．２５】マウスの各種ポジションおよび各ポジションにおけるクリック方向を示した説明図である。
【Ｆｉｇ．２５ａ】１つのあらかじめ決定済みのポジションにあるマウス、およびそのポジションにおけるマウスの動きに割り当てられたテキスト操作手順およびステップを示した説明図である。
【Ｆｉｇ．２５ｂ】別のあらかじめ決定済みのポジションにあるマウス、およびそのポジションにおけるマウスの動きに割り当てられたメニューならびに機能の操作手順およびステップを示した説明図である。
【Ｆｉｇ．２６】スタイラス‐タイプのコンピュータに関して説明したマウス・システムならびにデバイスを、本発明の一実施態様に従って別のタイプのコンピュータの異なる位置に使用する態様を示した説明図である。
【Ｆｉｇ．２６ｂ】スタイラス‐タイプのコンピュータに関して説明したマウス・システムならびにデバイスを、本発明の一実施態様に従って別のタイプのコンピュータの異なる位置に使用する態様を示した説明図である。
【Ｆｉｇ．２６ｃ】スタイラス‐タイプのコンピュータに関して説明したマウス・システムならびにデバイスを、本発明の一実施態様に従って別のタイプのコンピュータの異なる位置に使用する態様を示した説明図である。
【Ｆｉｇ．２６ｄ】伝統的なキーボードに代えて、本発明の筆記表面および入力システムを備えたコンピュータを示した説明図である。
【Ｆｉｇ．２７ａ】本発明の別の実施態様に従ったスタイラス‐タイプのコンピュータ用の押しボタンを示した説明図である。
【Ｆｉｇ．２７ｂ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータにおける追加の多方向ボタンおよびその機能を示した説明図である。
【Ｆｉｇ．２７ｃ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータにおける追加の多方向ボタンおよびその機能を示した説明図である。
【Ｆｉｇ．２７ｄ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータにおける追加の多方向ボタンおよびその機能を示した説明図である。
【Ｆｉｇ．２７ｅ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータにおける追加の多方向ボタンおよびその機能を示した説明図である。
【Ｆｉｇ．２７ｆ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータにおける追加の多方向ボタンおよびその機能を示した説明図である。
【Ｆｉｇ．２７ｇ】本発明の別の実施態様に従ったスタイラス‐タイプのコンピュータ用のマルチポジション・クリップ・ボタンを示した説明図である。
【Ｆｉｇ．２７ｈ】本発明の別の実施態様に従ったスタイラス‐タイプのコンピュータ用のマルチポジション・クリップ・ボタンを示した説明図である。
【Ｆｉｇ．２７ｉ】本発明の別の実施態様に従ったスタイラス‐タイプのコンピュータ用のマルチポジション・クリップ・ボタンを示した説明図である。
【Ｆｉｇ．２７ｊ】本発明の別の実施態様に従ったスタイラス‐タイプのコンピュータ用のマルチポジション・クリップ・ボタンを示した説明図である。
【Ｆｉｇ．２７ｋ】本発明の一実施態様に従ったスタイラス・コンピュータの筆記チップの近くに配置されるＦｉｇ．２７ｂ〜２７ｆのクリップ・ボタンを示した説明図である。
【Ｆｉｇ．２７Ｌ】本発明の一実施態様に従ったスタイラス・コンピュータ用の、指向性マイクロフォンおよび／またはアンテナおよび／またはクリップ・ボタンとして使用される、オープン・ポジションにあるマルチセクション／指向性クリップを示した説明図である。
【Ｆｉｇ．２７ｍ】Ｆｉｇ．２７Ｌのマルチセクション・クリップの、各種のオープン・ポジションを示した説明図である。
【Ｆｉｇ．２７ｎ】Ｆｉｇ．２７Ｌのマルチセクション・クリップの、各種のオープン・ポジションを示した説明図である。
【Ｆｉｇ．２８ａ】本発明の一実施態様に従ったディスプレイおよびマウスの使用による追加の入力システムを示した説明図である。
【Ｆｉｇ．２８ｂ】本発明の一実施態様に従ったディスプレイおよびマウスの使用による追加の入力システムを示した説明図である。
【Ｆｉｇ．２８ｃ】本発明の一実施態様に従ったディスプレイおよびマウスの使用による追加の入力システムを示した説明図である。
【Ｆｉｇ．２８ｄ】本発明の一実施態様に従ったディスプレイおよびマウスの使用による追加の入力システムを示した説明図である。
【Ｆｉｇ．２８ｅ】本発明の一実施態様に従ったディスプレイおよびマウスの使用による追加の入力システムを示した説明図である。
【Ｆｉｇ．２９ａ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータ用のカバーの、ＬＣＤディスプレイ不使用時における保護およびその装着ステップを示した説明図である。
【Ｆｉｇ．２９ｂ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータ用のカバーの、ＬＣＤディスプレイ不使用時における保護およびその装着ステップを示した説明図である。
【Ｆｉｇ．２９ｃ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータ用のカバーの、ＬＣＤディスプレイ不使用時における保護およびその装着ステップを示した説明図である。
【Ｆｉｇ．２９ｄ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータ用のカバーの、ＬＣＤディスプレイ不使用時における保護およびその装着ステップを示した説明図である。
【Ｆｉｇ．２９ｅ】電話およびテレコミュニケーション機器として使用するときのスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．２９ｆ】電話およびテレコミュニケーション機器として使用するときのスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．２９ｇ】電話およびテレコミュニケーション機器として使用するときのスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．３０ａ】本発明の一実施態様に従ったスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．３１】本発明の一実施態様に従った別のナビゲーション・ボタンを備えるスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．３１ａ】本発明の一実施態様に従ったカーソル・ナビゲーション・ボタンを示した説明図である。
【Ｆｉｇ．３１ｂ】本発明の一実施態様に従った前記ボタンの操作による画面上のカーソルのナビゲーションを示した説明図である。
【Ｆｉｇ．３１ｃ】本発明の一実施態様に従った前記ボタンの操作による画面上のカーソルのナビゲーションを示した説明図である。
【Ｆｉｇ．３１ｄ】本発明の一実施態様に従った前記ボタンの操作による画面上のカーソルのナビゲーションを示した説明図である。
【Ｆｉｇ．３１ｅ】本発明の一実施態様に従った前記ボタンの操作による画面上のカーソルのナビゲーションを示した説明図である。
【Ｆｉｇ．３１ｆ】本発明の一実施態様に従った前記ボタンの操作による画面上のカーソルのナビゲーションを示した説明図である。
【Ｆｉｇ．３２ａ】本発明の一実施態様に従ったメニュー・ナビゲーション・ボタンおよびその操作を示した説明図である。
【Ｆｉｇ．３２ｂ】本発明の一実施態様に従ったメニュー・ナビゲーション・ボタンおよびその操作を示した説明図である。
【Ｆｉｇ．３２ｃ】本発明の一実施態様に従ったメニュー・ナビゲーション・ボタンおよびその操作を示した説明図である。
【Ｆｉｇ．３２ｄ】本発明の一実施態様に従ったメニュー・ナビゲーション・ボタンおよびその操作を示した説明図である。
【Ｆｉｇ．３２ｅ】本発明の一実施態様に従ったメニュー・ナビゲーション・ボタンおよびその操作を示した説明図である。
【Ｆｉｇ．３２ｆ】本発明の一実施態様に従ったメニュー・ナビゲーション・ボタンおよびその操作を示した説明図である。
【Ｆｉｇ．３３ａ】本発明の一実施態様に従った筆記表面およびその上における筆記の間にペンによって生成されるサウンドを入力するためのマイクロフォンを備えたモバイル電話を示した説明図である。
【Ｆｉｇ．３３ｂ】本発明の一実施態様に従ったディスプレイ、筆記表面およびその上における筆記の間にペンによって生成されるサウンドを入力するためのマイクロフォンを備えた、電話もしくはＰＤＡ等の電子デバイスと組み合わされる腕時計等の手首に装着されるデバイスを示した説明図である。
【Ｆｉｇ．３３ｃ】本発明の一実施態様に従ったディスプレイ、筆記表面およびその上における筆記の間にペンによって生成されるサウンドを入力するためのマイクロフォンを備えた、電話もしくはＰＤＡ等の電子デバイスと組み合わされる腕時計等の手首に装着されるデバイスを示した説明図である。
【Ｆｉｇ．３３ｄ】本発明の一実施態様に従ったディスプレイおよびその上における筆記の間にペンによって生成されるサウンドを入力するためのマイクロフォンを備えた、電話もしくはＰＤＡ等の電子デバイスと組み合わされる腕時計等の手首に装着されるデバイスを示した説明図である
【Ｆｉｇ．３３ｅ】本発明の一実施態様に従った少なくともディスプレイを備え、また、最終的には、筆記の間にペンによって生成されるサウンドを入力するためのマイクロフォンを備える各種の電子デバイスを示した説明図である。
【Ｆｉｇ．３３ｆ】フル‐テキストおよび機能の入力を可能にする本発明の手書きサウンド認識システムが結合される改善されたキーボードを示した説明図である。
【Ｆｉｇ．３３ｇ】フル‐テキストおよび機能の入力を可能にする本発明の手書きサウンド認識システムが結合される改善されたキーボードを示した説明図である。
【Ｆｉｇ．３４ａ】本発明の一実施態様に従った、ビーコンからペン先のポジションを決定する手段を備えたスタイラス‐タイプのコンピュータを示した説明図である。
【Ｆｉｇ．３４ｂ】本発明の一実施態様に従ってビーコンとして使用されるＦｉｇ．２９ａのスタイラス‐タイプのコンピュータのカバーを示した説明図である。
【Ｆｉｇ．３５】本発明の一実施態様に従ってスタイラス‐タイプのコンピュータによるノートパッド上のピン・ポジションの決定を可能にする水平ビーコンを備えたノートパッドを示した説明図である。
【Ｆｉｇ．３６】ノートパッド上の位置を示す水平および垂直のバーコードを有するノートパッドを示した説明図である。
【Ｆｉｇ．３７】筆記表面上の位置を示す番号、記号、または色を有する筆記表面を示した説明図である。
【Ｆｉｇ．３８】筆記表面およびその表面上に位置を示す記号を投影するプロジェクタを示した説明図である。[0001]
(Field of the Invention)
The present invention relates to a data entry system and method based on a handwritten sound recognition system capable of providing easy, natural and fast full text and functional input. The invention also relates to a computer mouse system for data entry and manipulation for mobile and stationary electronic devices. Furthermore, it relates to a stylus-type computing device using the data entry method and means described above.
[0002]
(Background of the Invention)
Miniaturization is an important factor in today's technology advancement, which allows for the manufacture of many devices that could not be realized because of size alone. In fact, in essence, portable computers as well as cellular telephones are a primary feature of their size.
[0003]
However, in some areas, there are many obstacles to the development of miniaturization, basically due to the limitations of human use. For example, while it would be desirable to have a portable computer that fits in a wallet, such a computer would not help without a large input device that allows human-computer interaction. In other words, complex small computers as well as cellular phones (currently also used for Internet, e-mail, m-commerce, short message services, etc.), notebooks, personal digital assistant (PDA) devices, etc. The devices all require a keyboard, number pad or other input facility to allow the user to enter a telephone number, send an e-mail or write a letter. An important feature is also an LCD display, which is convenient for displaying entered or received data. Thus, any achievable advances in miniaturization technology are due, in part, to human factors that prevent the realization of a truly miniaturized state of a particular device.
[0004]
As is well known, a key feature of a successful technology product is its easy operation. In the case of the above equipment and similar devices, a quick and easy and most importantly, a natural, full text and functional input system is crucial. A display device with a standard text line width is also valuable.
[0005]
Some suggestions have been made to solve this basic man-machine-interface problem of how to enter text and functions quickly and easily using small communication devices.
[0006]
Telephone-type keypads are the most common input devices for small electronics as well as telecommunications equipment. Many electronic devices, such as mobile and ordinary telephones, PDAs, notebooks, laptops, facsimiles, remote controls for TVs and other electronic devices, and cameras, also incorporate such keypads. The keypad typically has twelve keys, but the number of characters and functions used to write text or messages is at least seven times as many. For example, a computer keyboard has over 80 keys, some of which are shared by two characters, symbols or functions.
[0007]
Due to the limitations of telephone keypads (eg, mobile telephone keypads) due to an insufficient number of keys, each key of a standard telephone keypad is assigned a group of characters as well as typically one number. ing. Even with the use of the Internet or the input of short messages, a lot of complexity ties up the user.
[0008]
One solution to this problem is to press a single key multiple times to select one of the characters or symbols represented by that key. Currently, most mobile phone keypads use this system. This is a time-consuming method and is frustrating for the user.
[0009]
To improve this system, software products have been developed that define words. It uses a dictionary database and language model to scan and present potential words depending on the key pressed. Subsequently, the user selects a desired word from the possibilities presented. This type of approach involves many issues, such as out-of-vocabulary words or forcing the user to select words. In addition, it takes time to enter numbers or individual characters.
[0010]
External small keyboards are also being manufactured to solve this problem, but this forces the user to carry two different devices, which conflicts with the basic philosophy of small electronic products: easy portability. .
[0011]
One recent technology that has attempted to overcome such limitations is speech / word recognition technology. Speech recognition is the process of recognizing one or more speech patterns contained in a person's speech as a corresponding computer input command, word or function. For example, instead of typing a character on a keyboard, the user speaks the character, and a recognition engine associates the speech pattern of the character with a computer-input character corresponding to the character. That is, since the user's voice provides all the input, each individual can operate the device according to this method without using the input device. Unfortunately, given the many complex aspects of personal speech, there is still no recognition device that accurately recognizes speech patterns at a sufficient level to completely replace an input device.
[0012]
In addition, there are some characters that are easily confused by the speech engine, such as "B" and "P" or "D" and "T". However, this is not necessarily a flaw in this type of engine, and these are characters that can be easily confused by humans. Next, problems and disadvantages related to the speech / word recognition system are listed.
-Single language only, mostly English
-Recognizes only the voice of a single individual
-Recognition accuracy decreases due to external noise disturbance (especially when using mobile telecommunications equipment)
-Not suitable for small displays due to inconvenience of correction (especially when using devices with small LCD such as mobile phones)
-Make many mistakes when speaking a single word (non-sequential words)
-Synonyms (eg, two, to, too)
-The intention of the user when describing a number is unpredictable (eg, twenty four, 24)
-The user's intention when numbers and symbols are mixed cannot be predicted (example: six by four, 6 by 4, 6 × 4)
-Difficult to distinguish between letters (eg B, P)
-Usually, many characters are pronounced in one syllable, and it is difficult to recognize the difference (eg, "write", "right").
[0013]
Most important is the issue of privacy, and this system may not be suitable for use in, for example, public places. Speaking letters, words, or commands is not an isolated system.
[0014]
Another data input method is a handwritten character recognition system. Various approaches can be considered for this method.
[0015]
(A) After a document is handwritten, it is read and digitized by means such as an optical reader (eg, a delay procedure). Relying on completely different handwritten figures for each individual makes personal handwritten character recognition through this system extremely complex. No suitable recognition system based on this method yet exists.
[0016]
(B) A real-time handwritten character recognition unit such as a PDA device or an optical reader performs a handwritten figure, a pen direction when the figure is drawn, an angle in the figure, a timing at which each point in the figure is written, and the like. Process multiple input parameters immediately.
[0017]
Characters and symbols are often simple figures, and often look similar, which can cause recognition errors by the recognition engine. This places some restrictions on the user in writing characters.
[0018]
The best-known devices that use this system are palm-type PDA devices. This device has a digitizer system and a sensitive writing surface. A corresponding pen for writing graphics on the surface is also provided. There is also a small screen for displaying the data entered after digitization. Usually, the procedure of writing a single symbol must be performed without releasing the pen from the writing surface to the end. The text must be written separately for each letter. Next, the disadvantages of this system are listed.
-Need to carry a sensitive writing surface.
-Writing is slow because the writing surface of the PDA is small and the user has to be careful not to protrude from it.
-Must carry a PDA and a corresponding pen, and in addition, this is more important, but requires the use of both hands, which is not convenient for mobile environments
-Display size is small.
The PDA itself is bulky and cannot be carried around at all times, for example in a user's pocket.
[0019]
Despite the emphasis on miniaturization, portable and other electronic devices suffer from many issues such as security and efficiency. For example, a person who misplaces or loses a cellular phone must immediately terminate the communication service before a thief or other party will incur charges for illegally using the phone. One well-known method for preventing such unauthorized use is to lock a cellular telephone or other device with a cryptographic system. While this system is effective in many cases, it is cumbersome and inefficient for the true owner, as the phone must be activated after a lengthy process prior to making the call. Similarly, there is no simple way to prevent unauthorized use of many electronic devices, which would initially involve locking the device with a cryptographic system or other time-consuming and inconvenient process.
[0020]
Security issues become even more essential when the device is used, for example, for e-commerce or banking operations that require a user's credit card number or bank account information.
[0021]
Thus, what is needed is a technology that can solve the above-mentioned user tightening dilemma, and that miniaturization can continue to realize its true potential. In addition, this type of technology needs to provide a more secure and effective means, especially compared to the prior art, that can prevent unauthorized use of devices and information.
[0022]
SUMMARY OF THE INVENTION An object of the present invention is to provide a data input system that is familiar, quick, and easy for electronic devices (particularly, mobile communication devices) that require data input. The present invention also provides an everyday, large-scale display with isolated, quick and easy data entry and manipulation capabilities, which allows a user to work on a display, for example, A3 / A4 paper width. It is another object to provide a user with a stylus-type computer or PDA that is both easy and portable. The systems, devices, and methods described below may be used independently or with other communication devices and systems.
[0023]
(Brief description of drawings)
In the drawings, similar elements are assigned similar reference symbols from multiple perspectives.
FIG. FIG. 1A is an explanatory diagram showing a pen and a writing surface.
FIG. FIG. 1B is an explanatory diagram showing an example of the direction of the pen during writing.
FIG. 2a is an explanatory view showing a pen writing a line in two directions.
FIG. FIG. 2B is an explanatory diagram showing a waveform of a virtual sound generated by contact between the pen and the writing surface when writing the line.
FIG. FIG. 3a is an illustration showing a tip of a preferred writing implement that produces different sounds in different directions when writing on a writing surface.
FIG. FIG. 3b is an explanatory diagram showing a surface structure of a writing instrument chip for generating the above different sounds.
FIG. 3c is an illustration showing two different sound waveforms generated by the structured chip of the pointing device while drawing two similar lines in different directions.
FIG. 3d is shown in FIG. FIG. 3B is an illustration showing a symbol written by the pen tip as shown in FIG. 3b and the waveform of the sound generated by the pen tip during writing of the symbol on the writing surface.
FIG. FIG. 4a is an illustration showing examples of variously shaped writing chips that enhance the generation of different sounds between strokes in different directions on the writing surface.
FIG. 4b is an illustration showing an example of a writing chip of various textures that enhances the generation of different sounds between strokes in different directions on the writing surface.
FIG. FIG. 4c is an explanatory diagram showing an example of a writing chip with a combination of various shapes and various textures that enhances generation of different sounds between strokes in different directions on a writing surface.
FIG. FIG. 4D is an explanatory diagram showing the angle of the writing implement with respect to the writing surface while the user is writing.
FIG. 4e is an explanatory diagram showing the contact area between the conical (for example, convex) pen tip and the writing surface during writing.
FIG. 4f is a front view showing two different contact areas of the pen tip on the writing surface at two different rotations with respect to the position of the pen axis.
FIG. 4g is a side view and a front view showing the structured chip shape of another pointing device.
FIG. FIG. 5A is an explanatory diagram showing a handwritten character figure generated by a pen.
FIG. FIG. 5b is an explanatory diagram showing a virtual graph of a sound generated by the contact between the pen and the writing surface while writing the character.
FIG. FIG. 5c is an explanatory diagram showing a virtual voice graph when the character is vocalized.
FIG. FIG. 6 is an explanatory diagram showing a standard computer keyboard provided with keys representing alphabets and symbols.
FIG. FIG. 6A is an explanatory diagram showing a similar handwritten character.
FIG. FIG. 6b is an explanatory diagram showing uppercase and lowercase English letters and similar symbols by printing and handwriting.
FIG. FIG. 6c is an explanatory diagram showing a handwriting method of three similar characters and a method of distinguishing by a recognition system.
FIG. FIG. 6D is an explanatory diagram showing yet another similar handwritten character and a proposal of a writing method for enabling distinction.
FIG. 6e is an explanatory diagram showing similar numbers and characters.
FIG. 6f to 6j are explanatory diagrams showing characters printed and handwritten for each category, and suggestions of directions to be followed while writing them so that the recognition system can easily recognize them.
FIG. 6k is an illustration showing all characters printed on the keyboard and suggestions of directions to follow while writing them so that the recognition system can easily recognize them.
FIG. FIG. 7 is a block diagram showing a handwriting recognition process according to an embodiment of the present invention.
FIG. FIG. 7a is an illustration showing a stylus-type computer using a handwritten sound recognition system as an input system.
FIG. FIG. 7b is a front view of a pen-type tip for the stylus-type computer with additional features.
FIG. FIG. 7c is an illustration showing a stylus-type computer according to one embodiment of the present invention.
FIG. 7d is a front view of a stylus-type computer writing tip according to one embodiment of the present invention.
FIG. FIG. 7e is an illustration showing a stylus-type computer with a means having an exponential curve shape to amplify the sound of a touch of a pointing chip on a writing surface during writing.
FIG. FIG. 7f is an illustration showing a stylus-type computer with a resonant chamber for amplifying the sound of a pointing tip contact on the writing surface during writing.
FIG. 8a to 8d are illustrations showing a stylus-type computer and a closed, open, and writing position of a writing chip according to one embodiment of the present invention.
FIG. 9a to 9c are explanatory diagrams showing an erasing function and an erasing procedure of a computer according to an embodiment of the present invention.
FIG. 10a to 10b are explanatory diagrams showing another erasing procedure of the computer according to one embodiment of the present invention.
FIG. 11 is an illustration showing a stylus-type computer with a flat or convex LCD display according to one embodiment of the present invention.
FIG. 11a is an illustration showing a stylus-type computer with a curved or cylindrical (eg, convex) LCD display according to one embodiment of the present invention.
FIG. 11b to 11c are explanatory diagrams showing an average size of the curved / cylindrical display.
FIG. FIG. 12 is an illustration showing a stylus-type computer with a button-type mouse for manipulating data and ultimately entering data, according to one embodiment of the present invention.
FIG. FIG. 12a is an explanatory diagram showing the movement and position of the mouse in the pen axis direction according to one embodiment of the present invention.
FIG. FIG. 12b is an explanatory diagram showing the movement / position of clicking the mouse in the pen axis direction according to an embodiment of the present invention.
FIG. FIG. 12c is an explanatory view showing rotation of the mouse around a stylus axis at each position according to one embodiment of the present invention.
FIG. 12d is a side view showing another type of movement of the mouse caused by the user pressing the mouse perpendicular to the stylus axis according to one embodiment of the present invention.
FIG. 12e is a front view showing the front view of the mouse and the direction in which the mouse is pressed.
FIG. 12f is a side and front view showing a mouse with a bull for operating pointer / selector means on the display of a stylus-type computer.
FIG. 13a to 13c are explanatory diagrams showing a method of selecting a menu list with a mouse according to one embodiment of the present invention.
FIG. 14a to 14f are explanatory diagrams showing a method of selecting a menu by mouse operation according to an embodiment of the present invention.
FIG. 15a to 15h are illustrations showing a method of selecting a menu bar and a function using a mouse according to one embodiment of the present invention.
FIG. 16a-16d are illustrations showing how to use a mouse to advance or reverse text on an LCD display, according to one embodiment of the present invention.
FIG. 17a to 17f are explanatory diagrams showing a method for moving the cursor in the text forward or backward in character units using a mouse according to one embodiment of the present invention.
FIG. 18a to 18d are explanatory diagrams showing a method of moving a text selection indicator on a document displayed on a screen when a mouse is at a predetermined position according to an embodiment of the present invention.
FIG. 19a to 19e are explanatory diagrams showing a procedure for selecting a text portion by using a mouse according to an embodiment of the present invention.
FIG. 19a to 19d are explanatory views showing a copying procedure using a mouse according to an embodiment of the present invention.
FIG. 21a to 21e are illustrations showing a paste procedure using a mouse according to one embodiment of the present invention.
FIG. 22a to 22b are explanatory diagrams showing a method of deleting a selected text by using an eraser according to an embodiment of the present invention.
FIG. FIG. 22c is an illustration showing a method of deleting a selected text by using an eraser according to one embodiment of the present invention.
FIG. 23a to 23e illustrate a menu bar and function selection procedure by a "normal selection" indicator of a computer using a mouse when the mouse is in another predetermined position according to an embodiment of the present invention. FIG.
FIG. 24a-224h illustrate a method of using a mouse to move a text selection indicator on a document displayed on a screen when the mouse is at the same predetermined position, according to one embodiment of the present invention. FIG. 9 is an explanatory diagram showing a procedure for selecting a menu bar and a function by a “normal selection” indicator of the computer.
FIG. 24i to 224n are explanatory diagrams illustrating a method of operating a cursor in text by pressing a mouse perpendicular to a stylus axis according to an embodiment of the present invention.
FIG. FIG. 25 is an explanatory diagram showing various positions of the mouse and the click direction at each position.
FIG. 25a is an explanatory diagram showing a mouse at one predetermined position and a text operation procedure and steps assigned to the movement of the mouse at that position.
FIG. 25b is an explanatory diagram showing a mouse at another predetermined position, and an operation procedure and steps of a menu and a function assigned to the movement of the mouse at that position.
FIG. 26a-26c are illustrations showing the use of the mouse system and devices described for the stylus-type computer in different locations on another type of computer in accordance with one embodiment of the present invention.
FIG. 26d is an explanatory view showing a computer provided with the writing surface and the input system of the present invention instead of the traditional keyboard.
FIG. FIG. 27a is an illustration showing a pushbutton for a stylus-type computer according to another embodiment of the present invention.
FIG. Figures 27b-27f illustrate additional multi-directional buttons and their functions in a stylus-type computer according to one embodiment of the present invention.
FIG. 27g-27j illustrate a multi-position clip button for a stylus-type computer in accordance with another embodiment of the present invention.
FIG. 27k is located in the vicinity of the writing tip of the stylus computer according to one embodiment of the present invention. It is explanatory drawing which showed the clip button of 27b-27f.
FIG. 27L illustrates a multi-section / directional clip in an open position used as a directional microphone and / or antenna and / or clip button for a stylus computer according to one embodiment of the present invention. FIG.
FIG. 27m to 27n are shown in FIG. It is explanatory drawing which showed the various open position of the 27L multisection clip.
FIG. 28a-28e are illustrations showing an additional input system using a display and mouse according to one embodiment of the present invention.
FIG. 29 to 29d are illustrations showing protection of a cover for a stylus-type computer according to an embodiment of the present invention when the LCD display is not used, and steps for mounting the cover.
FIG. 29e to 29g are explanatory diagrams showing a stylus-type computer when used as a telephone and a telecommunication device.
FIG. 30a is an illustration showing a stylus-type computer according to one embodiment of the present invention.
FIG. 31 is an illustration showing a stylus-type computer with another navigation button according to one embodiment of the present invention.
FIG. FIG. 31a is an explanatory diagram showing a cursor navigation button according to an embodiment of the present invention.
FIG. 31b to 31f are explanatory diagrams showing navigation of a cursor on a screen by operating the button according to an embodiment of the present invention.
FIG. 32a to 32f are explanatory diagrams showing a menu navigation button and its operation according to an embodiment of the present invention.
FIG. 33a is an illustration showing a mobile phone with a writing surface and a microphone for inputting sound generated by a pen during writing thereon according to one embodiment of the present invention.
FIG. 33b-33c comprise an electronic device, such as a telephone or PDA, comprising a display, a writing surface and a microphone for inputting sounds generated by a pen during writing thereon according to one embodiment of the invention. It is explanatory drawing which showed the device attached to a wrist, such as a wristwatch, to be combined.
FIG. 33d includes a display according to one embodiment of the present invention and a microphone for inputting sound generated by a pen during writing thereon, such as a wristwatch or the like combined with an electronic device such as a telephone or PDA. FIG. 3 is an explanatory diagram showing a device worn on a wrist.
FIG. 33e is a description showing various electronic devices comprising at least a display according to one embodiment of the invention and, finally, a microphone for inputting the sound generated by the pen during writing. FIG.
FIG. 33f-33g are illustrations showing an improved keyboard to which the handwritten sound recognition system of the present invention that allows for full-text and function input is coupled.
FIG. 34a is an illustration showing a stylus-type computer with means for determining a pen tip position from a beacon, according to one embodiment of the present invention.
FIG. 34b is used as a beacon in accordance with one embodiment of the present invention. FIG. 29 is an explanatory view showing a cover of the stylus-type computer 29a.
FIG. 35 is an illustration showing a notepad with a horizontal beacon that allows a stylus-type computer to determine the pin position on the notepad according to one embodiment of the present invention.
FIG. 36 is an explanatory diagram showing a notepad having horizontal and vertical barcodes indicating positions on the notepad.
FIG. 37 is an explanatory diagram showing a writing surface having a number, symbol, or color indicating a position on the writing surface.
FIG. 38 is an explanatory diagram showing a writing surface and a projector that projects a symbol indicating a position on the writing surface.
[0024]
(Detailed description of the invention)
In the following, a method of data entry will be described, in which a pointing device such as a pen, stylus, or even a user's finger is used in connection with the writing surface to facilitate handwritten data entry. This input is based on the sound produced by a pointing device or finger and writing surface contact during writing.
[0025]
First, FIG. Referring to 1a, a pen (11) and a writing surface (10) are shown, where two symbols (12) are written by the pen.
[0026]
FIG. Referring to FIG. 1b, the pen tip (13) is shown enlarged. Here, the movement and direction of the pen tip at the time of writing, which can be considered on the writing surface (10), are illustrated. The pen can move in various directions (14). In this figure, several of these directions (15) are used to write the symbol (12) on the writing surface (10).
[0027]
The contact between the pen and the writing surface during the writing procedure generates various sounds as well as noise. These sounds include the surface structure of the pen tip, the manner of the starting point, the manner in which the symbol ends, the direction of the pen, changes in direction, duration in each direction, speed in each direction, changes in pen pressure on the writing surface, etc. May vary depending on the parameters of
[0028]
FIG. 2a shows the writing surface (20) and the pen (21). The user has just drawn the symbol (25) on the writing surface by using a pen. This symbol is composed of straight lines (22, 23) drawn continuously, and the directions of the first line and the second line are different. Each drawing has its own characteristics. Some features in this example include the aspect of the starting point (24), the directions (211 and 212) of the first and second lines and the duration, the aspect of the change point (eg, bend, straight line, emphasis), and the like. No. Typically, while the symbol is being written by the user, contact of the pointing device tip on the writing surface results in the generation of various sounds as well as sound waveforms that characterize the symbol. Each time the same pointing device chip and the same user writes the symbol in the same manner, the same sound and waveform will be generated.
[0029]
FIG. 2b is shown in FIG. A waveform (26) imagining a sound generated while writing the symbol (25) of 2a, showing a change in amplitude (y-axis) over time (x-axis). The first part (26) of the waveform relates to the sound produced by the nib impact on the drawing surface of the starting point (24). The second part (27) of the waveform relates to the sound generated during the drawing of the first line (22). At the direction change point (29), no sound may be generated because the emphasis is not performed. The last third part (28) of the waveform is generated by drawing the second line (23).
[0030]
The sound produced by the impact of the pen tip on the writing surface can be different for each symbol. For example, the starting impact sound waveform for letter "c" is stronger than the starting point for letter "b". The same is true for end points. The sound at the end point of the character “c” weakens more gradually than the end point of the character “b”. This is an additional parameter that can be considered by the handwriting sound and / or sensor recognition system (hereinafter HWSRS), which will be described in more detail below.
[0031]
Changes in sound or sound waveform produced by a pointing device stroke in various directions on a writing surface may not be easily distinguishable if the surface of the pointing device chip is smooth. Conversely, if the pointing device has a rough chip surface structured in a way that produces different sounds in different directions, these changes can be easily recognized. FIG. FIG. 3a shows a front view of a pointing device chip, the virtual point created by shifting the structured pointing device chip (30) in various directions (32) on the writing surface. Various waveforms (31) are also shown.
[0032]
One solution for generating such different sounds is disclosed in FIG. Making the pointing chip (35) as shown in 3b. The pointing chip (35) can be divided into different parts (36), each of which can be made from different materials (33,34) to produce different sounds (37,38). This system makes it possible, for example, to have two different sounds (38, 39) in two opposite directions (331, 332). Also, in order to obtain better accuracy, the configuration may be such that adjacent portions clearly generate significantly different sounds.
[0033]
FIG. 3c shows two parallel lines (341, 342) drawn by a pointing device having a structured chip such as the chip (35) described above. The first line (341) was drawn from right to left (345) and produced the sound indicated by its sound waveform (343). The second line (342) is drawn in parallel with the first line. It is drawn by the same pointing device as the first line, and in the same position in the user's hand but in the opposite relationship, ie drawn from left to right (346). To generate a different sound as indicated by the sound waveform (344). Two different sounds were generated for the two seemingly similar lines because the pen tip surface on the left was different from that on the right. This is an advantageous feature that allows having two different symbols for two symbols that are similar in appearance. For example, the number "0" can be written clockwise and the letter "O" can be written counterclockwise. Using this system, they produce two different sounds, and thus two different sound waveforms. These will be easily recognized by the HWSRS.
[0034]
FIG. 3d shows the drawn symbol (351) and its sound waveform (352). This symbol is shown in FIG. 3B is drawn by the pointing chip 3b. To write this symbol, a pointing chip was used in five directions (353). The waveform (352) is composed of five consecutive sounds (354), each of which is caused by five pointing tip directions (353) during the rendering of this symbol.
[0035]
Here, FIG. It should be understood that the pointing chip shown in 3b is only an example. In addition, various shapes or many types of pointing chips are conceivable. For example, the pointing chip may be divided into more or less parts. FIG. As shown in FIG. 4a, the pointing chip can have various shapes and forms. These surfaces are shown in FIG. As shown in FIG. 4b, they can be of different shapes and made of different materials. To enhance the generation of different sounds and emphasize their differences, FIG. As shown in FIG. 4c, it is also possible to divide the surface of the pointing chip into different parts, each part being composed of a different material (410, 411). In addition, different forms can be given to the divided parts of the pen tip.
[0036]
FIG. As shown in FIG. 4b, the pointing chip may comprise various pins, for example, located on different locations on the chip surface. These pins can be arranged to touch the writing surface in different ways for each direction to produce a different sound for each direction. For this purpose, these pins may have different outer shapes. For example, they can be made longer (412) or shorter (413), tilted to the left or right, and mounted differently on the pointing chips (415, 416). Accordingly, different sounds can be generated even in the same portion of the chip if the shift direction is different.
[0037]
According to one embodiment of the present invention, the tip surface has a sensor (414), and the drawing operation of the pointing tip while writing a symbol or command produces different signals according to the pressure applied to the different sensors. , Direction, duration of direction, etc. can be shown. Thus, in that case, the device can generate the information necessary for the HWSRS engine to recognize different sounds, different waveforms, and other written symbols.
[0038]
Further, the pointing device may include a direction recognition system capable of recognizing the direction of the pointing device chip on a writing surface or in space. Thus, in that case, the device can generate the information necessary for the HWSRS engine to recognize different sounds, different waveforms, and other written symbols.
[0039]
To produce the same sound in the same direction, the portion of the nib surface that is in contact with the writing surface must always have the same similarity (eg, structure, texture, material, position). The surface structure of the pointing chip described above requires that the pointing device be held in the hand in a predetermined position for the user. To avoid this type of constraint, the nib (and its surface) must be configured so that when it touches the writing surface, the touched area is always similar.
[0040]
FIG. As shown in FIG. 4d, the user while writing the symbol typically holds the stylus or pen (420) in the same position in the hand and at the same angle (424) with respect to the writing surface (421). ) To maintain. Generally, the user does not fundamentally change the position (425) of the pen in the hand. FIG. FIG. 4e shows a side view of a hemispherical (eg, convex) pointing device chip (430). While writing on the flat writing surface (431) using a pointing device chip having a curved shape (convex surface) (435), the pointing device and the writing surface are separated from the pointing device chip surface. Only a small portion (432) near the contact (433) between them makes contact with the writing surface. If the tip has a harmonious shape, for example a hemispherical shape, the contact area is always approximately the same geometrical shape due to the fact that the user always keeps the writing surface and the pen in the same angular relationship. Will have. If the tip surface is configured such that the same contact portions have the same structure, the user can pick up the pen at any rotational position about the axis of the stylus and write on the writing surface. . FIG. 4f shows a front view of a hemispherical or conical (eg, convex) nib (441). The tip is in a different rotational position (relative to the axis of the pen), but whenever the pen touches the writing surface at the same predetermined angle, the tip contacts the writing surface (442,443). Are configured to have the same shape, structure, material, etc. (444, 445). It is understood that when writing on a writing surface, the pen tip must be structured to produce different sounds in different directions. Various structural materials as described above can be used for the pins. FIG. 4g is a cross-sectional view (451) and a front view (452) of another pen point shape proposed here. It should be noted here that the shape and structure of the pen tip described so far are merely examples. Those skilled in the art will be able to create many other nib shapes and structures from a variety of materials. For better and faster recognition, multiple handwritten character sets and symbolic sound waveforms and patterns may be generated by the user's nib at different writing angles to the writing surface and provided to the HWSRS.
[0041]
Also preferably, the writing surface may be configured such that the sound produced by the pen tip is increased.
[0042]
It should be noted that while writing symbols that require various directions, the continuous various sounds produced by the structured pointing tip strokes on the writing surface accordingly. , To generate a waveform that uniquely characterizes the symbol and only the symbol. For example, while writing the letter "O", the pointing chip uses various different short directions to generate a characteristic waveform for the letter "O".
[0043]
Sound, waveforms, and other characteristic information generated by the pointing chip for each symbol or function can be processed by the HWSRS after patterning and recording to recognize user-written text or drawings. . For example, the waveform of a user's handwritten sound character set, hereinafter referred to as HWSCS, can be patterned as the user's personal character set and "learned" by the HWSRS. A different "handwritten sound character set" may be provided for each writing surface for higher accuracy.
[0044]
FIG. 5a shows a stylus (511) with a structured tip (512). This figure shows the letter "e" (513) written by the stylus. FIG. 5b is a virtual waveform of the sound generated by the stylus during the writing of the letter "e". The last FIG. 5c shows a virtual waveform when the character "e" is pronounced by the user.
[0045]
Comparing these figures demonstrates the advantages of the present invention. The first graphic (513), that is, the written character "e" is a very short graphic. Depending on how or by whom this character was written, traditional handwriting recognition engines can frequently misinterpret, for example, the character "c" or the character "l". Was. In contrast, FIG. 3 generated by the sound of a nib movement on a writing surface. The graph (waveform) in 5b is a long graph with multiple changes and features due to the various sounds generated by the various pen directions during the writing. This will be easily recognized.
[0046]
The last FIG. 5c is a short graph with little change. This, and misinterpretation of characters such as b, d, and p, as well as external noise, can easily occur by the speech recognition engine. The waveform of the sound generated by the pen tip in contact with the writing surface during handwriting of a character is much longer and has many variations, and thus is much easier to recognize by a speech engine.
[0047]
Handwriting input has many advantages over voice input, including:
-Isolated (privacy issues are resolved).
-User intention is not taken into account ("24" is different from "twenty four", 6x4 is different from "six by four", etc.).
-No disadvantages of the speech recognition engine (p is different from b).
-Words with similar pronunciations (eg two, to, too) are written differently.
-The problem of discontinuous words is solved.
-Correction is quick.
-Suitable for all languages.
-External noise is not a problem.
[0048]
Traditional handwriting recognition systems are character by character. It is much easier to recognize a handwritten character figure than to recognize a handwritten word figure. Two successively written similar words, even though written by the same person, do not look similar. On the other hand, it is very difficult for a recognition system to distinguish continuous characters that make up a written word. However, traditional handwriting recognition systems based on character-by-character handwritten graphics suffer from a major problem, which is often difficult for humans to perform; It is too short and looks similar in many cases. If they are not clearly written, they can lead to misinterpretations and not be recognized at all.
[0049]
Also, the pronounced characters and / or words may have similar sound waveforms (eg, “T”, “Tee”, “Tea”). Thus, speech or word recognition systems are usually sentence-based. For a word recognition engine, recognizing sentences is easier than recognizing a single word or character. The word recognition system analyzes the suggested meaning of the received word and determines, for example, whether the received word is "right" or "write" according to the expected sentence. This system is not good because in many cases only a single word, letter or symbol is entered.
[0050]
HWSRS provides answers to all of these questions. This has all the advantages of a handwriting system and overcomes its disadvantages. The system preferably works on a character-by-character basis, but the recognition is based on the waveform, pattern and other information of the sound produced by the pointing device chip on the writing surface while writing the character. Done. These waveforms, as already explained, are much longer and have more variations than the written character's graphic or vocal sound waveform, and have more feature parameters, such as: Contains.
-The start / end sound of a symbol or part of a symbol that is written discontinuously.
The number of syllables generated by writing a symbol; here, a syllable refers to a portion of a symbol having a substantially constant shape. This number depends on the different angles in the handwritten figure and whether the symbols have been written consecutively. The number of syllables in each discontinuous part of the symbol is N + 1, where N is the number of corners.
The sound changes according to the speed of writing in each direction.
The difference in pressure on the writing surface during the writing of the symbol causes a corresponding change in the sound according to the shape of the figure being written;
-The duration of writing in each direction.
-Different users, or even the same user, may use different character set sizes (e.g., writing larger or smaller characters) during different periods of writing, resulting in shorter sounds in each direction. Or longer. Different parts of the written characters have unique relationships and proportions, even if they are written in different font sizes. This is like the "octave" of the music domain.
-There are also additional parameters derived from this system.
Thus, recognition is much easier.
[0051]
Information such as the length of the line, the size of the character, etc. is made valid by using these parameters. According to these principles and parameters, a high performance HWSRS allows handwriting of written symbols on a writing surface, even with a normal pointing device chip such as a pen, or with a user's finger or nail. Symbols can be recognized according to sound patterns. In that case, a structured chip may not be needed.
[0052]
External noise deficiencies can be easily resolved by mounting the microphone in the electronic device with the HWSRS, or by mounting it in the pointing device itself. For example, if a sensor is connected to the pen tip by a wire, only the sound inside the stylus generated as a result of the writing procedure is captured and transmitted to the recognition engine.
[0053]
In addition to the above, other systems, such as hand-drawn graphic recognition systems, pen / hand movement recognition systems, speech / word recognition, lip recognition, and / or other recognition systems, etc., may be used for better accuracy. Or in combination with HWSRS. For example, a user may write a symbol, such as a character, or a word or sentence, and at the same time speak them out. The combination of the HWSRS and the speech recognition system can provide better accuracy of the input characters. In the sense of natural and user-friendly input methods, only letters, words, sentences, or other symbols that the user naturally utters while writing the text can be spoken by the user during writing. Just fine. Other symbols, such as at least some punctuation marks, can be written without aloud.
[0054]
The system can include one or more databases of letters, words, and symbols in different languages. A predictive word recognition system can also be combined with this system to make possible word selections before full input. The system allows the system to automatically select the desired word before its input is completed, and in some cases may not require user intervention. This is done by writing the characters or symbols of a word individually and continuously (eg, on a character-by-character basis), and often with very few corresponding words, before writing the word. This is possible because the word prediction system determines the desired words or indicates some possible words and allows the user to select one of them.
[0055]
Even if the user enters the wrong character while writing a word, or if the HWSRS fails to identify a given character, in many cases the other characters in the word will be incorrect. As input, the predictive word recognition system can automatically correct erroneous characters.
[0056]
As will be appreciated, instead of on a character-by-character basis, the system can also be based on recognition of whole words, and even whole sentences. In such a case, the HWSRS may be provided with a database of sound waveforms or sound patterns relating to written words, symbols, and even the entire sentence.
[0057]
To increase accuracy and facilitate recognition, the user can have the HWSRS “learn” (eg, train) his or her handwriting. In that case, the recognition procedure becomes easier and faster.
[0058]
In addition, it allows users to create their own commands based on their own handwritten features. For example, a user's electronic device may be turned on and off only by handwriting instructions based on the user's handwritten sound patterns and / or sound waveforms. It is also possible for a user to personalize his device. In that case, only the user's handwriting input can operate the user's device. It also allows users to create their own customized characters, symbols, macros, functions, commands, and the like. The created symbol can refer to several other symbols or commands. Unlike a regular keyboard, this system allows the user to create and use countless symbol or command variations.
[0059]
The user can also make the HWSRS learn his signature. In this case, the user's signature is never copied. For example, when opening a bank account, a user can use his or her personal structured pointing chip as well as a selected writing surface to provide the user's own signature sound waveform to a bank reference. . The combination of the signature, personal structured pointing tip and selected writing surface will create a unique sound waveform and pattern, making imitation impossible. This procedure secures phone banking transactions, e-commerce operations, etc.
[0060]
E-mail, Short Messaging Service (SMS), etc. can be confidential. Initially, the user provides his or her bank or friend's HWSRS with his or her own handwritten sound pattern or waveform based on the user's personal device (eg, pointing chip structure, writing surface). Subsequently, all operations or messages are performed or transmitted according to the user's handwritten sound pattern. These are compared with handwritten sound patterns recorded in the other party's directory. After a match, the operation will be performed and / or the message will be read.
[0061]
For security reasons, the user can create his own cipher based on his own handwritten sound pattern. For the reasons discussed above, the user's encryption is extremely confidential and the user can be decrypted only if the other party's recognition system has a copy of the encrypted pattern. Encrypted documents can be sent.
[0062]
While writing the text, the numbers, numbers, characters, symbols, commands, etc., can be encrypted, for example, by the user writing additional (non-participant), meaningless figures that have been customized. , The sound waveform of the symbol will have an additional meaningless syllable. These additional meaningless graphics can be written at any time and place during writing (eg, in combination with symbols or individually). These are filtered by the HWSRS of the receiving party that is familiar with the user's customized meaningless graphics, resulting in the decryption of the information. This system can assist in transmitting sensitive information such as a user's credit card number in e-commerce operations.
[0063]
As will be appreciated, any speech or word recognition system as well as other recognition systems and technologies, such as traditional handwriting recognition systems, may be used to enhance the HWSRS.
[0064]
The recognition procedure may be performed with a time delay. This means that all parameters such as writing sound, timing, writing speed are recorded during writing and then processed by HWSRS to recognize handwritten symbols.
[0065]
Almost all electronic devices, especially mobile devices, can be equipped with an input device based on this method. The electronic device may include this HWSRS and eventually a microphone connected to the writing surface. Preferably, the user has a pointing device with a structured surface and can enter data by writing on the surface. FIG. 33a-33e show some of these devices. For example, FIG. 33a shows a mobile phone with a writing surface (3301), at least one microphone, and a HWSRS. The user has a pointing device (3302) with a structured surface, and can use the pointing device on the writing surface to enter handwritten data. While writing data, the sound produced by the stroke of the pointing device on the writing surface is passed to the processor, where the HWSRS digitizes the input data. This system is described in FIG. It can be used even for very small devices such as those shown in 33b-33d (e.g. wristwatch phones, wrist PDA devices). FIG. 33b shows a wristwatch phone / PDA device. FIG. 33c shows the LCD display unit (3311) as well as the writing surface (3312), which are preferably located on the opposite side of the watch unit (3313). A pointing device (3314) having a preferably structured chip surface of the present invention is provided for inputting data by writing on a writing surface. As will be appreciated, the electronic device itself may include the writing chip of the present invention in its desired location.
[0066]
By using a well structured pointing chip, a good microphone, and a sophisticated recognition engine, any surface on the device can be used for writing on said surface. For example, the user may select FIG. As shown at 33d, data can be entered on any surface, for example on a metal bracelet (3315) of a wristwatch phone.
[0067]
Depending on the design and / or concept of the electronic device, the microphone and / or the recognition system may be incorporated in a pointing device (eg, a pen) or in the electronic device itself. Of course, in the case of stylus computers, they can be built into the stylus computer.
[0068]
One advantage of using HWSRS is that it can be incorporated into all electronic devices without ultimately requiring them to be transformed.
[0069]
FIG. 6 shows a traditional computer keyboard (600) with letters, numbers, punctuation and other symbols for writing appropriate text or data. FIG. As shown in FIG. 6a, when handwriting a keyboard character, "1", "l", "|", "I" (602 to 605), or "9", "g" (606 to 607) Some characters such as) may look almost the same. Even traditional handwriting recognition systems, or even humans, cannot distinguish between these characters. This problem is solved by using a structured nib and HWSRS. Next, some of the most important cases are described.
[0070]
FIG. 6b shows a table (620) that includes uppercase Roman characters in one column (628) and lowercase Roman characters in another column (629). The following columns (630, 631) show some characters and numbers similar to these characters. Suggested handwritten symbols for these similarities are shown in white columns alongside them (641-644). Users themselves can also create their own handwriting fonts, symbols, and handwriting commands for their own convenience.
[0071]
As shown, for some characters, such as the letter "g" (632), a character such as the letter "q" (633) or the number "9" (634) is similar in appearance. Exists. In order for the HWSRS to be able to easily distinguish between them, FIG. As shown in FIG. 6c, the user may write down those characters by using different directions (635-637) for each. This will generate different sound waveforms and patterns for each character, which can be easily distinguished.
[0072]
These are stored in a pattern according to the sound generated during the writing of each. The user can create new symbols or delete old symbols at any time. While the symbol is being written, the HWSRS compares it with the already-patterned and stored symbol. When the system finds a pattern that matches the entered symbol, it selects that pattern as entered.
[0073]
As mentioned above, one purpose of this system is to provide the user with a familiar input system and device. This is a very important issue since people reject electronic devices with complex input systems. Also, traditional handwritten characters and standards need to be respected. Nevertheless, some of the advantages as well as features of this system can be used for better accuracy. For example, the letter "O" (upper case) can be written in a counterclockwise direction (651), and the number "0" can be written in a clockwise direction (652). These produce two different sounds, resulting in two different sound waveforms. The lower case "o" can be written as most people write (653) normally.
[0074]
Some characters are more difficult to distinguish. For example, FIG. As shown in FIG. 6d, the lowercase “l” (660), uppercase “I” (661), number “1” (662), or symbol “|” (663) must be written differently, Not distinguished by traditional handwriting recognition systems. To distinguish them from one another, they can be written according to different general shapes (664-667).
[0075]
In addition, FIG. As shown in FIG. 6e, discontinuously written letters, signs, and numbers, such as the uppercase "B" (669) or the number "13" (668), disrupt the traditional handwriting recognition system. May bring.
[0076]
FIG. 6f indicates a group of characters (670) which are formed entirely or partially from vertical straight lines and which are written in a natural form separately from the rest of the same character (671). Since the handwriting recognition system does not know where those parts are written (on the surface), for example, the symbol (672) to be written relates to the letter "T" (673) or two independent It is not possible to know whether it is related to the character "|-" or (I-).
[0077]
If HWSRS is used, the above problem can be solved without deforming those characters. The third column (674) from the left shows the handwritten characters corresponding to the printed characters in the first column (6701) from the left. As shown, none of the handwritten characters has been deformed. The only rule the user must follow is the (essentially common) direction in which the pen tip must be stroked on the writing surface. The first column from the right (675) shows suggestions for the direction in which each character is handwritten. As will be appreciated, other directions are also contemplated and may be performed by the user. As described above and shown, the lowercase “l” (6712) and the number “1” (6711) can be written differently. The character “|” (676) can be written with a straight line in the direction (677) from bottom to top. The upward direction is not a general direction when writing a character. The reason for using it for this character is that it is not used frequently.
[0078]
This makes it possible to write many other characters using a straight-down line, to distinguish them from each other and to avoid confusion. The system can always regard a straight line written downward as the beginning of a discontinuously written symbol. When this line is written, the system expects to draw and receive further graphics (eg, strokes) following the line. In this way, uppercase letters "I, B, D, H, K, P, R, T" (678) and the character "$" (683) can be written and recognized by the system. It should be noted that in order not to confuse the system, as is known by the principle of handwriting, the writing of characters must have two different horizontal lines, short and long. Must be used. For example, the horizontal line (679) used when writing the letter "T" must be significantly longer than the horizontal line (680) used for the letter "I". This makes it possible to avoid a state in which confusion is likely to occur between the writing of the character "I" or two characters "T-" written in succession.
[0079]
Considering the uppercase letter "F", in order to avoid confusion between the uppercase letter "F" and, for example, the uppercase letter "I", first write a continuous line (6801) with "L" upside down, followed by 1 Write a short horizontal line (680) in book size. Also, in order to avoid confusion between the capital letter "E" and the character "-" following the capital letter "I", for example, a continuous line (6811) in which "L" is upside down is first written, followed by "2". Write a short horizontal line (681) of book size. Uppercase "L, M, N" can be written by a continuous line (682) as shown.
[0080]
For simplicity of the system, all non-text related characters that have a straight line shape or start with a straight line can be started in the opposite directional relationship with text related characters having the same character .
[0081]
FIG. Referring to FIG. 6g, there are also shown three characters (684) having common features. These are all diagonal straight lines. The capital letter "X" is usually two diagonally downward lines "の 下? / "(68406), writing the character" /, $ "upwards (68401-68402) avoids the possibility of confusion with the capital letter" X "(68405).
[0082]
FIG. 6h shows another symbol group having common features. These all have at least individually written horizontal lines. This group of characters can also be divided into text related groups (685) and non-text related groups (686). The text-related characters "-" and "_" (6871) each have two different lengths, long and short. These can all be written in the direction from left to right (687). The remaining non-text related group of symbols may preferably start with a short right-to-left horizontal line (6882). After writing this line, the system expects additional writing information to complete the desired symbol. For example, with an additional short right-to-left horizontal line (688), the system understands that the character "=" (6881) has been entered. Another direction (689) proposed for the other symbols (6883) is also shown. It is important to follow the order in which you enter each of the symbol discontinuities. These are illustrated according to the manner of the majority of users.
[0083]
FIG. Referring to 6i, another important part of the handwriting direction method is illustrated. charactor". (690). Other discontinuous characters, such as ":" and ";" (69301), also have the symbol ". ], And another symbol has been added to it. In this case as well, in order to avoid confusion by the recognition system, the character ". ] As a very small circle (691) in the counterclockwise direction (692). symbol". Begin with this symbol (694), but may be written clockwise (695). This system uses the character ". ], But expect the rest of the symbol to be entered. The fourth column (4941) illustrates the order and direction in which the symbol portions are input.
[0084]
FIG. 6j shows additional printed symbols available on a standard keyboard (696), a handwritten form based on common writing styles (697), and the orientation employed to write each symbol (698). ing.
[0085]
In addition, special symbol or function sound waveforms generated by actions such as tapping on a writing surface with a pen tip (e.g., a single tap) may cause a space character or ". ] (For example, a dot character). This is particularly important since the end of a word, character, symbol, etc. is often indicated by a blank or dot character. Each further tapping action represents additional space. Also, when the end of the discontinuous symbol is indicated to the system, an operation such as contact of a pen tip on a writing surface (for example, an operation for generating a waveform) or an audio signal can be used.
[0086]
FIG. 6k shows all symbols and characters printed on a standard keyboard and suggestions of the directions to be followed during the writing of each symbol, based on the principles described herein. As shown, no symbols have been transformed and the constraints that the user has to follow are minimal and logical, so they will be easily adopted by the user. Also, as will be appreciated, the principles and directions for writing the proposed symbols are only some examples of the various possibilities. Various omissions and substitutions and changes in the form and details of the disclosed invention will be apparent to those skilled in the art without departing from the spirit of the invention. For example, by writing heavy lowercase letters at a fairly large size in the text, you may tell the HWSRS to consider them uppercase. This can facilitate these recognition systems because there are fewer usage patterns. It should be noted that these methods and inventions are particularly applicable to other languages, such as Arabic or Chinese.
[0087]
As described above, the user can make the recognition system of the present invention "learn" his / her own handwriting. For example, at the start of use of an electronic device having the structured writing chip and handwriting recognition system of the present invention, the user may be able to use all symbols intended for writing (eg, character set in language, user customization). May be written. The recognition system generates a pattern (eg, a key pattern) for each symbol, creates a “patterned character set” and subsequently recognizes the symbols (eg, input) written by the user. You can use them for comparison. During writing (eg, text, diagrams, etc.), the user may also add new symbols (eg, new key patterns) to the user's “patterned character set”. As already mentioned, in order to increase the recognition accuracy of symbols written on different surfaces having different structures (e.g., surfaces made of various materials such as paper, wooden table, etc.), the user may be required to use those surfaces. The same "learning" procedure described above may be repeated above to create a new "patterned character set" and a smaller number of basic symbols (eg, straight lines in various directions, clockwise circles, A clockwise circle) may be written on the surface. The system then automatically creates a new "patterned character set" for the surface based on the characters of the original "patterned character set" and the characteristics of the base symbols written on the surface. Can be created.
[0088]
According to one embodiment of the present invention, a desired number of symbol repetitions can be communicated to the system by user behavior. For example, before writing a symbol, during writing, or after writing, it is conceivable that the user taps the writing surface with a finger or with an eraser to instruct repetition of the last written symbol.
[0089]
According to another embodiment of the invention, to repeat the written symbol, the user can press a predefined button, for example provided on a stylus, whereby the last written symbol is repeated. . The user can also repeat the symbol already entered and displayed immediately before the cursor on the stylus screen (the cursor will be described later in this specification). Pressing a predefined button only once will repeat that symbol once. Each additional press (e.g., tap) adds a repeat of that symbol. To perform a continuous repetition of this symbol, the user need only keep pressing the button. This repetition of the symbol will continue until the user stops pressing the button.
[0090]
Often, the digitized symbol waveform does not match the key pattern of the key pattern character set, so that the written character may not be recognized by the handwriting recognition system of the present invention. According to one embodiment of the present invention, if a symbol is not recognized by the system, information associated with the symbol (e.g., its graffiti, waveform, location in text, etc.) is transmitted to, for example, the stylus computer. Stored in memory, the user can access the information for final operations. For example, the symbol may be drawn and stored or printed.
[0091]
FIG. FIG. 7 shows a block diagram 700 relating to the steps of inputting data (eg, sound during writing of a symbol with a stylus writing tip on a writing surface) and outputting data according to one embodiment of the present invention. As shown, the sound generated (and possibly amplified) in step 701 is captured by a microphone in step 702 to generate a waveform. The waveform is passed to a digitizer, as shown in step 703. The digitizer may, for example, pass the digitized waveform to the RAM 704 of a stylus computer on which the HWSRS system 706 is installed, according to a processing procedure such as a real-time recognition process. The digitized waveform may be passed to the memory 707 of the stylus computer 700 for reasons such as delay recognition processing, or simply to record the digitized waveform. The stored digitized input 708 can be used in subsequent processing (eg, delayed HWSRS processing). The memory 707 may also include digitized key patterns of various predefined symbolic waveforms used by the HWSRS for recognition of digitized inputs. After passing the digitized input to the stylus computer's RAM 704 (either in real time or with a delay), by using the microprocessor 705, the HWSRS of the stylus computer's stylus computer The key pattern is compared with the converted input, and an attempt is made to match the input with the key pattern. After selecting the key pattern with the highest similarity to the digitized input, the system selects the digitized symbol corresponding to the selected key pattern. If desired, the digitized symbols may be stored in memory 707 or may be passed as an output to a device such as the display 7011 of the stylus computer or a device such as an external device 7012.
[0092]
The embodiments described thus far relate to a method for data entry using a sound generated by contact of a pointing device writing chip on a writing surface while writing a symbol on the writing surface. According to another embodiment of the present invention, a sensor is provided in a writing chip of a pointing device, such as a structured writing chip of a stylus computer, as described above. Examples of such sensors and their structures have been described earlier in this specification. As described above, the sensor captures information such as pressure levels (eg, according to vibration, heat, etc.) applied to different portions of the structured writing tip during writing a symbol on the writing surface; The information shown in FIG. It can be transmitted to a digitizer of a stylus computer for recognition processing as shown in FIG. It should be understood that all embodiments and examples relating to the handwritten sound recognition system described hereinbefore and hereinafter describe arbitrary waveforms generated by the sensors of the pointing device writing chip. Can be applied to underlying recognition.
[0093]
See FIG. As shown in 7a, another object of the present invention is to provide the user with a small, user-friendly, portable, stylus (750) style electronic device in a user-friendly form. . This stylus can function as a simple organizer, mobile communication device, PDA device, computer, and the like. Preferably it comprises a structured nib of the present invention that produces handwritten sounds as input, a display (752), and a HWSRS. The stylus has pointing means (751), which allows the user to hold the stylus in a predetermined position during writing. This is because the structured nib must always produce the same sound (already patterned and given to the HWSRS) for the same direction. FIG. FIG. 7b shows a front view (770) of a virtual stylus computer writing chip. The pen tip also has conventional writing means, such as ink (771), and can generate conventional handwritten documents simultaneously or separately when and when needed. Communication means such as laser and infrared, and other features such as camera (772) and optical reader (773) may be provided anywhere within the pen tip or inside / outside the stylus.
[0094]
According to one embodiment of the present invention, FIG. As shown in FIG. 7c, a stylus computer 710 of the present invention includes at least one microphone 711 to allow a stylus writing chip 782 to capture sound generated during writing on a writing surface. . The microphone may be a directional microphone. For better capture, the microphone can be provided near the pointing chip 712 of the stylus computer.
[0095]
According to one embodiment of the invention, the at least one microphone is arranged in a manner that allows the capture of the sound generated by the contact of the pointing device chip with the writing surface during writing on the writing surface. , In the main body of the stylus computer. This type of sound can travel through the body of a stylus computer. Further, FIG. Referring to FIG. 7 c, for example, a microphone 713 can be provided inside the stylus computer 710. A hole 714 is provided in the surface of the stylus computer body, toward the inside of the stylus computer body, preferably near the writing chip 712, to enable transmission of the sound generated by contact of the writing chip on the writing surface. May be provided. The hole can be designed in a manner that amplifies the sound transmitted into the stylus body. Further, the stylus writing chip 712 may be configured in a mode including a hole that allows transmission of the sound into the main body of the stylus computer. FIG. 7d is an example of a stylus computer writing chip 720. As shown therein, for example, the writing tip can be designed, for example, in such a way that an empty passage (eg a hole) 721 is provided between the structured portions 731. Also, a sensor on the writing tip may transmit the vibrations generated by the writing tip, for example on a writing surface, into a stylus and generate a sound that is received by the microphone located in the stylus.
[0096]
Amplifying means may also be provided in the stylus computer to amplify the sound generated by the writing tip on the writing surface. FIG. 7e shows a stylus computer 780 with amplifying means 783 having an exponential curve shape (eg, the shape of a conventional loudspeaker). During writing using the pointing chip 782 on the writing surface, the sound due to the contact between the writing surface and the pointing chip is transmitted to the inside of the amplifying means 783 and is placed in a suitable place (for example, in the amplifying means). Microphone 781 arranged at the other end).
[0097]
The sound due to contact between the writing surface and the pointing chip during writing with the pointing chip on the writing surface can be further amplified. According to one embodiment of the present invention, FIG. As shown at 7f, amplification means, such as a resonance chamber 794, can be provided in the stylus computer 790 to amplify the sound. The sound generated by the contact of the stylus writing tip 791 on the writing surface is transmitted to the resonance chamber 794, where the sound is amplified. A microphone 792 can be provided in the chamber to capture the amplified sound. This amplification procedure may be provided in addition to other amplification procedures such as the exponential curve-shaped means 793 described above. As will be appreciated, any transmission and amplification means known to those skilled in the art can be used for capturing high quality sound. For example, the amplification chamber may have any shape and structure for amplification and may be made of any material.
[0098]
FIG. As shown in FIG. 8a, the stylus (850) contains all the functions of the computer as well as additional means: at least one battery (851), memory (RAM) (852), hard disk, microprocessor (853), transceiver. (854), microphone (857), optical reader (856), position detecting means (858), writing start / end detecting means (855), speaker (859), timer (not shown), LCD display (not shown) ) And the like.
[0099]
When the stylus is not in use, the structured nib can be stored in a position (840) hidden inside the stylus to avoid unwanted movement. FIG. 8b shows the structured nib in the exposed position (842) outside the stylus. It also shows that the writing start / end detection means (855) has a pin (841). FIG. As shown in FIG. 8c, while the tip is in contact with the writing surface (830), the writing detection pin (841) is in the inner position, indicating that it is in a writing state. When the user lifts the pen tip (FIG. 8d), the detection pin (841) comes out to indicate that it is in a non-writing state. It should be understood that the detection means described here is only an example. Other writing start / end display means and systems may be used. For example, one or more sensors may be attached to the structured pen tip to indicate to the system a writing or non-writing state. Also, the sound created by the contact between the pen tip and the writing surface may indicate the writing state. Silence can indicate a non-written state.
[0100]
Subsequently, FIG. Referring to 8d, the stylus (850) includes one or more LCD displays (860) and is capable of displaying data (861). It may also include an eraser (863) for correction. The eraser surface has a special texture and can function as a traditional pen eraser on the writing surface, while at the same time producing a special sound to communicate the erasing state to the HWSRS. As with the structured nib, the eraser surface may be composed of special textures to produce multiple sounds according to the direction of its stroke on the writing surface. Of course, these sounds need to be different from the sound from the structured nib. Commands or functions, such as on / off, send / receive, etc., may be assigned by the eraser to the sound generated when writing the corresponding word or symbol on the writing surface. Of course, with the same microphone or an additional (preferably directional) microphone, the sound produced by the eraser in contact with the writing surface can be clearly captured.
[0101]
FIG. 9a shows a writing surface such as a paper note (900) written by a user using a stylus (850) with three handwritten characters (910). These characters are digitized (920) by the stylus computer and displayed on the stylus LCD display (902). Immediately after the last input character, a cursor (904) is placed. If the user wishes to delete a character that has been erroneously input, the user can use the structured eraser (901). FIG. As shown in 9b and 9c, the sound generated from the contact of the eraser and the writing surface informs the HWSRS of the erasing operation, for example by giving a straight stroke in the left-right direction (911) on the writing surface. . The last entered character will be deleted from the display (912) as well as from the memory of the stylus computer. In order to further delete the character, additional strokes may be sequentially given. If the user wants to delete a character other than the last input character, he can place the cursor next to that character and perform the erasing procedure described above. Because this stylus can be used to create a conventional handwritten document, for practical reasons, multiple strokes may be required to simultaneously erase the characters on the notepad. In that case, the computerized erasing system can be modified to allow another erasing system. For example, a continuous short-stroke stroke (such as a traditional pencil eraser handwriting erasing procedure) could convey the deletion of one character to the HWSRS. In order to delete the next character, at least a short pose may be applied. For better capture of the sound generated by the eraser stroke on the writing surface, at least one additional (preferably directional) microphone may be provided in or near the eraser. It is to be understood that other possible erasing procedures based on this principle are also applicable. The user can also create their own customized erasing procedures or symbols or actions.
[0102]
According to yet another embodiment of the present invention, the erasing procedure described above can be performed with a structured nib. FIG. As shown in 10a, a text (1001) is written on a writing surface (1002) by a stylus (1000). These characters are digitized (1002) and displayed on the stylus LCD display (1003). Behind the last input character, a cursor bar (1004) is arranged. FIG. As shown at 10a, when the user wishes to delete one character, the user can use the pen tip (1011) to strikethrough (1010) the writing surface in the same manner as in the traditional handwriting procedure. To delete the last character before the cursor from the computer's memory. The sound produced by the pen tip stroke on the writing surface can signal the erasing state to the HWSRS. The character before the cursor is deleted from the memory and the display (1012). A similar procedure is required to continue deleting characters.
[0103]
FIG. Numeral 11 denotes a stylus-type computer (1111) as described above, which comprises a flat display (1110) according to one embodiment of the invention.
[0104]
FIG. 11a illustrates a stylus computer (1100) according to one embodiment of the present invention. The stylus may have some or all of the features described above. It also has a curved (eg, convex) LCD display unit (1101) that covers at least a portion of the stylus computer surface. FIG. 11b shows the display in the half open position (1112). The dimensions over the surface of an average conventional stylus are approximately 17 cm wide and 4-5 cm high. The user only needs to rotate the stylus in his hand to see the entire display.
[0105]
17 centimeters is approximately the size of a standard line of text written on A3 / A4 paper. FIG. As shown in FIG. 11c, an LCD display screen (1121) with dimensions of 17 × 5 centimeters (1122) over a standard stylus style computer is sufficient for displaying full size text, Enables full-scale manipulation of the text. It is also large enough to allow the display of pictures or browsing of full-scale web pages. By combining a user-friendly handwriting input system as described above and a large display as described here in a pen-type familiar device, a highly portable and powerful miniaturized device is realized. Produced. It can be manufactured in many versions, such as a simple digital pen that can be used by anyone (eg, a shopping memo for a housewife) or more sophisticated equipment such as a mobile phone, PDA device, or computer. . One of the great advantages of this device is that it eliminates the need to carry a writing surface. The user can write the input on any available surface, such as the surface of a table. It should be noted that the display unit 1112 of the stylus computer is detachably attachable to the stylus computer and can be connected to the stylus computer by cable or wirelessly. The display may be flexible (e.g., made from a plastic material) so that, for example, when not using the stylus computer, wrap the display around the stylus or wrap and attach to the stylus; Alternatively, it can be stored inside the stylus computer or in its cover. The display may be removed and / or unfolded (eg, unfolded) for use. By using this concept, a larger display (eg, wrapped around the stylus computer several times) may be incorporated into and / or used with the stylus computer. Further, the stylus computer may be connected to any external display via cable or wirelessly. When the display and the stylus are connected wirelessly, wireless communication means (for example, bluetooth, infrared rays, etc.) can be provided on the display and / or the stylus.
[0106]
According to one embodiment of the present invention, FIG. As shown in FIG. 12, the stylus computer (1200) may include a button-type mouse (eg, pointing and / or selection device) (1201), which preferably comprises a pointing chip (1202). ) And the opposite side. FIG. 12a to 12e, showing some possible physical movements of the mouse. FIG. Reference numeral 12a denotes the mouse side (1210) of the stylus, that is, the side to which the mouse (1201) is attached. The mouse can have one, two, or more attachment positions on the stylus axis, such as an inner position (1212) or an outer position (1213). To change the mounting position, the mouse is pulled out (1241) or pushed into the stylus shaft (1242). The position of the mouse may be indicated by the indicating means (1216) or the indicating mark (1227). FIG. As shown in 12b, the mouse may also have various click systems, for example, a click in the inward direction of the stylus (1217) and a click in the outward direction of the stylus (1215).
[0107]
FIG. Referring to 12c, the mouse (1201) can also have opposite rotations (1219) for each position or click state.
[0108]
Further, FIG. As shown in FIG. 12d, the mouse (1201) moves in all directions perpendicular to the axis of the stylus (1251, 1252, 1253, etc.) in the respective positioning states, such as the inner position (1261) or the outer position (1262). ) Can be pressed. FIG. 12e shows a side view of the mouse (1223) and some of the pressing directions (1272, 1273, etc.) on the mouse. This figure also shows a front view (1222) of the mouse and some of the pressing directions (1224, 1225, etc.) for it. It is further understood that the movements described herein are only some examples of the various possibilities. Various omissions, substitutions, and alterations in the form and details of the disclosed invention will occur to those skilled in the art without departing from the spirit of the invention. For example, FIG. As shown at 12f, a stylus-type computer mouse can be equipped with a bull system similar to that used in laptop computers and operated according to the same methods as laptops. .
[0109]
Various computer commands, functions, system modes, etc. may be assigned to the mouse movements and / or combinations thereof described above. This allows complete, easy and quick control of data and functions of a stylus-type computer. In the following, some of the various embodiments will be described to prove this. It should be noted here that the above examples or the examples described below merely illustrate some of the methods. Those skilled in the art will recognize that many variations of the combination of assignments can be used without departing from the spirit of the invention.
[0110]
According to one embodiment of the present invention, the display of the stylus computer can be similar to any computer display. That is, it may include program icons, menus, display of different windows, and the like. For example, FIG. When the word processing program is opened, at least two different sections appear on the display (1300), as shown at 13a. A menu section (1301) is located, for example, at the top of the screen, and a text section (1302) is located, for example, below the menu section. The menu section contains one or more menu lines (1303), each of which contains a list of menu bar titles (1304), which can be opened as needed. In this example, a display showing one of the rows of the menu list is shown. It should be understood that the display unit of the stylus computer may also present a multi-line menu list at a time, depending on need and / or limitations on available surfaces, and the like.
[0111]
According to one embodiment of the present invention, the user can scroll through the menu list using the mouse (1309). For example, the user first positions the mouse, for example, in a menu mode to be in the inner position (1307) to find a menu list containing the desired menu bar. Subsequently, FIG. Rotate the mouse in any direction (1308) to scroll through the new menu list (1313, 1323, etc.) on the display, as shown at 13b-13c. The user stops rotating when a menu list containing the desired menu appears.
[0112]
According to one embodiment of the present invention, a user can move through a menu list by using a mouse. For this purpose, the user, as described above, also sees FIG. As shown at 14a, the mouse (1400) is first positioned at the menu mode position (1401). This causes the system to enter the menu list selection mode. Subsequently, FIG. When the mouse is pressed in the inward direction (1411) along the stylus axis with sufficient strength to cause a click, as shown at 14b, the system enters the menu (bar) selection mode and the menu (bar) selection indicator means. (1412) appears on the menu list. At this point, the indicator is not pointing to any menu. Next, FIG. As shown at 14c, rotating the mouse (1421) moves the menu bar selection indicator over the menu bar title (1422). When the user further rotates the mouse after the selection indicator reaches the last menu on the list, FIG. As shown at 14d, the next menu list (1432) appears and the menu bar selection indicator will jump to the first location (1433) of the new menu. This is shown in FIG. As shown at 14e, this continues, for example, until the indicator reaches the desired menu and the user stops rotating the mouse. When returning from the menu mode to the menu list selection mode, FIG. As shown at 14f, the user, for example, clicks the mouse inward and simultaneously rotates it slightly (1451) in any direction.
[0113]
FIG. 15a to 15h show an example of movement and functions in a menu by mouse operation. FIG. Referring to 15a, a stylus-type computer (1500) is shown. As described above, the upper portion of the LCD display (1503) is assigned to a menu list. To select a function in the menu bar, the user needs to look at the menu list where the menu bar is located. For example, if the user wants to change the font, he must go to the corresponding menu list. To do so, the user must first position the mouse (1501) in the menu selection mode, for example, at the inner position (1502) (of the stylus axis). If the desired menu bar is not in the current menu list (1504) and the system is in menu (bar) selection mode, the user rotates the mouse (1505) and moves the selection indicator (1506) if necessary. , FIG. Move forward or backward until the last menu bar title (1510) is reached, as shown at 15b. If the user continues to rotate the mouse, FIG. The next menu list (1520) appears, as shown at 15c. The menu selection indicator jumps to the first location in the new menu list. If the menu list is also not what the user desires, the user may continue to rotate the mouse to bring up the menu bar indicator (1521), as shown in FIG. Move until the last menu title is reached, as shown at 15d, to display a new menu list (1530) on the screen. The menu bar indicator jumps again to the next location in the new menu list and continues to advance until the user stops spinning the mouse and positions the indicator over the menu title (1531). If you accidentally advance the selection menu title indicator more than necessary, see FIG. As shown at 15e, the user may rotate the mouse (1501) in the opposite direction (1541) and return the menu bar selection indicator to stop at the desired menu title (1542). FIG. At this point, the user presses the mouse inward (1551) and clicks, as shown at 15f. The system enters the function selection mode and a menu bar (eg, a pop-up menu surrounding the pen surface, shown in a flattened position for illustration purposes) (1552) opens. A function selection indicator (1553) is positioned over the current option. FIG. To move it over the desired option, as shown at 15g, the user rotates (1562) the mouse (1401) in the required direction until the indicator reaches the desired function (1563). I do. This pop-up menu may use principles similar to computer pop-up menus. FIG. As shown at 15h, the user then presses the mouse inward again (1571) and clicks. The function is selected and displayed in the menu bar title (1572) replacing the previous choice. Further, the mouse returns from the function selection mode to the menu (bar) selection mode.
[0114]
According to one embodiment of the present invention, it is possible to assign a text editing mode to one of the mouse positions on the stylus axis, and when the mouse is in the text editing mode, the user can rotate the mouse by rotating the mouse. -Scroll document rows or pages. FIG. 16a shows a stylus-type computer (1600) having, for example, all the features and systems described above. In this example, a text editing window (1601) is shown. The display unit is divided into two sections. The upper section (1602) is assigned to the menu list, and the lower section (1603) is assigned to text. In this example, a display that displays two lines of text is illustrated. As will be appreciated, the display unit of the system may display more or less than two lines, depending on the needs and / or limitations of available surfaces, and the like. The mouse button (1604) is, for example, in the menu mode of the inside position. FIG. As shown at 16b, the user, for example, pulls out the mouse (1610), places it in the outer position, and puts the system into text editing mode. Thereafter, the user proceeds to FIG. As shown in FIG. 16c, scrolling forward through text lines and pages (1608), for example by rotating the mouse clockwise (1605), FIG. By rotating the mouse counterclockwise (1606), the text line as well as the page (1609) can be scrolled backward, as shown at 16d.
[0115]
According to yet another embodiment of the present invention, the cursor can be operated by rotating the mouse. For this, see FIG. 17a to 17f. FIG. As shown at 17a, the user must first position the mouse to a position associated with the text editing mode, for example, the outer position (1701). If the text navigation mode is the line scrolling mode, FIG. As shown at 17b, the user clicks the mouse outward (1702) to put the system into cursor (character) navigation mode. When the cursor is on the current page, it stays at the same position in the text. If the cursor is not on the current page, either stay at the original location in the text or automatically move to the current page, for example, at the beginning of the last line (1704) or a predefined line. Position (1703) or last position, or position in line. Thereafter, FIG. As shown at 17c-17d, the cursor advances forward between characters, for example by rotating the mouse clockwise (1710), until it reaches the last position (1721) in the line. If the next line is displayed on the screen, the cursor jumps to the beginning of the next line and continues to move forward as long as the user continues to rotate the mouse. If the current line is the last line on the screen and the cursor has reached the last position on the line, the user continues to rotate the mouse to cause the FIG. As shown at 17e, the next row (1732) appears, the cursor advances to the next row (1733), and so on as long as the user continues to rotate the mouse. When the user desires to move the cursor in the reverse direction (1741), the user rotates the mouse in the reverse direction (1742). When returning to the line scrolling mode, according to one embodiment of the present invention, pull the mouse and click, while rotating it slightly.
[0116]
According to one embodiment of the present invention, FIG. As shown at 18a, a text selection indicator (1801) similar to that used, for example, on a computer is provided in the text editing mode of the stylus computing device. FIG. As shown in 18b, a mouse (1810) can be used to move (1812) the indicator on the screen. For this purpose, the mouse can be positioned at a position in the text editing mode or the like, and in this case, at the outer position (1815). For example, FIG. As shown in 18c, in selecting a location (1821) in the text, the user first moves the indicator (1822) there by pressing the mouse in a direction perpendicular to the stylus axis. Subsequently, the user proceeds to FIG. Clicking the mouse outward (1831) selects that point and places the cursor (1832) there, as shown at 18d. To avoid confusion with other functions (eg, transition from line scrolling mode to cursor operation mode), the user must hold the mouse pressed longer (eg, 1 second) while clicking. There is. Instead of a mouse click, the user can use another predefined button on the stylus computer, such as FIG. A button 2701 (eg, a clip-type button, described in more detail below), as shown at 27g, may be pressed or another action known to those skilled in the art may proceed.
[0117]
According to yet another embodiment of the invention, mouse movements may be used to select all or part of a document or text. FIG. 19a shows a display (1901) of a stylus-type computer (1900), where the cursor (1902) is located at a specific location in the text (1903) and the mouse (1907) is , Text mode, eg, in the outer position (1908). When the system is in the character / cursor operation mode, FIG. As shown in 19b, to enter the text selection mode, the user pulls the mouse outward (1911) with sufficient strength that it produces a click. When the user releases the button, it preferably returns to the initial outer position. To select a piece of text, the user now turns the mouse clockwise or counterclockwise. FIG. Turning the mouse clockwise (1921) causes the system to begin a forward selection, as shown at 19c, for example, depending on the angle of rotation until the user stops rotating, the cursor position. The text located immediately after (1922) is selected. If the user rotates the mouse in the opposite direction (1931), the user can see FIG. As shown at 19d, the system begins to gradually select from the cursor position, for example, text is selected just before the cursor position (1932) depending on the angle of rotation until the user stops rotating. You. If the user wishes to proceed to operations such as copying, deleting, or changing the font of the selected text, the mouse position may be changed to a menu selection mode position (eg, an inner position). The system will then proceed to the procedure described below.
[0118]
FIG. If the user wishes to end the text selection step, as shown at 19e, pull it outward and release it until the mouse makes a click (1941). This returns the system to the character (cursor) operation mode.
[0119]
FIG. As shown at 20a, text (2001) is selected, for example, by the procedure described above. For example, when applying an editing procedure such as copying to the text selected in this way, the user sets the mouse to the menu selection mode (2002) as described above and sets the "edit" menu (2003). ) And select it, followed by FIG. As shown in 20b, the mouse is clicked inward (2010) to open the menu (2021). The user then proceeds to FIG. As shown in 20c, the function selection mode is set on the "copy" function (2032) by rotating the mouse (2031). Further, FIG. Pressing the mouse again inward (2033) once with sufficient strength to click, as shown in 20d, causes the system to copy the text and exit the functional mode.
[0120]
To perform operations known in the computer domain, such as pasting copied text to another location, the user must first indicate to the system where to paste using the cursor. For this purpose, the user is asked to enter FIG. As shown at 21a, the system is first set to the text editing mode, for example, by dragging the mouse and positioning to the outer position (2100). The user then proceeds to FIG. The cursor (2111) is moved to the location where the text is to be pasted by pressing the mouse in the required direction, perpendicular to the stylus axis (2110), as shown at 21b. The user then returns the system to the menu selection mode, for example, by positioning the mouse in the inward position, as described with respect to the copy procedure, and rotating the mouse (2113) to edit the "edit" menu (2112). Find out. After positioning the menu selection indicator on the name of the menu bar (eg, “Edit”), FIG. As shown at 21c, the user clicks the mouse inward (2120) to open the menu bar (2121). The user then proceeds to FIG. By rotating the mouse (2130), the function indicator is moved to the desired function (2131), that is, the “Paste” function in this case, as shown in 21d. Further, FIG. As shown at 21e, by clicking the mouse inward (2140), the paste function is selected and the copied text (2142) is placed in the document pointed to by the cursor (2141). Pasted in location.
[0121]
Also, FIG. As shown in FIG. 22a, when the text (2201) is selected for erasing, the "Edit" menu bar is displayed in the same manner as described above with respect to the "Paste" function. By using the “Clear” function, or by using FIG. As shown at 22b and described above, the erasing tool (2211) can be erased by performing a predefined operation that produces a sound waveform recognized by the HWSRS as an indication of erasure. . A single erasing operation of the eraser on the writing surface erases the entire selected text. An additional erasing operation will erase characters or symbols in the text located before the cursor. In lieu of the erasing tool, the user also writes a predefined undo symbol (2311), which, as described above, generates a pre-patterned sound waveform that conveys a delete command to the HWSRS via the pen tip. Can be. Again, as described above, a single erasing operation with the pen tip on the writing surface erases the entire selected text. The additional erasing operation will erase additional characters or symbols in the text located before the cursor.
[0122]
According to one embodiment of the present invention, a "normal selection (pointer)" indicator may point to a menu in a menu list and select a function in that menu. FIG. First, as shown at 23a-23e, the user positions the mouse, for example, in the menu mode of the inside position. The user then moves the normal selection indicator (2341) toward the desired menu in the menu list (2342) by pressing (2340) the mouse (2300) perpendicular to the stylus axis. After moving the indicator over the desired menu title (2353), the user may see FIG. As shown at 23c, a menu bar can be opened, for example, by clicking the mouse in an inward direction (2360). This opens the menu bar (2361). To select a function within this menu bar, the user moves the indicator to the desired function (2371) by pressing the mouse (2300) perpendicular to the stylus axis (2370) and then moves inward ( If the mouse is clicked on 2373), the function can be selected. To prevent confusion with selecting a mode, the user can maintain a longer mouse press while clicking (e.g., for one second). Instead of a mouse click, the user can use another predefined button on the stylus computer, such as FIG. A button 2701 (eg, a clip-type button, described in more detail below), as shown at 27g, may be pressed or another action known to those skilled in the art may proceed.
[0123]
According to one embodiment of the invention, instead of assigning two different mouse modes (eg, inner and outer positions) to the text selection indicator and the normal selection indicator, a single mouse mode (for both indicators) is used for both indicators. For example, an inner position). FIG. As shown at 24a, a stylus-type computing device may include a text selection indicator (2401) similar to that used on computers. FIG. As shown at 24b, the mouse (2410) can be used to move the indicator (2412) on the screen. For that purpose, the mouse can be positioned at a position in the menu selection mode or the like, that is, in this case, the inside position (2415). FIG. As shown at 24c, for example, when selecting a location (2421) in the text, the user first presses the mouse perpendicular to the stylus axis to move the indicator (2422) to that point. Subsequently, FIG. As shown at 24d, the user clicks the mouse inward (2431) to select that point and places the cursor (2432) there. To avoid confusion with other modes, the user needs to keep the mouse pressed longer for the duration of the click (eg, for one second). Instead of a mouse click, the user can use another predefined button on the stylus computer, such as FIG. A button 2701 (eg, a clip-type button, described in more detail below), as shown at 27g, may be pressed or another action known to those skilled in the art may proceed.
[0124]
This indicator can also point to a menu in the menu list. FIG. As shown at 24e-24f, the user presses the mouse perpendicular to the stylus axis (2440) to move the indicator (2441) towards the menu list (2442). As with computers, when the indicator reaches the menu list, its appearance changes from a bar shape (2441) to an arrow shape (2452). After moving the indicator to the desired menu title (2453), the user proceeds to FIG. The mouse can be clicked inward (2460) to open the menu bar, as shown in 24g. This opens a menu bar (2461). Further, FIG. As shown at 24h, the user can press the mouse perpendicular to the stylus axis to move the indicator to the desired function (2471). Subsequently, the user selects the function by clicking the mouse inward (2473). To avoid confusion with other modes, the user needs to keep the mouse pressed longer for the duration of the click (eg, for one second). Instead of a mouse click, the user can use another predefined button on the stylus computer, such as FIG. A button 2701 (eg, a clip-type button, described in more detail below), as shown at 27g, may be pressed or another action known to those skilled in the art may proceed.
[0125]
The above pointer assignment makes it possible to take advantage of other actions, such as pressing the mouse perpendicular to the stylus axis when the mouse is in another position (for example, the outer position), for example, as well as a cursor operation procedure in the text. May be assigned. The procedure is shown in FIG. 24i to 24n.
[0126]
According to one embodiment of the invention, the cursor can be operated, for example, by pressing the mouse perpendicular to the stylus axis. FIG. As shown at 24i, the user first sets the mouse to, for example, the text editing mode (2481) in the outer position. If the text mode is the line scroll mode, the FIG. As shown at 24j, the user clicks the mouse outward (2482) to put the system into character / cursor navigation mode. As mentioned above, when the cursor is on the current page, it stays at the same position in the text. If the cursor is not on the current page, for example, it appears on the current page of the document, for example, at the last row (2484), for example, at the last position (2483) or at the first position. Thereafter, FIG. By pressing the mouse in each direction (2495- 2498) perpendicular to the stylus axis as shown at 24k-24n, the cursor on the text is moved up (2490), left (2491), and down (2492). ) Or rightward (2493).
[0127]
As described above, the mouse is given one, two, or more positions on the stylus computer, and for better and easier functionality, for each position, for example, the same domain. Numerous functions can be assigned. It is possible for the mouse to have countless positions on the stylus computer axis, but for ease of use of the mouse and to avoid user frustration, the position of the mouse on the stylus computer is Preferably, it does not exceed two places. For additional functionality, an additional click system can be provided to the mouse in addition to each position (eg, inside, outside). It should be noted that instead of having a mouse with the click system, one or more predefined buttons on the stylus computer can be used with the mouse as mouse buttons. . For example, while operating the mouse, the user may be able to use the FIG. A predefined button such as 2701 shown in FIG. 27g (for example, a clip-type button whose details will be described later) may be pressed. A mouse with a click system and / or a mouse with a corresponding predefined button combination functions like a computer mouse and can have at least all the functions of a computer mouse. It should be noted that the examples described so far or the ones that follow are merely examples of some of the methods. One skilled in the art can employ various combinations of the various assignments without departing from the spirit of the invention.
[0128]
FIG. Reference numeral 25 denotes a mouse (2500) according to an embodiment of the present invention, which has two positions (2501, 2502) on the stylus in the stylus axial direction. Again, in order to obtain higher mouse functionality, a click system (2507, 2508) is additionally provided on each side (eg inside, outside).
[0129]
According to one embodiment of the invention, one of the mouse positions, for example the outer position, can be assigned a text editing (operation) function. FIG. 25a shows an example of how the mouse works. In the first step (2510), the mouse is set to line / page scroll mode. The user moves the text document line on the LCD display back and forth, as shown in the previous example, by rotating (2511) the mouse perpendicular to the stylus axis and clockwise or vice versa. Can be. When the user pulls the mouse (2512) with sufficient strength to produce a click, the system changes modes and enters cursor / character mode (2520). When the user rotates the mouse in this state (2521), the cursor in the text moves back and forth in character units. To return to the line mode (2510), the user may, for example, pull out and click (2519) the mouse and slightly rotate (2518) the mouse.
[0130]
If, on the other hand, the user wishes to select a portion of text, first, while the system is setting the cursor / character selection step (mode) (2520), the cursor is placed before or after the text to be selected. Must be positioned. Subsequently, when the user pulls out the mouse and clicks (2522), the system enters a text selection step (mode) (2530). If the mouse is rotated in any direction (2531) in this state, the text before or after the cursor is selected accordingly. The length of the selected text depends on the amount of rotation (degree). After selecting the text, the user can manipulate (eg, copy, bold, delete, etc.) the selected text portion. To return to the cursor mode (2520), the user pulls out the mouse again and clicks (2529).
[0131]
The user can exit text mode (2541-2543) at any step, for example, by positioning the mouse at the other position (eg, inside position, menu selection mode). The current text page, cursor position, and currently selected step are kept as default. When the user enters text mode again, he will enter text mode at the same position and step (2545-2547) as before entering.
[0132]
Note that the step of scrolling through text lines / pages (eg, line / page scroll mode) can be omitted. The user can then scroll the line by rotating the mouse in cursor / character mode and moving the cursor forward (or backward). When the cursor reaches the last (or first) position in the text, as the user continues to rotate, the next line / page will appear. It should be understood that the text is composed of several lines, one or more of which can be displayed simultaneously on the screen display unit of the stylus computer.
[0133]
According to one embodiment of the present invention, menus and functional operations can be assigned to one of the mouse positions, for example, the inner position. FIG. 25b is an example of how the mouse works in that case. In the first step (2550), the mouse is set to menu list selection mode. The user can scroll the menu list on the LCD display back and forth, as shown in the previous example, by rotating the mouse clockwise or counterclockwise (2551) perpendicular to the axis of the pen. it can. At any point, if the user presses the mouse with sufficient strength to produce a click (2552), the system selects the current menu list, changes the mode (step) and changes the menu (step) (2560). to go into. A menu selection indicator appears at a predefined location on the menu list. When the user rotates the mouse in this state (2561), the menu selection indicator moves back and forth in the menu of the selected menu list in menu units (in accordance with the rotation direction by the user). If the user continues to rotate after the menu selection indicator reaches the last menu in the list, the next or previous menu list will appear depending on the direction of rotation. The menu selection indicator jumps to the first or last menu (depending on the direction of rotation) and moves over the menu title until the user stops rotating. To return to the menu list selection mode (2560), the user may, for example, depress and click (2559) the mouse and rotate the mouse slightly (2558).
[0134]
On the other hand, if the user wishes to select a function included in the menu, the user must first position the menu selection indicator on the menu to be selected while the system is setting the menu selection mode (2560). Must. Subsequently, when the user presses down the mouse and clicks (2562), the system enters the function selection mode (step) (2570). If the menu contains only one function, it is automatically selected. If there are two options, one of which is already in use (eg, bold, standard), the other option is automatically selected. If there are two or more functions in addition to the function currently being used, a menu bar corresponding to the menu opens. In this state, if the mouse is rotated in either direction (2571) as needed, a function selection indicator will appear and the function title will appear on the function title until the user stops the indicator on the desired one of them. Moving. The user presses and clicks the mouse again to select the function (2569). This function is finally selected and the system returns to the menu selection mode (step) (2560).
[0135]
The user can exit the menu mode (2581-2583), for example, by dragging the mouse and positioning it in an outer position (eg, text selection mode). The current menu list may be maintained as a default. When the system reenters menu mode (2584), this default menu list will be displayed on the screen.
[0136]
Note that the step of scrolling through the menu list (eg, menu list mode) can be omitted. The user can then scroll the line by rotating the mouse in the menu selection mode and moving the menu selection indicator forward (or backward). When the indicator reaches the last (or first) position in the menu list, the user can continue rotating further to display the next menu list (eg, a row). As will be appreciated, the menu list is organized over several lines, one or more of which can be displayed simultaneously on the screen display unit of the stylus computer.
[0137]
It should be noted here that it is also possible to select functions individually or with the rotation of the mouse using the normal selection indicators described above.
[0138]
According to an embodiment of the present invention, a handwritten command can be provided for at least a part of a command assigned to a mouse or other buttons. For example, after selecting a portion of text by operating the mouse, the user can write the word "copy" on the writing surface. At this point, the system copies the selected portion of the document. If the user wants to pace the part elsewhere, he first moves the cursor to that position and writes the word "paste". The copied part will be pasted to that location by the system. Various display systems can be used to tell the system that the written word is not a part of the text, but a command.
[0139]
-Use a special existing or customized reserved command word or symbol for each command or for multiple commands (eg, copy, cp) You can write down the customized symbol you've already written to tell the system to go to the next page of text.)
[0140]
-Precede the command word with one or more reserved or existing words (e.g. cmcopy, cmopen, etc.), such as "cm", reserved or customised.
[0141]
-Other possibilities based on this idea. For example, when going five lines forward in the text, the user can write "al05" (advance line 05 lines; in this case, al is a reserved word).
[0142]
According to one embodiment of the present invention, the command can be written using another pen point provided in the stylus computer. Also, as mentioned above, these commands can be entered via the structured surface of the mouse. In order to better capture the sound generated by the contact between the mouse surface and the writing surface, at least one additional (preferably directional) microphone is placed inside the body of the stylus computer close to the mouse (e.g. (As described above with respect to the microphone of the chip) or outside thereof. In addition, a button such as a clip button may be provided and used to signal the start of a writing command by the pen tip to the system. In that case, reserved words or restricted words are not required.
[0143]
In addition, the pointing device chip may be structured so that a part of the pointing device chip can be allocated for writing commands. FIG. As shown at 4e, the pointing device chip (415) has one structured portion (418) assigned to the text and the other, differently structured portion (419) is used for handwritten commands. It can be structured in such a way that it can be assigned. By writing the command on the writing surface using the portion (419) assigned for the command of the pointing device chip, the written data or symbol is patterned according to and with the generated sound, After comparison with the stored waveform, it is interpreted as a command by the HWSRS.
[0144]
According to one embodiment of the present invention, the display can display various icons as in a normal computer. For example, using a normal selection pointer, selecting an icon, opening a file, vertical or horizontal elevators, running a program, and / or at least all other operations performed using a normal computer normal selection pointer. It can be performed.
[0145]
According to one embodiment of the invention, the selection pointer can usually be positioned over the desired icon or object, for example by first moving or rotating the mouse vertically. Subsequently, the object can be selected, for example, by clicking the mouse once. A longer press and click procedure allows the object to be selected and maintained, eg, shifted to another location. To release the object, you can make a long click again. Also, like a traditional computer mouse, some functions or commands may be assigned to a double click on the stylus computer. All other operations with a traditional computer mouse can be achieved with the stylus-type computer mouse of the present invention. These mouse operations are well known to computer users.
[0146]
A command and selection system as described above and a mouse with movement can be attached to any electronic device that requires a simple means of movement / selection, such as a computer, laptop, PDA device, mobile phone, regular phone. . Some of these devices are described in FIG. 33a to 33e. FIG. 26a shows a laptop computer equipped with the mouse (2601) of the present invention on the side. FIG. As shown at 26b, it may be mounted elsewhere on the computer (2602), for example, at the center. Also, FIG. As shown at 26c, multiple mice or additional complementary mouse buttons (2604) may be provided on the computer. FIG. Reference numerals 33a to 33e denote various electronic devices including the mouse (3326) and the selection system using the mouse, as described above.
[0147]
According to one embodiment of the present invention, a computer provided with a handwritten sound recognition system of the present invention and / or a mouse system of the present invention using a keyboard, keypad or other input system, such as voice / speech recognition. As well as providing for other electronic devices, these input systems can be replaced or used in combination with them. FIG. Referring to 26d, the writing surface (2603), the microphone (not shown), the HWSRS of the present invention, and all other necessary (not shown) are attached to the computer and preferably include the nib of the present invention. The pen can be used to write a symbol on its surface to produce a sound according to the symbol written by the pen tip. Also preferably, the writing surface may be structured in a manner that enhances the sound produced by the pen tip. The microphone captures the sound and passes it to a computer, which digitizes the handwritten data input using HWSRS. This system is described in FIG. It can be used for any other electronic devices as shown in 33a to 33e.
[0148]
Also, computers and other electronic devices with a HWSRS and microphone need not have a writing surface. In that case, the corresponding sound generated by writing anywhere, such as a computer cover, can be interpreted by the HWSRS. This system is described in FIG. It can be used for any other electronic devices as shown in 33a to 33e.
[0149]
One important advantage of this system is that the HWSRS of the present invention can replace bulky keyboards and frustrating keypads in electronic devices and computers. Having a simple pointing device, such as a pen, preferably with the structured tip of the present invention, allows a user to enter a great variety of data into an electronic device. Of course, the electronics must have at least the HWSRS and microphone of the present invention. They also need to have other necessary functions, such as a processor and a memory. Preferably, a structured writing surface may be provided in the electronics that enhances the sound generated by the contact of the pointing device chip on the writing surface during writing.
[0150]
According to one embodiment of the present invention, FIG. As shown at 27a, an additional button (2701) used for particularly frequently used functions such as "Enter", "Next Line", "Tab", or "Caps Lock" is provided on the stylus computer. Can be prepared.
[0151]
According to another embodiment of the present invention, instead of or in addition to these buttons, a rotation and / or click system may be provided on the pointing side of the stylus computer. For example, FIG. As shown at 27b, three frequently used functions "Enter", "Tab", and "Caps Lock" (2711) are shown on the stylus-type pen head (2710) and a selection indicator (2712). ) Is located at the end of the computer body. FIG. As indicated at 27c-27d, the head or body of the stylus is rotated (2719) and the indicated mark (2712) is moved to the front of the displayed function (2714, 2715) to indicate the designated function. Is selected and executed. The head automatically returns to its original position. For example, FIG. 27c and FIG. In 27d, the functions "Caps Lock" and "Enter (Next Line)" are selected. FIG. According to the examples shown in 27e to 27f, the "Tab" function (2720) is executed by pushing the head inward (2721) and clicking. Each additional click additionally advances the tab.
[0152]
According to yet another embodiment of the present invention, FIG. As shown at 27g, a stylus-type computer (2700) can be provided with a clip-type button (2701). By pressing several places on the clip, different functions or commands can be performed. For example, FIG. Pressing the center (2710) of the clip button may cause an on / off command to be executed, for example, as shown at 27h. You can also execute a command by pressing the side of the clip button. For example, the "Enter" or "Next Line" function (2722) may be executed when the left side (2720) of the clip button (2721) is pressed. Also, for example, the “Tab” function (2731) may be executed when the right side (2730) of the clip button (2731) is pressed. Each time you press right, the cursor jumps to the next tab position on the screen. A symbol such as a blank character may be assigned to the position where the clip button is pressed. Also, for example, if the user keeps pressing a predefined position of the clip button (eg, the key of the clip button), it is assigned to that location until the user stops pressing the key. The symbols or functions can be repeated. In addition, different functions can be assigned to double-clicking each position of the clip button. For example, assigning a "Caps Lock" function or the like to the double click on the left side of the clip button, and using the clip button for functions such as "send" / "end" (communication) when the device is in the telephone mode, for example. You can also.
[0153]
Interactions, such as depressing or double-clicking (eg, keys 2710, 2720, 2730, etc.) on the clip button 2701, may also be used with a stylus computer pointing device or selection device (eg, a mouse). A clip button key may function as the mouse key. The interaction of these mouse / clip / button / key combinations may replace the mouse click function described above, or may add additional functionality to the stylus computer mouse function already described. For example, the user selects the file by operating the mouse, for example, using the right hand, positioning the arrow of the pointing indicator on the icon of the file, and pressing the key of the click button or double-clicking with the left hand. You can open it. Also, during text editing, the user may use the clip button keys to, for example, select a menu, select a function, or change modes (eg, change from menu list mode to menu selection mode or The reverse change, the change from the line selection / scroll mode in the text to the cursor operation mode or the reverse change) can be performed. For example, if the system is set to menu selection mode, the user could place a menu selection indicator on the menu and then press a predefined key on the clip button to open its menu bar. Also, when the user wishes to exit the mode, for example, when exiting the menu selection mode and entering the menu list mode, instead of clicking the mouse and simultaneously rotating the mouse, the stylus button / clip / key can be used. You can also use predefined keys (or other predefined types of keys). In other words, the mouse and the click mode built into it, and / or the mouse and other keys assigned to it, can at least cover all the functions of a personal computer mouse.
[0154]
The clip button may be located elsewhere on the stylus computer. For example, FIG. As shown at 27k, it is conceivable to provide a multi-functional clip button 2741 of the present invention near the writing tip 2742 of the stylus computer 2740 of the present invention. It will be appreciated that the clip button can be located at any location on the stylus, for example, near the mouse, or near the writing tip, or at the center of the stylus, for convenience or other reasons. is there. In addition, the clip buttons may be designed, for example, in a manner that attaches the stylus computer to a user's pocket (eg, attaches a regular pen to a user's pocket). Also, if desired, multiple clip buttons can be provided on the stylus computer.
[0155]
According to one embodiment of the invention, stylus computer 2740 includes at least one additional microphone 2743. The microphone may be provided according to a method for capturing a user's voice. To that end, the microphone can be provided at a location 2744 on the stylus near the user's mouth (eg, the end opposite the end where the stylus pointing tip is attached).
[0156]
According to yet another embodiment of the present invention, FIG. As shown at 27L, stylus computer 2750 can include a multi-section / directional microphone 2751 for capturing, for example, a user's voice. The microphone 2751 may extend toward the user's mouth so that the user's voice can be clearly captured. The microphone multi-section structure 2752 may be used as an antenna for a stylus computer. The antenna may be a diversity antenna. In the closed position, the multi-section microphone and / or antenna may have the appearance and / or functionality of a stylus computer clip button as described above.
[0157]
FIG. 27m-27n indicate other positions of the multi-section microphone / antenna described above. FIG. Referring to 27m, a clip button 2761 having a multi-section structure 2762 of the stylus computer 2760 is shown. In this example, the clip button 2761 itself is pivoted and / or rotated to assist in adjusting the stylus to the desired position. The clip button has a telescope section 2763 and can extend from the clip button. If the clip button system includes a key 2764 below the clip button (eg, operated by pressing the clip button), for example, to extend the microphone toward a position, While the clip button is rotating, the button is exposed and can be directly operated by the user with the finger. As should be understood, the structure of the clip button can encompass any existing technology known to those skilled in the art. For example, FIG. As shown at 27n, the clip button 2781 of the stylus 2780 may include a first locking structure 2782 and an additional pivot 2883 structure 2784.
[0158]
By using a microphone close to the stylus writing tip and a multi-section microphone of the present invention close to the user's mouth, the system can capture two distinct inputs for the same data (e.g., symbol) to be input. it can. The user can say it aloud while writing, for example. For better recognition, the system may use both inputs simultaneously (eg, the sound of handwriting strokes and the user's verbal input). This problem will be described later in more detail. The microphone can function in a manner that automatically locks and stays near the user's mouth during writing. For this purpose, for example, a biasing means, such as a wire, can be provided, for example, to attach the microphone to a part of the body or clothing of the user. It should be understood that instead of having a multi-section structure, a wire may extend the microphone towards the user's mouth.
[0159]
In yet another embodiment of the present invention, FIG. As shown at 28a, a stylus-type computer is provided with a menu list containing alphanumeric characters and symbols (2801) as a system separate from or complementary to the handwritten sound input system of the present invention. Can be. Characters and symbols can be selected and input using any of the menu selection methods described above. For example, after selecting an alphanumeric menu list, the mouse (2800) may be rotated until the menu selection indicator (2802) comes over the desired symbol (2803). Subsequently, FIG. By clicking the mouse inward (2805) as shown at 28b, the character is selected / input and displayed on the LCD screen (2806). FIG. This procedure can be repeated to select additional characters or symbols (2807), as shown at 28c-28d. In addition, FIG. A shortcut function (eg, bold, font, size, etc.) may be applied to each character by creating a menu bar (2831), as shown at 28e. It should be understood that if the function (2832) includes a sub-function (2833), pressing the mouse when the indicator (2834) reaches the function will cause the sub-function menu to be displayed. (2833) opens. When selecting a function in the sub-function menu, the user again turns the mouse to the desired function and selects it, for example, by clicking the mouse inward. This procedure can be repeated without selecting another sub-function, as long as the function includes a sub-function.
[0160]
According to one embodiment of the present invention, the above procedure can be sequentially applied to any menu bar having a function including a sub function and the like.
[0161]
According to one embodiment of the present invention, the stylus-type computer can be provided with a cover to protect the display of the device as well as all other functions. In addition, the cover can also protect the pen tip from accidental erroneous input. FIG. 29a-29d show a stylus-type computer (2900) and a cover (2901) for covering the stylus computer. The cover has a special structure (2902), allowing the use of the computer's clip button (2903) as well as allowing it to function (2999) and yet cover the computer (2904). This is because a stylus-type computer may have telephone and telecommunications capabilities. When the device is used as a mobile phone and the user receives a call, the user can answer with the device covered. This cover can also protect the device from water wetting.
[0162]
According to one embodiment of the present invention, a stylus-type computer can also function as a telecommunication device, such as a wireless telephone or PDA device. FIG. As shown at 29e-29g, the stylus (2905) may include some or all of the devices and systems of the present invention, and may also have additional required features not described herein. In addition, a transceiver (not shown) as well as all other functions necessary for communication with other electronic devices can be provided. For example, the device may include at least one speaker (2907), microphone (2906), camera, and the like. The input system and functions of the present invention dial by writing a number (2908) on a writing surface, write a send message (2911), perform file, image transmission, data reception, storage, operation, etc. be able to. Telephone functions and menus may be organized in a manner similar to other computer functions and menus. For example, one or more menu lists and menu bars, including one or more functions, may also be organized by the user with respect to telephone operations such as phone books, received / sent calls, and the like. In addition, the stylus-type computing device may include a speech recognition system that alternatively allows the entry of voice or user verbal data as well as functions, commands, and the like. Number dialing can also be performed by verbal commands.
[0163]
FIG. As shown at 29g, the device may be provided with a cover to protect against impact and ultimately water wetting. Holes (2921, 2922) can also be provided on the cover at locations for functions such as speakers, microphones, cameras, etc., without opening the cover, for example to receive calls. When the device is in phone mode, the clip button (2923) can be used for some phone functions. For example, functions such as "send" and "end" can be assigned to pressing the left side of the button. Also, for example, it is conceivable to assign the “on” and “off” functions to the center (2925) of the clip button, and to assign the “voice (for example, mail) box” to the right side (2926) of the clip button. It will be appreciated that at least a portion of the display may be available for use while the stylus telecommunication device is covered.
[0164]
According to one embodiment of the present invention, a display unit is provided in the cover of the stylus computer / telecommunication device of the present invention instead of, or in addition to, the stylus computer display described above, and the incoming telephone call is provided. Use of the device for telephone operations, such as verifying a number, can be enabled without requiring removal of the device cover. The connection between the display and the device can be made wirelessly or by an electrical connection. For example, electrical contacts are provided in the telecommunications device and in the cover, and while the cover is covering the electronic device, the contacts are in contact with each other and are provided in the telecommunications device and the cover. It is possible to obtain a mutual contact between the displayed displays.
[0165]
Also, instead of the speaker, the received sound or message may be converted into a corresponding vibration and transmitted to the user's ear while the user holds the stylus close to the ear.
[0166]
According to one embodiment of the present invention, the stylus-type computer of the present invention also has telecommunication means such as infrared rays, lasers, etc., and can communicate with other computers, PDA devices, electronic devices such as TVs. . This allows, for example, sending and receiving documents and data (eg, to and from a computer, sending to a printer, etc.).
[0167]
For stylus-type computers, other types of buttons and mice are also contemplated. For example, FIG. Multiple buttons (3001, 3002) as shown at 30a can replace some of the functions previously assigned to the mouse. In this example, the mouse (3000) can be used, for example, to move up / down lines / pages. Four buttons (3002) may be used to move the cursor left, right, up and down, and another function may be assigned to the other buttons (3001).
[0168]
In yet another embodiment of the present invention, FIG. As shown at 31, a stylus-type computer (3000) has at least one mouse (3008) for a group of functions (eg, page up / down) and at least one mouse for functions such as cursor manipulation. One multi-directional button (3001) and at least one multi-functional button (3002) for operation such as menu / function selection can be provided. In addition, an additional single-function / multi-function button (3003) may be provided.
[0169]
FIG. Reference numeral 31a denotes a multi-directional button (3101) that can be used for cursor operation. Pressing a different edge (3102) of this button will move the cursor in the corresponding direction (3103). FIG. 31b to 31f illustrate that the cursor (3111) is moved in different directions on the LCD display by various operations (3112) of the button (3102).
[0170]
FIG. 32a-32f illustrate how another type of function selection button (3201) operates in accordance with one embodiment of the present invention. FIG. Turning this button right (3202) or left (3203) moves the menu selection indicator (3204) left or right, as shown at 32a-32b.
[0171]
To select a menu, the user first moves the indicator over the menu to select (3206). Subsequently, FIG. As shown in 32c, the user may press the menu selection button (3221) inward in the direction of the stylus. The menu bar (3222) opens, the system enters the function selection mode, and the keys return to their original positions (eg, click buttons). FIG. As shown at 32d, the user then rotates the button (3223) and moves the function indicator (3224) over the function to be selected. Thereafter, FIG. As shown at 32e, the user clicks the select button (3221) again to select that function. Finally, FIG. As shown at 32f, function (3225) is selected and the system returns from the function selection mode to the menu selection mode.
[0172]
According to one embodiment of the present invention, other handwritten graphics and drawings of, for example, symbols or commands (eg, a delayed handwriting recognition system), or based on, for example, real-time movement of a stylus tip on a writing surface. A handwriting input and recognition system may be used by the stylus-type computer of the present invention. Further, a printed material such as a character or an image may be scanned as input data by a stylus computer. To that end, the stylus can be equipped with means such as optical readers, laser devices, cameras and recognition systems such as OCR, and other technologies available now or in the future.
[0173]
Other stylus-type computers may also use other inputs, such as voice, words, keyboards, keypads, digitizers, etc., as well as technologies and systems.
[0174]
In addition, the system may include one or more databases of characters, words, and symbols in various languages, as described above. This system may be combined with a predictive word recognition system to allow selection of a word before the word is fully entered. This system often allows the desired word to be automatically selected by the system before its full entry is complete, and may even not require user intervention. This is accomplished by writing the characters or symbols of a word individually and continuously (eg, on a character-by-character basis), and often with very few corresponding words, and predicting the word before completing the writing of that word. This is possible because the system determines the desired words or indicates some possible words and allows the user to select one of them. The possible word choices are listed in a bar list similar to the menu / function bar, and the user can use their mouse movements and procedures similar to selecting functions in the menu bar. A desired word can be selected from among them.
[0175]
According to one embodiment of the present invention, HWSRS can be combined with other recognition systems to facilitate recognition of incoming symbols. For example, while writing a symbol (eg, a letter, punctuation, command, word or sentence, etc.), a user may pronounce the symbol at the same time. This further facilitates recognition of said symbols by HWSRS combined with a speech recognition system.
[0176]
According to one embodiment, as described above, the user can write a word of text separately for each character (eg, to indicate the end of each character, the user may write the pen tip after writing each character. Lift off the writing surface). The user can also say the word aloud while writing the letters of the word. The HWSRS of the present invention interprets each character of the word. After interpreting the character, the system compares the character with the spoken word and vice versa. After matching the two words (eg, the written and spoken words) with the dictionary database of the written words and the corresponding key-patterned spoken words, the system: Select the candidate most likely to be the intended word entered by the user. This allows for a very natural way of writing by the user, but also allows the system to have more accurate recognition capabilities. By providing a directional microphone near the writing tip of the stylus and an extendable directional microphone near the user's mouth, better quality handwriting (based on the sound of the writing tip on the writing surface) input and Voice input is promoted. Of course, the data entry methods described above (e.g., using HWSRS and / or speech recognition) may be used individually or in combination with other data entry systems. For example, to improve the accuracy of input recognition, an optical handwriting recognition system based on symbol recognition based on the graffiti of a written character, in addition to the data input method and at the same time, is described herein. It is conceivable to combine it with such recognition means.
[0177]
For faster data entry, the sound patterns for the shorthand system symbols may be stored by the user and then compared to the user's shorthand text during data entry using the HWSRS of the present invention. .
[0178]
A command such as “Caps Lock” may be input by voice. For example, the user can write "a" by saying "Cap". This causes the system to input "A". Further, different symbols can be assigned to different writing speeds while writing the symbols. For example, a quick lowercase letter can correspond to the lowercase letter, and a slower writing of the same letter can correspond to the uppercase letter.
[0179]
Also, FIG. Assigning (3351) the characters and functions available on a standard keyboard to different keys on a keypad (3350) with a limited number of keys (eg, a telephone keypad) as shown at 33f. Can be. The keys on these keypads may be regular click keys, sensitive keys (eg, digitizers, touch sensors, press keys, etc.) or other types of keys. By writing on the key (3352) one of the characters (3353) assigned to the key (3354) (or a symbol assigned to the symbol on the key or a location corresponding to the symbol on the key) By writing a predefined symbol, such as drawing a straight line in a predefined direction that produces a), and simultaneously pressing the key if necessary, the key recognition system selects the key, The HWSRS understands that the character written on the key is one of those selected and assigned to the key. This allows the HWSRS to only compare the pattern of the input character with the pattern of characters available for the selected key, which makes recognition much easier. As will be appreciated, a writing instrument (eg, pen, stylus) may preferably comprise the structured tip of the present invention.
[0180]
Additional technologies and means can be used to enhance the writing input system. For example, to locate the stylus tip's position on the writing surface or its path, the stylus may include means (eg, radar) for transmitting a signal and receiving its return. Various technologies, such as laser, light, microwave, infrared, etc., can be used for transmitting signals and receiving return signals. FIG. As shown at 34a, a reflective beacon (3401) or the like is placed, for example, on the writing surface (3404) to reflect the signal (3403) that the stylus nib frequently transmits. The stylus can include a measurement system that determines the distance from the reflector to the nib position based on the time between transmitting the signal and receiving the return signal. The nib position (3402) can be calculated, for example, based on the distance from two predetermined points (3405, 3409) on the beacon. As will be appreciated, the beacon relationship angle (3406) must be different than 90 degrees. Further, as will be appreciated, the system can at any time know whether the nib is touching the writing surface. This positioning system has many advantages, such as indicating the end of a word, sentence, etc. to the recognition system.
[0181]
A handwriting recognition system according to the movement of a pointing device in space can also be provided. For example, reflection / detection means may be used to scan / provide three-dimensional parameters related to the location of the pointing device chip in space during the symbol writing procedure. The position of the pointing chip in space at the correct time is transmitted / received by the pointing device chip and reflects the signal by the detected signal and / or to the pointing device chip. And letting it receive it to make the decision.
[0182]
Further, according to another embodiment of the present invention, the pointing device and its chip are detected (eg, using a sensor), for example, the pneumatic pressure levels applied to different parts of said pointing device and / or its chip. It can be structured and designed in a manner.
[0183]
According to yet another embodiment of the present invention, the pointing device and / or its tip detects a temperature level in contact with air while writing a symbol, for example at different parts of said pointing device and its tip. It can also be structured and designed in such a way. For example, the sensor may be pre-heated constantly by the system such that when the pointing device comes into contact with air during writing, the temperature of each of the portions changes accordingly. These can be detected and analyzed by the recognition system.
[0184]
According to yet another embodiment of the present invention, FIG. As shown at 34b, a stylus cover (3410) can be used as a reflective beacon.
[0185]
As will be appreciated, instead of using a reflective beacon system, a signal may be transmitted from the stylus tip and detected by the detection means. To that end, a detection unit, such as the aforementioned beacon, can be provided to detect these signals and process them as needed. The detection means can then send information (eg, the position of the stylus tip at the correct time) to a stylus-type computer. Here, it is understood that the reflection beacon can be configured to provide a three-dimensional detection / reflection means.
[0186]
The position information at the exact time described above can be used for the interpretation of the written symbols by the procedure of the real-time handwriting recognition system.
[0187]
According to one embodiment of the present invention, by using the technology described above, a reflection or detection beacon can be fixed horizontally on a writing surface. FIG. As shown at 35, notepads, notes, and other writing surfaces can be manufactured to incorporate reflective means.
[0188]
According to yet another embodiment of the present invention, a stylus-type computer can include a barcode reading / recognition system. The barcode reader can be mounted in a suitable location inside or outside the stylus computer of the present invention.
[0189]
According to one embodiment of the present invention, the stylus computer of the present invention has a bar code reader mounted near the writing tip and relates to the position of the writing tip at each moment during writing a symbol. Scan information.
[0190]
According to yet another embodiment of the present invention, a bar code reader of a stylus-type computer provides information about the position of a writing tip of the stylus computer at each moment on a writing surface while writing a symbol. Can be placed on the rotating clip button of the stylus computer in a scanning manner. To improve the visibility of the writing tip on the writing surface while writing the symbol, the user may rotate the clip button and lock it in the appropriate position.
[0191]
As will be appreciated, various bar code reader placements at different and / or different locations on the stylus for better scanning due to various different movements of the stylus computer while writing text. You can also.
[0192]
FIG. 36 shows the writing surface (3601). The horizontal position on the writing surface is quantified by a vertical barcode (3602), and the vertical position on the writing surface is quantified by a horizontal barcode (3603). The intersection (3604) of these barcodes on the writing surface represents the exact position on the writing surface. To that end, each point where two bars intersect must have unique information properties. For example, a predefined number of adjacent bars (e.g., vertical and horizontal bars) near the intersection of two bars (e.g., vertical and horizontal bars) may have another two of the barcodes on the same writing surface. The same predefined number of adjacent bars near the intersection of the bars of a book can have different properties (eg, different bar configurations or different colors of bars). The pre-defined number of adjacent barcodes is read during a writing procedure, for example, by a barcode reader attached to the stylus computer of the present invention, whereby the graffiti shape, drawing, Alternatively, information is provided such as a location in the text or a location on the writing surface while writing the text, or the end of a symbol, the interval between two symbols, to process it in real time and / or for delayed processing. Can be stored. As will be appreciated, the bars of a barcode can have different characteristics, such as different widths, different colors, and the like. It should also be noted that the horizontal and vertical barcodes shown here are merely examples. There are various possible directions for the bar of the barcode. For example, the first group of bars may be horizontal and the second group of bars intersecting on the same surface may be diagonal. Also, more than two groups of bars may be provided on the writing surface so that each bar group has a different direction.
[0193]
By providing a bar code reader and system on the stylus-type computer chip, the system can know the position of the nib on the writing surface at each moment during writing.
[0194]
According to another embodiment of the present invention, FIG. As shown at 37, each location on the writing pad can be marked by different numbers, different colors, or other means. In that case, the stylus-type computer may include an optical and / or color reader and recognition system.
[0195]
FIG. As shown at 38, the barcode, number, color, and / or other positional indication information may be projected onto a writing surface by a projector (3801).
[0196]
While essentially new features of the invention have been described and shown as applied to alternative embodiments, those skilled in the art will recognize and disclose the features without departing from the spirit of the invention. Various omissions, substitutions, and alterations in the form and details of the invention made are possible. Accordingly, it is intended to be limited only as indicated by the appended claims. In addition, it is to be understood that the drawings are not necessarily to be understood as reflecting the actual size but are conceptual in nature.
[Brief description of the drawings]
[Fig. 1a is an explanatory view showing a pen and a writing surface.
[Fig. 1b is an explanatory diagram showing an example of the direction of the pen during writing.
[Fig. 2a is an illustration showing a pen writing lines in two directions.
[Fig. 2b is an explanatory diagram showing a waveform of a virtual sound generated by contact between the pen and the writing surface when writing the line.
[Fig. 3a illustrates a preferred writing instrument tip that produces different sounds in different directions when writing on a writing surface.
[Fig. 3b is an explanatory diagram showing the surface structure of the tip of the writing instrument for generating the different sounds.
[Fig. 3c is an illustration showing two different sound waveforms generated by the structured chip of the pointing device while drawing two similar lines in different directions.
[Fig. 3d. FIG. 3B is an illustration showing a symbol written by the pen tip as shown in FIG. 3b and the waveform of the sound generated by the pen tip during writing of the symbol on the writing surface.
[Fig. 4a is an illustration showing examples of writing tips of various shapes that enhance the generation of different sounds between strokes in different directions on the writing surface.
[Fig. 4b is an illustration showing an example of a writing chip of various textures that enhances the generation of different sounds between strokes in different directions on the writing surface.
[Fig. 4c is an illustration showing an example of a writing chip with a combination of various shapes and various textures that enhances the generation of different sounds between strokes in different directions on the writing surface.
[Fig. 4d is an explanatory diagram showing the angle of the writing implement with respect to the writing surface while the user is writing.
[Fig. 4e is an explanatory view showing a contact area between a conical (for example, convex) nib and a writing surface during writing.
[Fig. 4f is a front view showing two different contact areas of the pen tip on the writing surface at two different rotations with respect to the position of the pen axis.
[Fig. 4g is a side and front view showing the structured chip shape of another pointing device.
[Fig. FIG. 5a is an explanatory view showing a handwritten character figure generated by a pen.
[Fig. 5b is an illustration showing a virtual graph of the sound generated by the contact between the pen and the writing surface while writing the character.
[Fig. 5c is an explanatory diagram showing a virtual voice graph when the character is vocalized.
[Fig. FIG. 6 is an explanatory diagram showing a standard computer keyboard provided with keys representing letters and symbols.
[Fig. FIG. 6a is an explanatory diagram showing a similar handwritten character.
[Fig. 6b is an illustration showing uppercase and lowercase English and similar symbols by printing and handwriting.
[Fig. 6c is an explanatory diagram showing a method of handwriting three similar characters and a method of distinguishing by a recognition system.
[Fig. FIG. 6d is an explanatory diagram showing another similar handwritten character and a proposal of a writing method for enabling distinction.
[Fig. 6e is an explanatory diagram showing similar numerals and characters. FIG.
[Fig. 6f is an explanatory diagram showing proposals of characters to be printed and handwritten for each category and directions to be followed while writing them so that the recognition system can easily recognize them.
[Fig. 6g is an explanatory diagram showing characters printed and handwritten for each category, and suggestions of directions to be followed while writing them so that the recognition system can easily recognize them. FIG.
[Fig. 6h is an explanatory diagram showing proposals of characters printed and handwritten for each category and directions to be followed while writing them so that the recognition system can easily recognize them.
[Fig. 6i is an explanatory diagram showing proposals of characters to be printed and handwritten for each category and directions to be followed while writing them so that the recognition system can easily recognize them.
[Fig. 6j is an explanatory diagram showing proposals of characters to be printed and handwritten for each category and directions to be followed while writing them so that the recognition system can easily recognize them.
[Fig. 6k is an illustration showing all characters printed on the keyboard and suggestions of directions to follow while writing them so that the recognition system can easily recognize them.
[Fig. FIG. 7 is a block diagram showing a handwriting recognition process according to one embodiment of the present invention.
[Fig. FIG. 7a is an illustration showing a stylus-type computer using a handwritten sound recognition system as an input system.
[Fig. 7b is a front view of a pen-type tip for the stylus-type computer provided with additional features.
[Fig. 7c is an illustration showing a stylus-type computer according to one embodiment of the present invention. FIG.
[Fig. 7d is a front view of a stylus-type computer writing tip according to one embodiment of the present invention.
[Fig. 7e is an illustration showing a stylus-type computer with means having an exponential curve shape to amplify the sound of a touch of a pointing chip on a writing surface during writing.
[Fig. 7f is an illustration showing a stylus-type computer with a resonant chamber for amplifying the sound of pointing tip contact on the writing surface during writing.
[Fig. FIG. 8a is an illustration showing a stylus-type computer and a closed, open, and writing position of a writing tip in accordance with one embodiment of the present invention.
[Fig. 8b is an illustration showing a stylus-type computer and a closed, open, and writing position of the writing tip according to one embodiment of the present invention.
[Fig. FIG. 8c is an illustration showing a stylus-type computer and a closed, open, and writing position of the writing tip according to one embodiment of the present invention.
[Fig. FIG. 8d is an illustration showing a stylus-type computer and a closed, open, and writing position of the writing tip according to one embodiment of the present invention.
[Fig. 9a is an explanatory diagram showing an erasing function and an erasing procedure of a computer according to an embodiment of the present invention.
[Fig. 9b is an explanatory diagram showing an erasing function and an erasing procedure of the computer according to one embodiment of the present invention.
[Fig. 9c is an explanatory diagram showing an erasing function and an erasing procedure of the computer according to one embodiment of the present invention.
[Fig. 10a is an explanatory diagram showing another erasing procedure of the computer according to one embodiment of the present invention.
[Fig. FIG. 10b is an explanatory diagram showing another erasing procedure of the computer according to one embodiment of the present invention.
[Fig. FIG. 11 is an illustration showing a stylus-type computer according to one embodiment of the present invention with a flat or convex LCD display.
[Fig. 11a illustrates a stylus-type computer with a curved or cylindrical (eg, convex) LCD display in accordance with one embodiment of the present invention.
[Fig. 11b is an explanatory view showing the average size of the curved / cylindrical display.
[Fig. 11c is an explanatory diagram showing the average size of the curved / cylindrical display.
[Fig. FIG. 12 is a diagram illustrating a stylus-type computer with a button-type mouse for manipulating data and ultimately inputting data, according to one embodiment of the present invention.
[Fig. 12a is an illustration showing the movement and position of the mouse in the pen axis direction according to one embodiment of the present invention.
[Fig. 12b is an explanatory diagram showing the movement / position of clicking the mouse in the pen axis direction according to an embodiment of the present invention.
[Fig. 12c is an explanatory view showing rotation of the mouse around a stylus axis at each position according to an embodiment of the present invention.
[Fig. 12d is a side view illustrating another type of movement of the mouse caused by the user pressing the mouse perpendicular to the stylus axis in accordance with one embodiment of the present invention.
[Fig. 12e is a front view of the mouse and a front view showing the direction in which the mouse is pressed.
[Fig. 12f is a side and front view showing a mouse with a bull for operating pointer / selector means on the display of a stylus-type computer.
[Fig. 13a is an illustration showing a method for selecting a menu list with a mouse according to one embodiment of the present invention.
[Fig. 13b is an explanatory diagram showing a method for selecting a menu list with a mouse according to an embodiment of the present invention.
[Fig. 13c is an explanatory diagram showing a method of selecting a menu list with a mouse according to one embodiment of the present invention.
[Fig. 14a is an explanatory diagram showing a method of selecting a menu by mouse operation according to one embodiment of the present invention.
[Fig. 14b is an explanatory diagram showing a method of selecting a menu by mouse operation according to one embodiment of the present invention.
[Fig. 14c is an explanatory diagram showing a method of selecting a menu by mouse operation according to one embodiment of the present invention.
[Fig. 14d is an explanatory diagram showing a method of selecting a menu by mouse operation according to one embodiment of the present invention.
[Fig. 14e is an explanatory diagram showing a method of selecting a menu by mouse operation according to one embodiment of the present invention.
[Fig. 14f is an explanatory diagram showing a method of selecting a menu by a mouse operation according to one embodiment of the present invention.
[Fig. 15a illustrates a method for selecting a menu bar and a function using a mouse, according to one embodiment of the present invention.
[Fig. 15b is an illustration showing how to select a menu bar and function using a mouse, according to one embodiment of the present invention.
[Fig. 15c is an illustration showing a method for selecting a menu bar and function using a mouse, according to one embodiment of the present invention.
[Fig. 15d is an illustration showing a method for selecting a menu bar and function using a mouse, according to one embodiment of the present invention. FIG.
[Fig. 15e illustrates a method for selecting a menu bar and function using a mouse, according to one embodiment of the present invention.
[Fig. 15f illustrates a method for selecting a menu bar and function using a mouse, according to one embodiment of the present invention.
[Fig. 15g is an illustration showing a method for selecting a menu bar and a function using a mouse, according to one embodiment of the present invention. FIG.
[Fig. 15h is an illustration showing how to select a menu bar and function using a mouse, according to one embodiment of the present invention.
[Fig. 16a is an illustration showing how to use a mouse to advance or reverse text on an LCD display in accordance with one embodiment of the present invention.
[Fig. 16b is an illustration showing how to use a mouse to advance or reverse text on an LCD display in accordance with one embodiment of the present invention.
[Fig. 16c is an illustration showing how to use a mouse to advance or reverse text on an LCD display in accordance with one embodiment of the present invention.
[Fig. 16d is an illustration showing how to use a mouse to advance or reverse text on an LCD display in accordance with one embodiment of the present invention.
[Fig. 17a is an illustration showing a method of using a mouse to move forward or backward on a character-by-character basis in a text according to one embodiment of the present invention.
[Fig. 17b is an illustration showing a method for moving the cursor in text forward or backward on a character-by-character basis using a mouse, according to one embodiment of the present invention.
[Fig. 17c is an illustration showing a method for moving the cursor in the text forward or backward on a character-by-character basis using a mouse, according to one embodiment of the present invention.
[Fig. 17d is an illustration showing a method for moving the cursor in text forward or backward on a character-by-character basis using a mouse, according to one embodiment of the present invention. FIG.
[Fig. 17e is an illustration showing a method for moving forward or backward on a character-by-character basis in a text using a mouse, according to one embodiment of the present invention.
[Fig. 17f is an illustration showing a method of using a mouse to move forward or backward on a character-by-character basis using a mouse in accordance with one embodiment of the present invention.
[Fig. 18a is an illustration showing a method of moving a text selection indicator on a document displayed on a screen when the mouse is at a predetermined position according to one embodiment of the present invention.
[Fig. 18b is an illustration showing a method for moving a text selection indicator on a document displayed on a screen when the mouse is at a predetermined position according to one embodiment of the present invention.
[Fig. 18c is an illustration showing a method of moving a text selection indicator on a document displayed on a screen when the mouse is at a predetermined position according to one embodiment of the present invention.
[Fig. 18d is an illustration showing a method for moving a text selection indicator on a document displayed on a screen when the mouse is at a predetermined position according to one embodiment of the present invention. FIG.
[Fig. 19a is an illustration showing a procedure for selecting a portion of text by using a mouse according to an embodiment of the present invention.
[Fig. 19b is an illustration showing a procedure for selecting a portion of text by using a mouse according to an embodiment of the present invention.
[Fig. 19c is an illustration showing a procedure for selecting a portion of text by using a mouse according to an embodiment of the present invention.
[Fig. 19d is an explanatory diagram showing a procedure for selecting a portion of text by using a mouse according to an embodiment of the present invention.
[Fig. 19e is an explanatory diagram showing a procedure for selecting a portion of text by using a mouse according to an embodiment of the present invention.
[Fig. 20a is an explanatory diagram showing a copying procedure using a mouse according to an embodiment of the present invention.
[Fig. 20b is an explanatory diagram showing a copying procedure using a mouse according to an embodiment of the present invention.
[Fig. 20c is an explanatory diagram showing a copying procedure using a mouse according to an embodiment of the present invention.
[Fig. 20d is an explanatory diagram showing a copying procedure using a mouse according to an embodiment of the present invention.
[Fig. 21a is an illustration showing a paste procedure using a mouse according to one embodiment of the present invention. FIG.
[Fig. 21b is an illustration showing the paste procedure using a mouse according to one embodiment of the present invention.
[Fig. 21c is an illustration showing a paste procedure using a mouse according to one embodiment of the present invention.
[Fig. 21d is an illustration showing a paste procedure using a mouse according to one embodiment of the present invention.
[Fig. 21e is an illustration showing a paste procedure using a mouse according to one embodiment of the present invention.
[Fig. FIG. 22a illustrates a method for deleting selected text by using an eraser according to one embodiment of the present invention.
[Fig. FIG. 22b illustrates a method for deleting selected text by using an eraser according to one embodiment of the present invention.
[Fig. FIG. 22c is an illustration showing a method of deleting selected text by using an eraser according to one embodiment of the present invention.
[Fig. 23a illustrates a menu bar and function selection procedure using the "normal selection" indicator of a computer using a mouse when the mouse is in another predetermined position, according to one embodiment of the present invention. FIG.
[Fig. 23b Instructions for selecting a menu bar and function by the "normal selection" indicator of a computer using a mouse when the mouse is in another predetermined position, according to one embodiment of the present invention. FIG.
[Fig. 23c Instructions for selecting a menu bar and function using the "normal selection" indicator of a computer using a mouse when the mouse is in another predetermined position, according to one embodiment of the present invention. FIG.
[Fig. 23d, description showing the procedure for selecting a menu bar and a function using the "normal selection" indicator of a computer using a mouse when the mouse is in another predetermined position according to an embodiment of the present invention. FIG.
[Fig. 23e, description showing the menu bar and function selection procedure by the "normal selection" indicator of the computer using the mouse when the mouse is in another predetermined position according to one embodiment of the present invention. FIG.
[Fig. 24a Method of using a mouse to move a text selection indicator on a document displayed on a screen when the mouse is at the same predetermined position, according to one embodiment of the present invention, and computer FIG. 11 is an explanatory diagram showing a procedure for selecting a menu bar and a function by a “normal selection” indicator of FIG.
[Fig. 24b. Method and computer for using a mouse to move a text selection indicator on a document displayed on a screen when the mouse is at the same predetermined position, according to one embodiment of the present invention. FIG. 11 is an explanatory diagram showing a procedure for selecting a menu bar and a function by a “normal selection” indicator of FIG.
[Fig. 24c Method and computer for moving a text selection indicator on a document displayed on a screen using a mouse when the mouse is at the same predetermined position according to one embodiment of the present invention FIG. 11 is an explanatory diagram showing a procedure for selecting a menu bar and a function by a “normal selection” indicator of FIG.
[Fig. 24d Method for moving a text selection indicator on a document displayed on a screen using a mouse when the mouse is at the same predetermined position, according to one embodiment of the present invention, and computer FIG. 11 is an explanatory diagram showing a procedure for selecting a menu bar and a function by a “normal selection” indicator of FIG.
[Fig. 24e Method and computer for moving a text selection indicator on a document displayed on a screen using a mouse when the mouse is at the same predetermined position in accordance with one embodiment of the present invention FIG. 11 is an explanatory diagram showing a procedure for selecting a menu bar and a function by a “normal selection” indicator of FIG.
[Fig. 24f Method and computer for moving a text selection indicator on a document displayed on a screen using a mouse when the mouse is at the same predetermined position according to one embodiment of the present invention FIG. 11 is an explanatory diagram showing a procedure for selecting a menu bar and a function by a “normal selection” indicator of FIG.
[Fig. 24g Method of using a mouse to move a text selection indicator on a document displayed on a screen when the mouse is at the same predetermined position, according to one embodiment of the present invention FIG. 11 is an explanatory diagram showing a procedure for selecting a menu bar and a function by a “normal selection” indicator of FIG.
[Fig. 24h Method and computer for using a mouse to move a text selection indicator on a document displayed on a screen when the mouse is at the same predetermined position in accordance with one embodiment of the present invention FIG. 11 is an explanatory diagram showing a procedure for selecting a menu bar and a function by a “normal selection” indicator of FIG.
[Fig. 24i is an illustration showing a method of operating a cursor in text by pressing the mouse perpendicular to the stylus axis according to one embodiment of the present invention.
[Fig. 24j is an illustration showing a method of operating a cursor in text by pressing the mouse perpendicular to the stylus axis according to one embodiment of the present invention.
[Fig. 24k illustrates a method for operating a cursor in text by pressing a mouse perpendicular to a stylus axis in accordance with one embodiment of the present invention.
[Fig. 241 is an illustration showing a method of operating a cursor in text by pressing a mouse perpendicular to a stylus axis according to one embodiment of the present invention. FIG.
[Fig. 24m is an illustration showing a method of operating a cursor in text by pressing a mouse perpendicular to a stylus axis according to one embodiment of the present invention. FIG.
[Fig. 24n is an illustration showing a method of operating a cursor in text by pressing a mouse perpendicular to a stylus axis according to one embodiment of the present invention. FIG.
[Fig. FIG. 25 is an explanatory diagram showing various positions of a mouse and a click direction at each position.
[Fig. 25a is an explanatory diagram showing a mouse at one predetermined position and a text operation procedure and steps assigned to the movement of the mouse at that position.
[Fig. 25b is an explanatory diagram showing a mouse at another predetermined position, and an operation procedure and steps of a menu and a function assigned to the movement of the mouse at that position.
[Fig. FIG. 26 is an illustration showing the use of the mouse system and devices described with respect to a stylus-type computer in different locations on another type of computer in accordance with one embodiment of the present invention.
[Fig. FIG. 26b illustrates the use of the mouse system and devices described with respect to the stylus-type computer in different locations on another type of computer in accordance with one embodiment of the present invention.
[Fig. FIG. 26c illustrates the use of the mouse system and device described with respect to the stylus-type computer in different locations on another type of computer in accordance with one embodiment of the present invention.
[Fig. 26d is an illustration showing a computer having a writing surface and an input system of the present invention instead of a traditional keyboard.
[Fig. 27a is an illustration showing a push button for a stylus-type computer according to another embodiment of the present invention. FIG.
[Fig. FIG. 27b illustrates an additional multi-directional button and its function in a stylus-type computer according to one embodiment of the present invention.
[Fig. FIG. 27c illustrates additional multi-directional buttons and their functions in a stylus-type computer according to one embodiment of the present invention.
[Fig. FIG. 27d is an illustration showing additional multi-directional buttons and their functions in a stylus-type computer according to one embodiment of the present invention.
[Fig. FIG. 27e illustrates an additional multi-directional button and its function in a stylus-type computer according to one embodiment of the present invention.
[Fig. 27f is an illustration showing additional multi-directional buttons and their functions in a stylus-type computer according to one embodiment of the present invention. FIG.
[Fig. FIG. 27g illustrates a multi-position clip button for a stylus-type computer in accordance with another embodiment of the present invention.
[Fig. FIG. 27h illustrates a multi-position clip button for a stylus-type computer in accordance with another embodiment of the present invention.
[Fig. 27i illustrates a multi-position clip button for a stylus-type computer in accordance with another embodiment of the present invention.
[Fig. FIG. 27j illustrates a multi-position clip button for a stylus-type computer according to another embodiment of the present invention.
[Fig. 27k FIG. 27 located near a writing tip of a stylus computer according to one embodiment of the present invention. It is explanatory drawing which showed the clip button of 27b-27f.
[Fig. 27L Description showing multi-section / directional clip in open position used as directional microphone and / or antenna and / or clip button for stylus computer according to one embodiment of the present invention. FIG.
[Fig. 27m]. It is explanatory drawing which showed the various open position of the 27L multisection clip.
[Fig. 27n. It is explanatory drawing which showed the various open position of the 27L multisection clip.
[Fig. FIG. 28a is an illustration showing an additional input system using a display and mouse according to one embodiment of the present invention.
[Fig. 28b is an illustration showing an additional input system through the use of a display and mouse according to one embodiment of the present invention.
[Fig. FIG. 28c is an illustration showing an additional input system using a display and mouse in accordance with one embodiment of the present invention.
[Fig. Figure 28d is an illustration showing an additional input system using a display and mouse according to one embodiment of the present invention.
[Fig. FIG. 28e is an illustration showing an additional input system using a display and mouse according to one embodiment of the present invention.
[Fig. 29a is an illustration showing protection of a stylus-type computer cover according to an embodiment of the present invention when the LCD display is not used, and steps for mounting the cover. FIG.
[Fig. 29b is an illustration showing the protection of a stylus-type computer cover when the LCD display is not in use and the steps for mounting the same in accordance with one embodiment of the present invention. FIG.
[Fig. FIG. 29c is an illustration showing protection of a stylus-type computer cover according to one embodiment of the present invention when the LCD display is not in use and steps for mounting the same.
[Fig. FIG. 29d is an illustration showing protection of a cover for a stylus-type computer according to one embodiment of the present invention when the LCD display is not used, and steps for mounting the cover.
[Fig. 29e is an illustration showing a stylus-type computer when used as a telephone and telecommunication device.
[Fig. FIG. 29f is an illustration showing a stylus-type computer when used as a telephone and telecommunication device.
[Fig. FIG. 29g is an illustration showing a stylus-type computer when used as a telephone and telecommunication device.
[Fig. FIG. 30a illustrates a stylus-type computer according to one embodiment of the present invention.
[Fig. FIG. 31 is an illustration showing a stylus-type computer with another navigation button according to one embodiment of the present invention.
[Fig. FIG. 31a is an illustration showing a cursor navigation button according to one embodiment of the present invention.
[Fig. 31b is an explanatory diagram showing navigation of a cursor on a screen by operating the button according to an embodiment of the present invention.
[Fig. 31c is an explanatory diagram showing navigation of a cursor on a screen by operating the button according to one embodiment of the present invention.
[Fig. 31d is an explanatory diagram showing navigation of a cursor on a screen by operating the button according to an embodiment of the present invention.
[Fig. 31e is an explanatory diagram showing navigation of a cursor on a screen by operating the button according to an embodiment of the present invention.
[Fig. 31f is an explanatory diagram showing navigation of a cursor on a screen by operating the button according to an embodiment of the present invention.
[Fig. 32a is an explanatory diagram showing a menu navigation button and its operation according to an embodiment of the present invention.
[Fig. 32b is an explanatory diagram showing a menu navigation button and its operation according to an embodiment of the present invention.
[Fig. 32c is an explanatory diagram showing a menu navigation button and its operation according to an embodiment of the present invention.
[Fig. 32d is an explanatory diagram showing a menu navigation button and its operation according to an embodiment of the present invention.
[Fig. 32e is an explanatory diagram showing a menu navigation button and its operation according to an embodiment of the present invention.
[Fig. 32f is an explanatory diagram showing a menu navigation button and its operation according to an embodiment of the present invention.
[Fig. 33a is an illustration showing a mobile phone with a writing surface and a microphone for inputting sound generated by a pen during writing thereon according to one embodiment of the present invention. FIG.
[Fig. 33b Wristwatch in combination with an electronic device such as a telephone or PDA, comprising a display according to one embodiment of the invention, a writing surface and a microphone for inputting sound generated by a pen during writing thereon It is explanatory drawing which showed the device mounted | worn with wrists.
[Fig. 33c A wristwatch in combination with an electronic device such as a telephone or PDA, comprising a display, a writing surface and a microphone for inputting sounds generated by a pen during writing thereon according to one embodiment of the present invention. It is explanatory drawing which showed the device mounted | worn with wrists.
[Fig. 33d) A wrist, such as a wristwatch, in combination with an electronic device such as a telephone or PDA, comprising a display according to one embodiment of the invention and a microphone for inputting the sound generated by the pen during writing thereon. FIG. 3 is an explanatory diagram showing a device mounted on
[Fig. 33e is an illustration showing various electronic devices that include at least a display and, ultimately, a microphone for inputting sound generated by a pen during writing, according to one embodiment of the present invention. It is.
[Fig. FIG. 33f is an illustration showing an improved keyboard to which the handwritten sound recognition system of the present invention that allows full-text and functional input is coupled.
[Fig. 33g is an illustration showing an improved keyboard to which the handwritten sound recognition system of the present invention that allows full-text and functional input is coupled.
[Fig. 34a is an illustration showing a stylus-type computer with means for determining a pen tip position from a beacon, according to one embodiment of the present invention. FIG.
[Fig. 34b used as a beacon according to one embodiment of the present invention. FIG. 29 is an explanatory view showing a cover of the stylus-type computer 29a.
[Fig. 35 is an illustration showing a notepad with a horizontal beacon that allows a stylus-type computer to determine the pin position on the notepad according to one embodiment of the present invention.
[Fig. 36 is an explanatory view showing a note pad having horizontal and vertical bar codes indicating positions on the note pad.
[Fig. 37 is an explanatory diagram showing a writing surface having a number, symbol, or color indicating a position on the writing surface.
[Fig. 38 is an explanatory view showing a writing surface and a projector for projecting a symbol indicating a position on the writing surface.

Claims (15)

ポインティング・デバイスの筆記チップであって、
筆記表面上における前記筆記チップを用いた筆記の間に、前記筆記チップと前記筆記表面との接触が、異なる方向で異なるサウンドを生成する態様で構造化された表面を、前記筆記チップが有するポインティング・デバイスの筆記チップ。A writing chip for a pointing device,
During writing with the writing tip on the writing surface, the writing tip has a surface structured such that contact between the writing tip and the writing surface produces different sounds in different directions.・ Device writing chip. 少なくとも筆記チップによって生成されるサウンドの認識を基礎とする手書き認識システムであって、
前記筆記チップが、筆記表面上における前記筆記チップを用いた筆記の間に、前記筆記チップと前記筆記表面との接触が異なる方向で異なるサウンドを生成する態様で構造化された表面を有する手書き認識システム。A handwriting recognition system based at least on the recognition of sounds generated by a writing chip,
Handwriting recognition wherein the writing tip has a surface structured in such a manner that contact between the writing tip and the writing surface produces different sounds in different directions during writing with the writing tip on the writing surface. system. 少なくとも筆記チップによって生成される波形の認識を基礎とする手書き認識システムであって、
前記筆記チップが、筆記表面上における前記筆記チップを用いた筆記の間に、前記筆記チップと前記筆記表面との接触が異なる方向で異なる波形を生成する態様で構造化されたセンサを有する表面を有する手書き認識システム。A handwriting recognition system based at least on the recognition of a waveform generated by a writing chip,
The writing chip has a surface having a sensor structured in such a manner that contact between the writing chip and the writing surface generates different waveforms in different directions during writing with the writing chip on the writing surface. Handwriting recognition system. 前記波形が、前記センサによって検出された振動によって生成される、請求項３記載のデバイス。The device of claim 3, wherein the waveform is generated by a vibration detected by the sensor. 前記波形が、前記センサによって検出された熱によって生成される、請求項３記載のデバイス。The device of claim 3, wherein the waveform is generated by heat detected by the sensor. スタイラス‐タイプの電子デバイス用のディスプレイ・ユニットであって、
前記電子デバイスの表面の少なくとも実質的な部分を覆う態様で前記電子デバイスの周囲に巻き付けられるディスプレイ・ユニット。A display unit for a stylus-type electronic device, comprising:
A display unit wrapped around the electronic device in a manner to cover at least a substantial portion of a surface of the electronic device. スタイラス‐タイプの電子機器用のポインティングおよび選択ユニットとして動作するマウス・デバイスであって、
前記マウスが前記スタイラス‐タイプの電子デバイスの軸内の前記電子デバイスの一端に取り付けられるマウス・デバイス。A mouse device acting as a pointing and selecting unit for stylus-type electronics, comprising:
A mouse device wherein the mouse is attached to one end of the electronic device in the axis of the stylus-type electronic device. 前記マウスが回転動作を有する、請求項６記載のデバイス。7. The device of claim 6, wherein the mouse has a rotating motion. 前記マウスが、前記スタイラスの軸方向に少なくとも２つのポジションを有する、請求項６記載のデバイス。7. The device of claim 6, wherein the mouse has at least two positions in an axial direction of the stylus. 前記マウスが、前記スタイラスの軸方向におけるクリック動作を有する、請求項６記載のデバイス。The device of claim 6, wherein the mouse has a click movement in an axial direction of the stylus. 前記マウスが、前記マウス上の異なる位置に印加された圧力に応答し、それにおいて前記圧力が、スタイラスの軸方向に対して垂直の各種方向に印加されるものとする、請求項６記載のデバイス。7. The device of claim 6, wherein the mouse is responsive to pressure applied to different locations on the mouse, wherein the pressure is applied in various directions perpendicular to a stylus axis. . 筆記チップを備えるスタイラス‐タイプの電子デバイスであって、
前記筆記チップは、筆記表面上における前記筆記チップを用いた筆記の間に、前記筆記チップと前記筆記表面との接触が異なる方向で異なるサウンドを生成する態様で構造化された表面を有するスタイラス‐タイプの電子デバイス。A stylus-type electronic device having a writing chip,
The writing tip has a stylus having a surface structured such that during writing with the writing tip on the writing surface, contact between the writing tip and the writing surface produces different sounds in different directions. Type of electronic device. 少なくとも筆記チップによって生成されるサウンドの認識を基礎とする手書き認識システムを備えるスタイラス‐タイプの電子デバイスであって、
前記筆記チップが、筆記表面上における前記筆記チップを用いた筆記の間に、前記筆記チップと前記筆記表面との接触が異なる方向で異なるサウンドを生成する態様で構造化された表面を有するスタイラス‐タイプの電子デバイス。A stylus-type electronic device comprising a handwriting recognition system based at least on the recognition of sounds produced by a writing chip,
A stylus having a surface structured such that, during writing with the writing tip on the writing surface, contact between the writing tip and the writing surface produces different sounds in different directions; Type of electronic device. 少なくとも、筆記表面上の筆記手順によって生成されるサウンドの認識を基礎とする手書き認識システムを備えるスタイラス‐タイプの電子デバイス。A stylus-type electronic device comprising at least a handwriting recognition system based on the recognition of sounds generated by a writing procedure on a writing surface. 表面上に印刷されたバーコードに基づいて前記表面上のポジションを認識する手段であって、
前記バーコードがバーの間の交点を提供する態様で複数方向に配列された前記バーを備える、ポジションを認識する手段。Means for recognizing a position on the surface based on a barcode printed on the surface,
Means for recognizing positions, comprising said bars arranged in a plurality of directions in such a manner that said barcode provides an intersection between the bars.
JP2002553607A 2000-12-27 2001-12-26 Stylus computer Pending JP2004517398A (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US25803900P 2000-12-27 2000-12-27
PCT/US2001/049450 WO2002052372A2 (en) 2000-12-27 2001-12-26 Stylus computer

Publications (2)

Publication Number Publication Date
JP2004517398A true JP2004517398A (en) 2004-06-10
JP2004517398A5 JP2004517398A5 (en) 2005-12-22

Family

ID=22978838

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002553607A Pending JP2004517398A (en) 2000-12-27 2001-12-26 Stylus computer

Country Status (8)

Country Link
EP (1) EP1374012A2 (en)
JP (1) JP2004517398A (en)
KR (1) KR20030067729A (en)
CN (1) CN1287348C (en)
AU (1) AU2007202065A1 (en)
CA (1) CA2433151A1 (en)
HK (1) HK1065626A1 (en)
WO (1) WO2002052372A2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009282700A (en) * 2008-05-21 2009-12-03 Fuji Xerox Co Ltd Information processor, information processing system, and program
JP2013029912A (en) * 2011-07-27 2013-02-07 Pentel Corp Handwritten character recognition device
JP2020091780A (en) * 2018-12-07 2020-06-11 シャープ株式会社 Writing input device and writing input system

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7203384B2 (en) * 2003-02-24 2007-04-10 Electronic Scripting Products, Inc. Implement for optically inferring information from a planar jotting surface
KR101002580B1 (en) 2010-05-28 2010-12-21 엑스지 솔루션스 엘엘씨 Stylus pen and manufacture method of the same
JP7219076B2 (en) * 2018-12-07 2023-02-07 シャープ株式会社 Writing input device and writing input system

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4564928A (en) * 1982-09-30 1986-01-14 New York Institute Of Technology Graphical data apparatus
US4488000A (en) * 1982-09-30 1984-12-11 New York Institute Of Technology Apparatus for determining position and writing pressure
US5627348A (en) * 1995-04-07 1997-05-06 A.T. Cross Company Electronic stylus with writing feel
US6335723B1 (en) * 1998-10-02 2002-01-01 Tidenet, Inc. Transmitter pen location system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009282700A (en) * 2008-05-21 2009-12-03 Fuji Xerox Co Ltd Information processor, information processing system, and program
JP2013029912A (en) * 2011-07-27 2013-02-07 Pentel Corp Handwritten character recognition device
JP2020091780A (en) * 2018-12-07 2020-06-11 シャープ株式会社 Writing input device and writing input system
JP7299693B2 (en) 2018-12-07 2023-06-28 シャープ株式会社 Writing input device and writing input system

Also Published As

Publication number Publication date
AU2007202065A1 (en) 2007-05-31
HK1065626A1 (en) 2005-02-25
CA2433151A1 (en) 2002-07-04
EP1374012A2 (en) 2004-01-02
WO2002052372A2 (en) 2002-07-04
CN1287348C (en) 2006-11-29
KR20030067729A (en) 2003-08-14
CN1493069A (en) 2004-04-28
WO2002052372A3 (en) 2002-09-26

Similar Documents

Publication Publication Date Title
US20040047505A1 (en) Stylus computer
US7020270B1 (en) Integrated keypad system
US7800587B2 (en) Touch-type key input apparatus
NZ582991A (en) Using gliding stroke on touch screen and second input to choose character
US20010003452A1 (en) Portable communication device and method
US20150025876A1 (en) Integrated keypad system
KR101109191B1 (en) Data input panel character conversion
JP4383864B2 (en) Device with character input function
AU2007202065A1 (en) Stylus computer
KR100745684B1 (en) Character input method and apparatus using a pointing input means
WO2003058394A2 (en) Stylus computer and method of manipulating data
KR100651396B1 (en) Alphabet recognition apparatus and method
JP3035985B2 (en) Information processing method and information processing apparatus
AU2002239663A1 (en) Stylus computer
AU2011247861A1 (en) Integrated keypad system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20041221

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20041221

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20041221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20041221

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20060803

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20061102

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061205

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20070227

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20070227

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20070320

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070605

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070726

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071120

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20080430