JP3993706B2 - ファクシミリ送信装置 - Google Patents

ファクシミリ送信装置 Download PDF

Info

Publication number
JP3993706B2
JP3993706B2 JP27865598A JP27865598A JP3993706B2 JP 3993706 B2 JP3993706 B2 JP 3993706B2 JP 27865598 A JP27865598 A JP 27865598A JP 27865598 A JP27865598 A JP 27865598A JP 3993706 B2 JP3993706 B2 JP 3993706B2
Authority
JP
Japan
Prior art keywords
pen
stroke
detecting
message
facsimile
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP27865598A
Other languages
English (en)
Other versions
JPH11164074A (ja
Inventor
ウオルフ グレッグ
ジー ストーク デイビッド
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Publication of JPH11164074A publication Critical patent/JPH11164074A/ja
Application granted granted Critical
Publication of JP3993706B2 publication Critical patent/JP3993706B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00352Input means
    • H04N1/00392Other manual input means, e.g. digitisers or writing tablets
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • G06V30/333Preprocessing; Feature extraction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00326Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00206Transmitting or receiving computer data via an image communication device, e.g. a facsimile transceiver

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Facsimiles In General (AREA)
  • Facsimile Transmission Control (AREA)
  • Position Input By Displaying (AREA)
  • Facsimile Scanning Arrangements (AREA)
  • User Interface Of Digital Computer (AREA)
  • Character Discrimination (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、ファクシミリによってメッセージを送信する技術、特に、ペン形ファクシミリ装置によってファクシミリメッセージを送信する技術に関する。
【0002】
【従来の技術】
ファクシミリを通じてメッセージを送信する場合、典型的には、メッセージの作成及びこのメッセージに添えて送信するカバーシートへの情報記入をメッセージの送り手に要求することになる。そして、ユーザは、ファクシミリ装置を所定位置に据え付け、メッセージ及びカバーシートをファクシミリ装置にセットし、受取人のファクシミリ番号をダイヤルしなければならない。さらに、ユーザは、メッセージが成功裏に送信されたことを確認するために送られてくるメッセージを待たなければならないこともある。
【0003】
【発明が解決しようとする課題】
ファクシミリメッセージを送信する現在の過程における1つの問題は、ファクシミリ装置がコンパクトではないということである。ある者がファクシミリ送信を望んだとしよう。この場合、その者は、近くにあるファクシミリ装置まで出向かなければならない。このため、煩わしいばかりか、そのようなファクシミリ装置がどこにあるのかわからないような状況を想定すると、きわめて不便であるといわざるを得ない。
【0004】
そこで、ファクシミリ装置に要求されるような手順、例えば、ファクシミリ送信する場合には相手のファクシミリ番号をダイヤルしなければならないというような各種の手順を省略できたとしたら、ファクシミリを通じた通信過程がどんなにか便利で効率的なものになるか知れない。このようなことから、近年、従来のファクシミリ送信に要求される手順の一部を実行するだけでファクシミリ送信を完遂することができるような手法が望まれている。さらに、わざわざファクシミリ装置のもとに出向かなくてもファクシミリ送信することができるような手法も望まれている。
【0005】
本発明の目的は、従来のファクシミリ送信に要求される手順の一部を実行するだけでファクシミリ送信を完遂できるようにすることである。
【0006】
本発明の別の目的は、わざわざファクシミリ装置のもとに出向かなくてもファクシミリ送信することができるようにすることである。
【0007】
【課題を解決するための手段】
本発明は、筆運び情報を送信するペンによってメッセージが書かれるメッセージのファクシミリ送信装置において、ペンの位置をモニタすることによってペンの筆運びを検知する手段と、ペンの筆運びに対応する位置情報を送信する手段と、位置情報に対応するペンの筆運びによって指定された意図する受取人に向けてペンの筆運びからなるメッセージをファクシミリ送信する手段と、を備える。したがって、位置情報によって特定されるペンの筆運びがファクシミリ送信の一部として送信されるため、従来のファクシミリ送信に要求される手順の一部を実行するだけで、かつ、わざわざファクシミリ装置のもとに出向くことなく、ファクシミリ送信がなされる。また、検知する手段は、初期化手順を検知する手段と、メッセージの受け手の同定に対応する相手情報を検知する手段と、メッセージに対応するペンの筆運びをラスタ処理する手段と、終了手順を検知する手段と、終了手順に対応する情報を送信する手段と、を備える。したがって、初期化、受取人の同定、筆運び処理、筆運び処理の終了及び情報送信という各過程を経てペンの筆運びが検知される。
【0008】
ここで、請求項1記載の発明では、前記ペンの筆運びをラスタ処理する手段は、筆運びにおけるy方向又は垂直方向の最大値を第一のリストに格納し、筆運びにおけるy方向又は垂直方向の最小値を第二のリストに格納し、筆運び毎に一時的な変数を割り当てて筆運びラスタ処理を行い、該一時的な変数によって示される筆運びについての筆運び値の最小値が、当該処理されるラインよりも小さいかあるいは同等であるかを判断し、小さいかあるいは同等である場合は、該一時的な変数によって示される筆運びについての筆運び値の最大値が、当該処理されるラインより大きいかどうか判断し、大きい場合は、前記一時的 な変数の筆運びと処理されるラインとが交差しているとして、該筆運びの水平方向に対応する変数が設定され、x方向およびy方向、または水平及び垂直の次元における筆運びの位置をラインバッファに格納し、あるラインについてラスタ処理を始めて筆運び値が最大のyのラインに達すると、変数をインクリメントして筆運び処理をスキップする。
【0009】
請求項2記載の発明では、検知する手段は、ペンのピッチとヨーとロールとをモニタすることによるペンの位置を検出する手段と、ペンのペン先の筆圧を検出する手段と、を備える。したがって、検出されたペンのピッチとヨーとロールとに関する情報及びペン先の筆圧情報は、より正確な筆運びの認識に供される。
【0010】
請求項3記載の発明では、検知する手段は、赤外線放射走査光源を介してペンの位置を検出する手段と、ペンのペン先の筆圧を検出する手段と、を備える。したがって、検出されたペンの位置情報及びペン先の筆圧情報は、より正確な筆運びの認識に供される。
【0011】
請求項4記載の発明では、検知する手段は、ペンのピッチとヨーとロールとをモニタすることによるペンの位置を検出する手段と、ペンのペン先の加速度を検出する手段と、を備える。したがって、モニタされたペンのピッチとヨーとロールとに関する情報及び検出されたペン先の加速度情報は、より正確な筆運びの認識に供される。
【0012】
請求項5記載の発明では、検知する手段は、赤外線放射走査光源を介してペンの位置を検出する過程と、ペンのペン先の加速度を検出する過程と、を備える。したがって、検出されたペンの位置情報及び検出されたペン先の加速度情報は、より正確な筆運びの認識に供される。
【0013】
【発明の実施の形態】
ペン形ファクシミリ送信方法及び装置について説明する。説明を目的とする以下の説明中、数々の詳細な説明は、本発明の理解のためにのみ述べられる。しかしながら、本発明がそれらの詳細な説明なしに実施されうるものであることは、この発明の分野における通常の知識を有する者にとって明白であろう。そして、本発明を曖昧なものにすることを避けるために、周知の構造や装置であっても、それらの構造や装置はブロック図等の形態で示される。
[本発明の概要]
本発明は、例えばペンや筆のようなスマートな検知装置を用いてファクシミリ送信や他の電子的な遠隔送信を行なう方法、システム及び装置を提供する。実施の一態様として、そのような装置は携帯可能である。
【0014】
本発明では、装置は、筆運び情報を記録する。このような装置を用いるには、ユーザは、通常の紙切れにメッセージを書き込むだけでよく、これにより、システムは、各種の通信モードを通じてメッセージを配信する。
【0015】
実施の一態様として、ペン形装置が「To:」のようなファクシミリコマンド、つまり、ファクシミリ送信を指示するコマンドを最初に書き込み、続いて送信先の指示を書き込むことによってファクシミリ電文の送信処理が行なわれる。続いて、ユーザは、紙面や他の面上にメッセージを書き込む。本発明は、開始コマンドやファクシミリコマンドを認識することによって動作し、ユーザによるペン形装置の筆運びを記録する。その後、ユーザは、メッセージの書き込み終了を指示する。実施の一態様として、ユーザは、例えば、「停止」とか、「ファクシミリの終了」というようなコマンドを書くことによって、メッセージの書き込み終了を指示するようにすることができる。他の実施態様としては、ユーザは、例えば、ボタンを押下したり、スイッチをはじいたりペン形装置で入力装置を制御したり、所定の方法(例えば、ひねり、回転、振り等)で装置を動かしたりすることで、メッセージの書き込み終了を指示するようにすることもできる。そして、最後に、本発明のシステムは、通信媒体が通信可能となった場合にはいつでも、文書等のメッセージを送信する。ユーザによって提供された終了の指示は、ファクシミリ装置へのコンタクトとユーザのメッセージの送信とをもたらす。実施の一態様として、ユーザのメッセージはラスタ形式で送信される。そのようなラスタ形式のメッセージは、装置の筆運びをビットマップに変換することによって生成される。
【0016】
このような構成において、従来からあるようなファクシミリ装置なしにファクシミリを通じて文書を送信することができる。本発明で用いられる装置は、いつでも、どこからでも、大きな装置を必要とすることなく、メッセージの送信をきわめて容易にすることができる。また、本発明は、電子メールのような他の遠隔媒体にメーセージを送信することに適用することもできることに留意されたい。つまり、本発明は、きわめて効果的な方法で、手書きメッセージをファクシミリのように電子的に送信する手法を提供するものである。
【0017】
以下の説明は、ペンの動作の記録、開始と終了と宛先との認識、電子的通信及び筆運びと筆運びのビットマップへ変換を行なう方法及び装置を記述する。そして、それらは、ハードウエアとソフトウエアとそれらの組み合わせとによって実行される。
[ペンシステムの実施態様]
本発明は、その筆運びを電子的に記録するペン形や筆形の装置によって実行される。このような装置は、その自体で筆運びを記録して処理するか、ペンからのデータを受信するベースユニットを使用することによって筆運びを記録し処理する。
【0018】
装置は、他の電子機器と通信するための通信設備を含んでいる。実施の一態様として、通信設備は、電話システムに接続するRJ11ジャック、赤外線を利用したようなワイヤレスリンク、あるいは、セルラーモデムのような主知の通信構造である。勿論、他の周知の通信構造を用いても良い。
【0019】
そのような装置の説明を次に行なう。もっとも、ここで説明するのとは異なる他のペン形装置が用いられても良い。実施の一態様として、ペンを基礎とするファクシミリ送信システムは、ペン装置と通信インターフェースとして機能するベースユニットとから構成されている。ペンは、位置情報を送信してベースユニットからそのフィードバックを受信するための送受信器を含んでいる。ペンは、また、ジャイロスコープや赤外線センサ、あるいは送信器のような位置センサと、ユーザによる筆運びを検出するためのストレンゲージや加速度計を含んでいる。位置情報は、筆運び情報として処理され、ファクシミリ送信か、あるいは、実施の一態様としてのペンと他の一態様としてのベースユニットとのいずれかの電子的な互換フォーマットで送信される。したがって、ユーザがペンを用いて紙片にメッセージを書き込むと、このメッセージは指定した宛先にファクシミリ等を通じて送信される。
【0020】
図1は、本発明におけるメッセージをファクシミリ送信するためのペン10の実施の一態様である。実施の一態様として、ペン10の下部には、ストレンゲージ100、インク供給部110、高精度の位置センサ170及びペン先180が設けられており、ペン10の上部にはジャイロスコープ120、バッテリ130、送受信器140及びディスプレイ150が設けられている。ディスプレイ150としては、LED(light emitting diode)やLCD(liquid crystal display)等が用いられている。
【0021】
送受信器140は、ファクシミリ送信を行なう通信リンクを備えたベースユニット160との間で信号の送受信を行なう。実施の一態様として、ペン10の外装は、通信を容易にするための予め決められた方法でユーザが把持できるように設計されている。予め決められた方法は、一通りの方法だけでも良く、また、二以上の方法であっても良い。実施の一態様として、ペン10にベースユニット160が含まれているようなものであっても良い。
【0022】
ファクシミリ送信をするため、ユーザは、用紙にメッセージを書き込むためにペン10を用いる。この際、ペン先180及びインク供給部110は、その者が紙片や他の面に書き込みをする通常の状態と同じような状態でメッセージを書き込む作業の手助けをする。そして、この場合には、ファクシミリ送信をするに際し、用紙190上のメッセージを記録する必要はまったくない。つまり、ファクシミリ送信という目的には、インクの供給は不要である。しかしながら、用紙への書きこみに際してインク供給部110からペン先180にインクを供給することは、記録の控えのためにユーザに送信物のコピーを提供することになる。
【0023】
ユーザがメッセージを書くと、ジャイロスコープ120と高精度位置センサ170とストレンゲージ100とは、一連の筆の運びという形態で書き込まれるメッセージの記録のための筆運びをモニタする。ジャイロスコープ120、高精度位置センサ170及びストレンゲージ100からのデータは、送受信器140を介してベースユニット160に送信される。もっとも、ジャイロスコープ120、高精度位置センサ170及びストレンゲージ100からのデータは、ペン10において処理されて格納されるような態様であっても良い。また、ストレンゲージ100を加速度計に置き換えても良い。
【0024】
手書き認識を行なうペン10及びベースユニット160の他の態様としては、メッセージをあたかもコンピュータやタイプライタでタイプしたかのように送信するようにしても良い。また、実施の一態様として、ディスプレイ150は、認識結果を示してユーザにフィードバックを提供する。
【0025】
送受信器140は、ベースユニット160からの情報をも受信する。この情報は、内部的に用いることができ、あるいは、ディスプレイ150を通じてユーザにフィードバックを提供するように用いることができる。バッテリ130は、ペン10の各部に電力を供給する。
【0026】
図2は、本発明のペン形ファクシミリ送信システムにおける位置検知システムの一態様である。高精度位置センサ170、ジャイロスコープ120及びストレンゲージ100は、マルチプレクサ210に接続されてデータ入力する。制御ユニット220は、マルチプレクサ210を制御する。送受信器140は、マルチプレクサ210の出力を送信出力する。
【0027】
実施の一態様として、ジャイロスコープ120は、固定回転軸上を回転する回転部材である。つまり、その回転部材に何の力も加えられずにその回転部材が加速されない限り、回転部材は固定回転軸上を回転する。ジャイロ姿勢変換器(自由ジャイロ)は、ペン10の3つの姿勢面、つまり、ピッチ、ヨー及びロール(あるいは、x、y、z軸)の出力を提供することができるような2角自由ジャイロとして用いることができる。速度ジャイロは、角加速度(姿勢変化の時間的割合)に比例する出力信号を提供する姿勢速度変換器である。ジャイロスコープ120からのデータは送受信器140によってベースユニット160に送信される。
【0028】
ペン10は、さらに、ペン10の微動作を検出する高精度位置センサ170を備える。高精度センサ170からのデータも、送受信器140によってベースユニット160に送信される。
【0029】
ストレンゲージ100は、圧力がペン先180に加えられたかどうかを検出する。つまり、ユーザが用紙190に書き込みを行なった場合、ストレンゲージ100は、その時の筆圧を記録して筆運びがなされたことを示す。その他、ストレンゲージ100は、筆運びがなされず、位置情報が記録されないことも示す。そして、このような筆運びは、ベースユニット160とペン10とのいずれにおいても処理及び記録可能である。
【0030】
実施にあたっては、ストレンゲージ100に代えて図示しない加速度計を用いても良い。加速度計は、ペン先180の筆圧ではなく、ペン先180の加速度をモニタする。実際のところ、加速度計を用いた場合には、ペン先180を対照物に接触させる必要性をなくすことができ、これにより、筆圧検知の必要性もなくすことができる。実施の一態様として、ユーザによる筆運びがなされたかどうかを検出するために3つのジャイロと3つの加速度計とが用いられている。
【0031】
ポジションセンサシステムの他の態様としては、1998年11月1日提出の米国特許出願番号08/551,535号に“MANUAL ENTRY INTERACTIVE PAPER AND ELECTRONIC DOCUMENT HANDLING AND PROCESSING SYSTEM”として記載された記録装置がある。
【0032】
マルチプレクサ210は、高精度位置センサ170、ジャイロスコープ120またはストレンゲージ100の出力を、制御ユニット220によって生成された信号に対応する送受信器140に選択的に接続している。制御ユニット220は、制御信号を生成し、各センサ100,120,170からのデータが送受信器140によって送信されるように送受信器140に対する各センサ100,120,170の接続を交互に切り替える。送受信器140は、マルチプレクサ210によって出力されたデータを送信する。このデータは、ベースユニット160によって受信されるデータである。
【0033】
高精度位置センサ170、ジャイロスコープ120及びストレンゲージ100からのデータは、メッセージを形成する筆運びを提供するために、ベースユニット160に送信される。ベースユニット160は、筆運びのデータを処理し、ファクシミリ送信されるそのデータを送信するための通信リンクを確立する。
【0034】
図3は、本発明のベースユニット160の一態様である。ベースユニット160は、デマルチプレクサ310に接続する受信器300を備え、デマルチプレクス310は、適当な方法で、受信器300からのチャンネルデータを圧力情報コンディショナ320と位置情報コンディショナ330とのいずれか一方に送信する。圧力情報コンディショナ320及び位置情報コンディショナ330の出力はマルチプレクサ340に接続され、マルチプレクサ340は、プロセッサ350に接続される入力を選択する。制御ユニット380は、デマルチプレクサ310及びマルチプレクサ340を制御するための信号を生成する。メモリ360も、プロセッサ350に接続されている。
【0035】
受信器300は、ペン10における送受信器140から信号を受信する。レシーバ300は、所定の時期にストレンゲージ100からのデータが圧力情報コンディショナ320に送信されてジャイロスコープ120及び高精度位置センサ170からのデータが位置情報コンディショナ330に送信されるように、デマルチプレクサ310によって、圧力情報コンディショナ320と位置情報コンディショナ330とに選択的に接続される。
【0036】
圧力情報コンディショナ320及び位置情報コンディショナ330の出力は、マルチプレクサ340を介して選択的にプロセッサ350に接続される。プロセッサ350は、圧力情報コンディショナ320及び位置情報コンディショナ330からのデータを受信して処理する。プロセッサ350は、受信したデータを処理し、用紙190に書かれたメッセージを指定された宛先に通信リンク370を通じて通信するためのデータストリームを生成する。プロセッサ350は、メモリ360にアクセスし、圧力(筆圧)情報及び位置情報を処理する。
【0037】
このような構成において、ペン10は、ユーザに普通紙や他の面にメッセージを書くことを許容し、これによって、ファクシミリプロトコルを介して指定されたあて先にファクシミリ送信することをユーザに許容する。
【0038】
図3が有効な実施の形態であるとしても、他の実施の形態も許容される。例えば、デマルチプレクサ310、圧力情報コンディショナ320、位置情報コンディションナ330、マルチプレクサ340及び制御ユニット380を受信器300またはプロセッサ350の一部として構成することができる。他の構成例としては、圧力情報コンディショナ320を加速度情報コンディショナに置き換えることも可能である。また、一部の部品を受信器300に含ませ、他の部品をプロセッサ350に含ませることも可能である。さらに、ベースユニット160に手書き認識機能を持たせたり、図3におけるいくつかの構成要素をペン10の一部に含ませるようにしても良い。
【0039】
図4は、ベースユニット160がペン10の動作を検出する赤外線検出器を備えるような別の実施態様の使用を示している。この実施態様において、ペン10は、ジャイロスコープ120、高精度位置センサ170、ストレンゲージ100を含んでいない。つまり、ペン10の位置は、複数個の赤外線放射走査光源によって検出される。
【0040】
ベースユニット160が赤外線検出器を備えている場合、所定位置に位置付けられた2またはそれ以上の外部赤外線放射走査光源は、各赤外線放射走査光源がペン10を照射する角度を計測する三角測量技術を用いてペン10の位置を追跡するために利用される。
【0041】
なお、ペン10は、赤外線送信器を備えていても良く、また、所定位置に配置された2またはそれ以上の外部走査受信器は三角測量によってペン10の位置を追跡するように用いられていても良い。
【0042】
図4は、3つの外部位置401,411,421を用いる赤外線追跡システムの幾何学的配列を示す。各外部位置401,411,421は、それぞれ各外部位置401,411,421に関連する検出走査ビーム(受信または送信)402,412,422が割り当てられている。影になった領域430は、ビームの交点を示し、ペン10の位置に対応する。
[ファクシミリ電文の送信]
図5は、本発明のペン形ファクシミリシステムのブロック図である。図5に示すように、本発明の手順としては、ペンの動作を筆運びという表現形式に翻訳することから始まる(ブロック501)。次いで、筆運びが最近のアクティブなテンプレートと比較される(ブロック502)。そのような比較過程は、図7に関連して以下に説明される。
【0043】
筆運びは、後に、通信リンクが確立されて送信のために筆運びがラスタ形式化されるときまで(ブロック504)、格納されている(ブロック503)。本発明のシステムは、通信グリッド(例えば、ワイヤレス、セルラ、RJ11等)に通信接続を試みる。そして、接続されたなら、システムは、送信先とのファクシミリリンク(あるいは、Eメールや他の通信リンク)の確立を試みる。実施の一態様として、セントラルサービスがペンの仲介役(あるいは、デリバリーエージェント)として動作する。この場合、ペンはサービスに接続してデータをダウンロードし、メッセージを適宜転送する。
【0044】
一旦、通信リンクが確立されたならば、筆運びをラスタ形式化したものが生成される。各ラスタラインに対し、本発明では、筆運びによるラインがラスタラインを横切っていないかどうかをチェックし、横切っている部分のピクセルを黒、横切っていない部分のピクセルを白とする。もっとも、ラスタ形式化は、本発明にとって必須というわけではない。
【0045】
このような過程を経て、ブロック505に示すように、送信先にファクシミリ送信や他の電子的なリンクまたはサーバへの送信がなされる。
【0046】
筆運びがエンコードされる前に、ユーザによって初期化コマンドが発行される。実施の一形態として、初期化コマンドとしては、ユーザがペンを用いて行うメッセージが続くことを示唆するようなテンプレートのジェスチャーを用いることができる。テンプレートのジェスチャーは、標準的なテンプレートマッチングや他のパターン認識技術を用いてペンにより認識させることが可能である。実施の一形態として、テンプレートジェスチャーは、「TO:」と書きこんだり、所定の図形を描画したりするような標準的な形式であってもよく、また、個々のユーザに適合するか個々のユーザが練習して体得するような時空上のジェスチャーであっても良い。実施の一形態として、認識がなされたならば、システムは、メッセージモードに入ることを知らせるために、ビープオンのような音響やライトの点灯・点滅のような他のフィードバックによって応対する。
【0047】
初期化コマンドが提供された後は、受取人や送信先が特定される。送信先は、名前のテンプレートや名前に番号を付加したテンプレートや番号だけのテンプレートによって特定することができる。実施の一形態として、名前及び番号が特定された場合、システムは、名前を将来のテンプレートマッチングのために格納する。数字はキャラクタ認識によって認識することができ、そのボキャブラリーをコードすることもたやすい。もしもペンシステムが小さなCCDを備えるならば、受取人は、住所録中の適当な入力対象をスキャンすることによって容易に特定することができる。
【0048】
もっとも、受取人や送信先は、後に特定することが可能であり、さらに、キャラクタや枠などのような他のテンプレートで区切ることも可能であることに留意されたい。
【0049】
受取人を特定した後は、筆運びによってメッセージが作成される。実施の一態様として、「終了」というテンプレートがマッチされるまで、筆運びはメッセージとして記録される。筆記領域を節約するために、例えば振動モード率のような筆運びのコンパクトな表現を用いることができる。また、筆運びをY座標によって処理し、将来のラスタ形式化を支援することもできる。
【0050】
ペンには、ペンの動作の一部または全部に関するフィードバックをユーザに提供するための手段、例えば、ビープオンを鳴らすフィードバックビープやLCD等の光表示器、合成音声発生器等を設けることができる。動作確認をしたい場合、ユーザには、「OK」とか「X‘s」というようなチェックマーク、応答を示唆する他の表現等が提供されるようにしても良い。
【0051】
さらに、ペンは電話やファクシミリに接続することができる。ユーザは、まず送信先の番号をダイヤルし、続いて、メッセージを各過程に入る。この方法によれば、初期化コマンドや送信先番号等を認識しなければならないような煩雑さが省略される。
【0052】
ユーザは、メッセージ等すべての記入事項の書き込みを済ませたならば、メッセージのファクシミリ送信を望む。ペンがメッセージを構成する筆運びを記憶していると想定すると、ユーザは、ファクシミリコマンドや格納されているメッセージの特定によって格納されているメッセージをファクシミリ送信することができる。例えば、ユーザは、各ページの開始位置に独特の番号を書き込むことができる。この番号は、続いて起こるファクシミリコマンドやファクシミリ送信のためのテンプレートとして供される。
【0053】
図6は、ペン形ファクシミリシステムてのメッセージのファクシミリ送信処理の流れを示すフローチャートである。処理は、電源スイッチやリセットスイッチ、あるいは適当なコマンドを通じてペン10に電力供給がなされることによって完了するブロック600によって開始する。ペン10は、ユーザが触れたことによって電源が投入されるような構成であっても良く、また、特定の発生コマンドを認識することによって電源が投入されるような構成であっても良い。
【0054】
ペン10は、ファクシミリ送信を開始するコマンドがブロック610での入力を認識するまでの間、待機状態かコマンドモードに留まる。実施の一態様によれば、「TO:」というフレーズは、ファクシミリ送信処理を開始するコマンドである。加えて、ユーザには、コマンド認識を支援するために、コマンドを示す文字を枠で囲んだり他の図形で囲んだりするよう要求することができる。勿論、「TO:」に代えて、「送信」とか「FAX」というような他のコマンドを用いても良い。さらに、ペン10にボタンやスイッチ、その他の手動操作構造(すべて図示せず)を設け、これらを操作することでファクシミリ送信の開始を指示するようにしても良い。
【0055】
ブロック620では、ペン形ファクシミリ送信システムは、ユーザによるメッセージを受領する受取人に関する情報の書き込みに待機している。この情報としては、名前、ファクシミリ番号、あるいは他の関連情報等が用いられる。例えば、ユーザは、
ジョー@555−1234
というように受取人情報を書けば良い。
【0056】
受取人情報が提供されたなら、ペン形ファクシミリ送信システムはファクシミリ通信可能となり、メッセージを書き込むことができる。加えて、ペン形ファクシミリ送信システムには、ユーザが受取人情報を直接書くのではなく、「4」のような番号や他のシンボルや連続するシンボル(例えば、文字、数字、その他)を書くことで、指定された受取人に対応する受取人情報を呼び出すようなスピードダイヤル機能を持たせることもできる。
【0057】
要求された受取人情報が用意されたなら、ペン形ファクシミリ送信システムは、ブロック630において、有効な受取人情報の受け取りをユーザにフィードバックする。この処理は、例えば、ディスプレイ150の発行やディスプレイ150におけるメッセージ表示、あるいは、ビープオンや音声案内等によって完了する。あるいは、ユーザは、ペン形ファクシミリ送信システムの一部である例えば時計等のような装置を持ち、この時計にメッセージを表示させたりビープオンを鳴らさせたりしても良い。もっとも、すべての実施態様においてユーザフィードバックが必要なわけではない。
【0058】
ペン形ファクシミリ送信システムは、ブロック640において、メッセージの作成が完了したことを示す「終了」コマンドを待つ。この間、ユーザは、紙片や他の記載面に送信されるメッセージを書く。「TO:」コマンドと「終了」コマンドとの間においてユーザによってなされる筆運びは、送信するメッセージを構成する。この間、「TO:」という筆運びは、コマンドとしては扱われず、メッセージ本文として扱われる。「終了」コマンドは、例えば、このコマンドを囲む枠を書くことで「終了」コマンドであると認識させるようにすれば、メッセージの本文中で終了という文字を書く必要がある場合に便利である。つまり、枠で囲んだ終了は「終了」コマンドを意味し、枠なしの終了はメッセージ本文の一部を意味する認識されることになる。この場合、メッセージの書きこみ終了を示すために、「終了」と書くべき位置に「停止」、「FAX」、「送信」というようなたのコマンドを書くようにしても良い。あるいは、図示しないボタンをクリックやダブルクリックしてメッセージの完了を示すようにしても良い。勿論、ペンは同様の機能を果たすための他の手動操作される機構を含んでいても良い。
【0059】
もっとも、メッセージの開始及び停止のコマンドとして、文字は必ずしも必要ではない。同様の目的で図形やシンボル等を用いても良い。
【0060】
「終了」コマンドに先立ち、ペン形ファクシミリ送信システムは、「キャンセル」コマンドのための筆運びがなされたかどうかをモニタする。「キャンセル」コマンドは、ユーザがメッセージの作成の放棄を示すコマンドである。これは、ブロック650において示される。「TO:」コマンドや「終了」コマンドと同様に、「キャンセル」は、「NO」や「中止」、「取り消し」等のようなコマンド、あるいは、ペンが備える機構の手動操作に置き換え可能である。
【0061】
「終了」コマンドも「キャンセル」コマンドも認識されない場合には、ペン形ファクシミリ送信システムは、ブロック660におけるユーザの筆運びに基づくメッセージ情報を格納して処理する。このような格納及び処理は、ペン10やベースユニット160、あるいはそれらの構成要素の組み合わせによって完了する。
【0062】
ペン形ファクシミリ送信システムには、スピードダイヤル機能と多くの点で共通する格納メッセージ機能を設けても良い。この格納メッセージ機能というのは、指定された受取人に送信されるメッセージの番号やコードの書き込みユーザに提供する機能である。このような機能によって、ペン10とベースユニット160とのいずれか一方のメモリから所望のメッセージを検索し、メッセージの作成に際してこれを利用する機能である。これにより、ユーザは、メッセージを始めから終わりまで一から完成させる必要がなくなり、メッセージの作成にかかる労力が大幅に低減される。
【0063】
「終了」やこれに均等なコマンドが認識されたなら、ブロック670において通信リンクが確立される。これは、例えば、ペン10やベースユニット160における無線モデムを介したり、電話線や電子メールインターフェースやデータ通信可能な他の通信リンクを介したりすることで完了する。
【0064】
すると、メッセージは、ブロック680において、通信リンクを介して送信される。メッセージが送信され、あるいは、メッセージの送信が不可能であることが検出された場合、ブロック690においてユーザにそのフィードバックが提供される。このフィードバックは、ブロック630での受取人情報の受信処理と同様方法や他の方法によって提供される。メッセージが送信されるか送信中止されるかした後は、ペン形ファクシミリ送信システムは、「TO:」やこれに均等なコマンドの入力を待機するブロック600にリターンする。
【0065】
図7は、開始コマンド「TO:」及び終了コマンド「終了」を含むファクシミリメッセージ文書の一例を示す。
【0066】
図8は、ペンがファクシミリ送信システムの使用手順を示すフローチャートである。ステップ800において、ユーザはペン形ファクシミリシステムを起動する。これは、システムに電力供給を行なうか、ペン10とベースユニット160とのいずれかに設けられた図示しないボタンをクリックするかによって行なわれる。あるいは、ユーザがペン10に触れるか、あるいは、ユーザが所定の音声コマンドを発生するかによってシステムに電力供給がなされるようにしても良い。
【0067】
ペン形ファクシミリ送信システムが初期化された後は、ユーザは、「TO:」かこれと均等なコマンドを書く(ステップ820)。そして、ユーザは、名前や番号のような必要な受取人情報を書く(ステップ830)。ステップ830で受取人情報の入力確認が取れたらならば、ファクシミリ送信するメッセージを書く準備が整う。
【0068】
ステップ840で、ユーザはファクシミリ送信するメッセージを書く。ステップ800から840までのいかなる時期においても、ユーザは、「キャンセル」かこれに均等なコマンドを書き、メッセージの送信を中止することができる。単純化のため、中止処理は図8のフローチャートから省略してある。
【0069】
送信するメッセージの作成が完了した後は、ユーザは、「終了」かこれに均等なコマンドを書くことになる(ステップ850)。このような「終了」かこれに均等なコマンドの書き込みは、ペン形ファクシミリシステムに、メッセージの作成が終了し、送信用意が整ったことを示す。実施の一態様として、ペン形ファクシミリ送信システムは、メッセージが成功裏に送信されたかどうかをを示すフィードバックをユーザに提供するようにしても良い。もっとも、この場合には、他の活動を行なう前にこのようなフィードバックにユーザを待機させるような処理は望ましくない。他の実施の態様として、フィードバックは提供されなくても良い。
【0070】
図9は、本発明のペン形ファクシミリ装置における筆運び処理の一例を示すフローチャートである。図9の実施の態様では、ユーザの筆運びは曲線として格納され、MINY(「最小」)及びMAXY(「最大」)という2つのリストによって索引される。筆運びにおけるy方向または垂直方向の最小値は、「最小」値の筆運びとして格納される。筆運びにおけるy方向または垂直方向の最大値は、「最大」値の筆運びとして格納される。もっとも、このような手法ではなく、手書き文字認識のような他の文字認識処理を用いても良い。
【0071】
ステップ900において処理が開始する。この処理は、例えば、ユーザが「終了」コマンドを書いたり、ペン10において図示しないボタンをダブルクリックすることによって起動する。筆運びによる場合には、「終了」コマンドが書かれてからファクシミリ送信が行なわれるまでの処理に要する時間を短縮する。そして、ステップ905では、筆運びのデータを処理するために使用される変数が初期化される。したがって、IL、IH及びLINEが0に設定される。
【0072】
ステップ910では、ラインバッファの変数がクリアされ、これによって新しいラインの処理が可能となる。このライン変数は、次のラインが処理され始める際にインクメントされ、変数ilがILに設定され、完全に処理されていない最初の筆運びが処理される。反復処理の最初においては、il及びILは0に設定される。しかしながら、筆運び値が最大のyのラインに達すると、変数ILはインクリメントされる。ILをインクリメントする処理は、筆運びの処理をスキップする効果をもたらす。したがって、処理能力を、筆運びにおけるすべての部分ではなく、残りの筆運びに割り当てることができる。
【0073】
ステップ915では、一時的な変数sが処理される筆運びに割り当てられる。したがって、反復処理の最初においては、sは最も低いY値を持つ筆運びを示す。
【0074】
ステップ920において、sによって示される選択された筆運びは、筆運びの最小Y値が処理されるラインよりも小さいかあるいは同等であるかを検出するために評価される。もしも否であれば、ラインバッファ変数が送信される。したがって、最小Y値を伴う筆運びが処理されるラインと交差しないならば、いかなる筆運びもラインと交差することはなく、このような情報がラインバッファに送信される。
【0075】
ステップ930は、ステップ920の結果が肯定的である場合にのみ実行される。ステップ930では、sによって示される筆運びの最大Y値が処理されるラインよりも大きいかどうかが決定される。もしもそうであるなら、筆運びのストロークがそのラインや場合によっては他のラインを横切ることになり、筆運び処理は完了しないことになる。もしもその結果が否定的であるなら、筆運び処理が完了し、ILをインクリメントすることができる。
【0076】
もしも、筆運びの最大Y値が処理されるラインよりも大きいとすると、ステップ940では、sによって示される筆運びと処理されるラインとが交差しているとしてXか設定される。変数Xは、筆運びの水平位置に対応する。筆運びのY値に対応するラインバッファのエントリがXに割り当てられ、筆運びの水平位置が指示される。したがって、2つの次元、つまり、X及びYまたは水平及び垂直の次元における筆運びの位置がラインバッファに格納される。
【0077】
ステップ955では、変数ilがインクリメントされ、次の筆運びが「最小」値に索引される。したがって、最小Y値を持つ他の筆運びが処理されているラインよりも小さい場合には、その筆運びが処理される。もしもそうでないなら、現在のラインと交差する次の筆運びが処理される。これは、上述したように、ステップ920及び925において決定される。
【0078】
ilがインクリメントされた後、ステップ960で処理された筆運び数と比較される。もしも、筆運び数が多いようなら、すべての筆運びは処理され、ステップ925においてラインバッファが送信される。もしも筆運び数が多くないなら、「最小」における次の筆運びのために、ステップ915から955が繰り返される。
【0079】
もしも、ステップ930において、筆運びの最大Y値が現在のラインよりも大きくないと判定されたなら、筆運びは完全に処理され、ステップ950でILはインクリメントされる。したがって、ステップ910が後に実行された場合、ilはILの新たな値と同一に設定され、処理がすべて終了していないとして筆運び処理が続行する。
【0080】
ラインバッファが送信された後、ペン形ファクシミリ送信システムは、現在のラインがページライン数よりも大きいかどうかを判定する(ステップ965)。もしもそうであるなら、ステップ975で終了処理が行なわれる。
【0081】
もしも現在のラインがページのライン数よりも多くはないとすると、システムは、ILが筆運び数よりも多いかどうかを判定する。もしもそうであるなら、すべての処理がすでに処理されていることになるので、ステップ975において終了処理が行なわれる。もしもそうでないなら、ステップ910から970において、次のラインの処理が実行される。
【0082】
したがって、本発明は、数多くの有利な特長を備えている。第一に、本発明は、紙片に手書きで何かを書く通常の態様でメッセージを作成することをユーザに許容することができる。本発明は、また、新しい装置やアプリケーションプログラムの操作・処理方法についてユーザに学ばせることを強いない。
[テンプレートの認識における留意点]
ペンシステムによる認識が必要なシンボルは、「開始」コマンド、「終了」コマンド、及び送信先の記述というごく僅かなものである。そのようなコマンドのためには、簡単なテンプレートのマッチングだけで充分である。モードに依存し、システムは特定のテンプレートを探すために筆運びを簡単にモニタする。そして、テンプレートは容易に指定され、メッセージから簡単に区別される。例えば、「TO:」は、水平方向の筆運びと、続いく垂直方向の筆運びと、続く円形の筆運びと、さらに続く2つ並んだ点とによって指定される。一対の発振器システムのようにモデルが筆運びを行うシステムにあっては、それらの表現はより単純である。認識率を更に向上させるためには、全てのコマンドを枠で囲み、枠で囲まれた部分がコマンドであると認識するようにすれば良い。
【0083】
送信先の認識についても、番号や名前に対するテンプレートマッチングが用いられる。入力された名前は、ユーザによって既にエントリーされている名前と照合される。処理の多くは手書きデジタル認識に費やされ、現在のシステムからテンプレートが使用される。もしもペンがCCDを含むのなら、送信先は印刷された住所録からバーコードをスキャンすることによって指定することができる。
【0084】
勿論、ニューラルネットワークや隠れモルコフモデル等のような他のパターン認識技術を用いることもできる。さらに、システムを特定のユーザに適合させるようにしても良い。いずれにしても、少ないボキャブラリでも強い文脈依存性があれば、たとえ単純な認識技術しか用いないとしても、きわめて良好な認識率を導き出す。
【0085】
もしもペンが電話に直接接続されているのなら、言うまでもないことだが、認識は不要である。
【0086】
本発明は、用紙のスキャナが不要であるという点で従来からのファクシミリ装置とは異なる。しかも、本発明によれば、メッセージさえ書かれたならば、ファクシミリ送信を行うために、ダイヤルや用紙搬送、その他の動作の実行等が不要となる。さらに、通信リンクが確立されるまでの間は、送信すべきファクシミリ送信内容はキューの中に格納された状態となっている。筆運びの表現によるデータサイズはラスタ表現によるデータサイズよりもよりコンパクトであり、したがって、ファクシミリ送信内容の格納のために要求されるメモリサイズも小さくて済む。加えて、本来的にコンパクトであるペンは、用紙や筆記面を著しくコンパクトにすることができる。
【0087】
本発明は、アプリケーションプログラムが不要であり、また、ユーザはウインドウズシステムを操作したりボタンをクリックしたりすることから開放されている点で、パーソナルコンピュータ(PC)やパーソナルデジタルアシスタント(PDA)とも異なる。また、一般的な手書き認識不要であり、より簡単なテンプレートマッチングだけが要求されるにすぎない。そして、メッセージ情報は、筆運び情報によることからコンパクトにメモリ格納され、PCやPDAに対して本発明では軽くラスタ形式にすることが可能である。また、本発明では様々な面を使用することができ、書き込み領域もスクリーンサイズに制限されることがない。そして、ユーザがメッセージを書くことによってハードコピーの作成が可能である。
【0088】
加えて、標準的な手書きファクシミリに対し、本発明は、追加機能を付加することができる。例えば、現在ある書類や対象物をファクシミリ送信しようとする場合、ペンでそれらをトレースすることによってファクシミリ送信をすることができる。また、通常のファクシミリ送信では体を成さないような単純なメッセージを送信することもできる。さらに、ある者が帰宅後の覚え書きとしてメッセージをなぐり書きしておくことで、そのメッセージをその者のデスクトップ上に待たせておくようなこともできる。
【0089】
ペンと同じように携帯性があり、紙に書き込むのと同じように効率的である本システムは、さらに、書いた内容を印刷するというような追加の機能を持たせることが可能である。
【0090】
以上の記述において、本発明は、特定の実施の態様として述べられている。しかしながら、本発明の本質及び範囲から逸脱することがない範囲で加えられる各種の変形や変更が許容されることは言うまでもないことである。したがって、発明の詳細な説明や図面の記載内容は、本発明を制限するものとしてではなく、本発明を参照するために用いられるべきである。
【0091】
【発明の効果】
本発明は、筆運び情報を送信するペンによってメッセージが書かれるメッセージのファクシミリ送信装置において、ペンの位置をモニタすることによってペンの筆運びを検知する手段と、ペンの筆運びに対応する位置情報を送信する手段と、位置情報に対応するペンの筆運びによって指定された意図する受取人に向けてペンの筆運びからなるメッセージをファクシミリ送信する手段と、を備えるので、位置情報によって特定されるペンの筆運びがファクシミリ送信の一部として送信されるため、従来のファクシミリ送信に要求される手順の一部を実行するだけで、かつ、わざわざファクシミリ装置のもとに出向くことなく、ファクシミリ送信を行なうことができる。また、検知する手段は、初期化手順を検知する手段と、メッセージの受け手の同定に対応する相手情報を検知する手段と、メッセージに対応するペンの筆運びをラスタ処理する手段と、終了手順を検知する手段と、終了手順に対応する情報を送信する手段と、を備えるので、初期化、受取人の同定、筆運び処理、筆運び処理の終了及び情報送信という各過程を経てペンの筆運びを容易かつ効率的に検知することができる。特に、請求項1記載の発明では、ペンの筆運びをラスタ処理する手段により、筆運びのラスタ処理を効率よく行うことができる。
【0092】
請求項2記載の発明は、検知する手段は、ペンのピッチとヨーとロールとをモニタすることによるペンの位置を検出する手段と、ペンのペン先の筆圧を検出する手段と、を備えるので、検出されたペンのピッチとヨーとロールとに関する情報及びペン先の筆圧情報をより正確な筆運びの認識に供することができる。
【0093】
請求項3記載の発明は、検知する手段は、赤外線放射走査光源を介してペンの位置を検出する手段と、ペンのペン先の筆圧を検出する手段と、を備えるので、検出されたペンの位置情報及びペン先の筆圧情報をより正確な筆運びの認識に供することができる。
【0094】
請求項4記載の発明は、検知する手段は、ペンのピッチとヨーとロールとをモニタすることによるペンの位置を検出する手段と、ペンのペン先の加速度を検出する手段と、を備えるので、モニタされたペンのピッチとヨーとロールとに関する情報及び検出されたペン先の加速度情報をより正確な筆運びの認識に供することができる。
【0095】
請求項5記載の発明は、検知する手段は、赤外線放射走査光源を介してペンの位置を検出する過程と、ペンのペン先の加速度を検出する過程と、を備えるので、検出されたペンの位置情報及び検出されたペン先の加速度情報をより正確な筆運びの認識に供することができる。
【図面の簡単な説明】
【図1】 本発明におけるペン形ファクシミリ装置とベースユニットとの一態様を示す模式図である。
【図2】 本発明のペン形ファクシミリシステムにおける位置検知システムの一態様を示すブロック図である。
【図3】 本発明におけるベースユニットの一態様を示すブロック図である。
【図4】 本発明のペン形ファクシミリシステムにおける赤外線追跡システムの一態様における外部ソースとその守備範囲を示す模式図である。
【図5】 本発明のペン形ファクシミリシステムにおけるファクシミリ処理の概略を示すフローチャートである。
【図6】 本発明のペン形ファクシミリシステムにおけるメッセージのファクシミリ送信の一態様を示すフローチャートである。
【図7】 ファクシミリ送信のための手書き内容を例示する平面図である。
【図8】 本発明におけるペン形ファクシミリシステムの使用の一態様を示すフローチャートである。
【図9】 本発明におけるペン形ファクシミリ装置の筆運び中の処理の一態様を示すフローチャートである。
【符号の説明】
10 ペン
100 ストレンゲージ
120 ジャイロスコープ
140 送信器(送受信器)
150 ディスプレイ
160 ベースユニット
170 位置センサ(高精度位置センサ)
180 ペン先
300 受信器
350 プロセッサ
360 メモリ
370 通信インターフェース(通信リンク)

Claims (5)

  1. 筆運び情報を送信するペンによってメッセージが書かれるメッセージのファクシミリ送信装置において、
    前記ペンの位置をモニタすることによって前記ペンの筆運びを検知する手段と、
    前記ペンの筆運びに対応する位置情報を送信する手段と、
    前記位置情報に対応する前記ペンの筆運びによって指定された意図する受取人に向けて前記ペンの筆運びからなるメッセージをファクシミリ送信する手段と、
    を備え、
    前記検知する手段は、初期化手順を検知する手段と、メッセージの受け手の同定に対応する相手情報を検知する手段と、前記メッセージに対応する前記ペンの筆運びをラスタ処理する手段と、終了手順を検知する手段と、前記終了手順に対応する情報を送信する手段とを備え、
    前記ペンの筆運びをラスタ処理する手段は、筆運びにおけるy方向又は垂直方向の最大値を第一のリストに格納し、筆運びにおけるy方向又は垂直方向の最小値を第二のリストに格納し、筆運び毎に一時的な変数を割り当てて筆運びのラスタ処理を行い、該一時的な変数によって示される筆運びについての筆運び値の最小値が、当該処理されるラインよりも小さいかあるいは同等であるかを判断し、小さいかあるいは同等である場合は、該一時的な変数によって示される筆運びについての筆運び値の最大値が、当該処理されるラインより大きいかどうか判断し、大きい場合は、前記一時的な変数の筆運びと処理されるラインとが交差しているとして、該筆運びの水平方向に対応する変数が設定され、x方向およびy方向、または水平及び垂直の次元における筆運びの位置をラインバッファに格納し、あるラインについてラスタ処理を始めて筆運び値が最大のyのラインに達すると、変数をインクリメントして筆運びラスタ処理をスキップする
    ことを特徴とするファクシミリ送信装置。
  2. 前記検知する手段は、
    前記ペンのピッチとヨーとロールとをモニタすることによる前記ペンの位置を検出する手段と、
    前記ペンのペン先の筆圧を検出する手段と、
    を備える請求項1記載のファクシミリ送信装置。
  3. 前記検知する手段は、
    赤外線放射走査光源を介して前記ペンの位置を検出する手段と、
    前記ペンのペン先の筆圧を検出する手段と、
    を備える請求項1記載のファクシミリ送信装置。
  4. 前記検知する手段は、
    前記ペンのピッチとヨーとロールとをモニタすることによる前記ペンの位置を検出する手段と、
    前記ペンのペン先の加速度を検出する手段と、
    を備える請求項1記載のファクシミリ送信装置。
  5. 前記検知する手段は、
    赤外線放射走査光源を介して前記ペンの位置を検出する過程と、
    前記ペンのペン先の加速度を検出する過程と、
    を備える請求項1記載のファクシミリ送信装置。
JP27865598A 1997-09-30 1998-09-30 ファクシミリ送信装置 Expired - Fee Related JP3993706B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US08/940,832 US6201903B1 (en) 1997-09-30 1997-09-30 Method and apparatus for pen-based faxing
US08/940832 1997-09-30

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2005030916A Division JP2005216318A (ja) 1997-09-30 2005-02-07 ペン型装置および情報処理方法

Publications (2)

Publication Number Publication Date
JPH11164074A JPH11164074A (ja) 1999-06-18
JP3993706B2 true JP3993706B2 (ja) 2007-10-17

Family

ID=25475503

Family Applications (2)

Application Number Title Priority Date Filing Date
JP27865598A Expired - Fee Related JP3993706B2 (ja) 1997-09-30 1998-09-30 ファクシミリ送信装置
JP2005030916A Pending JP2005216318A (ja) 1997-09-30 2005-02-07 ペン型装置および情報処理方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2005030916A Pending JP2005216318A (ja) 1997-09-30 2005-02-07 ペン型装置および情報処理方法

Country Status (2)

Country Link
US (1) US6201903B1 (ja)
JP (2) JP3993706B2 (ja)

Families Citing this family (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AUPQ055999A0 (en) 1999-05-25 1999-06-17 Silverbrook Research Pty Ltd A method and apparatus (npage01)
US8352400B2 (en) 1991-12-23 2013-01-08 Hoffberg Steven M Adaptive pattern recognition based controller apparatus and method and human-factored interface therefore
US7904187B2 (en) 1999-02-01 2011-03-08 Hoffberg Steven M Internet appliance system and method
US6792165B1 (en) * 1999-05-25 2004-09-14 Silverbrook Research Pty Ltd Sensing device
US7106888B1 (en) * 1999-05-25 2006-09-12 Silverbrook Research Pty Ltd Signature capture via interface surface
AU2003254713B2 (en) * 1999-05-25 2004-06-10 Silverbrook Research Pty Ltd Sensing device for sensing coded marks
US6816274B1 (en) * 1999-05-25 2004-11-09 Silverbrook Research Pty Ltd Method and system for composition and delivery of electronic mail
US6737591B1 (en) * 1999-05-25 2004-05-18 Silverbrook Research Pty Ltd Orientation sensing device
US7105753B1 (en) * 1999-05-25 2006-09-12 Silverbrook Research Pty Ltd Orientation sensing device
US7175079B1 (en) * 1999-05-25 2007-02-13 Silverbrook Research Pty Ltd Method and system for online purchasing
US7079712B1 (en) 1999-05-25 2006-07-18 Silverbrook Research Pty Ltd Method and system for providing information in a document
US7068382B1 (en) * 1999-05-25 2006-06-27 Silverbrook Research Pty Ltd Interactive printer provider
EP1200912B1 (en) * 1999-06-30 2008-08-13 Silverbrook Research Pty. Limited Method and system for user registration
US7295193B2 (en) * 1999-12-23 2007-11-13 Anoto Ab Written command
US6864880B2 (en) * 2000-03-21 2005-03-08 Anoto Ab Device and method for communication
US7657128B2 (en) * 2000-05-23 2010-02-02 Silverbrook Research Pty Ltd Optical force sensor
US6831632B2 (en) * 2001-04-09 2004-12-14 I. C. + Technologies Ltd. Apparatus and methods for hand motion tracking and handwriting recognition
US7916124B1 (en) 2001-06-20 2011-03-29 Leapfrog Enterprises, Inc. Interactive apparatus using print media
HUP0103350A2 (hu) * 2001-08-17 2003-04-28 Péter Ladányi Fokozott biztonságú elektronikus aláírás létrehozására alkalmas elektronikus íróeszköz
US6965862B2 (en) * 2002-04-11 2005-11-15 Carroll King Schuller Reading machine
US6915281B2 (en) * 2002-06-30 2005-07-05 Pitney Bowes Inc. Systems and methods using a digital pen for funds accounting devices and postage meters
US7082444B2 (en) * 2002-09-30 2006-07-25 Pitney Bowes Inc. Method and system for identifying a form version
US7167586B2 (en) * 2002-09-30 2007-01-23 Pitney Bowes Inc. Method and system for remote form completion
US7417773B2 (en) * 2002-09-30 2008-08-26 Pitney Bowes Inc. Method and system for creating and sending a facsimile using a digital pen
US7397468B2 (en) * 2002-09-30 2008-07-08 Pitney Bowes Inc. Method and system for creating a document having metadata
US7343042B2 (en) * 2002-09-30 2008-03-11 Pitney Bowes Inc. Method and system for identifying a paper form using a digital pen
US20040229195A1 (en) * 2003-03-18 2004-11-18 Leapfrog Enterprises, Inc. Scanning apparatus
GB2405959A (en) * 2003-09-10 2005-03-16 Hewlett Packard Development Co A digital pen and paper system
US20050142263A1 (en) * 2003-12-30 2005-06-30 Lauren Keilbach Fish food flakes
US8442331B2 (en) 2004-02-15 2013-05-14 Google Inc. Capturing text from rendered documents using supplemental information
US7707039B2 (en) 2004-02-15 2010-04-27 Exbiblio B.V. Automatic modification of web pages
US10635723B2 (en) 2004-02-15 2020-04-28 Google Llc Search engines and systems with handheld document data capture devices
US7812860B2 (en) 2004-04-01 2010-10-12 Exbiblio B.V. Handheld device for capturing text from both a document printed on paper and a document displayed on a dynamic display device
US8799303B2 (en) 2004-02-15 2014-08-05 Google Inc. Establishing an interactive environment for rendered documents
US20060041484A1 (en) * 2004-04-01 2006-02-23 King Martin T Methods and systems for initiating application processes by data capture from rendered documents
US20060078866A1 (en) * 2004-03-17 2006-04-13 James Marggraff System and method for identifying termination of data entry
US7853193B2 (en) 2004-03-17 2010-12-14 Leapfrog Enterprises, Inc. Method and device for audibly instructing a user to interact with a function
US20060066591A1 (en) * 2004-03-17 2006-03-30 James Marggraff Method and system for implementing a user interface for a device through recognized text and bounded areas
US7831933B2 (en) 2004-03-17 2010-11-09 Leapfrog Enterprises, Inc. Method and system for implementing a user interface for a device employing written graphical elements
US20060033725A1 (en) * 2004-06-03 2006-02-16 Leapfrog Enterprises, Inc. User created interactive interface
US7453447B2 (en) * 2004-03-17 2008-11-18 Leapfrog Enterprises, Inc. Interactive apparatus with recording and playback capability usable with encoded writing medium
US20060077184A1 (en) * 2004-03-17 2006-04-13 James Marggraff Methods and devices for retrieving and using information stored as a pattern on a surface
US20080313172A1 (en) 2004-12-03 2008-12-18 King Martin T Determining actions involving captured information and electronic content associated with rendered documents
US8081849B2 (en) 2004-12-03 2011-12-20 Google Inc. Portable scanning and memory device
US8793162B2 (en) 2004-04-01 2014-07-29 Google Inc. Adding information or functionality to a rendered document via association with an electronic counterpart
US9116890B2 (en) 2004-04-01 2015-08-25 Google Inc. Triggering actions in response to optically or acoustically capturing keywords from a rendered document
WO2008028674A2 (en) * 2006-09-08 2008-03-13 Exbiblio B.V. Optical scanners, such as hand-held optical scanners
US7894670B2 (en) 2004-04-01 2011-02-22 Exbiblio B.V. Triggering actions in response to optically or acoustically capturing keywords from a rendered document
US9143638B2 (en) 2004-04-01 2015-09-22 Google Inc. Data capture from rendered documents using handheld device
US20060081714A1 (en) 2004-08-23 2006-04-20 King Martin T Portable scanning device
US9008447B2 (en) 2004-04-01 2015-04-14 Google Inc. Method and system for character recognition
US8146156B2 (en) 2004-04-01 2012-03-27 Google Inc. Archive of text captures from rendered documents
US8621349B2 (en) * 2004-04-01 2013-12-31 Google Inc. Publishing techniques for adding value to a rendered document
US20070300142A1 (en) 2005-04-01 2007-12-27 King Martin T Contextual dynamic advertising based upon captured rendered text
US7990556B2 (en) 2004-12-03 2011-08-02 Google Inc. Association of a portable scanner with input/output and storage devices
US8713418B2 (en) 2004-04-12 2014-04-29 Google Inc. Adding value to a rendered document
US8620083B2 (en) 2004-12-03 2013-12-31 Google Inc. Method and system for character recognition
US9460346B2 (en) 2004-04-19 2016-10-04 Google Inc. Handheld device for capturing text from both a document printed on paper and a document displayed on a dynamic display device
US8874504B2 (en) 2004-12-03 2014-10-28 Google Inc. Processing techniques for visual capture data from a rendered document
US8489624B2 (en) 2004-05-17 2013-07-16 Google, Inc. Processing techniques for text capture from a rendered document
SE0401647D0 (sv) * 2004-06-28 2004-06-28 Anoto Ab Coding and decoding of data
US8346620B2 (en) 2004-07-19 2013-01-01 Google Inc. Automatic modification of web pages
US20100092095A1 (en) * 2008-10-14 2010-04-15 Exbiblio B.V. Data gathering in digital and rendered document environments
JP2006134287A (ja) * 2004-10-07 2006-05-25 Matsushita Electric Ind Co Ltd 電子装置
US20110029504A1 (en) * 2004-12-03 2011-02-03 King Martin T Searching and accessing documents on private networks for use with captures from rendered documents
US20110075228A1 (en) * 2004-12-03 2011-03-31 King Martin T Scanner having connected and unconnected operational behaviors
KR101236809B1 (ko) * 2005-06-17 2013-02-25 아노토 아베 위치 및 정보 코드를 결합하는 방법 및 시스템
JP2007034443A (ja) * 2005-07-22 2007-02-08 Konica Minolta Business Technologies Inc 画像形成システム、画像形成装置及び画像形成処理方法
US7922099B1 (en) 2005-07-29 2011-04-12 Leapfrog Enterprises, Inc. System and method for associating content with an image bearing surface
JP2007228554A (ja) 2006-01-26 2007-09-06 Ricoh Co Ltd データ通信装置、データ通信システム、及び、データ通信方法
US20110096174A1 (en) * 2006-02-28 2011-04-28 King Martin T Accessing resources based on capturing information from a rendered document
US8261967B1 (en) 2006-07-19 2012-09-11 Leapfrog Enterprises, Inc. Techniques for interactively coupling electronic content with printed media
JP5024007B2 (ja) * 2007-12-06 2012-09-12 富士ゼロックス株式会社 文書管理システム、文書管理装置およびプログラム
US8944824B2 (en) * 2008-04-03 2015-02-03 Livescribe, Inc. Multi-modal learning system
WO2010096193A2 (en) * 2009-02-18 2010-08-26 Exbiblio B.V. Identifying a document by performing spectral analysis on the contents of the document
US8447066B2 (en) * 2009-03-12 2013-05-21 Google Inc. Performing actions based on capturing information from rendered documents, such as documents under copyright
WO2010105244A2 (en) 2009-03-12 2010-09-16 Exbiblio B.V. Performing actions based on capturing information from rendered documents, such as documents under copyright
JP5290835B2 (ja) * 2009-03-30 2013-09-18 中部電力株式会社 情報送信装置
US9081799B2 (en) 2009-12-04 2015-07-14 Google Inc. Using gestalt information to identify locations in printed information
US9323784B2 (en) 2009-12-09 2016-04-26 Google Inc. Image search using text-based elements within the contents of images

Family Cites Families (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3906444A (en) 1973-10-11 1975-09-16 Stanford Research Inst Special pen and system for handwriting recognition
USRE29765E (en) 1974-03-18 1978-09-19 Sri International Strain gauge transducer system
US3915015A (en) 1974-03-18 1975-10-28 Stanford Research Inst Strain gauge transducer system
US4241409A (en) 1977-12-30 1980-12-23 Nolf Jean Marie Hand held pen-size calculator
US4142175A (en) * 1978-06-12 1979-02-27 International Business Machines Corporation Pressure sensing device and transducer arrangement
US4345239A (en) 1980-06-20 1982-08-17 International Business Machines Corporation Apparatus for determining pen acceleration
US4468694A (en) 1980-12-30 1984-08-28 International Business Machines Corporation Apparatus and method for remote displaying and sensing of information using shadow parallax
US4513437A (en) 1982-06-30 1985-04-23 International Business Machines Corporation Data input pen for Signature Verification
US4545018A (en) 1982-09-01 1985-10-01 Westinghouse Electric Corp. Calibration of automated laser machining apparatus
US4561105A (en) 1983-01-19 1985-12-24 Communication Intelligence Corporation Complex pattern recognition method and system
US4731857A (en) 1984-06-29 1988-03-15 International Business Machines Corporation Recognition system for run-on handwritten characters
US4751741A (en) * 1984-07-19 1988-06-14 Casio Computer Co., Ltd. Pen-type character recognition apparatus
US5226091A (en) 1985-11-05 1993-07-06 Howell David N L Method and apparatus for capturing information in drawing or writing
SE450604B (sv) 1986-04-28 1987-07-06 Eric Rothfjell Forfarande jemte en anordning for signaturverifiering
US4787051A (en) 1986-05-16 1988-11-22 Tektronix, Inc. Inertial mouse system
US4988981B1 (en) 1987-03-17 1999-05-18 Vpl Newco Inc Computer data entry and manipulation apparatus and method
US4806707A (en) 1988-02-12 1989-02-21 Calcomp Inc. 3-Dimensional digitizer pen
US4883926A (en) 1988-04-21 1989-11-28 Hewlett-Packard Company Stylus switch
US5239292A (en) 1988-10-04 1993-08-24 Crosfield Electronics Ltd. Computer graphics system electronically simulating painting on canvas
US5022086A (en) 1988-12-20 1991-06-04 Sri International, Inc. Handwriting apparatus for information collection based on force and position
US5159321A (en) 1989-08-18 1992-10-27 Matsushita Electric Industrial Co., Ltd. Pen-type computer input device
EP0413607A3 (en) 1989-08-18 1991-04-03 Matsushita Electric Industrial Co., Ltd. Pen-type computer input device
JPH0748174B2 (ja) 1989-09-04 1995-05-24 松下電器産業株式会社 ペン型のコンピュータ入力装置
US5440326A (en) 1990-03-21 1995-08-08 Gyration, Inc. Gyroscopic pointer
GB9011183D0 (en) 1990-05-18 1990-07-04 British Aerospace Control devices
US5408382A (en) 1992-01-10 1995-04-18 Norand Corporation Terminal and docking mechanism with open channel members and guide rollers
US5025314A (en) 1990-07-30 1991-06-18 Xerox Corporation Apparatus allowing remote interactive use of a plurality of writing surfaces
US5396265A (en) 1990-09-17 1995-03-07 Massachusetts Institute Of Technology Three-dimensional tactile computer input device
US5181181A (en) 1990-09-27 1993-01-19 Triton Technologies, Inc. Computer apparatus input device for three-dimensional information
US5574804A (en) * 1990-12-21 1996-11-12 Olschafskie; Francis Hand-held scanner
JP2726594B2 (ja) 1991-04-01 1998-03-11 八洲電機株式会社 記憶ペン
US5164585A (en) 1991-09-24 1992-11-17 Daniel Y. T. Chen Stylus/digitizer combination with elongate reflectors and linear CCD
AU2888392A (en) 1991-10-23 1993-05-21 Henry C. Yuen Bar code matrix television calendar
US5247137A (en) 1991-10-25 1993-09-21 Mark Epperson Autonomous computer input device and marking instrument
US5294792A (en) * 1991-12-31 1994-03-15 Texas Instruments Incorporated Writing tip position sensing and processing apparatus
CA2060564C (en) 1992-02-06 1996-05-21 Toru Suzuki Wireless input system for computer
US5477012A (en) 1992-04-03 1995-12-19 Sekendur; Oral F. Optical position determination
US5570109A (en) 1992-05-27 1996-10-29 Apple Computer, Inc. Schedule and to-do list for a pen-based computer system
EP0649549B1 (en) * 1992-07-08 1997-02-12 Smart Pen, Inc. Apparatus and method of imaging written information
US5296871A (en) 1992-07-27 1994-03-22 Paley W Bradford Three-dimensional mouse with tactile feedback
US5526018A (en) 1992-10-02 1996-06-11 Foundation Microsystems, Inc. Stretching scales for computer documents or drawings
WO1994009447A1 (en) 1992-10-13 1994-04-28 Zvi Orbach Apparatus for reading handwriting
US5357062A (en) * 1993-01-28 1994-10-18 Calcomp Inc. Pressure sensing apparatus for digitizer pen tip
IL104575A (en) 1993-02-01 1997-01-10 Intex Corp Image communication apparatus
JPH06266490A (ja) 1993-03-12 1994-09-22 Toshiba Corp 情報入力装置および情報入力における位置認識システム
US5444192A (en) 1993-07-01 1995-08-22 Integral Information Systems Interactive data entry apparatus
GB2280504A (en) 1993-07-28 1995-02-01 Data Stream Corp Position data input system for computer.
US5436792A (en) 1993-09-10 1995-07-25 Compaq Computer Corporation Pivotable docking station for use with notepad computer systems
US5434371A (en) 1994-02-01 1995-07-18 A.T. Cross Company Hand-held electronic writing tool
IL108565A0 (en) 1994-02-04 1994-05-30 Baron Research & Dev Company L Improved information input apparatus
IL108566A0 (en) 1994-02-04 1994-05-30 Baron Research & Dev Company L Handwriting input apparatus using more than one sensing technique
US5512892A (en) 1994-02-25 1996-04-30 International Business Machines Corporation Hand held control device
DE69532126T2 (de) * 1994-05-19 2004-07-22 Geospan Corp., Plymouth Verfahren zum sammeln und verarbeiten visueller und räumlicher positionsinformation
US5774602A (en) * 1994-07-13 1998-06-30 Yashima Electric Co., Ltd. Writing device for storing handwriting
IL110474A0 (en) 1994-07-27 1994-10-21 Baron Motion Communication Inc Computer data entry apparatus
USD362663S (en) 1994-08-19 1995-09-26 Alps Electric (Usa) Inc. Docking station for a pen computer
AU4144796A (en) 1994-11-07 1996-05-31 Baron Motion Communications, Inc. Multi-dimensional electrical control device
US5578813A (en) * 1995-03-02 1996-11-26 Allen; Ross R. Freehand image scanning device which compensates for non-linear movement

Also Published As

Publication number Publication date
JP2005216318A (ja) 2005-08-11
JPH11164074A (ja) 1999-06-18
US6201903B1 (en) 2001-03-13

Similar Documents

Publication Publication Date Title
JP3993706B2 (ja) ファクシミリ送信装置
US6798907B1 (en) System, computer software product and method for transmitting and processing handwritten data
US7894836B1 (en) Method and system for handwritten electronic messaging
US7003308B1 (en) Method and system for handwritten electronic messaging
JP4558253B2 (ja) ペン用コードセンサ付属部品
US6832116B1 (en) Method and system for controlling an electronic utility device using an electronic reading device
US6952497B1 (en) Method and system for electronically recording transactions and performing security function
US6724375B2 (en) Hand writing input device for cellular phone
JP2016134014A (ja) 電子情報ボード装置、情報処理方法およびプログラム
WO2001061449A2 (en) Specially formatted paper based applications of a mobile phone
JP2016143182A (ja) 情報処理装置、プログラム
JPH06282375A (ja) 情報処理装置及び電子ペン
EP1256045B1 (en) Method for sharing information between electronic reading devices
EP1256091A2 (en) Method and system for configuring and unlocking an electronic reading device
WO2001061636A2 (en) Electronic pen with ink on/off function and paper touch sensing
KR20210034668A (ko) 문자 입력 방법 및 단말
US20010033293A1 (en) Electronic pen help feedback and information retrieval
JP5084087B2 (ja) 手書きコマンド
JP2001111708A (ja) 携帯型情報通信装置
EP1256090B1 (en) Electronic pen for e-commerce implementations
US20050020303A1 (en) Mobile electronic device with integrated stylus input device
US10212310B2 (en) Information processing apparatus, method for calling input portion, and computer-readable storage medium for computer program
JP2007018185A (ja) 画像配信システム、画像配信方法、筆記情報管理装置および情報処理プログラム
JP2004110571A (ja) 手続システム及びそのサーバ装置、並びに電子ペン用帳票
EP1331546B1 (en) Hand-writing input device for cellular phone

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20041101

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20041207

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20050106

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050207

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20050323

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20050415

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070702

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070727

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100803

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100803

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110803

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110803

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120803

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120803

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130803

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees