JP2004519772A - 手書き文字記録及び認識装置 - Google Patents

手書き文字記録及び認識装置 Download PDF

Info

Publication number
JP2004519772A
JP2004519772A JP2002568292A JP2002568292A JP2004519772A JP 2004519772 A JP2004519772 A JP 2004519772A JP 2002568292 A JP2002568292 A JP 2002568292A JP 2002568292 A JP2002568292 A JP 2002568292A JP 2004519772 A JP2004519772 A JP 2004519772A
Authority
JP
Japan
Prior art keywords
light
marking
writing
data
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002568292A
Other languages
English (en)
Other versions
JP2004519772A5 (ja
Inventor
フィッシャー,エドワード
Original Assignee
フィッシャー,エドワード
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by フィッシャー,エドワード filed Critical フィッシャー,エドワード
Publication of JP2004519772A publication Critical patent/JP2004519772A/ja
Publication of JP2004519772A5 publication Critical patent/JP2004519772A5/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Position Input By Displaying (AREA)
  • Image Input (AREA)
  • Character Input (AREA)

Abstract

本発明は、手書きのテキスト又は図形を記録且つ処理するための、ペン型対象内又は上にある電子記録及び計算装置である。装置は、鉛筆、インクペン、ノンマーキングティップ、チョーク、クレヨン、マーカ、絵具、レーザマーキングツール、又は、書込み又はマーキングに用いられる任意の他の手段であり得るマーキング手段を含む。装置は、以下に示す要素の1つ以上を用いて動作及びマークを記録する。即ち、画像センサ(1)、光源(5)、光検出器、力センサ(3)、コンタクタ、マイクロプロセッサ、揮発性及び不揮発性メモリ、アナログ/デジタル変換器。装置の動作は、画像センサと、書込み面の微視的及び/又は巨視的特徴を追跡する光学ナビゲーションソフトウェアによって感知され且つ記録される。ペンの書込み面に対する向きは、表面上に光の平面波を投射し、互いに対し特定の向きに配置される複数の光センサによって戻ってきた光の量を検出することにより電子的に感知され且つ記録される。

Description

【0001】
[発明の属する技術分野]
本発明は、手書き文字入力及び認識装置に係る。より具体的には、本発明の装置は、手書きの図形を電子的に記録し、手書きの文字を記録し且つ認識する手段を与える。
【0002】
[背景技術]
このような種類の装置に関する特許は数多くある。際立った特徴は、書込みする又はマーキングする表面に対する装置の動作を感知するために用いる1つ以上の方法にある。全てのこのような装置は、装置が書込み面と接触していることを感知するために、ボタン、コンタクタ、又は、力センサを用いる。上述のデータの組合せを、ペンの動作又はマークを記録するために用いることができる。
【0003】
ある方法は、ひずみゲージ、力センサ、圧電装置等によってペン先又はペンカートリッジに加わる力を測定する(US4751741、US5215397)。これらの力は、ページ上の装置の動作を計算するために用いられる。
【0004】
別の方法は、ペンの加速や減速を感知するために加速度計又はジャイロスコープを用いる(US188392、US5247137、US5517579)。
【0005】
光学的な技術を用いて、ページ上の周知のパターンを画像化し、この情報を用いて装置の動作を計算する(US5226091)。
【0006】
最後に、上述した感知技術の組合せを用いるアプローチもある。このアプローチには、力及び光学感知の組合せ(US5215397)と、加速及び超音波の組合せの組合せ(US5517579)が含まれる。
【0007】
[本願発明]
本発明は、手書きのテキスト又は図形を記録かつ処理するための、ペン型対象内又は上にある電子記録及び計算装置である。装置は、鉛筆、インクペン、ノンマーキングティップ、チョーク、クレヨン、マーカ、塗料、レーザマーキングツール、又は、書込み又はマーキングに用いる任意の他の手段であるマーキング手段を含む。装置は、以下に示す要素の1つ以上を用いて動作及びマークを記録する。即ち、画像センサ、光源、光検出器、力センサ、コンタクタ、マイクロプロセッサ、揮発性及び不揮発性メモリ、アナログ/デジタル変換器。装置の動作は、画像センサと、書込み面の微視的及び/又は巨視的特徴を追跡する光学ナビゲーションソフトウェアによって感知され且つ記録される。ペンの書込み面に対する向きは、表面上に光の平面波を投射し、互いに対し特定の向きに配置される複数の光センサによって戻ってきた光の量を検出することにより電子的に感知され且つ記録される。この情報は、ペンの書込み面に対する向きによって歪んだ光ナビゲーションデータを補正するために用いられる。データは、オンボードアプリケーションソフトウェアによって処理されるか、及び/又は、後から検索するために格納され得る。データは、ドッキングステーション又はワイヤレステクノロジを介して伝送され得る。伝送される情報は、光文字認識、署名認証、又は、画像再構成といったタスクのために後でソフトウェアと共に用いられ得る。
【0008】
本発明は、高価で不正確な加速度計又はジャイロスコープの必要をなくし、信頼度が低く不正確な機械システムをなくし、且つ、安価な規格品の電子部品を用いることを目的とする。本発明は更に、装置のマーキング面に対する動作及び向きを感知するために、光学的な方法は高いレベルの精度と再現性を可能にするので、主として光学的な方法に依存することを目的とする。
【0009】
[第1実施例]
図1に、本発明の装置の第1の実施例を示し、この第1の実施例は、本願発明の特許請求の範囲に従い構成される。ペン型のエンクロージャが、装置の全ての部品を収容するハウジングとなり、従って、装置は自律的に動作する。
【0010】
第1の実施例は、紙又は他の表面上に文字を書く又は図形マークをマークするためのマーキング手段も含む。第1の実施例におけるマーキング手段は、インクである。マーキング手段は、カートリッジ内にあり、カートリッジは、装置の先端がマーキング面と接触していることを検出する力センサと係合するよう、ペン内で動くことが可能である(図1−3)。
【0011】
第1の実施例は更に、マーキング面に入射する光の平面波を生成するよう配置される1つ以上の赤外線発光ダイオードを含む。
【0012】
第1の実施例は更に、マーキング面を反射した発光ダイオードからの赤外線を検出する3つの赤外線フォトトランジスタを含む。フォトトランジスタは、この装置の第1の実施例では、互いに対し特定の向きで配置される(図2)。検出された赤外線の量は、装置のマーキング面に対する距離、又は、傾斜の角度を計算するために用いられる。2つの光センサから得られるデータを用いて、2つの直交方向における書込み面に対する装置の傾斜の角度を計算することが可能である。
【0013】
第1の実施例は更に、電荷結合素子画像センサ、2つのレンズ、及び、光ファイバパイプを含む画像化システムを含む(図1−1、2、6)。2つのレンズは、画像化システムによって得られる画像がページのテレセントリックな図を与えるよう選択され、このことは、画像に歪みがほとんど又は全くないことを保証する。この画像化システムは、マーキング面の巨視的な及び/又は微視的な特徴の画像を高速に得るために用いられる。これらの画像は、これらの画像を比較し、装置のマーキング面に対する動作を数学的に計算することのできる光学ナビゲーションソフトウェアと共に用いられる。
【0014】
第1の実施例は更に、マイクロプロセッサと、メモリと、上述した光学ナビゲーション及び上述したフォトトランジスタから得たデータを処理するために必要なソフトウェアを含むアプリケーションソフトウェアとを含む。フォトトランジスタから得たデータは、後から検索するためにメモリ内に格納されるか、又は、パーソナルコンピュータ又は他の計算装置にリアルタイムで送信される。
【0015】
本発明の装置の第1の実施例は更に、ユーザが装置とインタラクトし、アプリケーションソフトウェア又はデータ転送を起動させるためのディスプレイ及び数個のボタンを含む。
【0016】
本発明の装置の第1の実施例は、有線又は無線手段を介するデータ転送をサポートする電子ハードウェア及び/又はソフトウェアを含む。
【図面の簡単な説明】
【図1】
1:画像センサ、2:光ファイバ画像パイプ、3:ボタン又は力センサ、4:書込み手段カートリッジ及び力センサアクチュエータ、5:光源及び光センサアレイ、6:テレセントリックレンズ系を含む本発明の実施例を示す図である。
【図2】
マーキング面に対する装置の向きを感知するために用いられる光センサ(塗りつぶされている)及び光源(塗りつぶされていない)の可能な配置を示す図である。
【図3】
広い範囲に亘って一定の光強度を与えるよう光源アレイにより形成される光の平面波を示す図である。

Claims (17)

  1. 表面の手書き又はマークを電子的に記録する、及び/又は、手書きの文字を電子的に記録し且つ認識することのできる装置であって、
    画像化システムと、
    上記装置の書込み又はマーキング先端が表面と接触していることを検出可能なセンサと、
    光源と、
    1つ以上の光検出器と、
    データ処理手段と、
    上記データ処理手段が使用するために上記1つ以上の光検出器からの信号を捕捉可能なデータ捕捉手段と、
    書込み又はマーキング手段とを含む装置。
  2. 上記画像化システムは、電荷結合素子又はCMOS画像センサであり得る半導体画像化装置、1つのレンズ又は一連のレンズ、及び、光ファイバ画像パイプのうちの1つ以上を含む請求項1記載の装置。(図1)
  3. 上記1つのレンズ又は一連のレンズは、テレセントリックレンズ系を含み、
    上記テレセントリックレンズ系は、目的物への距離が変化しても透視画法的な誤差のない一定の倍率を有する画像を供給するレンズ系である請求項2記載の装置。(図1−6)
  4. 上記画像センサを用いて上記書込み又はマーキング面の微視的及び/又は巨視的な特徴の画像を得ることができ、
    これらの特徴は、材料に固有であるか、又は、本発明によって作成された書込み又はマークである請求項2記載の装置。
  5. 上記装置の書込み先端が表面と接触していることを検出可能な上記センサは、単純なコンタクタ、又は、上記表面に対し上記装置にどれくらいの力が加わっているのかを感知することのできる力センサである請求項1記載の装置。(図1−3)
  6. 上記データ処理手段は、上記装置の上記マーキング面に対する動作を計算するために、上記画像化システムから捕捉される画像を分析することができる請求項1記載の装置。
  7. 上記光源は、1つ以上の発光素子を含み、
    上記光源は、光の平面波を生成することが可能であり(図3)、
    上記光の平面波は、放出されたビーム又は放出されたビームの一部に亘って等しい又は略等しい振幅を有する請求項1記載の装置。
  8. フィルタは、上記光検出器によって特定の波長の光のみが検出されることを可能にする請求項1記載の装置。
  9. 上記光検出器は、検出した光の量に基づいて上記表面への上記光検出器の距離を測定するのに用いられるよう配置され、
    上記光は、上記マーキング面を反射する、上記光源からの光であり、
    上記光から得られるデータは、上記書込み面の平面に対する上記光検出器のある平面の向きを計算するために用いられる請求項1記載の装置。
  10. 上記データ処理手段は、上記光検出器によって検出された光の量に基づいて、1つ以上の方向における傾斜の角度、及び/又は、上記マーキング面への距離を計算可能である請求項1記載の装置。
  11. 有線及び/又は無線のデータ送信が可能である請求項1記載の装置。
  12. 印刷装置に直接データを送信可能な請求項11記載の装置。
  13. ユーザインタフェースを与える又はデータを表示する電子ディスプレイを更に含む請求項1記載の装置。
  14. 文字認識、電子メール、ウェブブラウジング、計算機、ネットワーキング、及び関数図式化を含むがこれらに制限されないアプリケーションソフトウェアを更に含む請求項1記載の装置。
  15. アプリケーションソフトウェアに対するユーザインタフェースとして用いる1つ以上のボタンを含む請求項1記載の装置。
  16. 装置の動作状態に対するインジケータとして用いる1つ以上の光又は光源を更に含む請求項1記載の装置。
  17. バーコード又は同様の符号化情報を読取り可能な電子システムを更に含む請求項1記載の装置。
JP2002568292A 2001-02-22 2001-02-22 手書き文字記録及び認識装置 Pending JP2004519772A (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2001/005689 WO2002069247A1 (en) 2001-02-22 2001-02-22 Handwritten character recording and recognition device

Publications (2)

Publication Number Publication Date
JP2004519772A true JP2004519772A (ja) 2004-07-02
JP2004519772A5 JP2004519772A5 (ja) 2005-06-23

Family

ID=21742359

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002568292A Pending JP2004519772A (ja) 2001-02-22 2001-02-22 手書き文字記録及び認識装置

Country Status (4)

Country Link
EP (1) EP1380006B1 (ja)
JP (1) JP2004519772A (ja)
DE (1) DE60119393T2 (ja)
WO (1) WO2002069247A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101110950B1 (ko) * 2008-06-23 2012-03-13 실버브룩 리서치 피티와이 리미티드 출몰식 펜촉과 힘센서를 갖는 전자펜

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7203383B2 (en) 2001-02-22 2007-04-10 Thinkpen Llc Handwritten character recording and recognition device
US7298367B2 (en) 2003-11-25 2007-11-20 3M Innovative Properties Company Light emitting stylus and user input device using same
US9229540B2 (en) 2004-01-30 2016-01-05 Electronic Scripting Products, Inc. Deriving input from six degrees of freedom interfaces
US7961909B2 (en) 2006-03-08 2011-06-14 Electronic Scripting Products, Inc. Computer interface employing a manipulated object with absolute pose detection component and a display
US7826641B2 (en) 2004-01-30 2010-11-02 Electronic Scripting Products, Inc. Apparatus and method for determining an absolute pose of a manipulated object in a real three-dimensional environment with invariant features
US8542219B2 (en) 2004-01-30 2013-09-24 Electronic Scripting Products, Inc. Processing pose data derived from the pose of an elongate object
US7575334B2 (en) * 2007-02-27 2009-08-18 Becnel Mark C Chalk holding device with light
US11577159B2 (en) 2016-05-26 2023-02-14 Electronic Scripting Products Inc. Realistic virtual/augmented/mixed reality viewing and interactions

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5103486A (en) * 1990-04-19 1992-04-07 Grippi Victor J Fingerprint/signature synthesis
US5852434A (en) * 1992-04-03 1998-12-22 Sekendur; Oral F. Absolute optical position determination
US5484966A (en) * 1993-12-07 1996-01-16 At&T Corp. Sensing stylus position using single 1-D image sensor
GB9516441D0 (en) * 1995-08-10 1995-10-11 Philips Electronics Uk Ltd Light pen input systems
US6081261A (en) * 1995-11-01 2000-06-27 Ricoh Corporation Manual entry interactive paper and electronic document handling and processing system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101110950B1 (ko) * 2008-06-23 2012-03-13 실버브룩 리서치 피티와이 리미티드 출몰식 펜촉과 힘센서를 갖는 전자펜

Also Published As

Publication number Publication date
WO2002069247A1 (en) 2002-09-06
DE60119393D1 (de) 2006-06-08
EP1380006A4 (en) 2005-01-19
EP1380006B1 (en) 2006-05-03
EP1380006A1 (en) 2004-01-14
DE60119393T2 (de) 2007-04-19

Similar Documents

Publication Publication Date Title
US7203383B2 (en) Handwritten character recording and recognition device
US7342575B1 (en) Electronic writing systems and methods
US6592039B1 (en) Digital pen using interferometry for relative and absolute pen position
US20050156915A1 (en) Handwritten character recording and recognition device
US7328996B2 (en) Sensor and ink-jet print-head assembly and method related to same
US8542219B2 (en) Processing pose data derived from the pose of an elongate object
US6686910B2 (en) Combined writing instrument and digital documentor apparatus and method of use
US7108370B2 (en) Hand held printing of text and images for preventing skew and cutting of printed images
JP3712879B2 (ja) 手書き入力方法及び手書き入力装置
US20060050131A1 (en) Hand held printer correlated to fill-out transition print areas
CN110785729B (zh) 用于产生模拟笔画且用于模拟笔画的数字存储的电子装置和用于使模拟记录数字化的输入系统及方法
US20050024690A1 (en) Pen with tag reader and navigation system
WO2000025293A1 (en) Pen-input device
JP2004519772A (ja) 手書き文字記録及び認識装置
JP3812906B2 (ja) ホワイトボードイレーサー
KR20190135921A (ko) 필기 입력 장치
RU2166796C2 (ru) Ручка для ввода рукописной и графической информации в компьютер "shelpen iii"