JP3427928B2 - 手書き情報処理システムおよび方法 - Google Patents
手書き情報処理システムおよび方法Info
- Publication number
- JP3427928B2 JP3427928B2 JP2000002362A JP2000002362A JP3427928B2 JP 3427928 B2 JP3427928 B2 JP 3427928B2 JP 2000002362 A JP2000002362 A JP 2000002362A JP 2000002362 A JP2000002362 A JP 2000002362A JP 3427928 B2 JP3427928 B2 JP 3427928B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- handwriting
- character
- processing system
- handwritten
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
- G06V30/14—Image acquisition
- G06V30/142—Image acquisition using hand-held instruments; Constructional details of the instruments
- G06V30/1423—Image acquisition using hand-held instruments; Constructional details of the instruments the instrument generating sequences of position coordinates corresponding to handwriting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Character Discrimination (AREA)
- Character Input (AREA)
- Document Processing Apparatus (AREA)
- User Interface Of Digital Computer (AREA)
Description
【０００１】
【発明の属する技術分野】本発明は、手書き情報処理シ
ステムに関し、具体的には、文字セグメント化のための
ユーザ・インターフェースを有する手書き情報処理シス
テムに関する。
ステムに関し、具体的には、文字セグメント化のための
ユーザ・インターフェースを有する手書き情報処理シス
テムに関する。
【０００２】
【従来の技術】コンピュータ技術のすばやい進歩に伴っ
て、パーソナル・ディジタル・アシスタント（ＰＤＡ）
またはハンド・ポータブル・コンピュータ（ＨＰＣ）な
どのユーザの手書き入力を受け入れるための多数の情報
処理装置が現れた。ユーザは、ペン様の装置によって、
手書きのデータおよび記号をコンピュータに入力するこ
とができる。これに対応して、ユーザの手書き入力を認
識することのできる、多数の手書き文字認識装置が現れ
た。
て、パーソナル・ディジタル・アシスタント（ＰＤＡ）
またはハンド・ポータブル・コンピュータ（ＨＰＣ）な
どのユーザの手書き入力を受け入れるための多数の情報
処理装置が現れた。ユーザは、ペン様の装置によって、
手書きのデータおよび記号をコンピュータに入力するこ
とができる。これに対応して、ユーザの手書き入力を認
識することのできる、多数の手書き文字認識装置が現れ
た。
【０００３】ＩＢＭ社のThinkScribeは、手書きディジ
タイザと従来の紙ベース記録システムを統合した装置で
ある。この装置は、ユーザの手書き入力を、ストローク
および関連するタイミングを記録し、元のタイミング情
報に従ってユーザの手書き入力を再生することができ
る。ユーザは、ThinkScribe上で漢字を書く時に、通常
は、文字間の空白なしまたはごくわずかな空白で連続的
に文字を書く。時には、ユーザは、隣接する文字のスト
ロークを重ね合わせるか、前の文字の最後のストローク
と後の文字の最初のストロークを連結する。これによっ
て、認識前の文字セグメント化が問題になる。
タイザと従来の紙ベース記録システムを統合した装置で
ある。この装置は、ユーザの手書き入力を、ストローク
および関連するタイミングを記録し、元のタイミング情
報に従ってユーザの手書き入力を再生することができ
る。ユーザは、ThinkScribe上で漢字を書く時に、通常
は、文字間の空白なしまたはごくわずかな空白で連続的
に文字を書く。時には、ユーザは、隣接する文字のスト
ロークを重ね合わせるか、前の文字の最後のストローク
と後の文字の最初のストロークを連結する。これによっ
て、認識前の文字セグメント化が問題になる。
【０００４】現在、特に手書き漢字用の、効果的な文字
セグメント化方式は存在しない。手書き文字認識技術で
は、個々の漢字または、大きな空白を有する手書き漢字
文字列を認識することしかできない。手書き漢字文字列
の自動的なセグメント分割の問題点は、下記の２つにあ
る。 １）多くの漢字が、左から右に並んだ分離可能な構成要
素を有する。水平の列で左から右にすばやく書く時に
は、そのような構成要素の間の距離が、２つの文字の間
の距離と同様になる場合がある。この空間的な混乱に加
えて、これらの文字の左側の部分と右側の部分は、それ
自体が単独の文字であることがしばしばであり、別の文
字に似ている場合もある。縦書きの漢字についても同様
のことが言える。というのは、多くの漢字が、上下に積
み重ねられた分離可能な構成要素を有するからである。 ２）隣接する文字に関して、筆記体で書かれる時に、第
１の文字の最後のストロークと第２の文字の最初のスト
ロークが、互いに明瞭に分離されない場合がある。
セグメント化方式は存在しない。手書き文字認識技術で
は、個々の漢字または、大きな空白を有する手書き漢字
文字列を認識することしかできない。手書き漢字文字列
の自動的なセグメント分割の問題点は、下記の２つにあ
る。 １）多くの漢字が、左から右に並んだ分離可能な構成要
素を有する。水平の列で左から右にすばやく書く時に
は、そのような構成要素の間の距離が、２つの文字の間
の距離と同様になる場合がある。この空間的な混乱に加
えて、これらの文字の左側の部分と右側の部分は、それ
自体が単独の文字であることがしばしばであり、別の文
字に似ている場合もある。縦書きの漢字についても同様
のことが言える。というのは、多くの漢字が、上下に積
み重ねられた分離可能な構成要素を有するからである。 ２）隣接する文字に関して、筆記体で書かれる時に、第
１の文字の最後のストロークと第２の文字の最初のスト
ロークが、互いに明瞭に分離されない場合がある。
【０００５】さらに、テキスト区域が絵区域と重なり合
う可能性があり、手書きの行が必ずしもまっすぐではな
い可能性がある。そのような場合には、テキスト区域を
検出し、手書きの行を見つけ、認識のために文字列内の
個々の文字をセグメント分割するための自動的な技法
は、必ずしも信頼性があり、正確であるわけではない。
そのような作業には、手動の手順が必要である。
う可能性があり、手書きの行が必ずしもまっすぐではな
い可能性がある。そのような場合には、テキスト区域を
検出し、手書きの行を見つけ、認識のために文字列内の
個々の文字をセグメント分割するための自動的な技法
は、必ずしも信頼性があり、正確であるわけではない。
そのような作業には、手動の手順が必要である。
【０００６】
【発明が解決しようとする課題】したがって、本発明
は、テキスト区域／絵区域、手書きの行および文字境界
の定義をユーザから受け入れるためのユーザ・インター
フェースを含む手書き情報処理システムおよび方法を提
供することを目的とする。
は、テキスト区域／絵区域、手書きの行および文字境界
の定義をユーザから受け入れるためのユーザ・インター
フェースを含む手書き情報処理システムおよび方法を提
供することを目的とする。
【０００７】
【課題を解決するための手段】ユーザ・インターフェー
スを用いて、ユーザは、テキスト区域／絵区域を定義す
ることができる。自動行検出機構は、その情報を使用す
ることによって手書きの行を見つけることができる。ユ
ーザは、この情報を用いて、自動レイアウト分析の誤り
を訂正することもできる。
スを用いて、ユーザは、テキスト区域／絵区域を定義す
ることができる。自動行検出機構は、その情報を使用す
ることによって手書きの行を見つけることができる。ユ
ーザは、この情報を用いて、自動レイアウト分析の誤り
を訂正することもできる。
【０００８】さらに、本発明による文字セグメントのた
めのユーザ・インターフェースは、効果的で自然な手書
き行定義モードを提供する。この情報を使用することに
よって、自動文字セグメント化機構は、文字境界を見つ
けることができ、この情報を用いて自動認識処理の誤り
を訂正することができる。
めのユーザ・インターフェースは、効果的で自然な手書
き行定義モードを提供する。この情報を使用することに
よって、自動文字セグメント化機構は、文字境界を見つ
けることができ、この情報を用いて自動認識処理の誤り
を訂正することができる。
【０００９】本発明による文字セグメント化のためのユ
ーザ・インターフェースは、文字境界を効果的に定義す
るための方法を提供する。この情報を使用することによ
って、自動認識機構は、連続して書かれた文字を認識す
ることができ、この情報を用いて自動認識の誤りを訂正
することもできる。
ーザ・インターフェースは、文字境界を効果的に定義す
るための方法を提供する。この情報を使用することによ
って、自動認識機構は、連続して書かれた文字を認識す
ることができ、この情報を用いて自動認識の誤りを訂正
することもできる。
【００１０】
【発明の実施の形態】図１は、手書き情報入力手段の例
としてＩＢＭ社のThinkScribeをとりあげて、本発明に
よる文字セグメント化のためのユーザ・インターフェー
スを有する手書き情報処理システム１００を説明する図
である。
としてＩＢＭ社のThinkScribeをとりあげて、本発明に
よる文字セグメント化のためのユーザ・インターフェー
スを有する手書き情報処理システム１００を説明する図
である。
【００１１】図１からわかるように、手書き情報処理シ
ステム１００は、手書き情報入力手段１０１と手書き情
報認識手段１０２を含む。手書き情報入力手段１０１
は、通常は、書込用のパッドと書込用のペンを含む。書
込用のパッドは、ペンの移動する跡を表すデータを生成
することができる。ＩＢＭ社のThinkScribeは、手書き
情報入力手段として使用することができる。ユーザが、
ペン様の手段を用いて書込用のパッド上で書く時に、Th
inkScribeは、ユーザの手書き入力をストロークと関連
タイミング・シーケンスに記録することができる。各手
書きストロークは、ストローク内の一連の離散座標点に
よって表され、たとえば、ｉ番目の手書きストローク
は、 Ｓ（ｉ）＝（（ｘ（ｉ，１），ｙ（ｉ，１），ｔ（ｉ，
１）），．．．，（ｘ（ｉ，ｊ），ｙ（ｉ，ｊ）ｔ
（ｉ，ｊ）），．．．，（ｘ（ｉ，ｅ（ｉ）），ｙ
（ｉ，ｅ（ｉ），ｔ（ｉ，ｅ（ｉ））） として表すことができる。ここで、ｅ（ｉ）は、ストロ
ークｉのストローク点の個数、ｔ（ｉ，ｊ）は、タイミ
ング・シーケンス情報である。その後、ユーザの手書き
入力は、データ・フローＳ（１），Ｓ（２），Ｓ
（３）．．．によって表すことができる。ThinkScribe
は、その不揮発性メモリ１０１３にデータ・フローＳ
（１），Ｓ（２），Ｓ（３）．．．を記憶することがで
き、必要な時に、たとえばパーソナル・コンピュータ
（ＰＣ）に、入出力ポート１０１５を介してそのデータ
・フローを送ることもできる。ＰＣは、ThinkScribeの
手書き入力再生プログラムを実行し、元のタイミング・
シーケンスでユーザの手書き入力を再生することができ
る。ＰＣは、認識プログラムがＰＣにロードされている
時に、ユーザの手書き入力を認識するための認識装置と
して使用することができる。図１からわかるように、手
書き情報認識手段１０２は、通常は、レイアウト分析、
手書き行識別および文字セグメント化などの前処理を、
認識を行う前に実行して、テキスト区域／絵区域を識別
し、手書き行の文字を認識する。しかし、現在の手書き
認識技術は未成熟である。したがって、自動レイアウト
分析、自動手書き行識別および自動文字セグメント化の
結果は、信頼性がなく、手動の手順が必要である。本発
明の文字セグメント化ユーザ・インターフェースは、そ
のような機能を提供する。図１からわかるように、文字
セグメント化ユーザ・インターフェースは、３つの部分
すなわち、テキスト区域／絵区域のユーザによる定義を
受け入れるためのテキスト区域／絵区域定義部分（手書
き認識手段は、この情報の助けを得て、手書き行の自動
判定またはレイアウト分析の結果の自動訂正を行うこと
ができる）と、手書き行のユーザによる定義を受け入れ
るための手書き行定義部分（手書き認識手段は、この方
法の助けを得て、文字境界の判定または自動認識の結果
の訂正を行うことができる）と、文字境界定義部分（ユ
ーザは、手動で文字境界を決定することができ、自動文
字セグメント化の結果を訂正することができる）を含
む。
ステム１００は、手書き情報入力手段１０１と手書き情
報認識手段１０２を含む。手書き情報入力手段１０１
は、通常は、書込用のパッドと書込用のペンを含む。書
込用のパッドは、ペンの移動する跡を表すデータを生成
することができる。ＩＢＭ社のThinkScribeは、手書き
情報入力手段として使用することができる。ユーザが、
ペン様の手段を用いて書込用のパッド上で書く時に、Th
inkScribeは、ユーザの手書き入力をストロークと関連
タイミング・シーケンスに記録することができる。各手
書きストロークは、ストローク内の一連の離散座標点に
よって表され、たとえば、ｉ番目の手書きストローク
は、 Ｓ（ｉ）＝（（ｘ（ｉ，１），ｙ（ｉ，１），ｔ（ｉ，
１）），．．．，（ｘ（ｉ，ｊ），ｙ（ｉ，ｊ）ｔ
（ｉ，ｊ）），．．．，（ｘ（ｉ，ｅ（ｉ）），ｙ
（ｉ，ｅ（ｉ），ｔ（ｉ，ｅ（ｉ））） として表すことができる。ここで、ｅ（ｉ）は、ストロ
ークｉのストローク点の個数、ｔ（ｉ，ｊ）は、タイミ
ング・シーケンス情報である。その後、ユーザの手書き
入力は、データ・フローＳ（１），Ｓ（２），Ｓ
（３）．．．によって表すことができる。ThinkScribe
は、その不揮発性メモリ１０１３にデータ・フローＳ
（１），Ｓ（２），Ｓ（３）．．．を記憶することがで
き、必要な時に、たとえばパーソナル・コンピュータ
（ＰＣ）に、入出力ポート１０１５を介してそのデータ
・フローを送ることもできる。ＰＣは、ThinkScribeの
手書き入力再生プログラムを実行し、元のタイミング・
シーケンスでユーザの手書き入力を再生することができ
る。ＰＣは、認識プログラムがＰＣにロードされている
時に、ユーザの手書き入力を認識するための認識装置と
して使用することができる。図１からわかるように、手
書き情報認識手段１０２は、通常は、レイアウト分析、
手書き行識別および文字セグメント化などの前処理を、
認識を行う前に実行して、テキスト区域／絵区域を識別
し、手書き行の文字を認識する。しかし、現在の手書き
認識技術は未成熟である。したがって、自動レイアウト
分析、自動手書き行識別および自動文字セグメント化の
結果は、信頼性がなく、手動の手順が必要である。本発
明の文字セグメント化ユーザ・インターフェースは、そ
のような機能を提供する。図１からわかるように、文字
セグメント化ユーザ・インターフェースは、３つの部分
すなわち、テキスト区域／絵区域のユーザによる定義を
受け入れるためのテキスト区域／絵区域定義部分（手書
き認識手段は、この情報の助けを得て、手書き行の自動
判定またはレイアウト分析の結果の自動訂正を行うこと
ができる）と、手書き行のユーザによる定義を受け入れ
るための手書き行定義部分（手書き認識手段は、この方
法の助けを得て、文字境界の判定または自動認識の結果
の訂正を行うことができる）と、文字境界定義部分（ユ
ーザは、手動で文字境界を決定することができ、自動文
字セグメント化の結果を訂正することができる）を含
む。
【００１２】以下では、添付図面と共に、本発明の文字
セグメント化ユーザ・インターフェースの３つの主要な
構成要素を詳細に説明する。
セグメント化ユーザ・インターフェースの３つの主要な
構成要素を詳細に説明する。
【００１３】レイアウト分析は、通常は、手書き区域全
体の中で絵ブロックとテキスト・ブロックを突きとめる
ことを意味する。もちろん、いくつかの自動レイアウト
分析方法が存在する。しかし、それらは信頼性がないの
で、手動の手順が必要である。
体の中で絵ブロックとテキスト・ブロックを突きとめる
ことを意味する。もちろん、いくつかの自動レイアウト
分析方法が存在する。しかし、それらは信頼性がないの
で、手動の手順が必要である。
【００１４】図２からわかるように、ユーザは、文字セ
グメント化のための本発明のユーザ・インターフェース
によってテキスト区域／絵区域を定義する時に、タイミ
ング情報を利用している。ThinkScribeデータの場合、
基本構成要素はストロークである。テキスト・ブロック
と絵ブロックの両方が、ストロークのグループを含む。
位置情報だけでなく、ストロークのタイミング情報も記
録され、ThinkScribeデータは、しばしば別々に書き込
まれる。すなわち、テキストのストロークと絵のストロ
ークが、しばしば、異なる時間期間に書き込まれる。し
たがって、図２からわかるように、ＵＩスクロール・バ
ーを使用することができる。時間スクロール・バー上で
は、可変サイズの１つの時間期間ウィンドウを使用し
て、ストロークのグループを分離することができる。ユ
ーザは、ウィンドウ内の時間期間を変更して、ストロー
ク・グループを選択することができる。選択されたスト
ロークは、異なる色を用いて強調表示することができ
る。図２では、絵ブロックに属する、選択されたストロ
ークが、緑色で強調表示されている。
グメント化のための本発明のユーザ・インターフェース
によってテキスト区域／絵区域を定義する時に、タイミ
ング情報を利用している。ThinkScribeデータの場合、
基本構成要素はストロークである。テキスト・ブロック
と絵ブロックの両方が、ストロークのグループを含む。
位置情報だけでなく、ストロークのタイミング情報も記
録され、ThinkScribeデータは、しばしば別々に書き込
まれる。すなわち、テキストのストロークと絵のストロ
ークが、しばしば、異なる時間期間に書き込まれる。し
たがって、図２からわかるように、ＵＩスクロール・バ
ーを使用することができる。時間スクロール・バー上で
は、可変サイズの１つの時間期間ウィンドウを使用し
て、ストロークのグループを分離することができる。ユ
ーザは、ウィンドウ内の時間期間を変更して、ストロー
ク・グループを選択することができる。選択されたスト
ロークは、異なる色を用いて強調表示することができ
る。図２では、絵ブロックに属する、選択されたストロ
ークが、緑色で強調表示されている。
【００１５】ＯＣＲの普通の手作業のレイアウト分析
と、本発明のテキスト区域／絵区域定義方法との間に
は、かなりの差が存在する。ＯＣＲの場合、ユーザは、
異なる絵区域を選択するために、長方形だけを描画する
ことができる。しかし、本発明は、ストロークベースの
データと時間シーケンス情報とを使用して絵区域／テキ
スト区域を定義することによって、ThinkScribeなどの
装置のデータ特性を利用している。長方形を用いる絵区
域／テキスト区域の定義は、多数の制約を有する。図２
からわかるように、長方形を使用して絵ブロックに属す
るストロークを選択する場合には、テキスト・ブロック
からのいくつかのストロークが、誤って絵の一部として
選択される。
と、本発明のテキスト区域／絵区域定義方法との間に
は、かなりの差が存在する。ＯＣＲの場合、ユーザは、
異なる絵区域を選択するために、長方形だけを描画する
ことができる。しかし、本発明は、ストロークベースの
データと時間シーケンス情報とを使用して絵区域／テキ
スト区域を定義することによって、ThinkScribeなどの
装置のデータ特性を利用している。長方形を用いる絵区
域／テキスト区域の定義は、多数の制約を有する。図２
からわかるように、長方形を使用して絵ブロックに属す
るストロークを選択する場合には、テキスト・ブロック
からのいくつかのストロークが、誤って絵の一部として
選択される。
【００１６】図３は、ユーザによる手書き行の定義を受
け入れる時の文字セグメント化のための本発明によるユ
ーザ・インターフェースの動作状態を示す図である。テ
キスト・ブロック認識のためには、手書き行の識別が非
常に重要なステップである。明らかに、テキスト・ブロ
ックおよび絵ブロックを区別するためのＵＩは、手動で
手書き行を検出するのに使用することができる。しか
し、これでは不十分である。時には、ユーザは、文字の
行を水平でも垂直でもなく、ある角度で書く。すなわ
ち、スキュー訂正が必要である。ＵＩでは、ユーザが、
カーソルまたは他の入力手段を用いて始点Ｓと終点Ｅを
作る時に、本発明のＵＩは、時間シーケンス情報に従う
分析を行い、時間シーケンス情報に従って始点Ｓと終点
Ｅのストロークをストローク・グループにし、手書き行
の方向に従って書込方向を自動的に判定する。その結果
が、図３に示されるようにＵＩ内でユーザに表示され
る。
け入れる時の文字セグメント化のための本発明によるユ
ーザ・インターフェースの動作状態を示す図である。テ
キスト・ブロック認識のためには、手書き行の識別が非
常に重要なステップである。明らかに、テキスト・ブロ
ックおよび絵ブロックを区別するためのＵＩは、手動で
手書き行を検出するのに使用することができる。しか
し、これでは不十分である。時には、ユーザは、文字の
行を水平でも垂直でもなく、ある角度で書く。すなわ
ち、スキュー訂正が必要である。ＵＩでは、ユーザが、
カーソルまたは他の入力手段を用いて始点Ｓと終点Ｅを
作る時に、本発明のＵＩは、時間シーケンス情報に従う
分析を行い、時間シーケンス情報に従って始点Ｓと終点
Ｅのストロークをストローク・グループにし、手書き行
の方向に従って書込方向を自動的に判定する。その結果
が、図３に示されるようにＵＩ内でユーザに表示され
る。
【００１７】この方向がシステムのデフォルト方向と矛
盾する時には、そのうちの１つを調節することができ
る。たとえば、図３からわかるように、ユーザ定義によ
って定義される始点Ｓおよび終点Ｅに従ってＵＩによっ
て判定された手書き行の向きが、水平方向に対して傾い
ている時には、ユーザは、矢印の終点をドラッグし、矢
印を回転することができる。選択され強調表示されたス
トロークは、ある角度だけ回転される。
盾する時には、そのうちの１つを調節することができ
る。たとえば、図３からわかるように、ユーザ定義によ
って定義される始点Ｓおよび終点Ｅに従ってＵＩによっ
て判定された手書き行の向きが、水平方向に対して傾い
ている時には、ユーザは、矢印の終点をドラッグし、矢
印を回転することができる。選択され強調表示されたス
トロークは、ある角度だけ回転される。
【００１８】図４に関連する以下の説明では、本発明の
ＵＩによる手動文字セグメント化と自動文字セグメント
化の結果の訂正を説明する。
ＵＩによる手動文字セグメント化と自動文字セグメント
化の結果の訂正を説明する。
【００１９】筆記体の漢字手書きでは、文字の間に十分
な空白がない。時には、隣接する文字の間で、前の文字
の最後のストロークが、次の文字の最初のストロークと
接続される。そのような場合には、自動文字セグメント
化の結果は信頼性がなく、手動訂正が必要になる。
な空白がない。時には、隣接する文字の間で、前の文字
の最後のストロークが、次の文字の最初のストロークと
接続される。そのような場合には、自動文字セグメント
化の結果は信頼性がなく、手動訂正が必要になる。
【００２０】文字境界は、ユーザが、書き込む時に同時
に定義することができる。例を示す。
に定義することができる。例を示す。
【００２１】ThinkScribeでの新しいボタンの設計
ユーザは、ThinkScribe上で書き込む時に、各文字を終
了した時にこのボタンをクリックして、その文字の書込
が終了したことを示すことができる。ThinkScribeのフ
ァームウェアを変更し、その結果、ボタンの信号から変
換される文字の終了タグ、ストローク・データおよび時
間シーケンス情報が一緒に記録されるようにする。記録
されたデータを認識のためにＰＣに転送する時に、認識
ソフトウェア（タグ・インタープリタおよび認識エンジ
ンを含む）によって、ThinkScribeのデータがセグメン
ト化され、分離された文字のそれぞれを表すストローク
・グループが、認識のために認識エンジンに供給され
る。
了した時にこのボタンをクリックして、その文字の書込
が終了したことを示すことができる。ThinkScribeのフ
ァームウェアを変更し、その結果、ボタンの信号から変
換される文字の終了タグ、ストローク・データおよび時
間シーケンス情報が一緒に記録されるようにする。記録
されたデータを認識のためにＰＣに転送する時に、認識
ソフトウェア（タグ・インタープリタおよび認識エンジ
ンを含む）によって、ThinkScribeのデータがセグメン
ト化され、分離された文字のそれぞれを表すストローク
・グループが、認識のために認識エンジンに供給され
る。
【００２２】ThinkScribe用の特別な用紙フォーマット
の設計 この設計には、ページ・フォーマット・ジェネレータ、
タグ・ジェネレータおよび認識ソフトウェアが含まれ
る。 １）ページ・フォーマット・ジェネレータは、ページ上
に格子を有するページ上の特別なフォーマットを設計す
るための機能を有する。ユーザは、そのようなフォーマ
ットで印刷されたページ上の格子のそれぞれに書き込む
ことを許可される。格子のサイズおよび位置などのペー
ジ・フォーマット情報は、ThinkScribeのファームウェ
アにダウンロードすることもできる。 ２）タグ・ジェネレータは、ファームウェアで実装され
る。タグ・ジェネレータは、ＰＣからダウンロードされ
たフォーマット情報と、ThinkScribe上で書かれたスト
ロークを比較する。タグ・ジェネレータは、格子内で書
かれたストロークを検出した場合に、このストロークに
格子ラベルのタグを付ける。後に、記録されたデータを
認識のためにＰＣに転送する時に、認識ソフトウェア
（タグ・インタープリタと認識エンジンを含む）によっ
て、同一の格子タグを有するストロークが、１つの別の
文字としてグループ化され、分離された文字が、認識の
ために認識エンジンに供給される。記録されたデータを
ＰＣに転送する時には、ＰＣ上の認識ソフトウェア（や
はりタグ・インタープリタと認識エンジンを含む）が、
まず、同一の格子に関係するタグを有するストロークを
一緒にグループ化し、これらを別々の文字として認識の
ためにエンジンに供給する。
の設計 この設計には、ページ・フォーマット・ジェネレータ、
タグ・ジェネレータおよび認識ソフトウェアが含まれ
る。 １）ページ・フォーマット・ジェネレータは、ページ上
に格子を有するページ上の特別なフォーマットを設計す
るための機能を有する。ユーザは、そのようなフォーマ
ットで印刷されたページ上の格子のそれぞれに書き込む
ことを許可される。格子のサイズおよび位置などのペー
ジ・フォーマット情報は、ThinkScribeのファームウェ
アにダウンロードすることもできる。 ２）タグ・ジェネレータは、ファームウェアで実装され
る。タグ・ジェネレータは、ＰＣからダウンロードされ
たフォーマット情報と、ThinkScribe上で書かれたスト
ロークを比較する。タグ・ジェネレータは、格子内で書
かれたストロークを検出した場合に、このストロークに
格子ラベルのタグを付ける。後に、記録されたデータを
認識のためにＰＣに転送する時に、認識ソフトウェア
（タグ・インタープリタと認識エンジンを含む）によっ
て、同一の格子タグを有するストロークが、１つの別の
文字としてグループ化され、分離された文字が、認識の
ために認識エンジンに供給される。記録されたデータを
ＰＣに転送する時には、ＰＣ上の認識ソフトウェア（や
はりタグ・インタープリタと認識エンジンを含む）が、
まず、同一の格子に関係するタグを有するストロークを
一緒にグループ化し、これらを別々の文字として認識の
ためにエンジンに供給する。
【００２３】書込用ペン上の新しいボタンの設計
ThinkScribe書込用パッド上の新しいボタンの設計に類
似する、書込用ペンのボタンを使用して、１文字の書込
が終了したことを示す情報を送ることができる。
似する、書込用ペンのボタンを使用して、１文字の書込
が終了したことを示す情報を送ることができる。
【００２４】上の説明では、手動文字セグメント化すな
わち、文字境界を識別するためのユーザ・インターフェ
ースを紹介した。
わち、文字境界を識別するためのユーザ・インターフェ
ースを紹介した。
【００２５】さらに、文字セグメント化のための本発明
によるユーザ・インターフェースは、自動文字セグメン
ト化の結果を訂正するのに使用することもできる。訂正
には、２種類の作業すなわち、図４に示されているよう
に、ストロークの分割と合併が含まれる。複数の文字が
１文字にセグメント化されている時には、分割を使用す
る。ある文字の一部が１文字にセグメント化されている
時には、合併を使用する。以下に、そのような種類のツ
ールの例を示す。
によるユーザ・インターフェースは、自動文字セグメン
ト化の結果を訂正するのに使用することもできる。訂正
には、２種類の作業すなわち、図４に示されているよう
に、ストロークの分割と合併が含まれる。複数の文字が
１文字にセグメント化されている時には、分割を使用す
る。ある文字の一部が１文字にセグメント化されている
時には、合併を使用する。以下に、そのような種類のツ
ールの例を示す。
【００２６】ストロークベースのThinkScribeデータ
は、オンラインで記録されるがオフラインで認識される
ので、本発明のＵＩも、ストロークベースになるように
設計される。自動セグメント化が完了した後に、１つの
セグメント化された文字に属するストロークが１ブロッ
クで箱に囲まれる形で、セグメント化結果を表示する
（隣接する箱に囲まれたブロックは、間に垂直のギャッ
プが存在する場合に限って分解される。これは、水平の
分離だけが存在し、垂直のギャップが存在しない時にあ
てはめてはならない）。
は、オンラインで記録されるがオフラインで認識される
ので、本発明のＵＩも、ストロークベースになるように
設計される。自動セグメント化が完了した後に、１つの
セグメント化された文字に属するストロークが１ブロッ
クで箱に囲まれる形で、セグメント化結果を表示する
（隣接する箱に囲まれたブロックは、間に垂直のギャッ
プが存在する場合に限って分解される。これは、水平の
分離だけが存在し、垂直のギャップが存在しない時にあ
てはめてはならない）。
【００２７】ユーザは、合併動作を実行したい場合に、
マウスをドラッグして、合併したいブロックを含めるこ
とができる。その後、これらのブロックのストロークが
一緒に合併されて、１ブロック内の１文字になる。
マウスをドラッグして、合併したいブロックを含めるこ
とができる。その後、これらのブロックのストロークが
一緒に合併されて、１ブロック内の１文字になる。
【００２８】分割動作の場合、ユーザは、まず分割した
いブロックを選択する必要がある。このブロックのスト
ロークが、強調表示される。その後、ユーザが１ストロ
ークを選択した後に、システムは、そのストロークを分
割して左のブロックの文字の一部にするか、右のブロッ
クの文字の一部にするか、そのストロークを２つの接続
された文字に分割するかをユーザに尋ねる質問をポップ
・アップする。ユーザが１つの選択肢を選択した後に、
システムがその機能を実行する。ユーザは、ストローク
の分割を望む場合に、分割する位置を１つポイントする
必要がある。
いブロックを選択する必要がある。このブロックのスト
ロークが、強調表示される。その後、ユーザが１ストロ
ークを選択した後に、システムは、そのストロークを分
割して左のブロックの文字の一部にするか、右のブロッ
クの文字の一部にするか、そのストロークを２つの接続
された文字に分割するかをユーザに尋ねる質問をポップ
・アップする。ユーザが１つの選択肢を選択した後に、
システムがその機能を実行する。ユーザは、ストローク
の分割を望む場合に、分割する位置を１つポイントする
必要がある。
【００２９】本発明による代替方法は、以下の形で提案
される。システムは、各文字の最後のストローク点の終
りに小さい円を示すことによって、自動セグメント化処
理を介して得られた候補文字境界を表示する。この円
は、カーソルをその位置に移動し、クリックすることに
よって、追加または削除することができる。以下の２つ
の場合を検討する必要がある。 （１）ユーザは、２つの隣接する「候補文字」の合併を
望む場合に、それらを分割する円にカーソルを移動し、
クリックする。ポップ・アップ・メニューが表示され
る。ユーザが、合併の項目を選択した場合には、円が表
示されなくなり、２つの候補文字が、新しい文字の構成
要素とみなされる。この手順を繰り返して、複数の候補
文字を合併することができる。 （２）ユーザは、単一の「候補文字」を２つに分割した
い場合に、所望の正しい境界ストロークの末尾にカーソ
ルを移動し、それをクリックすることができる。ポップ
・アップ・メニューが表示される。ユーザが、文字分割
の項目を選択した場合には、円が表示され、候補文字が
２つに分割される。ある文字の最後のストロークと次の
文字の最初のストロークが接続されている場合には、ユ
ーザは、接続するストロークの中央にカーソルを移動
し、それをクリックして、メニューをポップ・アップす
ることができる。ユーザが、ストローク分割の項目を選
択した場合には、円が表示され、候補文字が、それ相応
に２つに分割される。この手順を繰り返して、候補文字
を複数の文字に分割することができる。
される。システムは、各文字の最後のストローク点の終
りに小さい円を示すことによって、自動セグメント化処
理を介して得られた候補文字境界を表示する。この円
は、カーソルをその位置に移動し、クリックすることに
よって、追加または削除することができる。以下の２つ
の場合を検討する必要がある。 （１）ユーザは、２つの隣接する「候補文字」の合併を
望む場合に、それらを分割する円にカーソルを移動し、
クリックする。ポップ・アップ・メニューが表示され
る。ユーザが、合併の項目を選択した場合には、円が表
示されなくなり、２つの候補文字が、新しい文字の構成
要素とみなされる。この手順を繰り返して、複数の候補
文字を合併することができる。 （２）ユーザは、単一の「候補文字」を２つに分割した
い場合に、所望の正しい境界ストロークの末尾にカーソ
ルを移動し、それをクリックすることができる。ポップ
・アップ・メニューが表示される。ユーザが、文字分割
の項目を選択した場合には、円が表示され、候補文字が
２つに分割される。ある文字の最後のストロークと次の
文字の最初のストロークが接続されている場合には、ユ
ーザは、接続するストロークの中央にカーソルを移動
し、それをクリックして、メニューをポップ・アップす
ることができる。ユーザが、ストローク分割の項目を選
択した場合には、円が表示され、候補文字が、それ相応
に２つに分割される。この手順を繰り返して、候補文字
を複数の文字に分割することができる。
【００３０】上記は、図面と関連して、文字セグメント
化のための本発明によるユーザ・インターフェースの動
作状態を示すものである。
化のための本発明によるユーザ・インターフェースの動
作状態を示すものである。
【００３１】本発明は、手書き情報処理システムでテキ
スト区域／絵区域、手書き行および文字境界を定義する
ための方法であって、前記手書き情報処理システムが、
ユーザの手書き入力の受取および認識のために協力する
手書き情報入力手段および手書き情報認識手段を含み、
前記手書き情報入力手段が、ユーザの手書き入力をスト
ロークとその関連タイミング情報に記録する、上記方法
も提供する。図５からわかるように、テキスト区域／絵
区域、手書き行および文字境界を定義するための本発明
の方法には、時間期間を定義するステップＳ５０１と、
前記時間期間内の手書き入力ストロークをグループ化す
るステップＳ５０２と、他のストロークを区別できる形
で前記ストロークのグループを表示するステップＳ５０
３と、テキスト区域／絵区域、手書き行または文字を形
成し、対応する処理を実行するために前記ストロークの
グループを定義するためのステップＳ５０４、Ｓ５０５
およびＳ５０６とが含まれる。
スト区域／絵区域、手書き行および文字境界を定義する
ための方法であって、前記手書き情報処理システムが、
ユーザの手書き入力の受取および認識のために協力する
手書き情報入力手段および手書き情報認識手段を含み、
前記手書き情報入力手段が、ユーザの手書き入力をスト
ロークとその関連タイミング情報に記録する、上記方法
も提供する。図５からわかるように、テキスト区域／絵
区域、手書き行および文字境界を定義するための本発明
の方法には、時間期間を定義するステップＳ５０１と、
前記時間期間内の手書き入力ストロークをグループ化す
るステップＳ５０２と、他のストロークを区別できる形
で前記ストロークのグループを表示するステップＳ５０
３と、テキスト区域／絵区域、手書き行または文字を形
成し、対応する処理を実行するために前記ストロークの
グループを定義するためのステップＳ５０４、Ｓ５０５
およびＳ５０６とが含まれる。
【００３２】添付図面と関連する上の説明で、文字セグ
メント化のための本発明によるユーザ・インターフェー
スを有する手書き情報処理システムと、手書き情報処理
システム内でテキスト区域／絵区域、手書き行および文
字境界を定義するための方法を示した。当業者によって
理解されるとおり、本発明は、上の例に制限されない。
本発明の趣旨および範囲が侵害されないという前提の下
で、本発明に対してさまざまな修正および変更を行うこ
とができる。本発明は、これらの修正および変更のすべ
てを含むことをめざしている。本発明の保護の範囲は、
特許請求の範囲によって定義される。
メント化のための本発明によるユーザ・インターフェー
スを有する手書き情報処理システムと、手書き情報処理
システム内でテキスト区域／絵区域、手書き行および文
字境界を定義するための方法を示した。当業者によって
理解されるとおり、本発明は、上の例に制限されない。
本発明の趣旨および範囲が侵害されないという前提の下
で、本発明に対してさまざまな修正および変更を行うこ
とができる。本発明は、これらの修正および変更のすべ
てを含むことをめざしている。本発明の保護の範囲は、
特許請求の範囲によって定義される。
【００３３】まとめとして、本発明の構成に関して以下
の事項を開示する。
の事項を開示する。
【００３４】（１） 手書き情報入力手段と手書き情報
認識手段とを含む手書き情報処理システムであって、前
記手書き情報入力手段および前記手書き情報認識手段
が、ユーザの手書き入力の受入および認識のために協力
し、前記手書き情報入力手段が、前記ユーザの手書き入
力を、ストロークおよびそれに関連するタイミング情報
に記録し、前記手書き情報処理システムが、テキスト区
域／絵区域、手書き行および文字境界の定義をユーザか
ら受け入れるための文字セグメント化ユーザ・インター
フェースを含み、前記手書き情報処理システムが、定義
された時間期間内にユーザによって入力された前記スト
ロークをグループ化して、他のストロークと区別される
モードで前記ストロークのグループを表示する手段をさ
らに含むことを特徴とする、前記手書き情報処理システ
ム。 （２） ユーザが、テキスト区域／絵区域、手書き行お
よび文字境界を定義するために前記タイミング情報によ
って前記ストロークをグループ化することができること
を特徴とする、（１）に記載の手書き情報処理システ
ム。 （３） 前記手書き情報認識手段が、前記ユーザのテキ
スト区域／絵区域の定義によって、文字列の行を自動的
に見つけるか、自動レイアウト分析結果の誤りを訂正す
ることができることを特徴とする、（１）または（２）
のいずれか一項に記載の手書き情報処理システム。 （４） 前記文字セグメント化ユーザ・インターフェー
スが、手書き行の始点および終点のユーザの定義を受け
入れ、前記手書き行の方向を自動的に判定することがで
きることを特徴とする、（１）または（２）のいずれか
一項に記載の手書き情報処理システム。 （５） ユーザによって定義される手書き行の方向が、
前記手書き情報処理システムのデフォルト方向と矛盾す
る時に、前記文字セグメント化ユーザ・インターフェー
スが、それらのうちの１つを調節することができること
を特徴とする、（１）または（２）のいずれか一項に記
載の手書き情報処理システム。 （６） 前記手書き情報認識手段が、前記ユーザの手書
き行の定義によって、文字境界を自動的に判定するか、
自動手書き行識別の誤りを訂正することができることを
特徴とする、（１）または（２）のいずれか一項に記載
の手書き情報処理システム。 （７） 前記手書き情報入力手段が、書込用パッドおよ
び書込用ペンを含み、ユーザが、前記書込用パッド上の
ボタンによって文字境界を定義することができることを
特徴とする、（１）に記載の手書き情報処理システム。 （８） 前記手書き情報入力手段が、書込用パッドおよ
び書込用ペンを含み、ユーザが、前記書込用ペン上のボ
タンによって文字境界を定義することができることを特
徴とする、（１）に記載の手書き情報処理システム。 （９） 前記手書き情報入力手段が、手書きディジタイ
ザと従来の紙ベース記録システムを統合した装置であ
り、ユーザが、紙上の書込フォーマットを定義すること
によって文字境界を定義することができることを特徴と
する、（１）に記載の手書き情報処理システム。 （１０） 前記手書き情報認識手段が、前記ユーザの文
字境界の定義によって自動文字セグメント化結果の誤り
を訂正することができることを特徴とする、（１）、
（２）、（７）または（８）のいずれか一項に記載の手
書き情報処理システム。 （１１） ユーザが、前記文字セグメント化ユーザ・イ
ンターフェースを介して、ストロークに基づく自動文字
セグメント化の誤りを訂正することができることを特徴
とする、（１）または（２）のいずれか一項に記載の手
書き情報処理システム。 （１２） 前記文字セグメント化ユーザ・インターフェ
ースが、ユーザによって指摘された位置で自動文字セグ
メント化の結果を自動的に分割して、それらをストロー
クの２つのグループに分割することができることを特徴
とする、（１１）に記載の手書き情報処理システム。 （１３） 前記文字セグメント化ユーザ・インターフェ
ースが、ユーザによって指摘された位置で自動文字セグ
メント化の結果を自動的に合併することができることを
特徴とする、（１１）に記載の手書き情報処理システ
ム。 （１４） 手書き情報処理システム内でテキスト区域／
絵区域、手書き行および文字境界を定義するための方法
であって、前記手書き情報処理システムが、ユーザの手
書き入力の受入および認識のために協力する手書き情報
入力手段および手書き情報認識手段を含み、ここで前記
手書き情報入力手段が、ユーザの手書き入力を、ストロ
ークおよびそれに関連するタイミング情報に記録し、前
記方法が、時間期間を定義するステップと、前記時間期
間内にユーザによって入力された前記ストロークをグル
ープ化するステップと、他のストロークから区別される
モードで前記ストロークのグループを表示するステップ
と、及びテキスト区域／絵区域、手書き行または文字を
形成するために、前記ストロークのグループを定義する
ステップと、を含むことを特徴とする、前記方法。
認識手段とを含む手書き情報処理システムであって、前
記手書き情報入力手段および前記手書き情報認識手段
が、ユーザの手書き入力の受入および認識のために協力
し、前記手書き情報入力手段が、前記ユーザの手書き入
力を、ストロークおよびそれに関連するタイミング情報
に記録し、前記手書き情報処理システムが、テキスト区
域／絵区域、手書き行および文字境界の定義をユーザか
ら受け入れるための文字セグメント化ユーザ・インター
フェースを含み、前記手書き情報処理システムが、定義
された時間期間内にユーザによって入力された前記スト
ロークをグループ化して、他のストロークと区別される
モードで前記ストロークのグループを表示する手段をさ
らに含むことを特徴とする、前記手書き情報処理システ
ム。 （２） ユーザが、テキスト区域／絵区域、手書き行お
よび文字境界を定義するために前記タイミング情報によ
って前記ストロークをグループ化することができること
を特徴とする、（１）に記載の手書き情報処理システ
ム。 （３） 前記手書き情報認識手段が、前記ユーザのテキ
スト区域／絵区域の定義によって、文字列の行を自動的
に見つけるか、自動レイアウト分析結果の誤りを訂正す
ることができることを特徴とする、（１）または（２）
のいずれか一項に記載の手書き情報処理システム。 （４） 前記文字セグメント化ユーザ・インターフェー
スが、手書き行の始点および終点のユーザの定義を受け
入れ、前記手書き行の方向を自動的に判定することがで
きることを特徴とする、（１）または（２）のいずれか
一項に記載の手書き情報処理システム。 （５） ユーザによって定義される手書き行の方向が、
前記手書き情報処理システムのデフォルト方向と矛盾す
る時に、前記文字セグメント化ユーザ・インターフェー
スが、それらのうちの１つを調節することができること
を特徴とする、（１）または（２）のいずれか一項に記
載の手書き情報処理システム。 （６） 前記手書き情報認識手段が、前記ユーザの手書
き行の定義によって、文字境界を自動的に判定するか、
自動手書き行識別の誤りを訂正することができることを
特徴とする、（１）または（２）のいずれか一項に記載
の手書き情報処理システム。 （７） 前記手書き情報入力手段が、書込用パッドおよ
び書込用ペンを含み、ユーザが、前記書込用パッド上の
ボタンによって文字境界を定義することができることを
特徴とする、（１）に記載の手書き情報処理システム。 （８） 前記手書き情報入力手段が、書込用パッドおよ
び書込用ペンを含み、ユーザが、前記書込用ペン上のボ
タンによって文字境界を定義することができることを特
徴とする、（１）に記載の手書き情報処理システム。 （９） 前記手書き情報入力手段が、手書きディジタイ
ザと従来の紙ベース記録システムを統合した装置であ
り、ユーザが、紙上の書込フォーマットを定義すること
によって文字境界を定義することができることを特徴と
する、（１）に記載の手書き情報処理システム。 （１０） 前記手書き情報認識手段が、前記ユーザの文
字境界の定義によって自動文字セグメント化結果の誤り
を訂正することができることを特徴とする、（１）、
（２）、（７）または（８）のいずれか一項に記載の手
書き情報処理システム。 （１１） ユーザが、前記文字セグメント化ユーザ・イ
ンターフェースを介して、ストロークに基づく自動文字
セグメント化の誤りを訂正することができることを特徴
とする、（１）または（２）のいずれか一項に記載の手
書き情報処理システム。 （１２） 前記文字セグメント化ユーザ・インターフェ
ースが、ユーザによって指摘された位置で自動文字セグ
メント化の結果を自動的に分割して、それらをストロー
クの２つのグループに分割することができることを特徴
とする、（１１）に記載の手書き情報処理システム。 （１３） 前記文字セグメント化ユーザ・インターフェ
ースが、ユーザによって指摘された位置で自動文字セグ
メント化の結果を自動的に合併することができることを
特徴とする、（１１）に記載の手書き情報処理システ
ム。 （１４） 手書き情報処理システム内でテキスト区域／
絵区域、手書き行および文字境界を定義するための方法
であって、前記手書き情報処理システムが、ユーザの手
書き入力の受入および認識のために協力する手書き情報
入力手段および手書き情報認識手段を含み、ここで前記
手書き情報入力手段が、ユーザの手書き入力を、ストロ
ークおよびそれに関連するタイミング情報に記録し、前
記方法が、時間期間を定義するステップと、前記時間期
間内にユーザによって入力された前記ストロークをグル
ープ化するステップと、他のストロークから区別される
モードで前記ストロークのグループを表示するステップ
と、及びテキスト区域／絵区域、手書き行または文字を
形成するために、前記ストロークのグループを定義する
ステップと、を含むことを特徴とする、前記方法。
【図１】文字セグメント化のためのユーザ・インターフ
ェースを有する、本発明の手書き情報処理システムを示
すブロック図である。
ェースを有する、本発明の手書き情報処理システムを示
すブロック図である。
【図２】ユーザによるテキスト区域／絵区域の定義を受
け入れる時の、文字セグメント化のための本発明のユー
ザ・インターフェースの動作状態を示す図である。
け入れる時の、文字セグメント化のための本発明のユー
ザ・インターフェースの動作状態を示す図である。
【図３】ユーザによる手書きの行の定義を受け入れる時
の、文字セグメント化のための本発明のユーザ・インタ
ーフェースの動作状態を示す図である。
の、文字セグメント化のための本発明のユーザ・インタ
ーフェースの動作状態を示す図である。
【図４】ユーザによる文字境界の定義を受け入れる時
の、文字セグメント化のための本発明のユーザ・インタ
ーフェースの動作状態を示す図である。
の、文字セグメント化のための本発明のユーザ・インタ
ーフェースの動作状態を示す図である。
【図５】手書き情報処理システムでテキスト区域／絵区
域、手書き行および文字境界を定義するための本発明の
方法を示す流れ図である。
域、手書き行および文字境界を定義するための本発明の
方法を示す流れ図である。
１００ 手書き情報処理システム
１０１ 手書き情報入力手段
１０２ 手書き情報認識手段
１０１３ 不揮発性メモリ
１０１５ 入出力ポート
─────────────────────────────────────────────────────
フロントページの続き
(51)Int.Cl.7 識別記号 ＦＩ
Ｇ０６Ｋ 9/20 ３４０ Ｇ０６Ｋ 9/20 ３４０Ｂ
9/32 9/32
9/34 9/34
(72)発明者 ドナルド・ティー・タン
中国100101 北京市朝陽区エイシアン・
ゲイムズ・ビレッジ フイユアン・イン
ターナショナル・アパートメンツ ディ
ー棟 アパートメント 1708
(72)発明者 スー・フイ
中国100085 北京市海淀区シャンジ ６
番ストリート 26 ファファン・ビルデ
ィング ５階
(72)発明者 ワン・チェンイン
中国100036 北京市ツイウェイ・ロード
16 ３−343号室
(56)参考文献 特開 平６−110993（ＪＰ，Ａ)
特開 平６−266899（ＪＰ，Ａ)
特開 平７−44657（ＪＰ，Ａ)
特開 平８−161426（ＪＰ，Ａ)
特開 平10−97591（ＪＰ，Ａ)
特開 平７−57053（ＪＰ，Ａ)
特開 昭64−10395（ＪＰ，Ａ)
(58)調査した分野(Int.Cl.7，ＤＢ名)
G06K 9/00 - 9/82
G06F 3/00
G06F 3/03
G06F 17/22
Claims (14)
- 【請求項１】手書き情報入力手段と手書き情報認識手段
とを含む手書き情報処理システムであって、前記手書き
情報入力手段および前記手書き情報認識手段が、ユーザ
の手書き入力の受入および認識のために協力し、前記手
書き情報入力手段が、前記ユーザの手書き入力を、スト
ロークおよびそれに関連するタイミング情報に記録し、 前記手書き情報処理システムが、テキスト区域／絵区
域、手書き行および文字境界の定義をユーザから受け入
れるための文字セグメント化ユーザ・インターフェース
を含み、前記手書き情報処理システムが、定義された時間期間内
にユーザによって入力された前記ストロークをグループ
化して、他のストロークと区別されるモードで前記スト
ロークのグループを表示する手段をさらに含む ことを特
徴とする、前記手書き情報処理システム。 - 【請求項２】ユーザが、テキスト区域／絵区域、手書き
行および文字境界を定義するために前記タイミング情報
によって前記ストロークをグループ化することができる
ことを特徴とする、請求項１に記載の手書き情報処理シ
ステム。 - 【請求項３】前記手書き情報認識手段が、前記ユーザの
テキスト区域／絵区域の定義によって、文字列の行を自
動的に見つけるか、自動レイアウト分析結果の誤りを訂
正することができることを特徴とする、請求項１または
２のいずれか一項に記載の手書き情報処理システム。 - 【請求項４】前記文字セグメント化ユーザ・インターフ
ェースが、手書き行の始点および終点のユーザの定義を
受け入れ、前記手書き行の方向を自動的に判定すること
ができることを特徴とする、請求項１または２のいずれ
か一項に記載の手書き情報処理システム。 - 【請求項５】ユーザによって定義される手書き行の方向
が、前記手書き情報処理システムのデフォルト方向と矛
盾する時に、前記文字セグメント化ユーザ・インターフ
ェースが、それらのうちの１つを調節することができる
ことを特徴とする、請求項１または２のいずれか一項に
記載の手書き情報処理システム。 - 【請求項６】 前記手書き情報認識手段が、前記ユーザ
の手書き行の定義によって、文字境界を自動的に判定す
るか、自動手書き行識別の誤りを訂正することができる
ことを特徴とする、請求項１または２のいずれか一項に
記載の手書き情報処理システム。 - 【請求項７】前記手書き情報入力手段が、書込用パッド
および書込用ペンを含み、ユーザが、前記書込用パッド
上のボタンによって文字境界を定義することができるこ
とを特徴とする、請求項１に記載の手書き情報処理シス
テム。 - 【請求項８】前記手書き情報入力手段が、書込用パッド
および書込用ペンを含み、ユーザが、前記書込用ペン上
のボタンによって文字境界を定義することができること
を特徴とする、請求項１に記載の手書き情報処理システ
ム。 - 【請求項９】前記手書き情報入力手段が、手書きディジ
タイザと従来の紙ベース記録システムを統合した装置で
あり、ユーザが、紙上の書込フォーマットを定義するこ
とによって文字境界を定義することができることを特徴
とする、請求項１に記載の手書き情報処理システム。 - 【請求項１０】前記手書き情報認識手段が、前記ユーザ
の文字境界の定義によって自動文字セグメント化結果の
誤りを訂正することができることを特徴とする、請求項
１、２、７または８のいずれか一項に記載の手書き情報
処理システム。 - 【請求項１１】ユーザが、前記文字セグメント化ユーザ
・インターフェースを介して、ストロークに基づく自動
文字セグメント化の誤りを訂正することができることを
特徴とする、請求項１または２のいずれか一項に記載の
手書き情報処理システム。 - 【請求項１２】前記文字セグメント化ユーザ・インター
フェースが、ユーザによって指摘された位置で自動文字
セグメント化の結果を自動的に分割して、それらをスト
ロークの２つのグループに分割することができることを
特徴とする、請求項１１に記載の手書き情報処理システ
ム。 - 【請求項１３】前記文字セグメント化ユーザ・インター
フェースが、ユーザによって指摘された位置で自動文字
セグメント化の結果を自動的に合併することができるこ
とを特徴とする、請求項１１に記載の手書き情報処理シ
ステム。 - 【請求項１４】手書き情報処理システム内でテキスト区
域／絵区域、手書き行および文字境界を定義するための
方法であって、前記手書き情報処理システムが、ユーザ
の手書き入力の受入および認識のために協力する手書き
情報入力手段および手書き情報認識手段を含み、ここで 前記手書き情報入力手段が、ユーザの手書き入力
を、ストロークおよびそれに関連するタイミング情報に
記録し、 前記方法が、 時間期間を定義するステップと、 前記時間期間内にユーザによって入力された前記ストロ
ークをグループ化するステップと、 他のストロークから区別されるモードで前記ストローク
のグループを表示するステップと、及びテキスト区域／
絵区域、手書き行または文字を形成するために、前記ス
トロークのグループを定義するステップと、 を含むことを特徴とする、前記方法。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CNB991009398A CN1173247C (zh) | 1999-01-13 | 1999-01-13 | 具有文字分割用户接口的手写信息处理系统 |
| CN99100939.8 | 1999-01-13 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2000227941A JP2000227941A (ja) | 2000-08-15 |
| JP3427928B2 true JP3427928B2 (ja) | 2003-07-22 |
Family
ID=5270243
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000002362A Expired - Lifetime JP3427928B2 (ja) | 1999-01-13 | 2000-01-11 | 手書き情報処理システムおよび方法 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US6600834B1 (ja) |
| JP (1) | JP3427928B2 (ja) |
| KR (1) | KR100359961B1 (ja) |
| CN (1) | CN1173247C (ja) |
| TW (1) | TW513656B (ja) |
Families Citing this family (38)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7774715B1 (en) * | 2000-06-23 | 2010-08-10 | Ecomsystems, Inc. | System and method for computer-created advertisements |
| JP4050055B2 (ja) * | 2002-01-10 | 2008-02-20 | 株式会社リコー | 手書き文字一括変換装置、手書き文字一括変換方法およびプログラム |
| US7751623B1 (en) * | 2002-06-28 | 2010-07-06 | Microsoft Corporation | Writing guide for a free-form document editor |
| US7490296B2 (en) * | 2003-01-31 | 2009-02-10 | Microsoft Corporation | Utility object for specialized data entry |
| JP4038771B2 (ja) * | 2003-10-28 | 2008-01-30 | ソニー株式会社 | 携帯型情報端末装置および情報処理方法、記録媒体、並びにプログラム |
| US7961943B1 (en) * | 2005-06-02 | 2011-06-14 | Zeevi Eli I | Integrated document editor |
| US7936339B2 (en) * | 2005-11-01 | 2011-05-03 | Leapfrog Enterprises, Inc. | Method and system for invoking computer functionality by interaction with dynamically generated interface regions of a writing surface |
| US7929769B2 (en) * | 2005-12-13 | 2011-04-19 | Microsoft Corporation | Script recognition for ink notes |
| US7664325B2 (en) * | 2005-12-21 | 2010-02-16 | Microsoft Corporation | Framework for detecting a structured handwritten object |
| US7583841B2 (en) * | 2005-12-21 | 2009-09-01 | Microsoft Corporation | Table detection in ink notes |
| KR100869712B1 (ko) * | 2007-02-09 | 2008-11-21 | (주)펜앤프리 | 필기 입력 방법 및 장치와 이를 이용하는 입력 시스템 |
| CN101561725B (zh) * | 2008-04-16 | 2010-12-08 | 汉王科技股份有限公司 | 一种手写快速输入的方法和系统 |
| CN101833411B (zh) * | 2009-03-09 | 2015-09-16 | 诺基亚公司 | 用于笔迹输入的方法和设备 |
| KR101080255B1 (ko) * | 2009-07-21 | 2011-11-08 | (주)펜앤프리 | 필기 패턴에 따른 필기 정보 입력 장치 및 필기 정보 입력 방법 |
| TWI490734B (zh) | 2009-11-23 | 2015-07-01 | Htc Corp | 動態調整手寫輸入之等待時間的方法、電子設備及其相關電腦程式產品 |
| KR101548835B1 (ko) * | 2010-12-02 | 2015-09-11 | 노키아 코포레이션 | 중첩 수기를 위한 방법, 장치 및 컴퓨터 프로그램 제품 |
| CN102156609B (zh) * | 2010-12-10 | 2012-12-19 | 上海合合信息科技发展有限公司 | 一种重叠书写的手写输入方法 |
| CN102169413A (zh) * | 2011-03-30 | 2011-08-31 | 黄冬明 | 基于视频流图像获得字符笔划线条的装置及方法 |
| US20120281919A1 (en) * | 2011-05-06 | 2012-11-08 | King Abdul Aziz City For Science And Technology | Method and system for text segmentation |
| JP5377708B2 (ja) * | 2012-05-11 | 2013-12-25 | 株式会社東芝 | データ処理システム、データ処理方法およびプログラム |
| WO2013178867A1 (en) * | 2012-05-31 | 2013-12-05 | Multitouch Oy | User interface for drawing with electronic devices |
| JP5284523B1 (ja) * | 2012-09-05 | 2013-09-11 | 株式会社東芝 | 情報処理システム、プログラムおよび情報処理システムの処理方法 |
| US9317767B2 (en) * | 2012-10-17 | 2016-04-19 | Cognex Corporation | System and method for selecting segmentation parameters for optical character recognition |
| US9286534B2 (en) * | 2012-10-17 | 2016-03-15 | Cognex Corporation | System and method for selecting and displaying segmentation parameters for optical character recognition |
| JP2014115894A (ja) * | 2012-12-11 | 2014-06-26 | Canon Inc | 表示装置 |
| CN103064946B (zh) * | 2012-12-26 | 2015-10-28 | 天津三星通信技术研究有限公司 | 手写原笔迹保存方法及装置、手写原笔迹检索方法及装置 |
| JP6038700B2 (ja) * | 2013-03-25 | 2016-12-07 | 株式会社東芝 | 整形装置 |
| CN103309520A (zh) * | 2013-05-20 | 2013-09-18 | 南京恒知讯科技有限公司 | 一种屏幕操作轨迹和声音输入同步存储处理方法、系统及终端 |
| US9881224B2 (en) * | 2013-12-17 | 2018-01-30 | Microsoft Technology Licensing, Llc | User interface for overlapping handwritten text input |
| JP6279373B2 (ja) * | 2014-03-20 | 2018-02-14 | 株式会社東芝 | 補正装置、方法及びプログラム |
| KR20160062565A (ko) * | 2014-11-25 | 2016-06-02 | 삼성전자주식회사 | 디바이스 및 디바이스의 필기 컨텐트 제공 방법 |
| CN105868590B (zh) | 2015-01-19 | 2019-09-10 | 阿里巴巴集团控股有限公司 | 一种笔迹数据处理方法和装置 |
| JP2016181057A (ja) * | 2015-03-23 | 2016-10-13 | 株式会社東芝 | 画像処理装置、画像処理方法及び画像処理プログラム |
| WO2017022090A1 (ja) * | 2015-08-04 | 2017-02-09 | 株式会社ワコム | 手書きデータ描画方法及び手書きデータ描画装置 |
| US10410316B2 (en) * | 2015-12-08 | 2019-09-10 | Myscript | System and method for beautifying digital ink |
| KR20210017063A (ko) | 2019-08-06 | 2021-02-17 | 삼성전자주식회사 | 전자 장치 및 그의 필기 입력을 처리하는 방법 |
| CN111383505B (zh) * | 2020-03-04 | 2021-11-09 | 南京大学 | 一种基于笔交互的电路教学系统及方法 |
| CN113297892B (zh) * | 2020-11-27 | 2022-06-14 | 上海交通大学 | 针对形近汉字的图像优化识别系统 |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6410395A (en) | 1987-07-03 | 1989-01-13 | Brother Ind Ltd | Recognizing system for handwriting input character and the ink |
| US5870492A (en) * | 1992-06-04 | 1999-02-09 | Wacom Co., Ltd. | Hand-written character entry apparatus |
| JPH06110993A (ja) | 1992-09-30 | 1994-04-22 | Canon Inc | 文書作成装置 |
| US5396566A (en) * | 1993-03-04 | 1995-03-07 | International Business Machines Corporation | Estimation of baseline, line spacing and character height for handwriting recognition |
| JPH06266899A (ja) | 1993-03-11 | 1994-09-22 | Hitachi Ltd | 手書き入力システム |
| JPH0744657A (ja) | 1993-07-31 | 1995-02-14 | Sony Corp | 手書き筆跡記入ペン、手書き情報記録媒体、手書き情報記録装置、及び手書き情報認識装置 |
| JP3353954B2 (ja) | 1993-08-13 | 2002-12-09 | ソニー株式会社 | 手書き入力表示方法および手書き入力表示装置 |
| JPH08161426A (ja) | 1994-12-09 | 1996-06-21 | Sharp Corp | 手書き文字ストローク切出し装置 |
| JPH1097591A (ja) | 1996-09-20 | 1998-04-14 | Toshiba Corp | 枠なしオンライン文字認識装置 |
| US6408092B1 (en) * | 1998-08-31 | 2002-06-18 | Adobe Systems Incorporated | Handwritten input in a restricted area |
| US6389166B1 (en) * | 1998-10-26 | 2002-05-14 | Matsushita Electric Industrial Co., Ltd. | On-line handwritten Chinese character recognition apparatus |
-
1999
- 1999-01-13 CN CNB991009398A patent/CN1173247C/zh not_active Expired - Lifetime
- 1999-03-25 TW TW088104735A patent/TW513656B/zh not_active IP Right Cessation
-
2000
- 2000-01-08 KR KR1020000000762A patent/KR100359961B1/ko not_active IP Right Cessation
- 2000-01-11 JP JP2000002362A patent/JP3427928B2/ja not_active Expired - Lifetime
- 2000-01-12 US US09/481,156 patent/US6600834B1/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| KR100359961B1 (ko) | 2002-11-04 |
| US6600834B1 (en) | 2003-07-29 |
| CN1260526A (zh) | 2000-07-19 |
| CN1173247C (zh) | 2004-10-27 |
| JP2000227941A (ja) | 2000-08-15 |
| TW513656B (en) | 2002-12-11 |
| KR20000057730A (ko) | 2000-09-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3427928B2 (ja) | 手書き情報処理システムおよび方法 | |
| JP4244614B2 (ja) | 手書き入力装置、プログラムおよび手書き入力方法システム | |
| JP2022116104A (ja) | リアルタイム手書き認識の管理 | |
| US7409089B2 (en) | Writing guide for a free-form document editor | |
| EP1145101B1 (en) | Pen based edit correction interface method | |
| US8913832B2 (en) | Method and device for interacting with a map | |
| JP3471919B2 (ja) | 機械作動方法及びプロセッサ制御機械を作動するために使用する方法 | |
| US20040193697A1 (en) | Accessing a remotely-stored data set and associating notes with that data set | |
| JP2003308480A (ja) | オンライン手書き文字パターン認識編集装置及び方法並びに当該方法を実現するコンピュータ実行可能なプログラム | |
| JPH11143986A (ja) | ビットマップイメージの処理方法及び処理装置、ビットマップイメージの処理を行うイメージ処理プログラムを格納した記憶媒体 | |
| US6421461B1 (en) | Pattern recognition apparatus which compares input pattern feature and size data to registered feature and size pattern data, an apparatus for registering feature and size data, and corresponding methods and memory media therefor | |
| JP4807400B2 (ja) | 手書き入力装置、プログラムおよび手書き入力方法システム | |
| JP3467437B2 (ja) | 文字認識装置及びその方法とプログラム記録媒体 | |
| JP4148867B2 (ja) | 筆跡処理装置 | |
| CN100386774C (zh) | 显示识别的手写符号的方法和设备 | |
| JP3977473B2 (ja) | 手書き文字認識方法及び手書き文字認識装置 | |
| JP4263089B2 (ja) | 情報処理装置、情報処理方法、プログラム及び記録媒体 | |
| WO2024065345A1 (zh) | 隔空手势编辑方法、装置、显示系统及介质 | |
| CN113157194B (zh) | 文本显示方法以及电子设备、存储装置 | |
| JPS608991A (ja) | オンライン手書文字認識辞書登録方式 | |
| JPH11345071A (ja) | ジェスチャ―処理装置及びジェスチャ―処理方法 | |
| JPS61194583A (ja) | 手書き文字認識装置 | |
| JPH10124610A (ja) | 光学式文字読取装置 | |
| JPH09259225A (ja) | 文字認識変換方法及び文字データ処理装置 | |
| JPH1049627A (ja) | オンライン文字認識方法および装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| TRDD | Decision of grant or rejection written | ||
| R150 | Certificate of patent or registration of utility model |
Ref document number: 3427928 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080516 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080516 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090516 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100516 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110516 Year of fee payment: 8 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110516 Year of fee payment: 8 |
|
| R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120516 Year of fee payment: 9 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120516 Year of fee payment: 9 |
|
| R370 | Written measure of declining of transfer procedure |
Free format text: JAPANESE INTERMEDIATE CODE: R370 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120516 Year of fee payment: 9 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120516 Year of fee payment: 9 |
|
| R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120516 Year of fee payment: 9 |
|
| R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120516 Year of fee payment: 9 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120516 Year of fee payment: 9 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120516 Year of fee payment: 9 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120516 Year of fee payment: 9 |
|
| S202 | Request for registration of non-exclusive licence |
Free format text: JAPANESE INTERMEDIATE CODE: R315201 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120516 Year of fee payment: 9 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130516 Year of fee payment: 10 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |