JPH05135213A - 文書処理装置 - Google Patents

Abstract

(57)【要約】 【目的】 既入力文章への文字の挿入や追加入力など、
単語や文節の一部が筆記される場合でも、高精度に文字
を認識できる文書処理装置を実現するものである。 【構成】 ペンの座標検出部１ｂから入力されたペンの
筆跡座標データから文字認識装置７で文字あるいは文字
挿入記号を認識し、文字挿入記号が認識された場合、挿
入位置判定装置４、文字・挿入記号切り出し装置３でそ
の記号に対応する挿入位置と挿入対象となる文字集合あ
るいは筆跡座標データを特定する。次に、既入力文章・
筆記文字列組み合わせ言語処理装置１１で既入力されて
いる特定の文字集合と挿入対象となる文字集合を合わせ
て言語処理し、その言語処理結果に基づいてその文字・
挿入記号切り出し装置３で特定された文字集合あるいは
筆跡座標データの文字認識装置７での認識結果である複
数候補の中から適切な候補を選択する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、手書き情報を認識する
機能を備えた文書処理装置に関する。

【０００２】

【従来の技術】従来の文書処理装置の入力は、周知のキ
ーボード、マウスが主流となっているが、これらの操作
は人間の感覚に対し不自然であり、慣れるのに労力を要
している。このため、ペンで位置を指定したり、ペンで
筆記した文字を認識して文字を入力するものが注目され
ている。

【０００３】このような手書き入力を可能とした文書処
理装置においては、高い精度の文字認識を実現するた
め、筆記された文字の形状識別の他、筆記された文字列
の各文字認識結果を組み合わせての単語照合や文節処理
などの後処理を行い、その結果を認識に反映する試みが
行われている。（特開昭５９−１１７６７３号公報記載
に詳しい）しかし、従来の後処理は、筆記された文字に
対してのみ行うものであるため、既入力文章への文字の
挿入や追加入力など、単語や文節の一部が筆記される場
合では、単語照合や文節処理の後処理の効果はなく、ま
た後処理の結果が認識に悪影響を及ぼすケースもあると
いう問題点がある。

【０００４】

【発明が解決しようとする課題】本発明の文書処理装置
は、既入力文章への文字の挿入や追加入力など、単語や
文節の一部が筆記される場合でも、高精度に文字を認識
できる文書処理装置を実現するものである。

【０００５】

【課題を解決するための手段】本発明の文書処理装置
は、ペンの筆跡座標データを入力するための座標入力手
段と、該座標入力手段で入力された筆跡座標データから
複数候補の文字集合と文字挿入記号を認識する認識手段
と、該認識手段で認識された文字集合及び上記筆跡を表
示する表示手段と、上記認識手段で認識された文字挿入
記号に対応する挿入位置と挿入対象となる文字集合ある
いは筆跡座標データを特定する特定手段とを備えたもの
であって、上記特定手段で特定された文字集合あるいは
筆跡座標データの認識手段での認識結果を上記挿入位置
に挿入する場合、既入力されている特定の文字集合と上
記挿入対象となる文字集合あるいは筆跡座標データの上
記認識手段での認識結果を合わせて言語処理する言語処
理手段と、該言語処理手段での言語処理結果に基づいて
上記特定手段で特定された文字集合あるいは筆跡座標デ
ータの上記認識手段での認識結果である上記複数候補の
中から適切な候補を選択することを特徴とする。

【０００６】また、本発明の文書処理装置は、ペンの筆
跡座標データを入力するための座標入力手段と、該座標
入力手段で入力された筆跡座標データから文字集合と該
文字位置を認識する認識手段と、該認識手段で認識され
た文字集合及び上記筆跡を表示する表示手段とを備えた
ものであって、上記認識手段で認識された文字集合と既
入力の文字集合との位置関係を特定する位置関係特定手
段と、該位置関係特定手段によって上記文字集合と既入
力の文字集合が関連した位置にあると判定された場合に
上記文字集合と既入力の文字集合を合わせて言語処理す
る言語処理手段と、該言語処理手段での言語処理結果に
基づいて上記特定手段で特定された文字集合あるいは筆
跡座標データの上記認識手段での認識結果である上記複
数候補の中から適切な候補を選択することを特徴とす
る。

【０００７】

【作用】本発明の文書処理装置においては、座標入力手
段で入力されたペンの筆跡座標データから認識手段で文
字あるいは文字挿入記号を認識し、文字挿入記号が認識
された場合、特定手段でその記号に対応する挿入位置と
挿入対象となる文字集合あるいは筆跡座標データを特定
する。次に、言語処理手段で既入力されている特定の文
字集合と挿入対象となる文字集合を合わせて言語処理
し、その言語処理結果に基づいてその特定手段で特定さ
れた文字集合あるいは筆跡座標データの認識手段での認
識結果である複数候補の中から適切な候補を選択する。

【０００８】

【実施例】以下、本発明に係る実施例を図１〜図１３に
基づき詳述する。

【０００９】図１は本発明の一実施例の文書処理装置の
機能構成を示すブロック図である。

【００１０】同図に於て、表示入力一体型タブレット１
（以下タブレット）はＬＣＤ表示部１ａ（以下表示部）
とペンの座標検出部１ｂが一体なった装置であり、１ａ
の座標と１ｂの座標は１対１で対応している。

【００１１】文書編集装置２には文書を管理するための
文書メモリ２ａが付属しており、文書編集装置２は文書
メモリ２ａの内容に基ずいて文書をタブレット１のＬＣ
Ｄ表示部１ａに表示する。

【００１２】タブレット１用のペンでタブレット１上に
文字や編集記号を筆記すると、座標検出部１ｂが一定時
間間隔でペンの座標（ｘ，ｙ）を検出し、ペンの筆跡を
示す時系列の座標データ（以下、筆跡座標データ）を文
書編集装置２に送る。文書編集装置２はタブレット１の
座標検出部１ｂから受け取った筆跡座標データに基ずい
てタブレット１の表示部１ａにペンの筆跡を表示する。

【００１３】また、文書編集装置２は、３〜１２を制御
することにより、筆跡座標データ、筆記されたストロー
ク間でペンがタブレット１から離れている時間（以下、
ペンアップ時間）、及び文書メモリ２ａの内容から筆記
された文字を認識し、文字の挿入、入力などの編集を行
い、文書メモリ２ａの内容を変更すると共に、表示部１
ａに表示されている筆跡を消去し、変更した文書内容を
表示する。

【００１４】以下、文書編集装置２が、３〜１２を制御
して、筆記された文字を認識する動作を説明する。

【００１５】図２は、文書メモリ２ａに存在する既入力
文章ａが表示部１ａに表示されており、この既入力文章
ａの「日本の首都」と「京都である」の間に「は東」の
文字列を挿入するために、挿入記号ｂと文字列ｃを筆記
した状態を示している。

【００１６】文書編集装置２は、座標検出部１ｂから受
け取った挿入文字ｂと文字列ｃの筆跡座標データ、スト
ロークのペンアップ時間を文字・挿入記号切り出し装置
３に送る。文字・挿入記号切り出し装置３は、受け取っ
た筆跡座標データから各ストロークの形状を認識し、筆
跡座標データの中の挿入記号の形状をしたストロークが
存在するか、その認識結果、ストロークの大きさ、スト
ロークの位置関係、受け取ったストローク間のペンアッ
プ時間から、挿入記号ｂが筆記されたか否か、どのスト
ロークが挿入記号ｂであるかを識別し、挿入記号ｂと文
字列ｃを切り出し、この結果を文書編集装置２に返す。

【００１７】文書編集装置２は、受け取った挿入記号ｂ
と文字列ｃの切り出し結果に基づいて、挿入記号ｂの筆
跡座標データを挿入位置判定装置４に送る。挿入位置判
定装置４は、受け取った挿入記号ｂの筆跡座標データか
ら挿入位置を示すストローク上の座標点ｂ１を求め、座
標点ｂ１と既入力文章ａとの位置関係により、文字の挿
入位置（既入力文章の「日本の首都」の直後）を求め、
文字の挿入位置を文書編集装置２に返す。

【００１８】また、文書編集装置２は文字列ｃの座標デ
ータとストローク間のペンアップ時間を文字切り出し装
置６に送る。文字切り出し装置６は、受け取った文字列
ｃの座標データからストロークの位置関係、１文字分と
想定されるストローク列を囲む矩形領域の縦と横の比を
求め、これらの結果と受け取ったストローク間のペンア
ップ時間により、１文字単位の文字切り出し位置を求
め、この文字切り出し位置を文書編集装置２に返す。図
３のｃ３は筆記された文字列（図２のｃ）の文字切り出
し位置、ｃ１、ｃ２は切り出した文字を示す。

【００１９】文字切り出し位置に基づいて、文書編集装
置２は、筆跡座標データを１文字づつ文字認識装置７に
送る。文字認識装置７に付属する文字認識辞書７ａには
認識対象（漢字、ひらがな、英字、数字、記号）の文字
毎に、文字の正規画数、文字を構成するストロークの形
状、ストロークの位置関係、あらかじめ標準文字パター
ンとして収集した各筆記文字を囲む矩形領域の四辺の各
座標からストロークまでの距離の分布などの文字の特徴
量が登録されている。文字認識装置７は、受け取った１
文字の筆跡座標データから文字の特徴量を算出し、文字
認識辞書７ａの各文字の特徴量と照合する。照合度の高
い文字を文字認識候補、照合度を文字類似度として、文
書編集装置２に返す。図４に図３の文字ｃ１，ｃ２に対
する認識結果を示す。

【００２０】文書編集装置２は、文字認識装置７から筆
記された１文字毎の認識候補、それぞれの文字類似度を
受け取り、筆記された全文字分の文字認識候補、それぞ
れの文字類似度を文字認識候補の組み合わせ装置８に送
る。文字認識候補の組み合わせ装置８は、筆記された各
文字の文字認識候補の中から１つずつ文字類似度の高い
順に文字認識候補を選択して、その選択した筆記された
文字数分の文字認識候補列を、筆記された文字順に組み
合わせる処理を繰り返し、全文字認識候補間の組み合わ
せを求め、組み合わせた文字列を文字列認識候補とす
る。また、文字列候補の各文字に対する文字類似度の平
均を文字列認識候補の評価点とする。求めた文字列認識
候補、評価点を文字編集装置２に返す。

【００２１】言語処理装置９は、任意の文字列を入力と
し、付属の文法辞書９ａ、単語辞書９ｂを参照すること
により、入力された文字列に対して文節、自立語の抽
出、動詞・形容詞・形容動詞の活用語尾、助詞・助動詞
などの付属語の正誤判定、自立語の出現頻度を求める装
置である。

【００２２】文書編集装置２は、挿入位置判定装置４か
ら受け取った文字挿入位置の判定結果基づいて、文字挿
入位置の前後の文字列（文字挿入位置から前方、後方そ
れぞれの文字列の中で、文字挿入位置から句読点または
空白までの文字列）を文書メモり２ａから取り出し、既
入力文章・文節処理装置１０に送る。既入力文章・文節
処理装置１０は、受け取った文字挿入位置の前後の文字
列を言語処理装置９に送り、それぞれの文字列の文節の
切れ目を言語処理装置９から受け取る。これにより、既
入力文章における文字挿入位置から前方向の文節、後方
向の文節を求めて、この結果を文書編集装置２に返す。
図６のＡ１〜Ａ４までの文字列は既入力文章（図２の
ａ）であり、Ａ３は文字挿入位置、Ａ１、Ａ２，Ａ４
は、言語処理装置９によって求めた文節の切れ目を示
す。この中で、Ａ２〜Ａ３までの文節「首都」と、Ａ３
〜Ａ４までの文節「京都である」を、既入力文章・文節
処理装置１０から文書編集装置２へ返す。

【００２３】文書編集装置２は、既入力文章・文節処理
装置１０から受け取った文字挿入位置から前、後ろ方向
の文節と、文字認識候補の組み合わせ装置８から受け取
った文字列認識候補を、既入力文章・筆記文字列組み合
わせ・言語処理装置１１に送る。装置１１は、前方向の
文節、文字列認識候補、後方向の文節を、この並びで組
み合わせて文字列を生成する。図７は、図６のＡ２〜Ａ
３の文節、Ａ３〜Ａ４の文節、図５の文字列認識候補の
組み合わせ例である。前方向の文節、文字列認識候補、
後方向の文節の組み合わせにより生成した文字列を、言
語処理装置９に送り、この文字列に対する文節、自立語
の抽出結果、自立語と単語辞書との照合結果、動詞・形
容詞・形容動詞の活用語尾、助詞・助動詞などの付属語
の正誤判定結果、文節長、自立語の出現頻度を、言語処
理装置９から受け取る。装置１１は、これらの結果に基
ずいて、前方向の文節、文字列認識候補、後方向の文節
の組み合わせにより生成した文字列毎に、言語としての
評価点を求める。図８は、図７の組み合わせにより生成
した各文字列に対する、言語としての評価得点の結果例
である。筆記された文字が、既入力文章の文節と結合し
て、単語や文節として成り立てば、高い評価点になる。
この言語としての評価点を文書編集装置２に返す。

【００２４】文書編集装置２は、装置１１から受け取っ
た文字挿入位置から前方向の文節、文字列認識候補、後
方向の文節の組み合わせにより生成した各文字列に対す
る言語としての評価得点と、文字認識候補の組み合わせ
装置８から受け取った文字列認識候補の評価得点を、文
字列認識結果・決定装置１２に送る。

【００２５】文字列認識結果・決定装置１２は、文字挿
入位置から前方向の文節、文字列認識候補、後方向の文
節の組み合わせにより生成した各文字列に対する言語と
しての評価得点と文字列認識候補の評価得点（文字類似
度）の和を、言語処理結果と文字類似度を融合した評価
値として、文字列候補数分求め、最も評価値の高い文字
列候補を筆記された文字列の認識結果として決定し、こ
の結果を文書編集装置２に返す。図９は、図８の言語と
しての評価点と図５の文字列認識候補の評価点（文字類
似度）の和により、前者評価点と後者評価点を融合した
評価点（総合評価点）を求めた結果であり、文字列認識
候補「は東」の評価点が最も高いため、筆記された文字
列は「は東」と決定する。

【００２６】文書編集装置２は、筆記された文字列の認
識結果「は東」を受け取ると、上述の如く、認識結果
「は東」を文字挿入位置（図２の「日本の首都」の後）
に挿入し、文書メモリ２ａを変更すると共に、筆跡（図
２のｂ，ｃ）を消去し、変更した文書メモリ２ａの内容
を表示する。この結果、表示部１ｂには、「日本の首都
は東京都である」と表示される。

【００２７】従来の技術では、筆記された文字に対して
のみ言語処理を行うため、図２の例の場合は、図５に示
すいずれの文字列認識候補に対しても、２文字の単語と
して成立せず、言語処理による評価点では差がつかない
ため、文字列認識候補の評価点（文字類似度）の最も高
い「ほ束」が認識結果となり、認識を誤る。

【００２８】図１０は、既入力文章ｄに続いて、文字ｅ
「天」を筆記した状態を示す。挿入記号が筆記されてい
ないため、文書編集装置２は、筆跡座標データを文字入
力位置判定装置５に送り、文字入力位置判定装置５に於
て、筆記された文字列の位置から文字入力位置を求め、
その結果を入手する。本実施例では、筆記された文字列
を囲む矩形エリアの左辺の中心位置に対応する行・桁位
置を文字挿入位置としている。図１０の例では、「本日
は晴」の直後が文字入力位置となる。文字入力位置から
前方の既入力文章に対する文節の切れ目を、既入力文章
・文節処理装置１０，言語処理装置９により求めると、
図１１のＢ１，Ｂ２になる。筆記された文字に対して文
字認識装置７により文字認識すると、図１２の結果とな
る。筆記された文字は１文字であるため、文字列認識候
補の組み合わせ装置８の結果は図１２と同じになる。既
入力文章・筆記文字列組み合わせ・言語処理装置１１に
より、文字入力位置から前方向の文節Ｂ１〜Ｂ３「晴」
と文字列認識候補を組み合わせると図１３の結果にな
る。この結果、図１３の組み合わせの中で、「晴天」の
単語は単語辞書９ｂにあるが、「晴夫」の単語なないた
め、文字列認識結果・判定装置１２は、筆記された文字
は「天」であると決定する。

【００２９】従来の技術では、筆記された文字に対して
言語処理を行うと、文字認識候補の第１位「夫」、第２
位「天」に対しても自立語として成り立つので、言語と
しての評価点には差がつかないため、文字認識候補の第
１位（文字類似度の高いもの）「夫」を認識結果とし、
認識を誤る。

【００３０】

【発明の効果】本発明の文書処理装置は、既入力文章へ
の文字の挿入や追加入力のために文字が筆記された場合
に、その文字と関連のある既入力の文字集合を特定し、
その文字集合と合わせて言語処理することによって、そ
の言語処理結果に基づきその新たに筆記された文字の認
識結果を確定できるので、より認識性能の高い文書処理
装置が実現できる。

【図面の簡単な説明】

【図１】本発明の一実施例の文書処理装置の構成を示す
ブロック図

【図２】本発明の一実施例の文書処理装置の動作例を説
明するための、既入力文章に挿入挿入記号と文字列を筆
記した状態を示す図

【図３】本発明の一実施例の文書処理装置の動作例を説
明するための、筆記された文字列の文字切り出し結果を
示す図

【図４】本発明の一実施例の文書処理装置の動作例を説
明するための、切り出した１文字毎の認識結果（文字認
識候補）を示す図

【図５】本発明の一実施例の文書処理装置の動作例を説
明するための、文字認識候補の組み合わせ結果を示す図

【図６】本発明の一実施例の文書処理装置の動作例を説
明するための、文字挿入位置から前、後方向の既入力文
章に対する文節処理結果を示す図

【図７】本発明の一実施例の文書処理装置の動作例を説
明するための、文字挿入位置から前、後方向の文節と文
字列認識候補の組み合わせを示す図

【図８】本発明の一実施例の文書処理装置の動作例を説
明するための、文字挿入位置から前、後ろ方向の文節と
文字列認識候補を組み合わせた文字列に対する言語処理
結果を示す図

【図９】本発明の一実施例の文書処理装置の動作例を説
明するための、言語処理結果と文字列認識候補の評価点
（文字類似度）の総合評価結果を示す図

【図１０】本発明の一実施例の文書処理装置の動作例を
説明するための、既入力文章に文字を追加筆記した状態
を示す図

【図１１】本発明の一実施例の文書処理装置の動作例を
説明するための、文字入力位置から前方向の既入力文章
に対する文節処理結果を示す図

【図１２】本発明の一実施例の文書処理装置の動作例を
説明するための、筆記された文字に対する文字認識結果
（文字認識候補）を示す図

【図１３】本発明の一実施例の文書処理装置の動作例を
説明するための、文字入力位置から前方向の文節と文字
列認識候補の組み合わせを示す図

【符号の説明】

１ 表示入力一体型タブレット １ａ ＬＣＤ表示部 １ｂ ペンの座標検出部 ２ 文書編集装置 ２ａ 文書メモリ ３ 文字・挿入記号切り出し装置 ４ 挿入位置判定装置 ５ 文字入力位置判定装置 ６ 文字切り出し装置 ７ 文字認識装置 ７ａ 文字認識辞書 ８ 文字認識候補の組み合わせ装置 ９ 言語処理装置 ９ａ 文法辞書 ９ｂ 単語辞書 １０ 既入力文章・文節処理装置 １１ 既入力文章・筆記文字組み合わせ・言語処理装置 １２ 文字列認識結果・決定装置

───────────────────────────────────────────────────── フロントページの続き (72)発明者 山本 英人 大阪府守口市京阪本通２丁目18番地 三洋 電機株式会社内 (72)発明者 堀井 洋 大阪府守口市京阪本通２丁目18番地 三洋 電機株式会社内

Claims (2)

【特許請求の範囲】
1. 【請求項１】 ペンの筆跡座標データを入力するための
   座標入力手段と、該座標入力手段で入力された筆跡座標
   データから複数候補の文字集合と文字挿入記号を認識す
   る認識手段と、該認識手段で認識された文字集合及び上
   記筆跡を表示する表示手段と、上記認識手段で認識され
   た文字挿入記号に対応する挿入位置と挿入対象となる文
   字集合あるいは筆跡座標データを特定する特定手段とを
   備えた文書処理装置において、 上記特定手段で特定された文字集合あるいは筆跡座標デ
   ータの認識手段での認識結果を上記挿入位置に挿入する
   場合、既入力されている特定の文字集合と上記挿入対象
   となる文字集合あるいは筆跡座標データの上記認識手段
   での認識結果を合わせて言語処理する言語処理手段と、
   該言語処理手段での言語処理結果に基づいて上記特定手
   段で特定された文字集合あるいは筆跡座標データの上記
   認識手段での認識結果である上記複数候補の中から適切
   な候補を選択することを特徴とした文書処理装置。
2. 【請求項２】 ペンの筆跡座標データを入力するための
   座標入力手段と、該座標入力手段で入力された筆跡座標
   データから文字集合と該文字位置を認識する認識手段
   と、該認識手段で認識された文字集合及び上記筆跡を表
   示する表示手段とを備えた文書処理装置において、 上記認識手段で認識された文字集合と既入力の文字集合
   との位置関係を特定する位置関係特定手段と、該位置関
   係特定手段によって上記文字集合と既入力の文字集合が
   関連した位置にあると判定された場合に上記文字集合と
   既入力の文字集合を合わせて言語処理する言語処理手段
   と、該言語処理手段での言語処理結果に基づいて上記特
   定手段で特定された文字集合あるいは筆跡座標データの
   上記認識手段での認識結果である上記複数候補の中から
   適切な候補を選択することを特徴とした文書処理装置。