JPH103515A

JPH103515A - 画像処理方法及び装置

Info

Publication number: JPH103515A
Application number: JP8155508A
Authority: JP
Inventors: Tadanori Nakatsuka; 忠則中塚
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1996-06-17
Filing date: 1996-06-17
Publication date: 1998-01-06

Abstract

(57)【要約】【課題】認識結果の複数の候補文字から所望の文字を
選択する時の操作性を向上し、正しい認識結果文書を得
る作業の効率を上げる。【解決手段】入力した画像の文字を認識し（Ｓ３
２）、前記認識した結果の第一位候補文字を表示し（Ｓ
３３）、指示された文字の上位所定数の候補文字を表示
し（２４）、他候補の指示があった場合には、他の候補
文字を表示する（５１）。その候補文字の表示上で選択
された文字を認識結果とする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、文書画像を入力し
て、該文書画像に含まれる文字等の認識を行う画像処理
方法及び装置に関するものである。

【０００２】本発明は、認識結果を所望のものとする時
の操作性を向上させる画像処理方法及び装置に関するも
のである。

【０００３】

【従来の技術】従来、入力画像を文字認識した結果は、
候補文字の範囲内で変更し、修正することが可能であっ
た。

【０００４】従来、文字認識結果は、第一位の候補文字
を表示し、ユーザによる指示に応じて認識結果として保
持されている第二位以下の候補文字を表示することが可
能であった。

【０００５】従来、認識結果の候補文字に所望の文字が
含まれていない場合に、通常の文書入力機能によりキー
ボードから文字を入力するものはあった。

【０００６】

【発明が解決しようとする課題】上記従来の技術では、
表示した候補の中に正しい文字がない場合にユーザがキ
ーボードから正しい文字を入力する必要があり、認識結
果の修正処理に手間取ってしまう問題があった。これは
特にキーボード入力が不得手なユーザにとって大きな問
題であった。本発明は上記従来例に鑑みてなされたもの
で、第一回目に表示した候補の中に正しい文字がない場
合でも、他の候補をユーザに提示し、その中からユーザ
が所望の文字を選ぶという容易な修正操作環境を提供で
きる文字認識方法及び装置を提供することを目的とす
る。

【０００７】

【課題を解決する為の手段】以上説明したように、本発
明によれば、画像情報から文字画像を切り出し、前記切
り出した文字画像を認識し、前記認識した結果の上位の
複数の候補文字を記憶し、指示に応じて前記記憶してい
る複数の候補文字から所定数の候補文字を表示し、更な
る指示に応じて前記表示されている所定数の候補文字を
除いた候補文字を前記記憶している複数の候補文字から
読出して表示することにより、第一に表示された候補の
中に所望の文字が含まれていない場合でも、他の候補を
表示し、その中から選択するという容易な操作により所
望の文字を認識結果として特定することが可能となる。

【０００８】以上説明したように、本発明によれば、前
記記憶している複数の候補文字の数が、予め定められて
いる所定個数を越える場合にのみ、前記更なる指示の入
力を可能とすることにより、必要な場合にのみ必要な操
作ができるような環境を提供できる。

【０００９】以上説明したように、本発明によれば、前
記更なる指示は、表示画面上で行うことにより、表示画
面上で認識結果を確認しながら、視点を移動させること
なく連続的に操作できる。

【００１０】以上説明したように、本発明によれば、前
記文字画像の認識結果として、各文字画像の第一位候補
文字を表示し、前記第一位候補文字に対して前記指示を
行うことにより、認識結果の編集作業が容易になる。

【００１１】以上説明したように、本発明によれば、画
像情報をスキャナより入力することにより、原稿画像の
認識がより正確に行える。

【００１２】以上説明したように、本発明によれば、前
記候補文字の表示は、フォントパターンとすることによ
り、認識結果の視認容易になる。

【００１３】以上説明したように、本発明によれば、前
記候補文字の表示指示の為のメニューボタンを表示画面
上に設定することにより、指示操作が容易になる。

【００１４】以上説明したように、本発明によれば、前
記表示されている候補文字に対して選択指示がなされた
場合に、当該指示された文字を認識結果として前記記憶
されている情報を更新することにより、認識結果の更
新、編集が容易に行える。

【００１５】以上説明したように、本発明によれば、画
像情報から文字画像を切り出し、前記切り出した文字画
像を第一の認識方法で認識した結果の候補文字を表示
し、他候補の表示の指示に応じて、前記切り出した文字
画像を前記第一の認識方法とは異なる認識方法で認識し
た候補文字を表示することにより、第一の認識方法で認
識した結果に所望の文字が含まれていない場合でも、第
二の認識方法で認識した結果の候補文字を提案するの
で、候補として提案される文字が多種となり、所望の文
字を提案できる確率が高くなり、操作性が向上する。

【００１６】

【発明の実施の形態】以下、添付図面を参照して本発明
の好適な実施例を詳細に説明する。

【００１７】＜文字認識装置の説明（図１）＞図１は
本発明の実施の形態である文字認識装置の概略構成を示
すブロック図である。図１において、文字認識装置を示
している。２は文書画像を読取って入力する入力部で、
例えばスキャナ等により構成され原稿画像データをデジ
タルデータで入力している。しかし、この入力部２はス
キャナ等の直接画像を読み取る手段に限定するものでは
なく、通信回線等を介して他の装置で読み取った画像を
入力しても良いし、記憶媒体に記憶されている画像を読
み込んで入力しても良い。３は装置１全体を制御する演
算処理用の中央処理装置（以下、ＣＰＵという）を示し
ておりＲＯＭ４やメモリ５に格納されている制御プログ
ラムに従って本実施の形態で説明する各種処理を実行す
る。４はＲＯＭで、例えば図３以降のフローチャートで
示された処理等の、ＣＰＵ３が実行する処理の制御プロ
グラムや各種データを格納している。５はメモリ（ＲＡ
Ｍ）で、ＣＰＵ３のワークエリアとして使用されるとと
もに、認識部８が得た認識結果、入力部２より入力され
た文書画像データを記憶する領域、前処理部７で切り出
された文字パターンの位置、大きさを記憶する領域、イ
メージの中で認識を行う場所すなわちブロック枠座標を
も備えている。また、本装置１に着脱可能なＣＤ−ＲＯ
Ｍ等の記憶媒体から読み込んだ制御プログラムや、通信
回線等の通信手段を介して入力した制御プログラムを記
憶する。６は認識結果修正部でキーボード１４やポイン
ティングデバイス等により入力される指示データに従っ
てＲＡＭ５に記憶されている文字認識結果を修正する。
７は前処理部で、メモリ５に記憶された文書画像の１文
字のパターン（画像データ）を切出す。８は認識部で、
前処理部７によつて前処理されたパターンから幾何学的
特徴を抽出し、予め認識用辞書９に格納されている標準
パターンと照合して前処理部７が切り出した１文字の画
像データを文字コードで表現し、文書画像の文字認識を
行う。１０はＬＣＤやＣＲＴ等の表示部で、入力した文
書画像を表示するイメージ表示部１４と、認識結果の文
字コードに対応する文字フォントを並べたテキストを表
示する認識結果表示部１５とを設け得る。１１はシステ
ムバスで、ＣＰＵ３よりのデータバス、アドレスバス及
び制御信号バス等を含んでいる。１２は外部の出力装
置、例えばＬＢＰやインジェットプリンタ１３等とのイ
ンターフエース制御を行うインターフエース部を示して
いる。

【００１８】＜認識結果ウインドウの説明（図２、図
５）＞図２は本実施の形態における文字認識装置１に入
力された文書画像の認識結果を示す認識結果ウインドウ
の一例であり、表示部１０に表示される。図２におい
て、２１は認識部８で認識された認識結果を示す認識結
果ウインドウである。２２は入力された文書画像から切
り出された各文字画像の認識結果の第一候補を示してい
る。各文字画像の認識結果の第二位以下の候補文字は、
各文字画像の位置に対応づけてメモリ５に格納されてい
る。２３は認識結果を指し示すマウスの位置を示してい
る。２４はマウスが指している文字「認」のメモリ５に
格納されていた第二以下も含めた候補文字を示してい
る。マウスで文字「認」を指し示し、右ボタンクリック
する事で候補をポップアップメニュー２４で表示する。
２５は表示した候補に正しい文字が含まれていない場合
に選択する「他候補メニュー」である。図５は「他候補
メニュー」がマウスでクリックされることにより選択さ
れた場合に、スクロールバー付きのポップアップメニュ
ー５１で他候補を表示している図である。ユーザはポッ
プアップメニュー２４及びポップアップメニュー５１に
示された候補の中からマウスで正しい文字の上でクリッ
クすることにより、所望の文字を選択可能である。

【００１９】図３は第１の実施例のＣＰＵ３の動作を説
明するフローチャートで、この処理を実行する制御プロ
グラムはＲＯＭ４に記憶されている。まずステツプＳ３
１で、操作者によりセットされた文書画像を入力部２
（スキャナ）により読取って入力し、メモリ５に記憶す
る。次にステップＳ３２に進み、前処理部７によつて前
処理された各文字パターンから幾何学的特徴を抽出し、
予め認識用辞書９に格納されている標準パターンと照合
して文書画像の文字認識を行い、照合の結果類似度の高
いものから順に少なくとも１つの候補文字を出力する。
類似度の値により、認識結果が確からしいと判断できる
時は候補文字数が少なくなり、確からしくないと判断さ
れる時は候補文字を多く出力する。次にステップＳ３３
に進み、認識結果表示部１５で認識結果の第一位の文字
を図２のように表示する。次にステップＳ３４に進み、
キーボードやマウス１４により入力される指示データに
従って認識結果修正部６がＲＡＭ５内の認識結果を修正
する。図４は、図３のステップＳ３４の認識結果修正処
理を示すフローチャートである。まずステップＳ４０
で、認識結果上でマウス２３がクリックされたら、その
クリックされた位置とＲＡＭ５に格納されている文字パ
ターンの位置情報とに従って指示された文字を識別し、
その文字のＲＡＭ５に格納されているＳ３２の認識結果
から類似度の上位ｕ個以上の候補および他候補メニュー
２５を表示する。ｕは１以上の整数で、図２の例ではｕ
＝６である。次にステップＳ４１で、ポップアップメニ
ュー２４で示された候補がマウス等により表示画面上で
選ばれたか判定する。図２に示す認識結果「認」の場合
は、候補のうち類似度の高い候補文字６個を示してい
る。Ｓ４１で候補文字が選ばれた場合はステップＳ４６
へ進む。ステップＳ４６では、Ｓ４１で選択された候補
文字を第一位候補とする。その前に第一位であった候補
文字は第二位として順次必要に応じて候補を下位にずら
す。次にステップＳ４５に進む。

【００２０】ステップＳ４１で候補が選ばれなかった場
合はステップＳ４２へ進む。ステップＳ４２では、他候
補メニュー２５がマウス等により表示画面上で選ばれた
か判定する。Ｓ４２で他候補メニューが選ばれた場合は
ステップＳ４３に進む。ステップＳ４３ではポップアッ
プメニュー２４で示された候補の他の候補を表示する。
図５に示したスクロールバー付きのポップアップメニュ
ー５１が他の候補を表示しているところである。ここに
は他の候補が類似度の大きい順に複数並んでいる。ポッ
プアップメニュー５１に候補文字をいくつ並べるかにつ
いてはあらかじめ指定した数十個の文字でもかまわない
し、類似度のある閾値以上のものでもかまわない。ま
た、対象文字のすべてを類似度に従ってすべて表示して
も良い。図５の場合はポップアップメニュー２４で表示
されなかった認識結果「認」の第７位以下の候補をスク
ロールバー付きのポップアップメニュー５１で示してい
る。ステップＳ４４では、ポップアップメニュー５１で
示された候補がマウス等により選ばれたか判定する。Ｓ
４４で候補文字が選ばれた場合はステップＳ４６へ進
む。選ばれていない場合はステップＳ４５に進む。ステ
ップＳ４５では、認識結果の修正終了か判定する。判定
は、認識結果の保存や次の文書イメージの取り込みなど
候補の表示以外の動作が選択された場合に終了と判定
し、ステップＳ３４を終了する。認識結果の修正が終わ
っていなければステップＳ４０へ進む。尚、プリンタ１
３より文字等を出力する処理については説明を省略して
いる。以上の説明により、第１の実施例によれば、候補
の中に正しい文字がない場合でも他の候補を表示、選択
する事が可能なので文字入力にキーボードを用いずに短
時間で容易に修正ができる、ユーザにとつて使い易い文
字認識装置を実現することができる。

【００２１】尚、図４のステップＳ４０の先の説明にお
いて、文字修正のためにマウスのクリックによって出し
たポップアップメニュー２４内に他候補メニュー２５が
必ず出てくる例をあげたが、文字候補数ｍがｍ ≧ 閾
値ｎ（例えばｎ＝５）の場合にのみ、他候補メニュー２
５を出すようにしても良い。処理の流れは図４のステッ
プＳ４０を図６に示すフローチャートのようにステップ
Ｓ６０で置き換えたものである。

【００２２】尚、図４のステップＳ４３の先の説明にお
いて、Ｓ３２での認識結果「認」の第７位以下の候補を
スクロールバー付きのポップアップメニュー５１で示す
例をあげたが、他候補メニュー２５が指示された後、第
２の認識手段によりその指示された文字画像を再認識
し、その認識結果を示しても良い。第２の認識手段とし
ては、第１の認識手段と特徴抽出を替えたり、前処理や
後処理を替えたり、類似度の算出手段を替えたり、認識
に用いる辞書を替えるなど何でも良い。また、第２の認
識手段は、他候補メニューが押されてから実行しても構
わないし、あらかじめ実行しておいてその結果を用いて
も良い。また、認識手段は３個以上あって、その中から
選べるようにしても良い。図７はこのように複数の認識
手段を利用する場合の認識部８と認識用辞書９を示す図
で、認識手段及び認識辞書がそれぞれ二つずつある場合
の例である。他の部分は図１に示す文字認識装置の概略
構成を示すブロック図と同様である。認識部８は第一認
識部１６と第二認識部１７からなる。認識辞書９は第一
認識辞書１８と第二認識辞書１９からなる。認識辞書は
一つでも構わないし、３個以上あってその中から選べる
ようにしても良い。

【００２３】尚、図４のステップＳ４３の先の説明にお
いて、認識結果「認」の第７位以下の候補をスクロール
バー付きのポップアップメニュー５１で示す例をあげた
が、第１位から順にすべての認識結果を示しても良い。
尚、図４のステップＳ４３の先の説明において、認識結
果「認」の第７位以下の候補をスクロールバー付きのポ
ップアップメニュー５１で示したが、スクロールバーが
ついていなくても良い。また、他の候補と共に更に他の
候補が選べるように「他候補メニュー」を出しても良
い。つまり、図８のポップアップメニュー８１のように
候補のみ他の候補の上位６個と入れ換え、他候補メニュ
ー８２と共に出しても良い。

【００２４】

【発明の効果】上記課題を解決する為に、本発明は、画
像情報から文字画像を切り出し、前記切り出した文字画
像を認識し、前記認識した結果の上位の複数の候補文字
を記憶し、指示に応じて前記記憶している複数の候補文
字から所定数の候補文字を表示し、更なる指示に応じて
前記表示されている所定数の候補文字を除いた候補文字
を前記記憶している複数の候補文字から読出して表示す
る画像処理方法及び装置を提供する。

【００２５】上記課題を解決する為に、本発明は好まし
くは、前記記憶している複数の候補文字の数が、予め定
められている所定個数を越える場合にのみ、前記更なる
指示の入力を可能とする。

【００２６】上記課題を解決する為に、本発明は好まし
くは、前記更なる指示は、表示画面上で行う。

【００２７】上記課題を解決する為に、本発明は好まし
くは、前記文字画像の認識結果として、各文字画像の第
一位候補文字を表示し、前記第一位候補文字に対して前
記指示を行う。

【００２８】上記課題を解決する為に、本発明は好まし
くは、画像情報をスキャナより入力する。

【００２９】上記課題を解決する為に、本発明は好まし
くは、前記候補文字の表示は、フォントパターンとす
る。

【００３０】上記課題を解決する為に、本発明は好まし
くは、前記候補文字の表示指示の為のメニューボタンを
表示画面上に設定する。

【００３１】上記課題を解決する為に、本発明は好まし
くは、前記表示されている候補文字に対して選択指示が
なされた場合に、当該指示された文字を認識結果として
前記記憶されている情報を更新する。

【００３２】上記課題を解決する為に、本発明は、画像
情報から文字画像を切り出し、前記切り出した文字画像
を第一の認識方法で認識した結果の候補文字を表示し、
他候補の表示の指示に応じて、前記切り出した文字画像
を前記第一の認識方法とは異なる認識方法で認識した候
補文字を表示する画像処理方法及び装置を提供する。

【図面の簡単な説明】

【図１】本発明の第１の実施例の文字認識装置の概略構
成を示すブロツク図

【図２】本発明の第１の実施例の文字認識装置における
表示部を示す図

【図３】第１の実施例の文字認識装置の処理を示すフロ
ーチャート

【図４】第１の実施例のステツプＳ３４の詳細を示すフ
ローチヤート

【図５】本発明の第１の実施例の文字認識装置における
表示部を示す図

【図６】第２の実施例のステツプＳ３４の詳細を示すフ
ローチヤート

【図７】第３の実施例の文字認識装置の概略構成を示す
ブロツク図の認識部８と認識用辞書９を示す図

【図８】第５の実施例の文字認識装置における表示部を
示す図

【符号の説明】

１文字認識装置２入力部３ＣＰＵ４ＲＯＭ５メモリ６認識結果修正部７前処理部８認識部９認識用辞書１０表示部１１システムバス１２インターフエース部１３プリンタ１４イメージ表示部１５認識結果表示部１６第一認識部１７第二認識部１８第一認識辞書１９第二認識辞書２１認識結果ウインドウ２２文字認識結果２３マウスカーソル２４文字認識結果「認」の候補文字２５，８２他候補メニュー５１，８１他候補

Claims

【特許請求の範囲】

【請求項１】画像情報から文字画像を切り出し、前記
切り出した文字画像を認識し、前記認識した結果の上位
の複数の候補文字を記憶し、指示に応じて前記記憶して
いる複数の候補文字から所定数の候補文字を表示し、更
なる指示に応じて前記表示されている所定数の候補文字
を除いた候補文字を前記記憶している複数の候補文字か
ら読出して表示することを特徴とする画像処理方法。
【請求項２】前記記憶している複数の候補文字の数
が、予め定められている所定個数を越える場合にのみ、
前記更なる指示の入力を可能とすることを特徴とする請
求項１に記載の画像処理方法。
【請求項３】前記更なる指示は、表示画面上で行うこ
とを特徴とする請求項１に記載の画像処理方法。
【請求項４】前記文字画像の認識結果として、各文字
画像の第一位候補文字を表示し、前記第一位候補文字に
対して前記指示を行うことを特徴とする請求項１に記載
の画像処理方法。
【請求項５】画像情報をスキャナより入力することを
特徴とする請求項１に記載の画像処理方法。
【請求項６】前記候補文字の表示は、フォントパター
ンとすることを特徴とする請求項１に記載の画像処理方
法。
【請求項７】前記候補文字の表示指示の為のメニュー
ボタンを表示画面上に設定することを特徴とする請求項
１に記載の画像処理方法。
【請求項８】前記表示されている候補文字に対して選
択指示がなされた場合に、当該指示された文字を認識結
果として前記記憶されている情報を更新することを特徴
とする請求項１に記載の画像処理方法。
【請求項９】画像情報から文字画像を切り出す文字切
り出し手段と、前記切り出した文字画像を認識する文字
認識手段と、前記認識した結果の上位の複数の候補文字
を記憶する認識結果記憶手段と、指示に応じて前記記憶
している複数の候補文字から所定数の候補文字を表示す
る表示手段と、更なる指示に応じて前記表示されている
所定数の候補文字を除いた候補文字を前記記憶している
複数の候補文字から読出して前記表示手段に表示するよ
う制御する制御手段とを有することを特徴とする画像処
理装置。
【請求項１０】画像情報から文字画像を切り出し、前
記切り出した文字画像を第一の認識方法で認識した結果
の候補文字を表示し、他候補の表示の指示に応じて、前
記切り出した文字画像を前記第一の認識方法とは異なる
第二の認識方法で認識した候補文字を表示することを特
徴とする画像処理方法。
【請求項１１】前記記憶している複数の候補文字の数
が、予め定められている所定個数を越える場合にのみ、
前記他候補の表示の指示の入力を可能とすることを特徴
とする請求項１０に記載の画像処理方法。
【請求項１２】前記他候補の表示の指示は、表示画面
上で行うことを特徴とする請求項１０に記載の画像処理
方法。
【請求項１３】前記文字画像の認識結果として、各文
字画像の第一位候補文字を表示し、前記第一位候補文字
に対して前記指示を行うことを特徴とする請求項１０に
記載の画像処理方法。
【請求項１４】画像情報をスキャナより入力すること
を特徴とする請求項１０に記載の画像処理方法。
【請求項１５】前記候補文字の表示は、フォントパタ
ーンとすることを特徴とする請求項１０に記載の画像処
理方法。
【請求項１６】前記候補文字の表示指示の為のメニュ
ーボタンを表示画面上に設定することを特徴とする請求
項１０に記載の画像処理方法。
【請求項１７】前記表示されている候補文字に対して
選択指示がなされた場合に、当該指示された文字を認識
結果として前記記憶されている情報を更新することを特
徴とする請求項１０に記載の画像処理方法。
【請求項１８】前記切り出された文字画像の位置情報
を記憶し、前記第二の認識方法で認識する場合には前記
記憶した文字画像の位置情報に従って抽出される画像を
認識することを特徴とする請求項１０に記載の画像処理
方法。
【請求項１９】画像情報から文字画像を切り出す文字
切り出し手段と、前記切り出した文字画像を第一の認識
方法で認識した結果の候補文字を表示する表示手段と、
他候補の表示の指示に応じて、前記切り出した文字画像
を前記第一の認識方法とは異なる認識方法で認識した候
補文字を前記表示手段に表示するよう制御することを特
徴とする画像処理装置。