JPH08194696A - 文書イメージ処理装置 - Google Patents

Abstract

(57)【要約】 【目的】 本発明は、読み取った原稿イメージから文字
認識した文字データの原稿イメージ上の文字位置、サイ
ズ及び桁位置等を解析し、その解析結果により原稿イメ
ージに応じた文字サイズ、文字倍率、桁位置、行間隔、
罫線位置等を決定して文書書式を設定することにより、
読取原稿イメージの書式設定を自動化することである。 【構成】 ＣＰＵ２は、文書読込処理プログラムに従っ
て文書読込処理を実行することにより、イメージリーダ
ー４により読み取られて原稿イメージメモリ５に格納さ
れた原稿イメージデータに対して、文字認識処理、行単
位の行位置の算出処理、行単位の文字サイズの算出処
理、行位置の補正処理、格納文字サイズの算出処理、格
納文字サイズの補正処理、桁位置の算出処理、罫線格納
位置の算出処理及び文書データ作成処理を実行し、読取
原稿イメージに対応した書式を自動設定する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、文書イメージ処理装置
に係り、詳細には、原稿のイメージデータを読み取っ
て、読取原稿の文書書式を自動設定する文書イメージ処
理装置に関する。

【０００２】

【従来の技術】従来、印刷された原稿をイメージスキャ
ナー等を用いてイメージデータとして読み取り、そのイ
メージデータから文字を英数字、漢字等の文字認識を行
って、文字コード化する文書イメージ処理装置が、パー
ソナルコンピュータやワードプロセッサー等の文書作成
装置において利用されている。

【０００３】この文書イメージ処理装置の文字認識処理
は、読み取った原稿イメージ上の１文字単位で行われて
おり、その認識した文字データの出力内容は、文字コー
ド及びイメージ上の文字の座標位置情報により構成され
ている。

【０００４】このようにして文書イメージ処理装置から
出力される文字データは、パーソナルコンピュータやワ
ードプロセッサーの文書作成処理に際して利用可能であ
り、印刷原稿を引用する際に、文書入力する手間を省略
することを可能にしている。また、文書イメージ処理装
置から出力される文字データを利用する文書作成装置が
ＤＴＰ（Desk Top Publshing：１枚の書式の中に数種類
の大きさの文字、及び行ピッチが数種類存在する）であ
れば、出力された文字の位置及びサイズから簡単に必要
な文字位置及びサイズを算出し、取り込んだ文書中にレ
イアウトすることが可能である。

【０００５】

【発明が解決しようとする課題】しかしながら、このよ
うな従来の文書イメージ処理装置にあっては、読み取っ
た原稿イメージ上の各文字の種類、文字位置及び文字サ
イズを認識して上記文字コード及びイメージ上の文字の
座標位置情報を出力するだけであったため、以下に述べ
るような問題点があった。

【０００６】すなわち、文書イメージ処理装置から出力
される文字データを文書作成装置に取り込んで利用する
場合は、文書作成装置がＤＴＰであれば、取り込んだ文
字データのレイアウトを調整する作業は比較的容易であ
るが、ＤＴＰに比べてレイアウト機能が劣る文書作成装
置において上記文字データを取り込んで利用する場合
は、取り込んだ文字データのサイズや桁位置等を、文書
書式設定機能において再調整する必要が有り、その調整
作業は容易ではなく、文書書式の調整に手間と時間がか
かるという問題点があった。

【０００７】また、このようにして文書書式設定により
調整した文書のイメージが、元の原稿イメージからかけ
離れたものとなってしまうといった問題も発生してい
た。

【０００８】本発明の課題は、読み取った原稿イメージ
から文字認識した文字データの原稿イメージ上の文字位
置、サイズ及び桁位置等を解析し、その解析結果により
原稿イメージに応じた文字サイズ、文字倍率、桁位置、
行間隔、罫線位置等を決定して文書書式を設定すること
により、読取原稿イメージの書式設定を自動化すること
である。

【０００９】

【課題を解決するための手段】請求項１記載の発明は、
原稿をイメージデータとして読み取る読取手段と、この
読取手段により読み取られたイメージデータから文字列
を文字認識してコード化する文字認識手段と、前記読取
手段により読み取られた原稿イメージデータを記憶する
とともに、前記コード化された文字データを順次記憶す
る記憶手段と、前記記憶された原稿イメージデータによ
り認識された各文字データの原稿上での座標と行領域と
を解析することにより各行毎の基本行位置、基本文字サ
イズを求める解析手段と、この解析手段により求められ
た基本行位置及び基本文字サイズに基づいて、前記各文
字の原稿イメージ上における座標、及び文字イメージ領
域を算出することにより、各文字の各行における行位
置、及び文字倍率を決定する文字情報算出手段と、を具
備したことを特徴としている。

【００１０】また、この場合、請求項２に記載する文書
イメージ処理装置のように、前記解析手段は、前記原稿
イメージ上で特定倍率に設定された文字に対して、その
前後文字間を解析し、その文字間が所定値よりも広い場
合は、前記文字情報算出手段は、前記基本文字サイズに
基づいて算出する文字倍率を当該文字の行単位で補正
し、また、前記解析した文字間が所定値よりも広くない
場合は、前記算出した文字倍率のままとすることが有効
である。

【００１１】また、この場合、請求項３に記載する文書
イメージ処理装置のように、前記解析手段は、前記原稿
イメージデータにおいて各行イメージ単位に求めた行位
置に同一行があるか否かを解析し、同一行がある場合
は、前記文字情報算出手段は、当該同一行のうち後の方
の行の行位置、及び後続する各行イメージに対応する行
位置を１行分づつ後ろに移動する行位置補正を行い、ま
た、前記解析手段は、前記原稿イメージデータにおいて
各行イメージ単位に求めた行位置に１行分開いている行
があるか否かを解析し、１行分以内の空きがある行があ
る場合は、前記文字情報算出手段は、当該行のうち後の
方の行の行位置、及び後続する各行イメージに対応する
行位置を１行分づつ前に移動する行位置補正を行うこと
が有効である。

【００１２】請求項４記載の発明は、原稿をイメージデ
ータとして読み取る読取手段と、この読取手段により読
み取られた原稿イメージデータから文字列を文字認識し
てコード化する文字認識手段と、前記読取手段により読
み取られた原稿イメージデータを記憶するとともに、前
記コード化された文字データを順次記憶する記憶手段
と、前記認識された各文字の種類に応じて、その文字種
類毎に基本となる文字領域サイズに対する各文字イメー
ジ領域のサイズの比率を求め、その比率に応じた文字倍
率を決定する文字情報算出手段と、を具備したことを特
徴としている。

【００１３】請求項５記載の発明は、原稿をイメージデ
ータとして読み取る読取手段と、この読取手段により読
み取られた原稿イメージデータから文字列を文字認識し
てコード化する文字認識手段と、前記読取手段により読
み取られた原稿イメージデータを記憶するとともに、前
記コード化された文字データを順次記憶する記憶手段
と、前記記憶された原稿イメージ上での連続する文字同
志の距離を求める解析手段と、この文字同志の距離が所
定値よりも短い場合は、後の方の文字の桁位置を、前の
方の文字に連続する桁として桁位置を求め、この文字同
志の距離が所定値よりも長い場合は、後の方の文字の桁
位置を、前記原稿イメージ上の座標と所定の桁ピッチと
から求める文字情報算出手段と、を具備したことを特徴
としている。

【００１４】請求項６記載の発明は、原稿をイメージデ
ータとして読み取る読取手段と、この読取手段により読
み取られた原稿イメージデータを記憶する記憶手段と、
この原稿イメージ上の各罫線の座標領域を個別に求める
解析手段と、この各罫線の前記原稿上での位置情報を求
める際には、対象とする罫線の座標領域と、この罫線に
近接する他の罫線の座標領域に対する距離を原稿上の行
数あるいは桁数情報に換算し、この換算した情報と前記
他の罫線の位置情報とに基づいて、前記対象罫線の位置
情報を求める罫線位置算出手段と、を具備したことを特
徴としている。

【００１５】

【作用】請求項１記載の発明によれば、文字認識手段
が、読取手段により読み取られたイメージデータから文
字列を文字認識してコード化し、読取手段により読み取
られた原稿イメージデータと前記コード化された文字デ
ータを記憶手段に順次記憶し、解析手段が、この記憶さ
れた原稿イメージデータにより認識された各文字データ
の原稿上での座標と行領域とを解析することにより各行
毎の基本行位置、基本文字サイズを求めると、文字情報
算出手段が、この求められた基本行位置及び基本文字サ
イズに基づいて、前記各文字の原稿イメージ上における
座標、及び文字イメージ領域を算出することにより、各
文字の各行における行位置、及び文字倍率を決定する。

【００１６】したがって、すべて同一行に該当行位置の
文字を格納することにより、書式行の中間にある行が文
字により２行にまたがることなく、同一行に文字が格納
することができる。また、１行内はその文字サイズを全
角または半角に統一することにより、元の原稿イメージ
に近い形に復元でき、かつ読みやすい文書とすることが
できる。

【００１７】請求項２記載の発明によれば、前記解析手
段は、前記原稿イメージ上で特定倍率に設定された文字
に対して、その前後文字間を解析し、その文字間が所定
値よりも広い場合は、前記文字情報算出手段は、前記基
本文字サイズに基づいて算出する文字倍率を当該文字の
行単位で補正し、また、前記解析した文字間が所定値よ
りも広くない場合は、前記算出した文字倍率のままとす
ることにより、縦長、横長、小さめの各文字フォントが
行内の他の文字と比べて極端に小さくなることが無くな
り、正しい文字列を復元することができる。

【００１８】請求項３記載の発明によれば、前記解析手
段は、前記原稿イメージデータにおいて各行イメージ単
位に求めた行位置に同一行があるか否かを解析し、同一
行がある場合は、前記文字情報算出手段は、当該同一行
のうち後の方の行の行位置、及び後続する各行イメージ
に対応する行位置を１行分づつ後ろに移動する行位置補
正を行い、また、前記解析手段は、前記原稿イメージデ
ータにおいて各行イメージ単位に求めた行位置に１行分
開いている行があるか否かを解析し、１行分以内の空き
がある行がある場合は、前記文字情報算出手段は、当該
行のうち後の方の行の行位置、及び後続する各行イメー
ジに対応する行位置を１行分づつ前に移動する行位置補
正を行うことにより、認識した文字の種類及びメーカー
間の文字フォント形態の違いによる文字サイズを統一
し、ある特定文字がいつも半角になることを防ぐことが
できる。

【００１９】請求項４記載の発明によれば、文字認識手
段が、読取手段により読み取られた原稿イメージデータ
から文字列を文字認識してコード化し、この読取手段に
より読み取られた原稿イメージデータと前記コード化さ
れた文字データを記憶手段に順次記憶し、文字情報算出
手段が、前記認識された各文字の種類に応じて、その文
字種類毎に基本となる文字領域サイズに対する各文字イ
メージ領域のサイズの比率を求め、その比率に応じた文
字倍率を決定する。

【００２０】したがって、文字間に不用意に空白が空く
ことが無くなり、かつ実際に元原稿に空白が空いている
文字に対しては、元の原稿イメージの位置と同じ桁位置
に格納することができる。

【００２１】請求項５記載の発明によれば、文字認識手
段が、読取手段により読み取られた原稿イメージデータ
から文字列を文字認識してコード化し、この読取手段に
より読み取られた原稿イメージデータと前記コード化さ
れた文字データを記憶手段に順次記憶し、解析手段が、
前記記憶された原稿イメージ上での連続する文字同志の
距離を求めると、文字情報算出手段が、この文字同志の
距離が所定値よりも短い場合は、後の方の文字の桁位置
を、前の方の文字に連続する桁として桁位置を求め、こ
の文字同志の距離が所定値よりも長い場合は、後の方の
文字の桁位置を、前記原稿イメージ上の座標と所定の桁
ピッチとから求める。

【００２２】したがって、行位置の補正が可能となり、
元の原稿イメージと同じになるように読取原稿イメージ
を復元することができる。

【００２３】請求項６記載の発明によれば、読取手段に
より読み取られた原稿イメージデータを記憶手段に記憶
し、解析手段が、この原稿イメージ上の各罫線の座標領
域を個別に求めると、罫線位置算出手段が、この各罫線
の前記原稿上での位置情報を求める際には、対象とする
罫線の座標領域と、この罫線に近接する他の罫線の座標
領域に対する距離を原稿上の行数あるいは桁数情報に換
算し、この換算した情報と前記他の罫線の位置情報とに
基づいて、前記対象罫線の位置情報を求める。

【００２４】したがって、元の原稿イメージと同じ罫線
位置を求めることができ、なかかつ文字との位置関係を
保って読取原稿イメージを復元することができる。

【００２５】

【実施例】以下、図１〜図１９を参照して本発明の実施
例を詳細に説明する。図１〜図１９は、本発明を適用し
た文書イメージ処理装置の一実施例を示す図である。ま
ず、構成を説明する。図１は、文書イメージ処理装置１
のブロック構成図である。

【００２６】この図において、文書イメージ処理装置１
は、ＣＰＵ２、キー入力部３、イメージリーダー４、原
稿イメージメモリ５、文字認識装置６、認識用辞書７、
文書書式メモリ８、ＲＯＭ９、ワークＲＡＭ１０、認識
結果テーブル１１、文書データメモリ１２、罫線データ
メモリ１３、印字部１４及び表示部１５により構成され
ている。

【００２７】ＣＰＵ（Central Processing Unit ）２
は、ＲＯＭ９内に格納される各種制御プログラムに従っ
て文書イメージ処理装置１内の各部を制御し、各種文書
データ処理を実行し、その処理過程及び処理結果を表示
部１５に表示させる。

【００２８】また、ＣＰＵ２は、後述する文書読込処理
プログラムに従って文書読込処理を実行することによ
り、イメージリーダー４により読み取られて原稿イメー
ジメモリ５に格納された原稿イメージデータに対して、
文字認識処理、行単位の行位置の算出処理、行単位の文
字サイズの算出処理、行位置の補正処理、格納文字サイ
ズの算出処理、格納文字サイズの補正処理、桁位置の算
出処理、罫線格納位置の算出処理及び文書データ作成処
理を実行し、読取原稿イメージに対応した書式を自動設
定する。

【００２９】キー入力部３は、カーソルキー、数字入力
キー、文字入力キー及びファンクションキー等を備え、
押下されたキーの押下信号をＣＰＵ２に出力する。イメ
ージリーダー４は、ラインイメージセンサを読取対象画
面上を所定速度で走査し、１ライン毎にラインイメージ
センサで読み取ってイメージデータを原稿イメージメモ
リ５に出力する。原稿イメージメモリ５は、イメージリ
ーダー４から入力される読取原稿のイメージデータを格
納するメモリ領域を形成する。

【００３０】文字認識装置６は、原稿イメージメモリ５
に格納された原稿イメージデータから抽出された文字を
認識し、その認識した文字に対応する文字コードを認識
用辞書７から選択し、この文字コード毎に原稿イメージ
上の行単位の文字位置情報、改行情報を認識して認識結
果テーブル１１に格納する。

【００３１】認識用辞書７は、文字コードデータを格納
し、文字認識装置６により文字認識処理が行われる際に
利用される。文書書式メモリ８は、文書データメモリ１
２に格納される文書データ毎に対応する文書書式データ
を格納するメモリであり、具体的には、ＣＰＵ２により
文書読込処理において求められる原稿イメージ上の平均
行ピッチ、文字間の平均桁ピッチ、左余白ドット及び上
余白ドットの各データを格納する。

【００３２】ＲＯＭ（Read Only Memory）９は、ＣＰＵ
２において実行される各種制御プログラム、文書読込処
理プログラム及び後述する行情報テーブル作成プログラ
ム、行位置補正処理プログラム、文字倍率算出プログラ
ム、文字倍率補正プログラム、桁位置算出プログラム、
罫線値算出プログラムを格納する。

【００３３】ワークＲＡＭ１０は、ＣＰＵ２が上記各種
処理プログラムを実行する際に各種データを展開するメ
モリ領域を形成する。認識結果テーブル１１は、上記文
字認識装置６により実行される文字認識処理により認識
された文字コードと、その文字コードに対応する行単位
の文字位置情報及び改行情報を格納する。

【００３４】文書データメモリ１２は、文字認識及び文
書書式の設定が終了した原稿イメージ上の文書データを
格納するメモリである。罫線データメモリ１３は、ＣＰ
Ｕ２の罫線格納位置算出処理により求められた罫線位置
情報を格納するメモリである。印字部１４は、ＣＰＵ２
の制御により文書データメモリ１２に格納された文書デ
ータを文書書式メモリ８に格納された文書書式データに
従って所定用紙に印刷出力する。表示部１５は、ＣＰＵ
２において実行される各種文書データ処理の処理過程及
び処理結果を表示する。

【００３５】次に、本実施例の動作を説明する。まず、
上記ＣＰＵ２において実行される文書読込処理について
図２、３に示すフローチャートに基づいて説明する。イ
メージリーダー４により原稿用紙上の１頁分の文書が読
み取られると（ステップＳ１）、その読み取られた１頁
分のイメージデータを原稿イメージメモリ５に格納する
（ステップＳ２）。その格納された原稿イメージデータ
から１文字領域を抽出し（ステップＳ３）、その抽出し
た１文字領域内の文字の文字認識処理を文字認識装置６
において実行させる。

【００３６】すなわち、文字認識装置６においては、図
４に示すように、原稿イメージ上の１文字毎に文字認識
処理を実行させ、対応する文字コードを認識用辞書７か
ら選択させる。

【００３７】次いで、その認識した文字コード及びその
領域情報（その文字の原稿イメージ上の文字位置を示す
左上座標（左上ｘ，左上ｙ）と右下座標（右下ｘ，右下
ｙ））を、図５に示すように、２バイト単位のデータ構
成により認識結果テーブル１１に文字位置情報として記
憶する（ステップＳ５）。この１文字単位の文字認識処
理を１行分繰り返し実行して認識結果テーブル１１に文
字位置情報を連続して記憶し（ステップＳ３〜Ｓ６）、
その行の改行を判別すると、その改行情報と改行位置情
報を、図５に示すデータ構成（改行，左上座標（左上
ｘ，左上ｙ）と右下座標（右下ｘ，右下ｙ））で認識結
果テーブル１１に記憶する（ステップＳ７）。

【００３８】そして、全行に対する文字認識が終了した
か否かを確認し（ステップＳ８）、終了していない場合
は、次行を指定して（ステップＳ９）、上記ステップＳ
３〜ステップＳ７の処理を繰り返し実行して全行の文字
認識処理を実行し、その全行の文字コード及びその領域
情報、改行情報及び改行位置情報を、図５に示すよう
に、認識結果テーブル１１に記憶する。

【００３９】そして、全行に対する文字認識が終了する
と、図６に示すように、原稿イメージ上において文書書
式設定に必要な情報として、平均行ピッチを原稿イメー
ジ上の各行の行間隔のＹ方向ドット数により算出し（ス
テップＳ１０）、平均桁ピッチを原稿イメージ上の各文
字の桁間隔のＸ方向ドット数により算出する（ステップ
Ｓ１１）。次いで、左余白及び上余白を原稿イメージ上
のＸ方向ドット数及びＹ方向ドット数により、それぞれ
算出し（ステップＳ１２）、これらの平均行ピッチ、平
均桁ピッチ、左余白及び上余白の各データを文書書式メ
モリ８に記憶する。

【００４０】次いで、ステップＳ１４により行情報テー
ブル作成処理を実行するが、この行情報テーブル作成処
理について図７に示すフローチャートに基づいて説明す
る。図７において、まず、認識結果テーブルに格納した
１行目のｓｔａｒｔ文字番号（０番目）のデータを読み
出し、その文字サイズデータを（ｘサイズ→０，ｙサイ
ズ→０）として、図７に示すように、行情報テーブルに
２バイト単位で格納し（ステップＳ１４１）、その読み
出したデータが改行コードか否かを確認する（ステップ
Ｓ１４２）。

【００４１】改行コードである場合は、その改行情報に
基づいて、その行位置を算出する。改行の位置情報に
は、認識した一行の左上から右下までのドット位置（座
標）として認識結果テーブル１１に格納されているた
め、行位置は、ｙ軸方向の重心に基づいて求める。すな
わち、行情報の左上座標（ｘ０，ｙ０）、右下（ｘ１，
ｙ１）とすると、次式（１）により求められる。

【００４２】 行位置＝（（ｙ０＋ｙ１）／２−上余白ドット数）／行ピッチドット …（１） そして、行内の基本文字サイズを、後述するステップＳ
１４８で求められる行内の全文字のｘサイズとｙサイズ
を加算したものを行内の文字数カウント値で割ることに
より算出する（ステップＳ１４３）。

【００４３】そして、その算出した行位置、基本文字サ
イズを文字行位置及び、その行のｅｎｄ文字番号を、図
８に示すように、行情報テーブルに格納し、次の行情報
に移動し、次の行情報のｓｔａｒｔ文字番号（０番）
と、その行のデータを認識結果テーブル１１から読み出
して行情報テーブルに格納し（ステップＳ１４４、Ｓ１
４５）、認識結果テーブル内の全行の認識結果について
ステップＳ１４２〜Ｓ１４５の処理を繰り返し実行し、
その全行の認識結果処理の終了を確認すると（ステップ
Ｓ１４６）、本処理を終了する。

【００４４】また、上記ステップＳ１４２において、読
み出したデータが改行コードでない場合、すなわち文字
コードである場合は、その文字コードが漢字コードであ
るか否かを確認する（ステップＳ１４７）。漢字コード
でない場合は、上記ステップＳ１４５に移行し、漢字コ
ードである場合は、その文字のｘサイズ及びｙサイズ
を、今回のｘサイズ、ｙサイズに結果文字サイズｘ、ｙ
（前回の文字までのｘサイズ、ｙサイズを加算した結
果）を加算して求め、文字数カウンタを“＋１”カウン
トアップする（ステップＳ１４８）。そして、上記ステ
ップＳ１４５に移行する。

【００４５】以上の処理により、読み取った原稿イメー
ジ上の各行イメージの行情報による図８に示す行情報テ
ーブルの作成を終了する。なお、図中の（ｘ０，ｙ
０）、（ｘ１，ｙ１）で示す座標データは、認識結果テ
ーブルの改行位置情報として記憶された左上座標（左上
ｘ，左上ｙ）と右下座標（右下ｘ，右下ｙ）を読み出し
て格納したものである。

【００４６】したがって、従来の原稿イメージの認識処
理では、認識された文字イメージが書式の行と行の間に
またがる様な場合、原稿では文字列が連続した行が、２
行にレイアウトされる可能性があり、この場合、認識し
たイメージが、元原稿のイメージから大きくかけ離れて
いるだけでなく、後でレイアウトを変更することが困難
な文書となっていたが、上記本実施例の行情報テーブル
作成処理では、認識された１行を連続した行とみなして
格納する行位置を算出するようにしたため、１行の連続
した行内の文字列が２行に認識されてレイアウトされる
ような事態を回避することができる。

【００４７】また、従来は、読み取った原稿イメージ上
の文字イメージから文字サイズを決定する際に、図４に
示すように、同じポイント数のフォントでもフォントの
形態（漢字、かな、句読点等）により半角サイズに算出
されて、元の原稿イメージとは全く違った文字サイズの
文書となってしまう場合があったが、上記本実施例の行
情報テーブル作成処理の行内の基本文字サイズ決定処理
では、行内の全文字のｘサイズとｙサイズの加算値を文
字数で割って求めたことにより、行内の文字サイズを同
一として、元の原稿イメージに近い文書イメージとする
ことを可能にしている。

【００４８】再び、図２のステップＳ１５に戻り、行位
置補正処理を実行するが、この行位置補正処理について
図９に示すフローチャートに基づいて説明する。図９に
おいて、まず、上記行情報テーブルに格納された行情報
を行位置の小さい方からソートし（ステップＳ１５
１）、各行の行位置を示すｙ座標データ（前行の座標ｙ
１と当該行の座標ｙ０）を参照することにより、その行
位置が前行と重なっている行があるか否かを確認する
（ステップＳ１５２）。行位置が前行と重なっている行
がある場合は、当該行を含む以降の行の行位置を１行分
づつ後ろへずらすように、行情報テーブルに記憶されて
いる該当する各行の行位置情報を書き替える（ステップ
Ｓ１５３）。

【００４９】そして、行位置が前行と重なっている行が
ない場合、あるいはステップＳ１５３処理の後、上記と
同様に各行の行位置を示す座標データを参照することに
より、前行との間が１行分開いている行があるか否かを
確認する（ステップＳ１５４）。前行との間が１行分開
いている行がある場合は、その行の前行との間が１行分
以上の空きがないか否かを、原稿イメージ上のドット数
により確認する（ステップＳ１５５）。１行以上の空き
がない場合は、当該行が意識して空けられた空白行でな
いと判断し、当該行を含む以降の行の行位置を１行分づ
つ前へずらすように、行情報テーブルに記憶されている
該当する各行の行位置情報を書き替える（ステップＳ１
５６）。

【００５０】また、ステップＳ１５４において前行との
間が１行分開いている行がない場合、あるいは、前行と
の間が１行分開いている行で、かつ前行との間に１行以
上の空きがある行の場合は、当該行が意識して空けられ
た空白行であると判断し、行位置情報の書き替えをせ
ず、ステップＳ１５７でステップＳ１５２に戻り次の行
の位置補正処理を繰り返し実行する。そして、ステップ
Ｓ１５７で全行に対する行位置補正処理の終了を確認し
て、本処理を終了する。

【００５１】以上の行位置補正処理により、原稿イメー
ジ上の全行の行位置の補正を終了し、図８に示した行情
報テーブルが完成する。したがって、上記本実施例の行
位置補正処理を実行することにより、行位置が重なって
いる行や行間隔が１行以上開いている行の行位置を、元
の原稿イメージに近い文書として補正することができ
る。

【００５２】次いで、再び、図３のステップＳ１６に戻
り、認識結果テーブル１１から１文字分の文字コードを
読み出し、その文字倍率の算出処理を実行する（ステッ
プＳ１７）。この文字倍率の算出処理について図１０に
示すフローチャートに基づいて説明する。本処理では、
行単位の基本文字サイズを基準として実際に格納される
各文字の文字サイズの倍率を算出する。全文字に対して
上記基本文字サイズを算出した同じ計算式を適用する
と、縦長文字フォントに対しては文字サイズに対する横
倍率が小さくなり、横長文字フォントに対しては文字サ
イズの縦倍率が小さくなり、縦横とも小さい文字フォン
トに対しては文字サイズの縦横倍率とも小さくなってし
まう。

【００５３】そこで、本実施例では、フォントの形状
を、縦長、横長、小さめ、正方形の４種類に分け、その
種類に応じて文字倍率を設定する処理を施すことによ
り、正しい文字サイズを設定する。以下に、フォント形
状を分ける文字フォントの一例を示す。

【００５４】縦長 ：；（）｛｝［］１ＩｉＪｌなど 横長 ー〜…−＝など 小さめ 、。．，・´”ぁぃぅぇぉっゃゅょァィゥェォ
など 正方形 上記以外のひらがな、カタカナ、英数及び漢字
（一二など特殊なものは除く） 図１０において、まず、その文字コードの種類を判別し
（ステップＳ１７１）、すなわち、その文字の形状が
“縦長”か、“横長”か、“小さめ”か、“正方形”か
を判別する。縦長文字フォントの場合は、その縦倍率
を、上記図５の認識結果テーブルに記憶した認識ｙサイ
ズを上記図８の行情報テーブルに記憶した行単位ｙサイ
ズで割ることにより算出し（ステップＳ１７２）、横倍
率を１として（ステップＳ１７３）、縦長文字フォント
に対する文字倍率の設定を終了する。また、横長文字フ
ォントの場合は、その縦倍率を１とし（ステップＳ１７
４）、横倍率を、上記図５の認識結果テーブルに記憶し
た認識ｘサイズを上記図８の行情報テーブルに記憶した
行単位ｘサイズで割ることにより算出し（ステップＳ１
７５）、横長文字フォントに対する文字倍率の設定を終
了する。

【００５５】また、小さめ文字フォントの場合は、縦倍
率及び横倍率を１に設定し（ステップＳ１７６）、正方
形文字フォントの場合は、縦倍率を、上記図５の認識結
果テーブルに記憶した認識ｙサイズを上記図８の行情報
テーブルに記憶した行単位ｙサイズで割ることにより算
出し（ステップＳ１７７）、横倍率を、上記図５の認識
結果テーブルに記憶した認識ｘサイズを上記図８の行情
報テーブルに記憶した行単位ｘサイズで割ることにより
算出して（ステップＳ１７８）、小さめ文字フォント及
び正方形文字フォントに対する文字倍率の設定を終了す
る。

【００５６】以上のように文字倍率を算出することによ
り、認識された文字フォントの形状に応じた文字倍率と
することができ、元の原稿の文字サイズからはずれた文
字倍率に設定されることを回避することができる。

【００５７】次いで、図３のステップＳ１８において、
上記文字倍率算出処理により算出された各文字の文字倍
率が０．５であるか否かを確認し、すなわち、上記文字
倍率算出により半角サイズに設定された文字を抽出す
る。半角文字を抽出すると、ステップＳ１９により文字
倍率補正処理を実行する。

【００５８】この文字倍率補正処理について図１１に示
すフローチャートに基づいて説明する。本処理は、上記
文字倍率算出処理において、正方形文字フォントの全角
サイズを半角サイズに算出した場合に、その文字倍率を
補正するための処理である。すなわち、文字フォントの
サイズは、メーカー等によっては全角サイズよりも小さ
めに作られている場合があり、例えば、「り」「く」な
どはフォントの種類により横サイズがかなり異なってい
る。

【００５９】そこで、本処理は、横倍率が半角サイズに
算出された文字がある場合、当該半角文字の前後の文字
間ドットを求め、前後の文字間に入るように文字倍率を
補正するものである。

【００６０】図１１において、まず、図１２に示すよう
に、半角サイズに設定された文字「く」の前後の文字間
ドット数を算出し（ステップＳ１９１）、前後文字の重
心間を求める。そして、この文字間ドット数ａが、上記
行情報テーブル作成処理により算出した行基本文字サイ
ズの２倍の値より大きいか否かを判別する（ステップＳ
１９２）。文字間ドット数が行基本文字サイズの２倍の
値より大きい場合は、その半角サイズに設定された文字
が、本来は全角文字であったと判断し、その文字の横倍
率を１に補正して（ステップＳ１９３）、本処理を終了
する。

【００６１】また、文字間ドット数が行基本文字サイズ
の２倍の値より大きくない場合、すなわち、全角文字で
ない元々半角サイズの文字であると判断し、横倍率を補
正せずに本処理を終了する。

【００６２】以上のように文字倍率補正処理を実行する
ことにより、半角サイズに算出された全角文字を元の全
角サイズに補正することができ、元々半角サイズの文字
は半角サイズのままの文字イメージを保持することがで
きる。

【００６３】次いで、図３のステップＳ２０により桁位
置算出処理を実行する。この桁位置算出処理について図
１３に示すフローチャートに基づいて説明する。本処理
は、上記行位置の算出処理と同じく、原稿イメージ上で
の文字の桁位置が書式の桁と桁の間にあると認識された
場合、そこに空白が生じないようにして、元の原稿イメ
ージからかけ離れたイメージにならないように、その認
識文字の前の文字との間の連続性を判断して認識文字の
桁位置を算出する処理である。

【００６４】図１３において、まず、図１４に示すよう
に、現在桁位置を求めようとしている文字の前の文字と
の重心の距離ｂを求め、その距離ｂが行内基本文字サイ
ズのｘサイズよりも大きいかか否かを判別することによ
り連続性を判断する（ステップＳ２０１）。大きくない
場合は、連続と判断し、当該文字の桁位置を、前の文字
の桁位置に前の文字の桁幅（全角の場合２桁、半角の場
合１桁とする）を加算して算出し（ステップＳ２０
２）、大きくない場合は、不連続と判断し、当該文字の
桁位置を、次式（２）により算出する（ステップＳ２０
３）。

【００６５】 桁位置＝（文字ｘ座標−左余白ｄｏｔ）／（桁ピッチｄｏｔ／２）…（２） 以上の桁位置算出処理により、文字間に不用意に空白が
空くことが無くなり、かつ実際に空白が空いている文字
に対しては、元の健康イメージの文字位置と同じところ
に文字を格納することができる。

【００６６】次いで、図３のステップＳ２１に戻り、上
記ステップＳ１７〜ステップＳ２０の各処理を終了した
文字の文字コード、行位置、桁位置、縦倍率、横倍率の
各データを図１５に示す文字データメモリに２バイト構
成で記憶する。そして、認識結果テーブル１１に格納さ
れる全ての文字データに対して１文字単位で上記ステッ
プＳ１６〜ステップＳ２１の処理を繰り返し実行して、
読取原稿イメージ上の全文字データに対する文字データ
メモリへのデータ記憶を行う（ステップＳ２２）。

【００６７】次いで、読取原稿イメージデータから罫線
領域を抽出し（ステップＳ２３）、その抽出した罫線１
本毎に始点、終点座標を、図１６に示すよう、認識結果
テーブル１１に罫線位置情報として２バイト構成で格納
する（ステップＳ２４）。次いで、ステップＳ２５にお
いて罫線位置算出処理を実行するが、この罫線算出処理
は、すでに算出された行情報から一番近い行からの距離
と現在算出しようとしている罫線より上にある罫線から
の距離を求め、その近いほうからの相対位置を算出して
行位置を求めることにより、罫線と文字との位置関係を
確保し、さらに元の原稿イメージを再現する処理であ
る。

【００６８】例えば、図１７に示すような原稿イメージ
上の横罫線は、「部長、課長、担当」の行情報から
の距離から、また横罫線は、横罫線からの距離から
行位置を求めることができる。

【００６９】この罫線算出処理について図１８に示すフ
ローチャートに基づいて説明する。図１８において、ま
ず、認識結果テーブル１１に記憶した罫線位置情報によ
り認識した罫線が最初の罫線か否かを判別し（ステップ
Ｓ２５１）、最初の罫線である場合は、原稿イメージ上
の絶対座標からの行位置を算出して求め、すなわち、原
稿左上り原点座標に対する当該罫線の座標ｙを行ピッチ
ｄｏｔにより割ることで算出し（ステップＳ２５２）、
その罫線の桁位置を原稿上の絶対座標ｘを桁ピッチｄｏ
ｔで割る（桁＝座標ｘ／桁ピッチｄｏｔ）ことにより算
出して（ステップＳ２５３）、本処理を終了する。

【００７０】また、最初の罫線でない場合は、認識した
文字がないか否かを判別し（ステップＳ２５４）、すな
わち、原稿イメージ上は罫線だけか否かを判別する。罫
線だけではなく、認識した文字がある場合は、現在算出
しようとしている罫線から一番近い文字行からの距離を
求める（ステップＳ２５５）。次いで、当該罫線の上に
ある一番近い罫線からの距離を求める（ステップＳ２５
６）。そして、文字行からの距離が罫線からの距離より
小さい場合は（ステップＳ２５７）、その文字からの距
離を行に換算し、その行の整数の値を上の文字の行位置
に加算して罫線位置を算出する（ステップＳ２５８）。

【００７１】このステップＳ２５８において距離を行に
換算する際の計算式を以下に示す。 行＝距離（ｄｏｔ）／行ピッチｄｏｔ 次いで、その罫線の桁位置を原稿上の絶対座標から算出
して（ステップＳ２５３）、本処理を終了する。

【００７２】また、上記ステップＳ２５４において認識
した文字がある場合、あるいはステップＳ２５７におい
て文字行からの距離が罫線からの距離より大きい場合
は、上にある罫線からの距離を行に換算し（行＝距離
（ｄｏｔ）／行ピッチｄｏｔ）、その行の整数の値を上
の罫線の行位置に加算して罫線位置を算出する（ステッ
プＳ２５９）。次いで、その罫線の桁位置を原稿上の絶
対座標から算出して（ステップＳ２５３）、本処理を終
了する。

【００７３】以上の罫線算出処理を、上記図１７に示し
たような縦罫線、横罫線双方に対して行うことにより、
すなわち、まず、横罫線に対する罫線位置が算出
された後、縦罫線に対する罫線位置が算出され
ことにより、元の原稿イメージに準じた罫線位置を求め
ることができる。

【００７４】そして、再び、図３のステップＳ２６に戻
り、上記罫線位置算出処理により算出された原稿上の罫
線位置情報は、図１９に示すように、その罫線種を表す
罫線種コードとして“横罫線”、“始点行”、“始点
桁”、“終点行”、“終点桁”として罫線データメモリ
に記憶し、ステップＳ２７で他の罫線が有るか否かを確
認し、罫線が有る場合は、上記ステップＳ２３〜ステッ
プＳ２７の処理を繰り返し実行することにより、罫線デ
ータメモリ１２に記憶し、図２及び図３の文書読込処理
を終了する。

【００７５】以上のように、上記本実施例の文書読込処
理では、認識した文字毎に行単位による行位置の決定処
理を行って、文字毎の行位置を文字単位に算出すること
から認識された行単位に行位置を算出し、すべて同一行
に該当行位置の文字を格納することにより、書式行の中
間にある行が文字により２行にまたがることなく、同一
行に文字が格納することができる。

【００７６】また、認識した文字毎に行単位による基本
サイズの決定処理を行って、行単位の基本サイズを算出
し、１行内はその文字サイズを全角または半角に統一す
ることにより、元の原稿イメージに近い形に復元でき、
かつ読みやすい文書とすることができる。

【００７７】この基本文字サイズを算出する際には、全
角、４倍角等の閾値を操作することにより、元の原稿イ
メージで本文より強調している行（本文の文字より少し
だけ大きい行）を読み取って再現した文書で実際の文字
より大きめに格納することにより、使用者に対して視覚
的に強調することができる。

【００７８】さらに、上記文字サイズの算出処理におい
て、文字フォントの形状、すなわち、縦長、横長、小さ
め、正方形の４つの形態に分類し、それぞれの形状に対
して文字サイズを設定する処理を施すことにより、縦
長、横長、小さめの各文字フォントが行内の他の文字と
比べて極端に小さくなることが無くなり、正しい文字列
を復元することができる。

【００７９】また、上記文字サイズの補正処理におい
て、前後の文字の重心間を計算し、その間に入る文字サ
イズを算出することにより、認識した文字の種類及びメ
ーカー間の文字フォント形態の違いによる文字サイズを
統一し、ある特定文字がいつも半角になることを防ぐこ
とができる。

【００８０】また、上記文字格納桁位置の算出処理にお
いて、前の文字との連続性を求め、連続していると判断
した場合は、前の文字位置＋文字サイズとして桁位置を
求め、不連続と判断した場合は、原稿イメージ上の座標
と桁ピッチから求めることにより、文字間に不用意に空
白が空くことが無くなり、かつ実際に元原稿に空白が空
いている文字に対しては、元の原稿イメージの位置と同
じ桁位置に格納することができる。

【００８１】さらに、上記行情報の補正処理において、
前後の行の間を算出した実際にイメージ上で１行空いて
いるか、また、実際のイメージ上で同じ行にあるかを否
かをチェックすることにより、行位置の補正が可能とな
り、元の原稿イメージと同じになるように読取原稿イメ
ージを復元することができる。

【００８２】また、上記罫線位置算出処理において、一
番近い行からの距離と現在算出しようとしている罫線よ
り上にある罫線からの距離を求め、その近いほうからの
相対位置により行位置を求めることにより、元の原稿イ
メージと同じ罫線位置を求めることができ、なかかつ文
字との位置関係を保って読取原稿イメージを復元するこ
とができる。

【００８３】したがって、以上のように、文書読込処理
により原稿イメージデータから求められた文字データメ
モリ及び罫線データメモリを文書書式メモリ８に格納す
ることにより、読み取った原稿イメージデータから認識
した文字コードとともに、その原稿イメージ上の各文字
の行位置、桁位置、文字サイズ、文字倍率、罫線位置等
の書式情報を書式設定をせずに、元の原稿イメージに近
い文書書式を自動的に設定することができ、書式設定の
ための調整作業を容易にすることができる。

【００８４】

【発明の効果】請求項１記載の発明によれば、すべて同
一行に該当行位置の文字を格納することにより、書式行
の中間にある行が文字により２行にまたがることなく、
同一行に文字が格納することができる。また、１行内は
その文字サイズを全角または半角に統一することによ
り、元の原稿イメージに近い形に復元でき、かつ読みや
すい文書とすることができる。

【００８５】請求項２記載の発明によれば、縦長、横
長、小さめの各文字フォントが行内の他の文字と比べて
極端に小さくなることが無くなり、正しい文字列を復元
することができる。

【００８６】請求項３記載の発明によれば、認識した文
字の種類及びメーカー間の文字フォント形態の違いによ
る文字サイズを統一し、ある特定文字がいつも半角にな
ることを防ぐことができる。

【００８７】請求項４記載の発明によれば、文字間に不
用意に空白が空くことが無くなり、かつ実際に元原稿に
空白が空いている文字に対しては、元の原稿イメージの
位置と同じ桁位置に格納することができる。

【００８８】請求項５記載の発明によれば、行位置の補
正が可能となり、元の原稿イメージと同じになるように
読取原稿イメージを復元することができる。

【００８９】請求項６記載の発明によれば、元の原稿イ
メージと同じ罫線位置を求めることができ、なかかつ文
字との位置関係を保って読取原稿イメージを復元するこ
とができる。

【図面の簡単な説明】

【図１】本発明を適用した文書イメージ処理装置のブロ
ック構成図。

【図２】図１のＣＰＵにより実行される文書読込処理の
フローチャート。

【図３】図２に続く文書読込処理のフローチャート。

【図４】元原稿イメージの一例を示す図。

【図５】図１の認識結果テーブルに格納される文字位置
情報及び改行情報のデータ構成の一例を示す図。

【図６】原稿イメージ上の文書書式情報の一例を示す
図。

【図７】図２の文書読込処理中で実行される行情報テー
ブル作成処理のフローチャート。

【図８】図７の行情報テーブル作成処理により作成され
た行情報テーブルの一例を示す図。

【図９】図２の文書読込処理中で実行される行位置補正
処理のフローチャート。

【図１０】図３の文書読込処理中で実行される文字倍率
算出処理のフローチャート。

【図１１】図３の文書読込処理中で実行される文字倍率
補正処理のフローチャート。

【図１２】文字倍率補正を必要とする文字フォントの前
後文字間との関係を示す図。

【図１３】図３の文書読込処理中で実行される桁位置算
出処理のフローチャート。

【図１４】文字桁位置を算出する際に文字の連続性を判
断するための文字重心間の関係を示す図。

【図１５】図３の文書読込処理により作成された文字デ
ータメモリ内のデータ構成の一例を示す図。

【図１６】図３の文書読込処理により認識結果テーブル
内に作成された罫線位置情報のデータ構成の一例を示す
図。

【図１７】原稿イメージ上の罫線の一例を示す図。

【図１８】図３の文書読込処理中で実行される罫線位置
算出処理のフローチャート。

【図１９】図１８の罫線位置算出処理により作成された
罫線データメモリ内のデータ構成の一例を示す図。

【符号の説明】

１ 文書イメージ処理装置 ２ ＣＰＵ ３ キー入力部 ４ イメージリーダー ５ 原稿イメージメモリ ６ 文字認識装置 ７ 認識用辞書 ８ 文書書式メモリ ９ ＲＯＭ １０ ワークＲＡＭ １１ 認識結果テーブル １２ 文書データメモリ １３ 罫線データメモリ １４ 印字部 １５ 表示部

Claims (6)

【特許請求の範囲】
1. 【請求項１】原稿をイメージデータとして読み取る読取
   手段と、 この読取手段により読み取られたイメージデータから文
   字列を文字認識してコード化する文字認識手段と、 前記読取手段により読み取られた原稿イメージデータを
   記憶するとともに、前記コード化された文字データを順
   次記憶する記憶手段と、 前記記憶された原稿イメージデータにより認識された各
   文字データの原稿上での座標と行領域とを解析すること
   により各行毎の基本行位置、基本文字サイズを求める解
   析手段と、 この解析手段により求められた基本行位置及び基本文字
   サイズに基づいて、前記各文字の原稿イメージ上におけ
   る座標、及び文字イメージ領域を算出することにより、
   各文字の各行における行位置、及び文字倍率を決定する
   文字情報算出手段と、 を具備したことを特徴とする文書イメージ処理装置。
2. 【請求項２】前記解析手段は、前記原稿イメージ上で特
   定倍率に設定された文字に対して、その前後文字間を解
   析し、その文字間が所定値よりも広い場合は、前記文字
   情報算出手段は、前記基本文字サイズに基づいて算出す
   る文字倍率を当該文字の行単位で補正し、また、前記解
   析した文字間が所定値よりも広くない場合は、前記算出
   した文字倍率のままとすることを特徴とする請求項１記
   載の文書イメージ処理装置。
3. 【請求項３】前記解析手段は、前記原稿イメージデータ
   において各行イメージ単位に求めた行位置に同一行があ
   るか否かを解析し、同一行がある場合は、前記文字情報
   算出手段は、当該同一行のうち後の方の行の行位置、及
   び後続する各行イメージに対応する行位置を１行分づつ
   後ろに移動する行位置補正を行い、 また、前記解析手段は、前記原稿イメージデータにおい
   て各行イメージ単位に求めた行位置に１行分開いている
   行があるか否かを解析し、１行分以内の空きがある行が
   ある場合は、前記文字情報算出手段は、当該行のうち後
   の方の行の行位置、及び後続する各行イメージに対応す
   る行位置を１行分づつ前に移動する行位置補正を行うこ
   とを特徴とする請求項１記載の文書イメージ処理装置。
4. 【請求項４】原稿をイメージデータとして読み取る読取
   手段と、 この読取手段により読み取られた原稿イメージデータか
   ら文字列を文字認識してコード化する文字認識手段と、 前記読取手段により読み取られた原稿イメージデータを
   記憶するとともに、前記コード化された文字データを順
   次記憶する記憶手段と、 前記認識された各文字の種類に応じて、その文字種類毎
   に基本となる文字領域サイズに対する各文字イメージ領
   域のサイズの比率を求め、その比率に応じた文字倍率を
   決定する文字情報算出手段と、 を具備したことを特徴とする文書イメージ処理装置。
5. 【請求項５】原稿をイメージデータとして読み取る読取
   手段と、 この読取手段により読み取られた原稿イメージデータか
   ら文字列を文字認識してコード化する文字認識手段と、 前記読取手段により読み取られた原稿イメージデータを
   記憶するとともに、前記コード化された文字データを順
   次記憶する記憶手段と、 前記記憶された原稿イメージ上での連続する文字同志の
   距離を求める解析手段と、 この文字同志の距離が所定値よりも短い場合は、後の方
   の文字の桁位置を、前の方の文字に連続する桁として桁
   位置を求め、この文字同志の距離が所定値よりも長い場
   合は、後の方の文字の桁位置を、前記原稿イメージ上の
   座標と所定の桁ピッチとから求める文字情報算出手段
   と、 を具備したことを特徴とする文書イメージ処理装置。
6. 【請求項６】原稿をイメージデータとして読み取る読取
   手段と、 この読取手段により読み取られた原稿イメージデータを
   記憶する記憶手段と、 この原稿イメージ上の各罫線の座標領域を個別に求める
   解析手段と、 この各罫線の前記原稿上での位置情報を求める際には、
   対象とする罫線の座標領域と、この罫線に近接する他の
   罫線の座標領域に対する距離を原稿上の行数あるいは桁
   数情報に換算し、この換算した情報と前記他の罫線の位
   置情報とに基づいて、前記対象罫線の位置情報を求める
   罫線位置算出手段と、 を具備したことを特徴とする文書イメージ処理装置。