JP2004178108A - 帳票認識装置 - Google Patents
帳票認識装置 Download PDFInfo
- Publication number
- JP2004178108A JP2004178108A JP2002341497A JP2002341497A JP2004178108A JP 2004178108 A JP2004178108 A JP 2004178108A JP 2002341497 A JP2002341497 A JP 2002341497A JP 2002341497 A JP2002341497 A JP 2002341497A JP 2004178108 A JP2004178108 A JP 2004178108A
- Authority
- JP
- Japan
- Prior art keywords
- page
- image
- format data
- block
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Character Input (AREA)
- Editing Of Facsimile Originals (AREA)
- Image Analysis (AREA)
Abstract
【課題】複数頁で構成される帳票を認識できるようにする。
【解決手段】帳票認識装置は、複数の頁画像で構成される帳票画像を入力する画像入力手段と、前記入力された複数の頁画像で構成される帳票画像から、１つの合体書式データを生成する書式データ生成手段と、前記書式データ生成手段で生成した合体書式データを、登録帳票の書式データと比較して類似度を算出する類似度算出手段と、前記類似度算出手段で算出された類似度に基づいて、前記帳票画像に最も類似する登録帳票を識別する識別手段とを有することにより、複数ページで構成される帳票を認識できる。
【選択図】 図１
【解決手段】帳票認識装置は、複数の頁画像で構成される帳票画像を入力する画像入力手段と、前記入力された複数の頁画像で構成される帳票画像から、１つの合体書式データを生成する書式データ生成手段と、前記書式データ生成手段で生成した合体書式データを、登録帳票の書式データと比較して類似度を算出する類似度算出手段と、前記類似度算出手段で算出された類似度に基づいて、前記帳票画像に最も類似する登録帳票を識別する識別手段とを有することにより、複数ページで構成される帳票を認識できる。
【選択図】 図１
Description
【０００１】
【発明の属する技術分野】
本発明は帳票認識装置に関する。
【０００２】
【従来の技術】
従来、帳票認識装置は、スキャナ等で読み取った帳票画像データに対し、１枚ごとに特徴量の抽出、この特徴量からの帳票書式データ生成を順次実行した後に、生成された帳票書式データと登録帳票の書式データとの類似度を１枚ごとに算出し、最も類似する登録帳票の書式データを識別することによって帳票認識を行う。
【０００３】
【発明が解決しようとする課題】
つまり、従来の帳票認識装置では、１枚で構成される帳票しか認識できず、複数枚で１つの帳票が構成されるような帳票（複数ページで構成される帳票）の認識を行うことはできなかった。
【０００４】
本発明は、複数頁で構成される帳票を認識することを目的とする。
【０００５】
【課題を解決するための手段】
本発明に係る帳票認識装置は、複数の頁画像で構成される帳票画像を入力する画像入力手段と、前記入力された複数の頁画像で構成される帳票画像から、１つの合体書式データを生成する書式データ生成手段と、前記書式データ生成手段で生成した合体書式データを、登録帳票の書式データと比較して類似度を算出する類似度算出手段と、前記類似度算出手段で算出された類似度に基づいて、前記帳票画像に最も類似する登録帳票を識別する識別手段とを有することを特徴とする。
【０００６】
【発明の実施の形態】
［第１の実施形態］
次に本発明に係る帳票認識装置の一実施形態を図面に基づいて説明する。
【０００７】
図１は、本発明に係る帳票認識装置の一実施形態を示すブロック図、図２は、帳票画像における複数の頁画像を示す図、図３Ａは、１枚の頁画像についての書式データを示す図、図３Ｂは、他の頁画像についての書式データを示す図、図４Ａは、２枚の頁画像の書式データを合体した書式データを示す図、図４Ｂは、３枚の頁画像の書式データを合体した書式データを示す図である。
【０００８】
図１において、帳票認識装置は、スキャナ、カメラ、あるいはファイル読み込み装置などの画像入力手段１１を有し、この画像入力手段１１から１頁または複数頁の帳票を画像データとして入力する。
【０００９】
画像入力手段１１はバス１７に接続され、バス１７を介して帳票認識の処理を実行するプロセッサ１２に接続されている。
【００１０】
バス１７にはさらにキーボード１３、ディスク１４、メモリ１５、出力手段１６が接続されている。
【００１１】
メモリ１５は、プロセッサ１２において処理制御情報を作成する際の一時データ記憶、あるいは画像入力手段１１で読み込んだ帳票画像を蓄積する。また登録帳票（帳票テンプレート）の書式データ等が、ディスク１４等から読み込まれて、登録済みデータ１５ｄとして保持される。また、後述するフローチャートに対応するような処理をコンピュータに実行させるための制御プログラム１５ｃが格納される。
【００１２】
プロセッサ１２は、メモリ１５に格納された制御プログラム１５ｃを実行することにより、画像特徴量抽出手段１２ａ、書式データ作成手段１２ｂ、書式データ合体手段１２ｃ、画像データ合体手段１２ｄ、類似度算出・識別手段１２ｅとして機能する。
【００１３】
キーボード１３は、帳票の登録や検索などの指示操作を行い、ディスク１４は、補助記憶装置として機能する。
【００１４】
出力手段１６は、ディスプレイ、プリンタ等であり、認識結果等の各種情報を出力する。
【００１５】
スキャナ１１で読み取った帳票の画像は、帳票画像１５ｂとしてメモリ１５に格納される。帳票画像１５ｂはプロセッサ１２に設けられた画像処理手段（図示せず。）等により２値化処理されて、画像特徴量抽出手段１２ａに送られる。
【００１６】
画像特徴量抽出手段１２ａは、黒ドットのヒストグラムを取るなどして帳票画像に含まれる領域を識別し、帳票画像１５ｂに含まれる領域（ブロック）をテーブル、テキスト、ピクチャ等に属性分類し、さらに解像度、ブロック情報を抽出する。ブロック情報は帳票画像１５ｂに含まれるブロックの位置情報、大きさ情報等よりなる。
【００１７】
各ブロックの属性情報等の特徴量は、書式データ作成手段１２ｂに入力され、書式データ作成手段１２ｂは、属性情報、解像度、ブロック情報に基づいて、帳票画像１５ｂの書式データを生成し、メモリ１１およびディスク１４に保存する。
【００１８】
図２は、３頁、すなわち３枚の画像１５ｂ１、１５ｂ２、１５ｂ３で構成される帳票画像１５ｂの例を示す。この帳票画像について、特徴量抽出手段１２ａによってブロックの属性分類が為される。ここで１頁の帳票画像を頁画像と呼ぶことにする。
【００１９】
頁画像１５ｂ１は３個のブロックＢ１１、Ｂ１２、Ｂ１３を含み、頁画像１５ｂ２は４個のブロックＢ２１、Ｂ２２、Ｂ２３、Ｂ２４を含み、頁画像１５ｂ３は３個のブロックＢ３１、Ｂ３２、Ｂ３３を含む。
【００２０】
頁画像１５ｂ１は帳票頁幅Ｗ１、帳票頁高さＨ１であり、そのブロックＢ１１はブロック左端位置の水平座標がＸ１１、ブロック上端位置の垂直座標がＹ１１、ブロック幅がＷ１１、ブロック高さＨ１１、ブロックＢ１２はブロック左端位置の水平座標がＸ１２、ブロック上端位置の垂直座標がＹ１２、ブロック幅がＷ１２、ブロック高さＨ１２、そのブロックＢ１３はブロック左端位置の水平座標がＸ１３、ブロック上端位置の垂直座標がＹ１３、ブロック幅がＷ１３、ブロック高さＨ１３である。
【００２１】
頁画像１５ｂ２は帳票頁幅Ｗ２、帳票頁高さＨ２であり、そのブロックＢ２１はブロック左端位置の水平座標がＸ２１、ブロック上端位置の垂直座標がＹ２１、ブロック幅がＷ２１、ブロック高さＨ２１、ブロックＢ２２はブロック左端位置の水平座標がＸ２２、ブロック上端位置の垂直座標がＹ２２、ブロック幅がＷ２２、ブロック高さＨ２２、そのブロックＢ２３はブロック左端位置の水平座標がＸ２３、ブロック上端位置の垂直座標がＹ２３、ブロック幅がＷ２３、ブロック高さＨ２３、そのブロックＢ２４はブロック左端位置の水平座標がＸ２４、ブロック上端位置の垂直座標がＹ２４、ブロック幅がＷ２４、ブロック高さＨ２４である。
【００２２】
頁画像１５ｂ３は帳票頁幅Ｗ３、帳票頁高さＨ３であり、そのブロックＢ３１はブロック左端位置の水平座標がＸ３１、ブロック上端位置の垂直座標がＹ３１、ブロック幅がＷ３１、ブロック高さＨ３１、ブロックＢ３２はブロック左端位置の水平座標がＸ３２、ブロック上端位置の垂直座標がＹ３２、ブロック幅がＷ３２、ブロック高さＨ３２、そのブロックＢ３３はブロック左端位置の水平座標がＸ３３、ブロック上端位置の垂直座標がＹ３３、ブロック幅がＷ３３、ブロック高さＨ３３である。
【００２３】
書式データ作成手段１２ｂは、頁画像１５ｂ１、１５ｂ２、１５ｂ３について、帳票頁幅、帳票頁高さ、解像度等の頁書式と、ブロック左端位置、ブロック上端位置等の位置情報、ブロック幅、ブロック高さなどの大きさ情報よりなるブロック情報とを含む書式データを生成する。
【００２４】
図３Ａは頁画像１５ｂ１の書式データを示す。同書式データにおいて、頁書式は、帳票頁幅Ｗ１、帳票頁高さＨ１、解像度Ｄ１であり、ブロック情報は、各ブロックＢ１１、Ｂ１２、Ｂ１３の位置情報であるブロック左端位置、ブロック上端位置と、大きさ情報であるブロック幅、ブロック高さを含む。
【００２５】
図３Ｂは頁画像１５ｂ２の書式データを示す。同書式データにおいて、頁書式は、帳票頁幅Ｗ２、帳票頁高さＨ２、解像度Ｄ２であり、ブロック情報は、各ブロックＢ２１、Ｂ２２、Ｂ２３、Ｂ２４の位置情報であるブロック左端位置、ブロック上端位置と、大きさ情報であるブロック幅、ブロック高さを含む。
【００２６】
頁画像１５ｂ３の書式データは、頁画像１５ｂ１、１５ｂ２の書式データと同様にして作成されるので図示を省略する。
【００２７】
書式データ合体手段１２ｃは複数の頁画像の書式データを合体し、１個の書式データ（以下合体書式データという。）を生成する。合体は、帳票頁高さを合計した頁高さと、最も大きい帳票頁幅とを有する帳票を生成するように、書式データを設定する。
【００２８】
図４Ａは頁画像１５ｂ１、１５ｂ２の合体書式データを示し、図４Ｂは頁画像１５ｂ１、１５ｂ２、１５ｂ３の合体書式データを示す。
【００２９】
図４Ａにおいて、合体書式データは、合体された頁画像１５ｂ１、１５ｂ２の各帳票頁幅を示す帳票頁幅（Ｗ１：Ｗ２）、頁画像１５ｂ１、１５ｂ２の帳票頁高さの和よりなる帳票頁高さ（Ｈ１＋Ｈ２）、解像度ＤＤ１を頁書式とする。なお、本実施形態では、読み込んだ各頁画像の解像度は同じとして扱っているが、読み込んだ頁画像の解像度が異なっている場合、好適には頁画像の解像度を登録帳票の解像度と一致するように変換した後、合体する（その際、頁画像のブロック情報も解像度変換に合わせて変換されている）。さらに合体書式データは、１頁目の頁画像１５ｂ１のブロックＢ１１〜Ｂ１３のブロック情報を配列し、これに続いて、２頁目の頁画像１５ｂ２のブロックＢ２１〜Ｂ２４のブロック情報を配列してなる。頁画像１５ｂ２のブロック情報において、頁画像１５ｂ２は頁画像１５ｂ１の下に連結されているので、ブロックＢ２１〜Ｂ２４のブロック上端位置は、頁画像１５ｂ１の帳票頁高さＨ１だけ加算される。
【００３０】
すなわち、ブロックＢ２１はブロック左端位置の水平座標がＸ２１、ブロック上端位置の垂直座標がＹ２１＋Ｈ１、ブロック幅がＷ２１、ブロック高さＨ２１、ブロックＢ２２はブロック左端位置の水平座標がＸ２２、ブロック上端位置の垂直座標がＹ２２＋Ｈ１、ブロック幅がＷ２２、ブロック高さＨ２２、そのブロックＢ２３はブロック左端位置の水平座標がＸ２３、ブロック上端位置の垂直座標がＹ２３＋Ｈ１、ブロック幅がＷ２３、ブロック高さＨ２３、そのブロックＢ２４はブロック左端位置の水平座標がＸ２４、ブロック上端位置の垂直座標がＹ２４＋Ｈ１、ブロック幅がＷ２４、ブロック高さＨ２４である。
【００３１】
図４Ｂにおいて、頁書式は、頁画像１５ｂ１、１５ｂ２、１５ｂ３の各帳票頁幅を示す帳票頁幅（Ｗ１：Ｗ２）、頁画像１５ｂ１、１５ｂ２、１５ｂ３の帳票頁高さの和よりなる帳票頁高さ（Ｈ１＋Ｈ２＋Ｈ３）、解像度ＤＤ３よりなる。
【００３２】
ブロック情報としては、１頁目の頁画像１５ｂ１のブロックＢ１１〜Ｂ１３のブロック情報、２頁目の頁画像１５ｂ２のブロックＢ２１〜Ｂ２４のブロック情報、３頁目の頁画像１５ｂ３のブロックＢ３１〜Ｂ３３のブロック情報を順次配列してなる。ブロックＢ２１〜Ｂ２４はブロック上端位置がＨ１だけ加算され、ブロックＢ３１〜Ｂ３３はブロック上端位置がＨ１＋Ｈ２だけ加算される。
【００３３】
すなわち、頁画像１５ｂ２の各ブロック情報は図４Ａと同様であり、頁画像１５ｂ３において、ブロックＢ３１はブロック左端位置の水平座標がＸ３１、ブロック上端位置の垂直座標がＹ３１＋Ｈ１＋Ｈ２、ブロック幅がＷ３１、ブロック高さＨ３１、ブロックＢ３２はブロック左端位置の水平座標がＸ３２、ブロック上端位置の垂直座標がＹ３２＋Ｈ１＋Ｈ２、ブロック幅がＷ３２、ブロック高さＨ３２、そのブロックＢ３３はブロック左端位置の水平座標がＸ３３、ブロック上端位置の垂直座標がＹ３３＋Ｈ１＋Ｈ２、ブロック幅がＷ３３、ブロック高さＨ３３である。
【００３４】
同様にｎ枚の頁画像の書式データを合体するときには、ｎ−１枚目まで合体した合体書式データの頁書式を修正し、さらにｎ枚の頁画像１５ｂｎのブロック情報におけるブロック上端位置に１５ｂ１〜１５ｂｎ−１の帳票頁高さの和（Ｈ１＋Ｈ２＋．．．．＋Ｈｎ−１）を加える。
【００３５】
画像データ合体手段１２ｄは、以上の書式データの合体に対応して、頁画像１５ｂ１〜１５ｂ３を１頁の帳票画像に合体する。
【００３６】
このように合体書式データを生成することにより、複数頁の帳票画像を１頁の帳票画像と同様に取り扱うことが可能になり、その後の処理は、従来の帳票認識処理と同様に処理し得る。
【００３７】
合体書式データは類似度算出・識別手段１２ｅによって、登録済みの書式データ１５ａとの類似度が算出され、クラスタリングされる。
【００３８】
図５において、帳票認識処理は、以下の各ステップにより、合体書式データを生成するための書式データ生成処理を実行する。
【００３９】
ステップＳ５１：ステップＳ５３〜Ｓ５７の処理回数を制御するループカウンタｊを「１」に初期化する。
【００４０】
ステップＳ５２：全体の帳票画像１５ｂを構成する頁画像の枚数ｎを指定する。枚数ｎを含むマルチページデータが供給されたときは、枚数ｎはマルチページデータから直接取得でき、また枚数ｎをユーザが指定することも可能である。
【００４１】
ステップＳ５３：画像入力手段１１からｊ枚目の頁画像を読み込み、頁画像１５ｂｊとしてメモリ１５に転送する。
【００４２】
ステップＳ５４：画像特徴量抽出手段１２ｂによって、頁画像１５ｂｊの特徴量を抽出する。
【００４３】
ステップＳ５５：ステップＳ５４で抽出された特徴量に基づき、書式データ作成手段１２ｂによって、頁画像１５ｂｊの書式データを生成する。
【００４４】
ステップＳ５６：書式データ合体手段１２ｃによって、１枚目から（ｊ−１）枚目の頁画像書式データを合体した合体書式データに対して、ｊ枚目の頁画像１５ｂｊの書式データを合体する。
【００４５】
ステップＳ５７：ル―プカウンタｊを「１」インクリメントする。
【００４６】
ステップＳ５８：ｊ＞ｎの判断を行い、ｎ枚の頁画像１５ｂ１〜１５ｂｎの合体書式データ生成処理が完了したか否か判断する。合体書式データ生成処理が完了していなかったときは、ステップＳ５３に戻り、完了していたときは、そのまま処理を終了する。
【００４７】
以上の合体書式データ生成処理の後に、合体書式データと登録済みの合体書式データ（帳票テンプレートの登録合体書式データ）との類似度を算出し、最も類似する登録合体書式データ（登録済みデータ１５ｄ）を識別することによって帳票認識を行う。
【００４８】
なお、本実施形態では頁画像を縦方向に順次合体するように書式データを合体したが、横方向に合体することも可能である。
【００４９】
横方向の合体は、後述する第３の実施形態（図９）と同様である。合体書式データにおいて、帳票頁高さには、頁画像の帳票頁高さの最大値が採用され、帳票頁幅は頁画像の帳票頁幅の合計となる。
【００５０】
なお帳票認識において、予め帳票を登録するときや、算出された類似度が充分高くないとき、すなわち生成された合体書式データに対応する合体書式データが登録されていなかったときは、生成された合体書式データを登録する処理が必要である。
【００５１】
図６において、合体書式データを登録する処理は以下の各ステップにより実行される。
【００５２】
ステップＳ６１：合体書式データを登録する必要があるか否か判断し、登録要のときはステップＳ６２に移行し、登録不要のときはそのまま処理を終了する。
【００５３】
ステップＳ６２：合体書式データを登録する。
【００５４】
以上の登録処理により、以後対応する合体書式データに対応するような帳票画像を認識し得るようになる。
【００５５】
［第２の実施形態］
図５の合体書式データ生成処理では個々の頁画像について書式データを生成し、書式データを順次合体したが、図１の帳票認識装置において、頁画像を順次合体した後に、全体の書式データを生成することも可能である。
【００５６】
図７は、図１の帳票認識装置で実行される書式データ生成処理の第２の実施形態を示すフローチャート、図８は、第２の実施形態により生成された合成画像データを示す図である。
【００５７】
図７に示すように、頁画像の合体後に書式データを生成する処理は以下の各ステップにより実行される。
【００５８】
ステップＳ７１：ステップＳ７３〜Ｓ７５の処理回数を制御するループカウンタｊを「１」に初期化する。
【００５９】
ステップＳ７２：図５のステップＳ５２と同様、全体の帳票画像１５ｂを構成する頁画像の枚数ｎを指定する。
【００６０】
ステップＳ７３：図５のステップＳ５３と同様、画像入力手段１１からｊ枚目の頁画像を読み込み、頁画像１５ｂｊとしてメモリ１５に転送する。
【００６１】
ステップＳ７４：画像データ合体手段１２ｄによって、１枚目から（ｊ−１）枚目の頁画像を合体した画像データ（以下合体画像データという。）に対して、ｊ枚目の頁画像１５ｂｊを合体する。１枚目の頁画像１５ｂ１はそのまま合体画像データとし、２枚目の頁画像ときは、１枚目の頁画像と合体する。１枚目の頁画像１５ｂ１が帳票頁幅Ｗ１、帳票頁高さＨ１であり、２枚目の頁画像１５ｂ２が帳票頁幅Ｗ２、帳票頁高さＨ１のとき、合体画像データは、Ｗ１、Ｗ２のうちの大きい方を帳票頁幅とし、Ｈ１とＨ２を加えた高さを帳票頁高さとする。幅、高さは、余白を考慮して決めてもよい。３枚目の頁画像１５ｂ３が入力されたときは、２枚目までの合体画像に合体する。同様にｎ枚目のときは、ｎ−１枚目までの合体画像に合体する。
【００６２】
図８は、図２の頁画像１５ｂ１〜１５ｂ３を合体した合体画像データを示す。合体画像データの帳票頁幅ＷｃはＷ１、Ｗ２、Ｗ３中最大のＷ２に設定され、帳票頁高さＨｃは（Ｈ１＋Ｈ２＋Ｈ３）に設定されている。
【００６３】
ステップＳ７５：ル―プカウンタｊを「１」インクリメントする。
【００６４】
ステップＳ７６：ｊ＞ｎの判断を行い、ｎ枚の頁画像１５ｂ１〜１５ｂｎの合体画像データ生成処理が完了したか否か判断する。合体画像データ生成処理が完了していなかったときは、ステップＳ７３に戻り、完了していたときは、ステップＳ７７に移行する。
【００６５】
ステップＳ７７：画像特徴量抽出手段１２ｂによって、合体画像の特徴量を抽出する。
【００６６】
ステップＳ７８：ステップＳ７７で抽出された特徴量に基づき、書式データ作成手段１２ｂによって、合体画像データの書式データを生成し、処理を終了する。
【００６７】
合体画像データは類似度算出・識別手段１２ｅによって、登録済みの帳票画像（登録済みデータ１５ｄ）との類似度が算出され、最も類似する登録帳票が識別される。
【００６８】
以後必要に応じて、図６の処理と同様に、新たな合体書式データを登録する。
【００６９】
［第３の実施形態］
第２の実施形態では頁画像を縦方向に順次合体したが、頁画像を横方向に順次合体することも可能である。
【００７０】
第３の実施形態の処理は図７のフローチャートにおけるステップＳ７４を以下のとおり訂正することにより実現される。
【００７１】
すなわち、画像データ合体手段１２ｄによって、１枚目から（ｊ−１）枚目の頁画像を合体した画像データ（以下合体画像データという。）に対して、ｊ枚目の頁画像１５ｂｊを合体する。１枚目の頁画像１５ｂ１はそのまま合体画像データとし、２枚目の頁画像ときは、１枚目の頁画像と合体する。１枚目の頁画像１５ｂ１が帳票頁幅Ｗ１、帳票頁高さＨ１であり、２枚目の頁画像１５ｂ２が帳票頁幅Ｗ２、帳票頁高さＨ１のとき、合体画像データは、Ｈ１、Ｈ２うちの大きい方を帳票頁高さし、Ｗ１とＷ２を加えた幅を帳票頁幅とする。幅、高さは、余白を考慮して決めてもよい。３枚目の頁画像１５ｂ３が入力されたときは、２枚目までの合体画像に合体する。同様にｎ枚目のときは、ｎ−１枚目までの合体画像に合体する
図９は、第３の実施形態により生成された合成画像データを示す図である。
【００７２】
図９の合体画像データの帳票頁高さＨｃはＨ１、Ｈ２、Ｈ３中最大のＨ２に設定され、帳票頁幅Ｗｃは（Ｗ１＋Ｗ２＋Ｗ３）に設定されている。
【００７３】
以上の実施形態に示したように、複数の頁画像の画像そのもののデータあるいは書式データを合体して合体データを生成することにより、一体の帳票画像として取り扱うことが可能になる。すなわち、頁画像のデータを書式データ合体手段あるいは画像データ合体手段（以下これらを総称して合体手段という。）により合体すれば、一体帳票画像としての処理が可能になる。
【００７４】
また本発明の趣旨と範囲は、本発明の特定の説明と図に限定されるものではなく、本願特許請求の範囲に述べられた内容の様々な修正および変更に及ぶことは当業者にとって理解されるであろう。
【００７５】
本発明の実施態様の例を以下に総括する。
【００７６】
［実施態様１］
複数の頁画像で構成される帳票画像を入力する画像入力手段と、前記入力された複数の頁画像で構成される帳票画像から、１つの合体書式データを生成する書式データ生成手段と、前記書式データ生成手段で生成した合体書式データを、登録帳票の書式データと比較して類似度を算出する類似度算出手段と、前記類似度算出手段で算出された類似度に基づいて、前記帳票画像に最も類似する登録帳票を識別する識別手段とを有することを特徴とする帳票認識装置。
【００７７】
［実施態様２］
前記書式データ生成手段は、前記入力された複数の頁画像それぞれから特徴量を抽出し、当該抽出した特徴量に基づいて各頁画像の書式データを作成し、当該作成した各頁画像の書式データを合体することにより、前記合体書式データを生成することを特徴とする実施態様１に記載の帳票認識装置。
【００７８】
［実施態様３］
前記書式データ生成手段は、前記入力された複数の頁画像を合体して合体画像を作成し、当該作成した合体画像から特徴量を抽出し、当該抽出した特徴量に基づいて前記合体書式データを生成することを特徴とする実施態様１に記載の帳票認識装置。
【００７９】
［実施態様４］
前記類似度が所定値よりも低いときに、入力された帳票画像の合体データを新たに登録する登録手段をさらに有することを特徴とする実施態様１記載の帳票認識装置。
【００８０】
［実施態様５］
前記書式データ生成手段は、前記作成した各頁画像の書式データを、予め定められた方向で合体することにより、前記合体書式データを生成することを特徴とする実施態様２に記載の帳票認識装置。
【００８１】
［実施態様６］
前記書式データ生成手段は、前記入力された複数の頁画像を、予め定められた方向で合体することにより、前記合体画像を作成することを特徴とする実施態様３に記載の帳票認識装置。
【００８２】
［実施態様７］
複数の頁画像で構成される帳票画像を入力する画像入力ステップと、前記入力された複数の頁画像で構成される帳票画像から、１つの合体書式データを生成する書式データ生成ステップと、前記書式データ生成ステップで生成した合体書式データを、登録帳票の書式データと比較して類似度を算出する類似度算出ステップと、前記類似度算出ステップで算出された類似度に基づいて、前記帳票画像に最も類似する登録帳票を識別する識別ステップとを有することを特徴とする帳票認識方法。
【００８３】
［実施態様８］
複数の頁画像で構成される帳票画像を入力する画像入力ステップと、前記入力された複数の頁画像で構成される帳票画像から、１つの合体書式データを生成する書式データ生成ステップと、前記書式データ生成ステップで生成した合体書式データを、登録帳票の書式データと比較して類似度を算出する類似度算出ステップと、前記類似度算出ステップで算出された類似度に基づいて、前記帳票画像に最も類似する登録帳票を識別する識別ステップとの各ステップを、コンピュータで実現させるためのコンピュータ実行可能なプログラム。
【００８４】
［実施態様９］
前記実施態様８に記載のコンピュータプログラムが格納されたコンピュータ読取可能な記憶媒体。
【００８５】
【発明の効果】
本発明によれば、複数頁で構成される帳票を認識し得る。
【図面の簡単な説明】
【図１】本発明に係る帳票認識装置の一実施形態を示すブロック図である。
【図２】帳票画像における複数の頁画像を示す図である。
【図３Ａ】１枚の頁画像についての書式データを示す図である。
【図３Ｂ】他の頁画像についての書式データを示す図である。
【図４Ａ】２枚の頁画像の書式データを合体した書式データを示す図である。
【図４Ｂ】３枚の頁画像の書式データを合体した書式データを示す図である。
【図５】図１の帳票認識装置で実行される書式データ生成処理の第１の実施形態を示すフローチャートである。
【図６】図１の実施形態における登録処理の一実施形態を示すフローチャートである。
【図７】図１の帳票認識装置で実行される書式データ生成処理の第２の実施形態を示すフローチャートである。
【図８】第２の実施形態により生成された合成画像データを示す図である。
【図９】第３の実施形態により生成された合成画像データを示す図である。
【符号の説明】
１１ スキャナ、カメラ等の画像入力手段
１２ プロセッサ
１２ａ 画像特徴量抽出手段
１２ｂ 書式データ作成手段
１２ｃ 書式データ合体手段
１２ｄ 画像データ合体手段
１２ｅ 類似度算出・判定手段
１３ キーボード
１４ ディスク
１５ メモリ
１６ ディスプレイ、プリンタ等の出力手段
【発明の属する技術分野】
本発明は帳票認識装置に関する。
【０００２】
【従来の技術】
従来、帳票認識装置は、スキャナ等で読み取った帳票画像データに対し、１枚ごとに特徴量の抽出、この特徴量からの帳票書式データ生成を順次実行した後に、生成された帳票書式データと登録帳票の書式データとの類似度を１枚ごとに算出し、最も類似する登録帳票の書式データを識別することによって帳票認識を行う。
【０００３】
【発明が解決しようとする課題】
つまり、従来の帳票認識装置では、１枚で構成される帳票しか認識できず、複数枚で１つの帳票が構成されるような帳票（複数ページで構成される帳票）の認識を行うことはできなかった。
【０００４】
本発明は、複数頁で構成される帳票を認識することを目的とする。
【０００５】
【課題を解決するための手段】
本発明に係る帳票認識装置は、複数の頁画像で構成される帳票画像を入力する画像入力手段と、前記入力された複数の頁画像で構成される帳票画像から、１つの合体書式データを生成する書式データ生成手段と、前記書式データ生成手段で生成した合体書式データを、登録帳票の書式データと比較して類似度を算出する類似度算出手段と、前記類似度算出手段で算出された類似度に基づいて、前記帳票画像に最も類似する登録帳票を識別する識別手段とを有することを特徴とする。
【０００６】
【発明の実施の形態】
［第１の実施形態］
次に本発明に係る帳票認識装置の一実施形態を図面に基づいて説明する。
【０００７】
図１は、本発明に係る帳票認識装置の一実施形態を示すブロック図、図２は、帳票画像における複数の頁画像を示す図、図３Ａは、１枚の頁画像についての書式データを示す図、図３Ｂは、他の頁画像についての書式データを示す図、図４Ａは、２枚の頁画像の書式データを合体した書式データを示す図、図４Ｂは、３枚の頁画像の書式データを合体した書式データを示す図である。
【０００８】
図１において、帳票認識装置は、スキャナ、カメラ、あるいはファイル読み込み装置などの画像入力手段１１を有し、この画像入力手段１１から１頁または複数頁の帳票を画像データとして入力する。
【０００９】
画像入力手段１１はバス１７に接続され、バス１７を介して帳票認識の処理を実行するプロセッサ１２に接続されている。
【００１０】
バス１７にはさらにキーボード１３、ディスク１４、メモリ１５、出力手段１６が接続されている。
【００１１】
メモリ１５は、プロセッサ１２において処理制御情報を作成する際の一時データ記憶、あるいは画像入力手段１１で読み込んだ帳票画像を蓄積する。また登録帳票（帳票テンプレート）の書式データ等が、ディスク１４等から読み込まれて、登録済みデータ１５ｄとして保持される。また、後述するフローチャートに対応するような処理をコンピュータに実行させるための制御プログラム１５ｃが格納される。
【００１２】
プロセッサ１２は、メモリ１５に格納された制御プログラム１５ｃを実行することにより、画像特徴量抽出手段１２ａ、書式データ作成手段１２ｂ、書式データ合体手段１２ｃ、画像データ合体手段１２ｄ、類似度算出・識別手段１２ｅとして機能する。
【００１３】
キーボード１３は、帳票の登録や検索などの指示操作を行い、ディスク１４は、補助記憶装置として機能する。
【００１４】
出力手段１６は、ディスプレイ、プリンタ等であり、認識結果等の各種情報を出力する。
【００１５】
スキャナ１１で読み取った帳票の画像は、帳票画像１５ｂとしてメモリ１５に格納される。帳票画像１５ｂはプロセッサ１２に設けられた画像処理手段（図示せず。）等により２値化処理されて、画像特徴量抽出手段１２ａに送られる。
【００１６】
画像特徴量抽出手段１２ａは、黒ドットのヒストグラムを取るなどして帳票画像に含まれる領域を識別し、帳票画像１５ｂに含まれる領域（ブロック）をテーブル、テキスト、ピクチャ等に属性分類し、さらに解像度、ブロック情報を抽出する。ブロック情報は帳票画像１５ｂに含まれるブロックの位置情報、大きさ情報等よりなる。
【００１７】
各ブロックの属性情報等の特徴量は、書式データ作成手段１２ｂに入力され、書式データ作成手段１２ｂは、属性情報、解像度、ブロック情報に基づいて、帳票画像１５ｂの書式データを生成し、メモリ１１およびディスク１４に保存する。
【００１８】
図２は、３頁、すなわち３枚の画像１５ｂ１、１５ｂ２、１５ｂ３で構成される帳票画像１５ｂの例を示す。この帳票画像について、特徴量抽出手段１２ａによってブロックの属性分類が為される。ここで１頁の帳票画像を頁画像と呼ぶことにする。
【００１９】
頁画像１５ｂ１は３個のブロックＢ１１、Ｂ１２、Ｂ１３を含み、頁画像１５ｂ２は４個のブロックＢ２１、Ｂ２２、Ｂ２３、Ｂ２４を含み、頁画像１５ｂ３は３個のブロックＢ３１、Ｂ３２、Ｂ３３を含む。
【００２０】
頁画像１５ｂ１は帳票頁幅Ｗ１、帳票頁高さＨ１であり、そのブロックＢ１１はブロック左端位置の水平座標がＸ１１、ブロック上端位置の垂直座標がＹ１１、ブロック幅がＷ１１、ブロック高さＨ１１、ブロックＢ１２はブロック左端位置の水平座標がＸ１２、ブロック上端位置の垂直座標がＹ１２、ブロック幅がＷ１２、ブロック高さＨ１２、そのブロックＢ１３はブロック左端位置の水平座標がＸ１３、ブロック上端位置の垂直座標がＹ１３、ブロック幅がＷ１３、ブロック高さＨ１３である。
【００２１】
頁画像１５ｂ２は帳票頁幅Ｗ２、帳票頁高さＨ２であり、そのブロックＢ２１はブロック左端位置の水平座標がＸ２１、ブロック上端位置の垂直座標がＹ２１、ブロック幅がＷ２１、ブロック高さＨ２１、ブロックＢ２２はブロック左端位置の水平座標がＸ２２、ブロック上端位置の垂直座標がＹ２２、ブロック幅がＷ２２、ブロック高さＨ２２、そのブロックＢ２３はブロック左端位置の水平座標がＸ２３、ブロック上端位置の垂直座標がＹ２３、ブロック幅がＷ２３、ブロック高さＨ２３、そのブロックＢ２４はブロック左端位置の水平座標がＸ２４、ブロック上端位置の垂直座標がＹ２４、ブロック幅がＷ２４、ブロック高さＨ２４である。
【００２２】
頁画像１５ｂ３は帳票頁幅Ｗ３、帳票頁高さＨ３であり、そのブロックＢ３１はブロック左端位置の水平座標がＸ３１、ブロック上端位置の垂直座標がＹ３１、ブロック幅がＷ３１、ブロック高さＨ３１、ブロックＢ３２はブロック左端位置の水平座標がＸ３２、ブロック上端位置の垂直座標がＹ３２、ブロック幅がＷ３２、ブロック高さＨ３２、そのブロックＢ３３はブロック左端位置の水平座標がＸ３３、ブロック上端位置の垂直座標がＹ３３、ブロック幅がＷ３３、ブロック高さＨ３３である。
【００２３】
書式データ作成手段１２ｂは、頁画像１５ｂ１、１５ｂ２、１５ｂ３について、帳票頁幅、帳票頁高さ、解像度等の頁書式と、ブロック左端位置、ブロック上端位置等の位置情報、ブロック幅、ブロック高さなどの大きさ情報よりなるブロック情報とを含む書式データを生成する。
【００２４】
図３Ａは頁画像１５ｂ１の書式データを示す。同書式データにおいて、頁書式は、帳票頁幅Ｗ１、帳票頁高さＨ１、解像度Ｄ１であり、ブロック情報は、各ブロックＢ１１、Ｂ１２、Ｂ１３の位置情報であるブロック左端位置、ブロック上端位置と、大きさ情報であるブロック幅、ブロック高さを含む。
【００２５】
図３Ｂは頁画像１５ｂ２の書式データを示す。同書式データにおいて、頁書式は、帳票頁幅Ｗ２、帳票頁高さＨ２、解像度Ｄ２であり、ブロック情報は、各ブロックＢ２１、Ｂ２２、Ｂ２３、Ｂ２４の位置情報であるブロック左端位置、ブロック上端位置と、大きさ情報であるブロック幅、ブロック高さを含む。
【００２６】
頁画像１５ｂ３の書式データは、頁画像１５ｂ１、１５ｂ２の書式データと同様にして作成されるので図示を省略する。
【００２７】
書式データ合体手段１２ｃは複数の頁画像の書式データを合体し、１個の書式データ（以下合体書式データという。）を生成する。合体は、帳票頁高さを合計した頁高さと、最も大きい帳票頁幅とを有する帳票を生成するように、書式データを設定する。
【００２８】
図４Ａは頁画像１５ｂ１、１５ｂ２の合体書式データを示し、図４Ｂは頁画像１５ｂ１、１５ｂ２、１５ｂ３の合体書式データを示す。
【００２９】
図４Ａにおいて、合体書式データは、合体された頁画像１５ｂ１、１５ｂ２の各帳票頁幅を示す帳票頁幅（Ｗ１：Ｗ２）、頁画像１５ｂ１、１５ｂ２の帳票頁高さの和よりなる帳票頁高さ（Ｈ１＋Ｈ２）、解像度ＤＤ１を頁書式とする。なお、本実施形態では、読み込んだ各頁画像の解像度は同じとして扱っているが、読み込んだ頁画像の解像度が異なっている場合、好適には頁画像の解像度を登録帳票の解像度と一致するように変換した後、合体する（その際、頁画像のブロック情報も解像度変換に合わせて変換されている）。さらに合体書式データは、１頁目の頁画像１５ｂ１のブロックＢ１１〜Ｂ１３のブロック情報を配列し、これに続いて、２頁目の頁画像１５ｂ２のブロックＢ２１〜Ｂ２４のブロック情報を配列してなる。頁画像１５ｂ２のブロック情報において、頁画像１５ｂ２は頁画像１５ｂ１の下に連結されているので、ブロックＢ２１〜Ｂ２４のブロック上端位置は、頁画像１５ｂ１の帳票頁高さＨ１だけ加算される。
【００３０】
すなわち、ブロックＢ２１はブロック左端位置の水平座標がＸ２１、ブロック上端位置の垂直座標がＹ２１＋Ｈ１、ブロック幅がＷ２１、ブロック高さＨ２１、ブロックＢ２２はブロック左端位置の水平座標がＸ２２、ブロック上端位置の垂直座標がＹ２２＋Ｈ１、ブロック幅がＷ２２、ブロック高さＨ２２、そのブロックＢ２３はブロック左端位置の水平座標がＸ２３、ブロック上端位置の垂直座標がＹ２３＋Ｈ１、ブロック幅がＷ２３、ブロック高さＨ２３、そのブロックＢ２４はブロック左端位置の水平座標がＸ２４、ブロック上端位置の垂直座標がＹ２４＋Ｈ１、ブロック幅がＷ２４、ブロック高さＨ２４である。
【００３１】
図４Ｂにおいて、頁書式は、頁画像１５ｂ１、１５ｂ２、１５ｂ３の各帳票頁幅を示す帳票頁幅（Ｗ１：Ｗ２）、頁画像１５ｂ１、１５ｂ２、１５ｂ３の帳票頁高さの和よりなる帳票頁高さ（Ｈ１＋Ｈ２＋Ｈ３）、解像度ＤＤ３よりなる。
【００３２】
ブロック情報としては、１頁目の頁画像１５ｂ１のブロックＢ１１〜Ｂ１３のブロック情報、２頁目の頁画像１５ｂ２のブロックＢ２１〜Ｂ２４のブロック情報、３頁目の頁画像１５ｂ３のブロックＢ３１〜Ｂ３３のブロック情報を順次配列してなる。ブロックＢ２１〜Ｂ２４はブロック上端位置がＨ１だけ加算され、ブロックＢ３１〜Ｂ３３はブロック上端位置がＨ１＋Ｈ２だけ加算される。
【００３３】
すなわち、頁画像１５ｂ２の各ブロック情報は図４Ａと同様であり、頁画像１５ｂ３において、ブロックＢ３１はブロック左端位置の水平座標がＸ３１、ブロック上端位置の垂直座標がＹ３１＋Ｈ１＋Ｈ２、ブロック幅がＷ３１、ブロック高さＨ３１、ブロックＢ３２はブロック左端位置の水平座標がＸ３２、ブロック上端位置の垂直座標がＹ３２＋Ｈ１＋Ｈ２、ブロック幅がＷ３２、ブロック高さＨ３２、そのブロックＢ３３はブロック左端位置の水平座標がＸ３３、ブロック上端位置の垂直座標がＹ３３＋Ｈ１＋Ｈ２、ブロック幅がＷ３３、ブロック高さＨ３３である。
【００３４】
同様にｎ枚の頁画像の書式データを合体するときには、ｎ−１枚目まで合体した合体書式データの頁書式を修正し、さらにｎ枚の頁画像１５ｂｎのブロック情報におけるブロック上端位置に１５ｂ１〜１５ｂｎ−１の帳票頁高さの和（Ｈ１＋Ｈ２＋．．．．＋Ｈｎ−１）を加える。
【００３５】
画像データ合体手段１２ｄは、以上の書式データの合体に対応して、頁画像１５ｂ１〜１５ｂ３を１頁の帳票画像に合体する。
【００３６】
このように合体書式データを生成することにより、複数頁の帳票画像を１頁の帳票画像と同様に取り扱うことが可能になり、その後の処理は、従来の帳票認識処理と同様に処理し得る。
【００３７】
合体書式データは類似度算出・識別手段１２ｅによって、登録済みの書式データ１５ａとの類似度が算出され、クラスタリングされる。
【００３８】
図５において、帳票認識処理は、以下の各ステップにより、合体書式データを生成するための書式データ生成処理を実行する。
【００３９】
ステップＳ５１：ステップＳ５３〜Ｓ５７の処理回数を制御するループカウンタｊを「１」に初期化する。
【００４０】
ステップＳ５２：全体の帳票画像１５ｂを構成する頁画像の枚数ｎを指定する。枚数ｎを含むマルチページデータが供給されたときは、枚数ｎはマルチページデータから直接取得でき、また枚数ｎをユーザが指定することも可能である。
【００４１】
ステップＳ５３：画像入力手段１１からｊ枚目の頁画像を読み込み、頁画像１５ｂｊとしてメモリ１５に転送する。
【００４２】
ステップＳ５４：画像特徴量抽出手段１２ｂによって、頁画像１５ｂｊの特徴量を抽出する。
【００４３】
ステップＳ５５：ステップＳ５４で抽出された特徴量に基づき、書式データ作成手段１２ｂによって、頁画像１５ｂｊの書式データを生成する。
【００４４】
ステップＳ５６：書式データ合体手段１２ｃによって、１枚目から（ｊ−１）枚目の頁画像書式データを合体した合体書式データに対して、ｊ枚目の頁画像１５ｂｊの書式データを合体する。
【００４５】
ステップＳ５７：ル―プカウンタｊを「１」インクリメントする。
【００４６】
ステップＳ５８：ｊ＞ｎの判断を行い、ｎ枚の頁画像１５ｂ１〜１５ｂｎの合体書式データ生成処理が完了したか否か判断する。合体書式データ生成処理が完了していなかったときは、ステップＳ５３に戻り、完了していたときは、そのまま処理を終了する。
【００４７】
以上の合体書式データ生成処理の後に、合体書式データと登録済みの合体書式データ（帳票テンプレートの登録合体書式データ）との類似度を算出し、最も類似する登録合体書式データ（登録済みデータ１５ｄ）を識別することによって帳票認識を行う。
【００４８】
なお、本実施形態では頁画像を縦方向に順次合体するように書式データを合体したが、横方向に合体することも可能である。
【００４９】
横方向の合体は、後述する第３の実施形態（図９）と同様である。合体書式データにおいて、帳票頁高さには、頁画像の帳票頁高さの最大値が採用され、帳票頁幅は頁画像の帳票頁幅の合計となる。
【００５０】
なお帳票認識において、予め帳票を登録するときや、算出された類似度が充分高くないとき、すなわち生成された合体書式データに対応する合体書式データが登録されていなかったときは、生成された合体書式データを登録する処理が必要である。
【００５１】
図６において、合体書式データを登録する処理は以下の各ステップにより実行される。
【００５２】
ステップＳ６１：合体書式データを登録する必要があるか否か判断し、登録要のときはステップＳ６２に移行し、登録不要のときはそのまま処理を終了する。
【００５３】
ステップＳ６２：合体書式データを登録する。
【００５４】
以上の登録処理により、以後対応する合体書式データに対応するような帳票画像を認識し得るようになる。
【００５５】
［第２の実施形態］
図５の合体書式データ生成処理では個々の頁画像について書式データを生成し、書式データを順次合体したが、図１の帳票認識装置において、頁画像を順次合体した後に、全体の書式データを生成することも可能である。
【００５６】
図７は、図１の帳票認識装置で実行される書式データ生成処理の第２の実施形態を示すフローチャート、図８は、第２の実施形態により生成された合成画像データを示す図である。
【００５７】
図７に示すように、頁画像の合体後に書式データを生成する処理は以下の各ステップにより実行される。
【００５８】
ステップＳ７１：ステップＳ７３〜Ｓ７５の処理回数を制御するループカウンタｊを「１」に初期化する。
【００５９】
ステップＳ７２：図５のステップＳ５２と同様、全体の帳票画像１５ｂを構成する頁画像の枚数ｎを指定する。
【００６０】
ステップＳ７３：図５のステップＳ５３と同様、画像入力手段１１からｊ枚目の頁画像を読み込み、頁画像１５ｂｊとしてメモリ１５に転送する。
【００６１】
ステップＳ７４：画像データ合体手段１２ｄによって、１枚目から（ｊ−１）枚目の頁画像を合体した画像データ（以下合体画像データという。）に対して、ｊ枚目の頁画像１５ｂｊを合体する。１枚目の頁画像１５ｂ１はそのまま合体画像データとし、２枚目の頁画像ときは、１枚目の頁画像と合体する。１枚目の頁画像１５ｂ１が帳票頁幅Ｗ１、帳票頁高さＨ１であり、２枚目の頁画像１５ｂ２が帳票頁幅Ｗ２、帳票頁高さＨ１のとき、合体画像データは、Ｗ１、Ｗ２のうちの大きい方を帳票頁幅とし、Ｈ１とＨ２を加えた高さを帳票頁高さとする。幅、高さは、余白を考慮して決めてもよい。３枚目の頁画像１５ｂ３が入力されたときは、２枚目までの合体画像に合体する。同様にｎ枚目のときは、ｎ−１枚目までの合体画像に合体する。
【００６２】
図８は、図２の頁画像１５ｂ１〜１５ｂ３を合体した合体画像データを示す。合体画像データの帳票頁幅ＷｃはＷ１、Ｗ２、Ｗ３中最大のＷ２に設定され、帳票頁高さＨｃは（Ｈ１＋Ｈ２＋Ｈ３）に設定されている。
【００６３】
ステップＳ７５：ル―プカウンタｊを「１」インクリメントする。
【００６４】
ステップＳ７６：ｊ＞ｎの判断を行い、ｎ枚の頁画像１５ｂ１〜１５ｂｎの合体画像データ生成処理が完了したか否か判断する。合体画像データ生成処理が完了していなかったときは、ステップＳ７３に戻り、完了していたときは、ステップＳ７７に移行する。
【００６５】
ステップＳ７７：画像特徴量抽出手段１２ｂによって、合体画像の特徴量を抽出する。
【００６６】
ステップＳ７８：ステップＳ７７で抽出された特徴量に基づき、書式データ作成手段１２ｂによって、合体画像データの書式データを生成し、処理を終了する。
【００６７】
合体画像データは類似度算出・識別手段１２ｅによって、登録済みの帳票画像（登録済みデータ１５ｄ）との類似度が算出され、最も類似する登録帳票が識別される。
【００６８】
以後必要に応じて、図６の処理と同様に、新たな合体書式データを登録する。
【００６９】
［第３の実施形態］
第２の実施形態では頁画像を縦方向に順次合体したが、頁画像を横方向に順次合体することも可能である。
【００７０】
第３の実施形態の処理は図７のフローチャートにおけるステップＳ７４を以下のとおり訂正することにより実現される。
【００７１】
すなわち、画像データ合体手段１２ｄによって、１枚目から（ｊ−１）枚目の頁画像を合体した画像データ（以下合体画像データという。）に対して、ｊ枚目の頁画像１５ｂｊを合体する。１枚目の頁画像１５ｂ１はそのまま合体画像データとし、２枚目の頁画像ときは、１枚目の頁画像と合体する。１枚目の頁画像１５ｂ１が帳票頁幅Ｗ１、帳票頁高さＨ１であり、２枚目の頁画像１５ｂ２が帳票頁幅Ｗ２、帳票頁高さＨ１のとき、合体画像データは、Ｈ１、Ｈ２うちの大きい方を帳票頁高さし、Ｗ１とＷ２を加えた幅を帳票頁幅とする。幅、高さは、余白を考慮して決めてもよい。３枚目の頁画像１５ｂ３が入力されたときは、２枚目までの合体画像に合体する。同様にｎ枚目のときは、ｎ−１枚目までの合体画像に合体する
図９は、第３の実施形態により生成された合成画像データを示す図である。
【００７２】
図９の合体画像データの帳票頁高さＨｃはＨ１、Ｈ２、Ｈ３中最大のＨ２に設定され、帳票頁幅Ｗｃは（Ｗ１＋Ｗ２＋Ｗ３）に設定されている。
【００７３】
以上の実施形態に示したように、複数の頁画像の画像そのもののデータあるいは書式データを合体して合体データを生成することにより、一体の帳票画像として取り扱うことが可能になる。すなわち、頁画像のデータを書式データ合体手段あるいは画像データ合体手段（以下これらを総称して合体手段という。）により合体すれば、一体帳票画像としての処理が可能になる。
【００７４】
また本発明の趣旨と範囲は、本発明の特定の説明と図に限定されるものではなく、本願特許請求の範囲に述べられた内容の様々な修正および変更に及ぶことは当業者にとって理解されるであろう。
【００７５】
本発明の実施態様の例を以下に総括する。
【００７６】
［実施態様１］
複数の頁画像で構成される帳票画像を入力する画像入力手段と、前記入力された複数の頁画像で構成される帳票画像から、１つの合体書式データを生成する書式データ生成手段と、前記書式データ生成手段で生成した合体書式データを、登録帳票の書式データと比較して類似度を算出する類似度算出手段と、前記類似度算出手段で算出された類似度に基づいて、前記帳票画像に最も類似する登録帳票を識別する識別手段とを有することを特徴とする帳票認識装置。
【００７７】
［実施態様２］
前記書式データ生成手段は、前記入力された複数の頁画像それぞれから特徴量を抽出し、当該抽出した特徴量に基づいて各頁画像の書式データを作成し、当該作成した各頁画像の書式データを合体することにより、前記合体書式データを生成することを特徴とする実施態様１に記載の帳票認識装置。
【００７８】
［実施態様３］
前記書式データ生成手段は、前記入力された複数の頁画像を合体して合体画像を作成し、当該作成した合体画像から特徴量を抽出し、当該抽出した特徴量に基づいて前記合体書式データを生成することを特徴とする実施態様１に記載の帳票認識装置。
【００７９】
［実施態様４］
前記類似度が所定値よりも低いときに、入力された帳票画像の合体データを新たに登録する登録手段をさらに有することを特徴とする実施態様１記載の帳票認識装置。
【００８０】
［実施態様５］
前記書式データ生成手段は、前記作成した各頁画像の書式データを、予め定められた方向で合体することにより、前記合体書式データを生成することを特徴とする実施態様２に記載の帳票認識装置。
【００８１】
［実施態様６］
前記書式データ生成手段は、前記入力された複数の頁画像を、予め定められた方向で合体することにより、前記合体画像を作成することを特徴とする実施態様３に記載の帳票認識装置。
【００８２】
［実施態様７］
複数の頁画像で構成される帳票画像を入力する画像入力ステップと、前記入力された複数の頁画像で構成される帳票画像から、１つの合体書式データを生成する書式データ生成ステップと、前記書式データ生成ステップで生成した合体書式データを、登録帳票の書式データと比較して類似度を算出する類似度算出ステップと、前記類似度算出ステップで算出された類似度に基づいて、前記帳票画像に最も類似する登録帳票を識別する識別ステップとを有することを特徴とする帳票認識方法。
【００８３】
［実施態様８］
複数の頁画像で構成される帳票画像を入力する画像入力ステップと、前記入力された複数の頁画像で構成される帳票画像から、１つの合体書式データを生成する書式データ生成ステップと、前記書式データ生成ステップで生成した合体書式データを、登録帳票の書式データと比較して類似度を算出する類似度算出ステップと、前記類似度算出ステップで算出された類似度に基づいて、前記帳票画像に最も類似する登録帳票を識別する識別ステップとの各ステップを、コンピュータで実現させるためのコンピュータ実行可能なプログラム。
【００８４】
［実施態様９］
前記実施態様８に記載のコンピュータプログラムが格納されたコンピュータ読取可能な記憶媒体。
【００８５】
【発明の効果】
本発明によれば、複数頁で構成される帳票を認識し得る。
【図面の簡単な説明】
【図１】本発明に係る帳票認識装置の一実施形態を示すブロック図である。
【図２】帳票画像における複数の頁画像を示す図である。
【図３Ａ】１枚の頁画像についての書式データを示す図である。
【図３Ｂ】他の頁画像についての書式データを示す図である。
【図４Ａ】２枚の頁画像の書式データを合体した書式データを示す図である。
【図４Ｂ】３枚の頁画像の書式データを合体した書式データを示す図である。
【図５】図１の帳票認識装置で実行される書式データ生成処理の第１の実施形態を示すフローチャートである。
【図６】図１の実施形態における登録処理の一実施形態を示すフローチャートである。
【図７】図１の帳票認識装置で実行される書式データ生成処理の第２の実施形態を示すフローチャートである。
【図８】第２の実施形態により生成された合成画像データを示す図である。
【図９】第３の実施形態により生成された合成画像データを示す図である。
【符号の説明】
１１ スキャナ、カメラ等の画像入力手段
１２ プロセッサ
１２ａ 画像特徴量抽出手段
１２ｂ 書式データ作成手段
１２ｃ 書式データ合体手段
１２ｄ 画像データ合体手段
１２ｅ 類似度算出・判定手段
１３ キーボード
１４ ディスク
１５ メモリ
１６ ディスプレイ、プリンタ等の出力手段
Claims (1)
- 複数の頁画像で構成される帳票画像を入力する画像入力手段と、
前記入力された複数の頁画像で構成される帳票画像から、１つの合体書式データを生成する書式データ生成手段と、
前記書式データ生成手段で生成した合体書式データを、登録帳票の書式データと比較して類似度を算出する類似度算出手段と、
前記類似度算出手段で算出された類似度に基づいて、前記帳票画像に最も類似する登録帳票を識別する識別手段と
を有することを特徴とする帳票認識装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002341497A JP2004178108A (ja) | 2002-11-25 | 2002-11-25 | 帳票認識装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002341497A JP2004178108A (ja) | 2002-11-25 | 2002-11-25 | 帳票認識装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2004178108A true JP2004178108A (ja) | 2004-06-24 |
Family
ID=32703840
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002341497A Pending JP2004178108A (ja) | 2002-11-25 | 2002-11-25 | 帳票認識装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2004178108A (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008250425A (ja) * | 2007-03-29 | 2008-10-16 | Oki Electric Ind Co Ltd | 帳票処理装置 |
| KR101093072B1 (ko) | 2005-05-10 | 2011-12-13 | 삼성전자주식회사 | 스캔할 문서 상에서 기 설정된 영역 내의 이미지만을스캔하는 호스트 단말장치 및 그 스캔 방법 |
| CN106161829A (zh) * | 2014-08-20 | 2016-11-23 | 富士施乐株式会社 | 图像处理设备和方法 |
-
2002
- 2002-11-25 JP JP2002341497A patent/JP2004178108A/ja active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101093072B1 (ko) | 2005-05-10 | 2011-12-13 | 삼성전자주식회사 | 스캔할 문서 상에서 기 설정된 영역 내의 이미지만을스캔하는 호스트 단말장치 및 그 스캔 방법 |
| JP2008250425A (ja) * | 2007-03-29 | 2008-10-16 | Oki Electric Ind Co Ltd | 帳票処理装置 |
| CN106161829A (zh) * | 2014-08-20 | 2016-11-23 | 富士施乐株式会社 | 图像处理设备和方法 |
| CN106161829B (zh) * | 2014-08-20 | 2018-12-28 | 富士施乐株式会社 | 图像处理设备和方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110348294B (zh) | Pdf文档中图表的定位方法、装置及计算机设备 | |
| JP4427342B2 (ja) | 文書分析情報を使用して文書を再フォーマット化する方法及び製造物 | |
| CN107886074A (zh) | 一种人脸检测方法以及人脸检测系统 | |
| US20050223319A1 (en) | Layout-rule generation system, layout system, layout-rule generation program, layout program, storage medium, method of generating layout rule, and method of layout | |
| US8965125B2 (en) | Image processing device, method and storage medium for storing and displaying an electronic document | |
| JPH10162150A (ja) | ページ解析システム | |
| US20150228045A1 (en) | Methods for embedding and extracting a watermark in a text document and devices thereof | |
| US20100315681A1 (en) | Image processing apparatus, image processing method, and computer-readable storage medium | |
| WO2023151237A1 (zh) | 人脸位姿估计方法、装置、电子设备及存储介质 | |
| CN115131797A (zh) | 一种基于特征增强金字塔网络的场景文本检测方法 | |
| WO2024027349A1 (zh) | 一种印刷体数学公式识别方法、装置及存储介质 | |
| JP3616256B2 (ja) | 画像処理装置 | |
| US6978046B2 (en) | Systems and methods for automated template creation using scanned input | |
| JP4565396B2 (ja) | 画像処理装置および画像処理プログラム | |
| JP2007164513A (ja) | 画像処理装置 | |
| WO2024012289A1 (zh) | 视频生成方法、装置、电子设备及介质 | |
| JP2004178108A (ja) | 帳票認識装置 | |
| CN111241891A (zh) | 一种人脸图像切图方法、装置及计算机可读存储介质 | |
| CN114283442A (zh) | 一种二次接线图智能识别方法、装置及存储介质 | |
| JP4281236B2 (ja) | 画像認識装置、画像認識方法、および、画像認識プログラムを記憶したコンピュータ読取り可能な記録媒体 | |
| JP4261883B2 (ja) | 帳票処理装置及び帳票処理方法並びにプログラム | |
| US20020031270A1 (en) | Image processing apparatus, image processing method, and computer readable storage medium | |
| Yi et al. | Automatic image matting and fusing for portrait synthesis | |
| Chen et al. | Massive figure extraction and classification in electronic component datasheets for accelerating PCB design preparation | |
| JP2011141664A (ja) | 文書比較装置、文書比較方法、及びプログラム |